Ploomber production ready pipeline
بنظر نجات بخش و بسیار کاربردی میرسه
شخصاً هنوز تست نگرفتم
GitHub Link
بنظر نجات بخش و بسیار کاربردی میرسه
شخصاً هنوز تست نگرفتم
GitHub Link
GitHub
GitHub - ploomber/ploomber: The fastest ⚡️ way to build data pipelines. Develop iteratively, deploy anywhere. ☁️
The fastest ⚡️ way to build data pipelines. Develop iteratively, deploy anywhere. ☁️ - ploomber/ploomber
#ExplainedByScience
یک توضیح علمی و منطقی برای تجربیات و اتفاقات غیر منطقی (خطاهای کامپیوتری)
خیلی جوانتر که بودم (زمانی که توی کار شبکه بودم) یک بحثی داشتیم راجب اینکه چرا دیتا سنتر رو به ارتفاعات منتقل نکنیم (مشکل شدید گرما، کابلکشی و ... داشتیم و این موضوع خیلی روی تجهیزات و درآمد شرکت اثر میذاشت)
مشاور ساخت دیتا سنتر یک ایرانی بود که با غولهای تکنولوژی کار میکرد
اون زمان میگفت این کار باعث افزایش خطای محاسباتی میشه و نباید از یک ارتفاعی بالاتر دیتاسنتر ساخت،
دیروز توی کانال یوتیوب Veritasium این موضوع و دلیل بعضی از خطاهای بدون منطق و بدون دلیل کامپیوتری رو نشون داد
پیشنهاد میکنم حتماً این ویدئو رو ببینید :
Youtube Link
یک توضیح علمی و منطقی برای تجربیات و اتفاقات غیر منطقی (خطاهای کامپیوتری)
خیلی جوانتر که بودم (زمانی که توی کار شبکه بودم) یک بحثی داشتیم راجب اینکه چرا دیتا سنتر رو به ارتفاعات منتقل نکنیم (مشکل شدید گرما، کابلکشی و ... داشتیم و این موضوع خیلی روی تجهیزات و درآمد شرکت اثر میذاشت)
مشاور ساخت دیتا سنتر یک ایرانی بود که با غولهای تکنولوژی کار میکرد
اون زمان میگفت این کار باعث افزایش خطای محاسباتی میشه و نباید از یک ارتفاعی بالاتر دیتاسنتر ساخت،
دیروز توی کانال یوتیوب Veritasium این موضوع و دلیل بعضی از خطاهای بدون منطق و بدون دلیل کامپیوتری رو نشون داد
پیشنهاد میکنم حتماً این ویدئو رو ببینید :
Youtube Link
YouTube
The Universe is Hostile to Computers
Tiny particles from distant galaxies have caused plane accidents, election interference and game glitches. This video is sponsored by Brilliant. The first 200 people to sign up via https://brilliant.org/veritasium get 20% off a yearly subnoscription.
This…
This…
❤2
همراه با Nitin از گوگل، همین حالا میتوانید عضو بشید.
سوال و جواب 👌
https://www.clubhouse.com/room/M65yLz7J
سوال و جواب 👌
https://www.clubhouse.com/room/M65yLz7J
Clubhouse
Join Friendly chat with Nitin on ML deployment
You were invited to join this live room
ی روش خیلی جالب برای ارزیابی رزومه و دعوت به همکاری.
شمارو نمیدونم ولی وقتی قرار هست ی نیروی جدید مصاحبه کنم یا رزومه بخونم و تایید کنم، برای من خیلی خیلی کار سخت و بدی هست (بنظرم نمیشه آدمارو با ۴ تا سوال اونم تحت شرایطی که بالاخره استرس وجود داره بطور کامل سنجید و درک کرد)
از اینا بگذریم، کلی دروغ توی بعضی رزومهها هست که با سوال اول مشخص میشه و باقی جلسه فقط وقتت گرفته میشه
من با یک شرکت چندروز قبل مصاحبه HR داشتم، امروز تایید گرفتم و مرحله اول مصاحبه فنی بود توقع داشتم بهم زمان داده بشه
ی نفر چندتا سوال بپرسه و ....
اما بخاطر ی سری مشکلات سریع اعلام کردم تا آخر هفته، امکان مصاحبه ندارم، که برام توضبح دادند میتونم هر زمان که دوس دارم مصاحبه رو انجام بدم توی ۲ روز وقتی که دارم و بعد میمونه مصاحبه فنی تخصصی.
ی لینک و یک اکانت برای من فرستاده شد و بهم گفتند که آزمون های مربوط
ML, Python, Docker, English Listening
رو انجام بدم (برای پوزیشن درخواستی) و نتایج رو خودشون میبینند، اینجوری شرکت بدون دردسر اونایی که بدردش نمیخوره رو حذف میکنه، وقت نیروهای تخصصی هم گرفته نمیشه.
شمارو نمیدونم ولی وقتی قرار هست ی نیروی جدید مصاحبه کنم یا رزومه بخونم و تایید کنم، برای من خیلی خیلی کار سخت و بدی هست (بنظرم نمیشه آدمارو با ۴ تا سوال اونم تحت شرایطی که بالاخره استرس وجود داره بطور کامل سنجید و درک کرد)
از اینا بگذریم، کلی دروغ توی بعضی رزومهها هست که با سوال اول مشخص میشه و باقی جلسه فقط وقتت گرفته میشه
من با یک شرکت چندروز قبل مصاحبه HR داشتم، امروز تایید گرفتم و مرحله اول مصاحبه فنی بود توقع داشتم بهم زمان داده بشه
ی نفر چندتا سوال بپرسه و ....
اما بخاطر ی سری مشکلات سریع اعلام کردم تا آخر هفته، امکان مصاحبه ندارم، که برام توضبح دادند میتونم هر زمان که دوس دارم مصاحبه رو انجام بدم توی ۲ روز وقتی که دارم و بعد میمونه مصاحبه فنی تخصصی.
ی لینک و یک اکانت برای من فرستاده شد و بهم گفتند که آزمون های مربوط
ML, Python, Docker, English Listening
رو انجام بدم (برای پوزیشن درخواستی) و نتایج رو خودشون میبینند، اینجوری شرکت بدون دردسر اونایی که بدردش نمیخوره رو حذف میکنه، وقت نیروهای تخصصی هم گرفته نمیشه.
دستاوردهای یادگیری عمیق(InTec)
ی روش خیلی جالب برای ارزیابی رزومه و دعوت به همکاری. شمارو نمیدونم ولی وقتی قرار هست ی نیروی جدید مصاحبه کنم یا رزومه بخونم و تایید کنم، برای من خیلی خیلی کار سخت و بدی هست (بنظرم نمیشه آدمارو با ۴ تا سوال اونم تحت شرایطی که بالاخره استرس وجود داره بطور…
اگر کسی ازین سایتها با قابلیت
Customization
میشناسه حتماً بهم خبر بده
ایده خوبی هم هست برای دوستانی که میتونند و حوصله دارند استارتاپ بزنن برای استخدامی 😉
آدرس سایت :
https://developers.turing.com
Customization
میشناسه حتماً بهم خبر بده
ایده خوبی هم هست برای دوستانی که میتونند و حوصله دارند استارتاپ بزنن برای استخدامی 😉
آدرس سایت :
https://developers.turing.com
GSLM ( Generative Spoken Language Model )
The first textless language model
خب دیگه برای
Language model
هم نیازی به دیتای Text نیست 🤯🤯🤯
Facebook Ai blog post
The first textless language model
خب دیگه برای
Language model
هم نیازی به دیتای Text نیست 🤯🤯🤯
Facebook Ai blog post
Meta
Textless NLP: Generating expressive speech from raw audio
We’re introducing GSLM, the first language model that breaks free completely of the dependence on text for training. This “textless NLP” approach learns to generate expressive speech using only raw audio recordings as input.
Mobileye
شرکتی از مجموعه اینتل، بطور رسمی سال دیگه جایگزین مناسب برای تاکسی در مونیخ آلمان
Lvl 4 Autonomous driving
طراحی و ویژگیهای خودروهای این شرکت بسیار جالب هست
البته سرویسهای این شرکت بطور محدود (همانند ویمو گوگل) در برخی از کشورها و همچنین مونیخ اکنون در دسترس هست.
شرکتی از مجموعه اینتل، بطور رسمی سال دیگه جایگزین مناسب برای تاکسی در مونیخ آلمان
Lvl 4 Autonomous driving
طراحی و ویژگیهای خودروهای این شرکت بسیار جالب هست
البته سرویسهای این شرکت بطور محدود (همانند ویمو گوگل) در برخی از کشورها و همچنین مونیخ اکنون در دسترس هست.
Mobileye
Mobileye | Driver Assist and Autonomous Driving Technologies
Leading the evolution of automobility from advanced driver-assistance systems to autonomous driving through world-renowned expertise in artificial intelligence.
Session base recommendation
اسمش کاملاً توضیح میده که چطور عمل میکنه، اگر ریکامندر شما تاریخچه از کاربر نهایی نداشته باشه
یا کاربر تازهای به سیستم اضافه بشه و ....
توی ریکامندرهای قبلی به مشکلات زیادی میخورید
یا حتی وقتی کاربر شما رفتارش عوض میشه و تاریخچه قبلیش با سرعت بیشتری تغییر میکنه
شاید راهکار retrain مدل باشه ولی همیشه جوابگو نیست (مخصوصاً وقتی تعداد یوزر خیلی خیلی زیاد باشه)
این دست مشکلات رو به کمک
Session base recommender
میشه حل کرد، راهکار خیلی ساده اما برای استفاده از این روش :
ابزاری هست که Nvidia بصورت open source در اختیار گذاشته (لازم نیست اشاره کنم که دقت فوقالعاده ای هم داره)
Github Link
پ.ن :
Production Ready
اسمش کاملاً توضیح میده که چطور عمل میکنه، اگر ریکامندر شما تاریخچه از کاربر نهایی نداشته باشه
یا کاربر تازهای به سیستم اضافه بشه و ....
توی ریکامندرهای قبلی به مشکلات زیادی میخورید
یا حتی وقتی کاربر شما رفتارش عوض میشه و تاریخچه قبلیش با سرعت بیشتری تغییر میکنه
شاید راهکار retrain مدل باشه ولی همیشه جوابگو نیست (مخصوصاً وقتی تعداد یوزر خیلی خیلی زیاد باشه)
این دست مشکلات رو به کمک
Session base recommender
میشه حل کرد، راهکار خیلی ساده اما برای استفاده از این روش :
ابزاری هست که Nvidia بصورت open source در اختیار گذاشته (لازم نیست اشاره کنم که دقت فوقالعاده ای هم داره)
Github Link
پ.ن :
Production Ready
GitHub
GitHub - NVIDIA-Merlin/Transformers4Rec: Transformers4Rec is a flexible and efficient library for sequential and session-based…
Transformers4Rec is a flexible and efficient library for sequential and session-based recommendation and works with PyTorch. - NVIDIA-Merlin/Transformers4Rec
دستاوردهای یادگیری عمیق(InTec)
وقتی داریم هماهنگیهای نهایی رو انجام میدیم تا پروژه لانچ بشه. فیسبوک، واتساپ و اینستاگرام همگی down شدند :/
و حالا تلگرام، توی ۲۰ دقیقه ۵۰۰ تا ریپورت از عدم دسترسی به cdn های تلگرام ثبت شد
Service down
بخش کامنت هم اکثراً کار نمیکنه
Service down
بخش کامنت هم اکثراً کار نمیکنه
دستاوردهای یادگیری عمیق(InTec)
وقتی داریم هماهنگیهای نهایی رو انجام میدیم تا پروژه لانچ بشه. فیسبوک، واتساپ و اینستاگرام همگی down شدند :/
دلیل قطع شدن، اینستاگرام، فیسبوک و واتساپ
طبق خبرها :
اشتباه از تیمهای خود فیسبوک بوده روی آپدیت،
جالبه که توی توییتهای کارمندا گفته شده خود دولوپرها هم دسترسیهای ریموت رو از دست دادند و کسانی هم که دسترسی فیزیکی دارند
سطح دسترسی مناسب برای حل مشکل رو ندارند
عجب وضعی شد :/
طبق خبرها :
اشتباه از تیمهای خود فیسبوک بوده روی آپدیت،
جالبه که توی توییتهای کارمندا گفته شده خود دولوپرها هم دسترسیهای ریموت رو از دست دادند و کسانی هم که دسترسی فیزیکی دارند
سطح دسترسی مناسب برای حل مشکل رو ندارند
عجب وضعی شد :/
PP-LCNet
https://arxiv.org/pdf/2109.15099.pdf
مدل بایدو؛ lightweight CPU-CNN
دقت کنید؛ CPU
سورس کد و سمپل و ... در گیتهاب بایدو موجود هست.
شرکت ایسوس هم با همکاری گوگل؛ سختافزار Edge Tpu رو چند وقت پیش معرفی کرد.
با این پیشرفتا دیپلوی دردسری کمتری داره قطعا
https://arxiv.org/pdf/2109.15099.pdf
مدل بایدو؛ lightweight CPU-CNN
دقت کنید؛ CPU
سورس کد و سمپل و ... در گیتهاب بایدو موجود هست.
شرکت ایسوس هم با همکاری گوگل؛ سختافزار Edge Tpu رو چند وقت پیش معرفی کرد.
با این پیشرفتا دیپلوی دردسری کمتری داره قطعا
فهمیدن دیتا از الگوریتم خیلی مهمتره
برای دوستانی که از هوش مصنوعی در حوزه پزشکی استفاده میکنند
ممکن هست کاربرد زیادی داشته باشه
LinkedIn Post
برای دوستانی که از هوش مصنوعی در حوزه پزشکی استفاده میکنند
ممکن هست کاربرد زیادی داشته باشه
LinkedIn Post
Linkedin
#imageanalysis #tissueimageanalysis #digitalpathology… | Dr. Aleks 🔬 Żuraw
Do you know someone who would like to learn how to understand tissue for #imageanalysis?
I am organizing a free 3 Day challenge to teach exactly that.
You can register here:
https://lnkd.in/eGFwmjvX
#tissueimageanalysis #digitalpathology #computationalpathology
I am organizing a free 3 Day challenge to teach exactly that.
You can register here:
https://lnkd.in/eGFwmjvX
#tissueimageanalysis #digitalpathology #computationalpathology
#تجربه
من به همهی دوستانی که میخوان وارد حوزه هوش مصنوعی بشن میگم که به هیچ وجه دورههای ایرانی رو شرکت نکنید دوتا دلیل اولیه هم داره :
۱- ۹۸٪ دزدی هست
۲- ۲٪ باقی مانده متاسفانه درآمد دوره با وقت نمیخونه ( مجبور میشن سر و تهش رو بزنن) یا اینکه فارسی کردن کلمات تخصصی که شمارو از چاله در میاره میندازه توی چاه
خلاصه اینکه :
Coursera
که هست رایگان بشینید ببینید دیگه.
اما چندتا از تجربیات دوستان :
۱- بوت کمپ هوش مصنوعی شرکت کردند بعد توش
مدرس نشسته، هنر شفاف اندیشیدن رو خلاصه کرده و گفته
۲- دوره NLP بوت کمپی رو شنیدم که کلا؛ ۲ جلسه بوده (جلسات ۳ ساعت)
شما
Advance Regex
رو هم تو یوتیوب سرچ کنید دورهاش ۳ ساعت هست
حالا اون همه مباحث
ML / nltk / gensim / spacy / DL
اصن بیخیال
۳- دوره برگذار کردن، با هدف معرفی به استارتاپ های هوش مصنوعی اونم انجام نشده
دقت کنید فقط معرفی بوده ها نه استخدام و ...
گوگل که نیست بابا خودتون ۴ تا استارتاپ تشکیل میدادید دیگه بلدید که
۴- بوت کمپ ی شرکتی تشکیل میده بعد حامی ایده برتر هوش مصنوعی میشه آخر دوره با کمک ۷۵۰ م تومنی
بعد ایده ۱۵ میلیون دلاری توش رد شده
۵- دوره
Reinforcement Learning
تبلیغ دیدم ۷۰ میلیون تومان
بیتعارف بگم ۹۰٪ کسایی که هوش مصنوعی میخونند حقوق ۳م در ماه بیشتر درآمد نداشتند
شخصاً اگر قرار باشه ۵ میلیون هزینه دورهای رو بدم باید حداقل ۲۰ برابر ازش درآمد زایی داشته باشم
تورو خدا شرکت نکنید این دوره هارو چون ژرف زده مدیر فلان شرکت یا سنیور هوش مصنوعی
باور نکنید دورهاش رو
خلاصهاش کنم اگر ی روزی خواستید اشتباه کنید و دوره ایرانی رو شرکت کنید؛ از مدرسش ۴ تا پروژه لایو بخواید
که بتونید دمو اون رو به راحتی باهاش کار کنید و استفاده کنید.
#تجربه_شخصی :
کسی که توی تیم بنده دیتا لیبل میزد، هفته پیش لینکدین زده بود
Senior Deep learning engineer
جالبه بدونید ایشون نمیتونه توی پایتون Class تعریف کنه.
من به همهی دوستانی که میخوان وارد حوزه هوش مصنوعی بشن میگم که به هیچ وجه دورههای ایرانی رو شرکت نکنید دوتا دلیل اولیه هم داره :
۱- ۹۸٪ دزدی هست
۲- ۲٪ باقی مانده متاسفانه درآمد دوره با وقت نمیخونه ( مجبور میشن سر و تهش رو بزنن) یا اینکه فارسی کردن کلمات تخصصی که شمارو از چاله در میاره میندازه توی چاه
خلاصه اینکه :
Coursera
که هست رایگان بشینید ببینید دیگه.
اما چندتا از تجربیات دوستان :
۱- بوت کمپ هوش مصنوعی شرکت کردند بعد توش
مدرس نشسته، هنر شفاف اندیشیدن رو خلاصه کرده و گفته
۲- دوره NLP بوت کمپی رو شنیدم که کلا؛ ۲ جلسه بوده (جلسات ۳ ساعت)
شما
Advance Regex
رو هم تو یوتیوب سرچ کنید دورهاش ۳ ساعت هست
حالا اون همه مباحث
ML / nltk / gensim / spacy / DL
اصن بیخیال
۳- دوره برگذار کردن، با هدف معرفی به استارتاپ های هوش مصنوعی اونم انجام نشده
دقت کنید فقط معرفی بوده ها نه استخدام و ...
گوگل که نیست بابا خودتون ۴ تا استارتاپ تشکیل میدادید دیگه بلدید که
۴- بوت کمپ ی شرکتی تشکیل میده بعد حامی ایده برتر هوش مصنوعی میشه آخر دوره با کمک ۷۵۰ م تومنی
بعد ایده ۱۵ میلیون دلاری توش رد شده
۵- دوره
Reinforcement Learning
تبلیغ دیدم ۷۰ میلیون تومان
بیتعارف بگم ۹۰٪ کسایی که هوش مصنوعی میخونند حقوق ۳م در ماه بیشتر درآمد نداشتند
شخصاً اگر قرار باشه ۵ میلیون هزینه دورهای رو بدم باید حداقل ۲۰ برابر ازش درآمد زایی داشته باشم
تورو خدا شرکت نکنید این دوره هارو چون ژرف زده مدیر فلان شرکت یا سنیور هوش مصنوعی
باور نکنید دورهاش رو
خلاصهاش کنم اگر ی روزی خواستید اشتباه کنید و دوره ایرانی رو شرکت کنید؛ از مدرسش ۴ تا پروژه لایو بخواید
که بتونید دمو اون رو به راحتی باهاش کار کنید و استفاده کنید.
#تجربه_شخصی :
کسی که توی تیم بنده دیتا لیبل میزد، هفته پیش لینکدین زده بود
Senior Deep learning engineer
جالبه بدونید ایشون نمیتونه توی پایتون Class تعریف کنه.
👍2
برای دوستانی که سوال کردند :
کمتر فعالیت کردن این مدت، بخاطر توسعهی یک ابزار هست که لازم بود شخصاً وارد موضوعات جدیدی بشم.
بستگی به تصمیم سرمایهگذاران هم خواهد داشت ولی احتمال زیاد
نسخه
Free - OpenSource
هم خواهد داشت برای دولوپرها و بیزینسهای کوچکتر
کمتر فعالیت کردن این مدت، بخاطر توسعهی یک ابزار هست که لازم بود شخصاً وارد موضوعات جدیدی بشم.
بستگی به تصمیم سرمایهگذاران هم خواهد داشت ولی احتمال زیاد
نسخه
Free - OpenSource
هم خواهد داشت برای دولوپرها و بیزینسهای کوچکتر
دستاوردهای یادگیری عمیق(InTec)
توی لیست کتابهایی که باید خوند. Second Edition 👌
#نظر_شخصی
راجب کتاب باید بگم که بسیار ساده و روان نوشته شده
تمام چیزی که برای کار با کراس لازم هست رو داره (۹۹٪ منبع دیگری برای کراس لازم نخواهید داشت)
ی خوبی که نسبت به کتاب :
Hands On Machine Learning
داره اینه که کدهای اضافه رسم شکل و گراف و ... نداره و همه چیز به دقت و خط به خط توضیح داده شده
متأسفانه توی Hands On ML این مشکل هست که تازه کارها درگیر کدهای اضافی رسم شکل و .... میشوند.
هرچند که Hands On ML جزو بهترین منابع هست.
راجب کتاب باید بگم که بسیار ساده و روان نوشته شده
تمام چیزی که برای کار با کراس لازم هست رو داره (۹۹٪ منبع دیگری برای کراس لازم نخواهید داشت)
ی خوبی که نسبت به کتاب :
Hands On Machine Learning
داره اینه که کدهای اضافه رسم شکل و گراف و ... نداره و همه چیز به دقت و خط به خط توضیح داده شده
متأسفانه توی Hands On ML این مشکل هست که تازه کارها درگیر کدهای اضافی رسم شکل و .... میشوند.
هرچند که Hands On ML جزو بهترین منابع هست.
👍1