آیندهی هوش مصنوعی
در این رشته توئیت مقایسه جالبی بین روند توسعه سرعت هواپیما و نرخ کلاک cpu با روند توسعه ai انجام داده که نکات خیلی جالبیداره. من چند تا نکتهش رو در ادامه میارم:
۱. مقایسه پیشرفتهای سریع در سرعت هواپیماها در دهه ۱۹۶۰ با پیشرفت فعلی در هوش مصنوعی نشان میده که همانطوری که روند افزایش سرعت هواپیماها در هوانوردی به یک سطح ثابت رسید، توسعه هوش مصنوعی نیز ممکنه با کندی مواجه شود. انتظار رشد مداوم در سرعت هواپیما آنقدر بالا رفته بود که مردم پیشاپیش رزرو پیشین پروازهای به ماه رو رزرو. میکردند چون مطمئن بودند این روند افزایش سرعت اینقدر ادامه داره که روزی با راحتی میشه با هواپیما به ماه سفر کرد. اما این اتفاق نیفتاد و این روند با محدودیتهای غیرمنتظرهای روبرو شد.
در فناوری این رو میشه به عنوان یک قاعده ی طلایی در نظر گرفت رشد که «رشد نمایی در نهایت به سیگموید تبدیل میشود» یعنی رشد در فناوری اغلب از یک روند نمایی پیروی میکند ولی در نهایت به سطحی ثابت میرسد و یک منحنی سیگموئیدی (Sigmoid) را تشکیل میدهد. این الگو در حوزههای مختلف فناوری مانند ثابت شدن سرعت کلاک CPUها هم دیده شد.
برای هوش مصنوعی، بهویژه مدلهای زبان بزرگ (LLMs) مانند GPT-3 و GPT-4، دو چالش اصلی میتواند مانع از توسعه بیشتر میشه:
۱. کیفیت دادهها: دسترسی به دادههای باکیفیت برای آموزش مدل کارآمد حیاتیه. امکان دارد که منبع دادههای ارزشمند در حال تمام شدن باشه یعنی شرکتهای بزرگ ai tech هر چی داده با کیفیت بود رو جمع کردند داده با کیفیت زیادی باقی نمونده این نکته توضیح میده که چرا مدلهای اخیر این شرکتها سطوح عملکرد مشابهی دارند و مدتیه جهش قابل توجهی در مدلهاشون ندارند.
۲. دادههای مصنوعی: در صورتی که دادههای طبیعی با کیفیت تموم شده باشند دادههای مصنوعی میتوانند به رفع خلأهای آموزشی خاص و بهبود تواناییهای مخصوص به حوزه کمک کنند، ممکن است جایگزین تنوع و غنای دادههای واقعی تولید شده توسط انسان نشوند.
علاوه بر این، افزایش اندازه یک مدل هوش مصنوعی لزوماً به معنای بهتر شدن عملکرد در کاربردهای عملی نیست، حتی اگر بهبود در معیارهای نظری مانند پیچیدگی (توانایی مدل در پیشبینی کلمه بعدی) را به همراه داشته باشد.
یک سوال مهم در پیشبینی آیندهی LLMها پاسخ به این سوال است که آیا مدلهای زبان بزرگ میتوانند واقعاً فهمیده و فراتر از دادههای آموزشی خود تعمیم دهند یا اینکه محدود به وظایفی هستند که صراحتاً در آنها نمایش داده شدهاند. اگر مدلهای زبان بزرگ واقعاً به دادههای آموزشی خود محدود باشند، پس افزایش دادهها دیگر مفید نخواهد بود زیرا تمام وظایفی که قرار است در آن نمایش داده شوند، قبلاً نمایش داده شدهاند. این میتواند به این معنا باشد که مدلهای زبان بزرگ، مانند سایر مدلهای یادگیری ماشین، به نقطه بازدهی کاهشی خواهند رسید.
۲. مدتها از زمان انتظار برای ارائهی GPT-5 میگذرد، تغییرات در تمرکز شرکتها، و تغییرات در انتظارات جامعه هوش مصنوعی ممکن است نشان دهنده این باشد که محدودیتهای مقیاسبندی مدلهای هوش مصنوعی در حال حاضر توسط کسانی که در خط مقدم تحقیقات هوش مصنوعی هستند، پذیرفته شده است.
انتشار سریع GPT-3.5 به دنبال GPT-4 منجر به توهمی شده که از سرعت پیشرفتهای مدلهای زبانی بزرگ را ایجاد کرده باشد. این رشته توئیت درکی واقعبینانهتر از هوش مصنوعی به عنوان بخشی از چرخه فناوری را ارائه میدهد.
در مجموع، در حالی که هوش مصنوعی پیشرفتهای قابل توجهی داشته است، با چالشهایی مواجه است که میتواند پیشرفت آن را کند کند، همانطور که سایر فناوریها در گذشته تجربه کردهاند. آینده مقیاسبندی هوش مصنوعی نامشخص است و صنعت در حال سازگاری با این مرحله از توقف است.
در این رشته توئیت مقایسه جالبی بین روند توسعه سرعت هواپیما و نرخ کلاک cpu با روند توسعه ai انجام داده که نکات خیلی جالبیداره. من چند تا نکتهش رو در ادامه میارم:
۱. مقایسه پیشرفتهای سریع در سرعت هواپیماها در دهه ۱۹۶۰ با پیشرفت فعلی در هوش مصنوعی نشان میده که همانطوری که روند افزایش سرعت هواپیماها در هوانوردی به یک سطح ثابت رسید، توسعه هوش مصنوعی نیز ممکنه با کندی مواجه شود. انتظار رشد مداوم در سرعت هواپیما آنقدر بالا رفته بود که مردم پیشاپیش رزرو پیشین پروازهای به ماه رو رزرو. میکردند چون مطمئن بودند این روند افزایش سرعت اینقدر ادامه داره که روزی با راحتی میشه با هواپیما به ماه سفر کرد. اما این اتفاق نیفتاد و این روند با محدودیتهای غیرمنتظرهای روبرو شد.
در فناوری این رو میشه به عنوان یک قاعده ی طلایی در نظر گرفت رشد که «رشد نمایی در نهایت به سیگموید تبدیل میشود» یعنی رشد در فناوری اغلب از یک روند نمایی پیروی میکند ولی در نهایت به سطحی ثابت میرسد و یک منحنی سیگموئیدی (Sigmoid) را تشکیل میدهد. این الگو در حوزههای مختلف فناوری مانند ثابت شدن سرعت کلاک CPUها هم دیده شد.
برای هوش مصنوعی، بهویژه مدلهای زبان بزرگ (LLMs) مانند GPT-3 و GPT-4، دو چالش اصلی میتواند مانع از توسعه بیشتر میشه:
۱. کیفیت دادهها: دسترسی به دادههای باکیفیت برای آموزش مدل کارآمد حیاتیه. امکان دارد که منبع دادههای ارزشمند در حال تمام شدن باشه یعنی شرکتهای بزرگ ai tech هر چی داده با کیفیت بود رو جمع کردند داده با کیفیت زیادی باقی نمونده این نکته توضیح میده که چرا مدلهای اخیر این شرکتها سطوح عملکرد مشابهی دارند و مدتیه جهش قابل توجهی در مدلهاشون ندارند.
۲. دادههای مصنوعی: در صورتی که دادههای طبیعی با کیفیت تموم شده باشند دادههای مصنوعی میتوانند به رفع خلأهای آموزشی خاص و بهبود تواناییهای مخصوص به حوزه کمک کنند، ممکن است جایگزین تنوع و غنای دادههای واقعی تولید شده توسط انسان نشوند.
علاوه بر این، افزایش اندازه یک مدل هوش مصنوعی لزوماً به معنای بهتر شدن عملکرد در کاربردهای عملی نیست، حتی اگر بهبود در معیارهای نظری مانند پیچیدگی (توانایی مدل در پیشبینی کلمه بعدی) را به همراه داشته باشد.
یک سوال مهم در پیشبینی آیندهی LLMها پاسخ به این سوال است که آیا مدلهای زبان بزرگ میتوانند واقعاً فهمیده و فراتر از دادههای آموزشی خود تعمیم دهند یا اینکه محدود به وظایفی هستند که صراحتاً در آنها نمایش داده شدهاند. اگر مدلهای زبان بزرگ واقعاً به دادههای آموزشی خود محدود باشند، پس افزایش دادهها دیگر مفید نخواهد بود زیرا تمام وظایفی که قرار است در آن نمایش داده شوند، قبلاً نمایش داده شدهاند. این میتواند به این معنا باشد که مدلهای زبان بزرگ، مانند سایر مدلهای یادگیری ماشین، به نقطه بازدهی کاهشی خواهند رسید.
۲. مدتها از زمان انتظار برای ارائهی GPT-5 میگذرد، تغییرات در تمرکز شرکتها، و تغییرات در انتظارات جامعه هوش مصنوعی ممکن است نشان دهنده این باشد که محدودیتهای مقیاسبندی مدلهای هوش مصنوعی در حال حاضر توسط کسانی که در خط مقدم تحقیقات هوش مصنوعی هستند، پذیرفته شده است.
انتشار سریع GPT-3.5 به دنبال GPT-4 منجر به توهمی شده که از سرعت پیشرفتهای مدلهای زبانی بزرگ را ایجاد کرده باشد. این رشته توئیت درکی واقعبینانهتر از هوش مصنوعی به عنوان بخشی از چرخه فناوری را ارائه میدهد.
در مجموع، در حالی که هوش مصنوعی پیشرفتهای قابل توجهی داشته است، با چالشهایی مواجه است که میتواند پیشرفت آن را کند کند، همانطور که سایر فناوریها در گذشته تجربه کردهاند. آینده مقیاسبندی هوش مصنوعی نامشخص است و صنعت در حال سازگاری با این مرحله از توقف است.
Telegram
Dev Tweet Media
Dev Tweet
آیندهی هوش مصنوعی در این رشته توئیت مقایسه جالبی بین روند توسعه سرعت هواپیما و نرخ کلاک cpu با روند توسعه ai انجام داده که نکات خیلی جالبیداره. من چند تا نکتهش رو در ادامه میارم: ۱. مقایسه پیشرفتهای سریع در سرعت هواپیماها در دهه ۱۹۶۰ با پیشرفت فعلی در…
این رشته توئیت از جهت نقد توهمات عوامانه در مورد قابلیتها و آیندههای هوش مصنوعی آوردم که گاهی آدمهای خیلی مهم رو هم درگیر خودش میکنه ولی خب اونها معمولا از دامن زدن به این توهمات یه چیزی گیرشون میاد...
البته من لزوما با هر چیزی که میذارم هم نظر نیستم ولی از جهت دیدن کلان ایدههای متفاوت به اینها میپردازم.
البته من لزوما با هر چیزی که میذارم هم نظر نیستم ولی از جهت دیدن کلان ایدههای متفاوت به اینها میپردازم.
👍4
Dev Tweet
ورژن قدیمیِ 《هوش مصنوعی باعث بیسوادی آدما میشه》
این باور معمولا از اونجا ناشی میشه که آدما هر چی بیشتر دانش low level(منظور سطح کیفی نیست منظور سطح انتزاعه) داشته باشن و از مکانیزم هر چیزی سر دربیارن خفنترن!
من خودم به شخصه دنبال خرید اشتراک برای سرویس های چت بات مثه GPT4 و Gemini و Claude AI هستم.
چند روزه دارم بررسی میکنم یه اشتراک به صرفه و مناسب کار خوردم رو بخرم.
امروز این بررسی Wall Street Journal رو دیدم.
سرویس Perplexity بهترین سرویس شده در بین فاکتورهای مقایسه و بدترین هم Copilot!
البته مقایسه Perplexity با GPT و Claude و Gemini کار غلطیه.
سرویس Perplexity باید با You.com و Peo.com و Copilot مقایسه بشه.
منبع
چند روزه دارم بررسی میکنم یه اشتراک به صرفه و مناسب کار خوردم رو بخرم.
امروز این بررسی Wall Street Journal رو دیدم.
سرویس Perplexity بهترین سرویس شده در بین فاکتورهای مقایسه و بدترین هم Copilot!
البته مقایسه Perplexity با GPT و Claude و Gemini کار غلطیه.
سرویس Perplexity باید با You.com و Peo.com و Copilot مقایسه بشه.
منبع
👍2
Dev Tweet
من خودم به شخصه دنبال خرید اشتراک برای سرویس های چت بات مثه GPT4 و Gemini و Claude AI هستم. چند روزه دارم بررسی میکنم یه اشتراک به صرفه و مناسب کار خوردم رو بخرم. امروز این بررسی Wall Street Journal رو دیدم. سرویس Perplexity بهترین سرویس شده در بین فاکتورهای…
اگر شما تجربه خرید اشتراک رو دارید بنویسید از چه سرویسی استفاده میکنید راضی هستید یا نه.
من خودم دارم متقاعد میشم برم اشتراک text.cortex رو بگیرم.
بعدا توضیح میدم چرا.
من خودم دارم متقاعد میشم برم اشتراک text.cortex رو بگیرم.
بعدا توضیح میدم چرا.
گندکاری جدید گوگل با AI Overview
دقت کرده باشید گوگل بالای سرچهایش جدیدا یک چیزی میاره تحت عنوان AI Overview یک کادر صورتی رنگ داره.
شبیه چیزی که Bing با کمک GPT4 h آورده بود بهش میگفت Deep search.
ولی در این چند روزه که عرضه شده با جوابهای شدیدا گمراه کننده شدیدا گند بالا آورده!
مثلاهایش را پائین با عکس ضمیمه میکنم.
ببخشید اگر بعضی مثالها بی ادبانه است.
منبع مثالها برای دیدن مثالهای بیشتر.
دقت کرده باشید گوگل بالای سرچهایش جدیدا یک چیزی میاره تحت عنوان AI Overview یک کادر صورتی رنگ داره.
شبیه چیزی که Bing با کمک GPT4 h آورده بود بهش میگفت Deep search.
ولی در این چند روزه که عرضه شده با جوابهای شدیدا گمراه کننده شدیدا گند بالا آورده!
مثلاهایش را پائین با عکس ضمیمه میکنم.
ببخشید اگر بعضی مثالها بی ادبانه است.
منبع مثالها برای دیدن مثالهای بیشتر.
X (formerly Twitter)
Jeremiah Johnson 🌐 (@JeremiahDJohns) on X
Google's new AI search results are having quite the week. Here's a thread with some of my favorite answers: