GPT-4 generally lacks knowledge of events that have occurred after the vast majority of its data cuts off (September 2021), and does not learn from its experience.

GPT-4 incorporates an additional safety reward signal during RLHF training to reduce harmful outputs (as defined by our usage guidelines) by training the model to refuse requests for such content. The reward is provided by a GPT-4 zero-shot classifier judging safety boundaries and completion style on safety-related prompts.

We will soon share more of our thinking on the potential social and economic impacts of GPT-4 and other AI systems.

A large focus of the GPT-4 project has been building a deep learning stack that scales predictably. The primary reason is that, for very large training runs like GPT-4, it is not feasible to do extensive model-specific tuning. We developed infrastructure and optimization that have very predictable behavior across multiple scales. To verify this scalability, we accurately predicted in advance GPT-4’s final loss on our internal codebase (not part of the training set) by extrapolating from models trained using the same methodology but using 10,000x less compute

We’re open-sourcing OpenAI Evals, our software framework for creating and running benchmarks for evaluating models like GPT-4, while inspecting their performance sample by sample.

we have also included the templates that have been most useful internally (including a template for “model-graded evals” — we’ve found that GPT-4 is surprisingly capable of checking its own work)

ChatGPT Plus subscribers will get GPT-4 access on chat.openai.com with a usage cap.

Depending on the traffic patterns we see, we may introduce a new subnoscription level for higher-volume GPT-4 usage; we also hope at some point to offer some amount of free GPT-4 queries so those without a subnoscription can try it too.

این مدل برخلاف GPT-3 که باهاش ChatGPT رو ساختن فقط متنی نیست و قابلیت چند رسانه‌ای یا Multi modal داره!

تعداد پارامترهای اون 500 برابر GPT-3 هستش یعنی 500 * 175 میلیارد پارامتر

شروع شد همین الان

شگفت‌انگیز!

کارپثی و لکس درباره‌ی جی پی تی ۴

🎯 استخوان شکسته و قلب شکسته برای مغز فرقی نمی‌کند
— طردشدن فقط به سلامت ما آسیب نمی‌رساند بلکه می‌تواند کشنده باشد


📍فرقی نمی‌کند بی‌محلی و طردشدن از طرف دوست و آشنا باشد یا یک غریبه‌. حتی خیلی فرقی نمی‌کند این رفتار دلیل جدی و مهمی دارد یا به‌خاطر اتفاقی پیش‌پاافتاده باشد. تنها چیزی که واقعاً اهمیت دارد این است که وقتی کسی را نادیده می‌گیرند، حسابی «دردش» می‌گیرد. اما آیا تا به حال فکر کرده‌اید که این درد دقیقاً چطور دردی است؟ تحقیقات علمی سرنخ‌هایی برای ما دارند: مغز انسان میان استخوان شکسته و قلب شکسته تفاوتی قائل نیست.


🔖 ۳۵۰۰ کلمه
⏰ زمان مطالعه: ۲۲ دقيقه

📌 ادامۀ مطلب را در لینک زیر بخوانید:
https://b2n.ir/r61716

📌 آنچه خواندید بخشی است از پروندهٔ «هیچ‌کس تنها نیست» که در شمارهٔ ۱۳ فصلنامهٔ ترجمان منتشر شده است. برای خواندن مطالب دیگر این پرونده می‌توانید شمارۀ سیزدهم فصلنامهٔ ترجمان را از اینجا بخرید:
https://b2n.ir/t18734

📌 همچنین برای بهره‌مندی از تخفیف و مزایای دیگر می‌توانید اشتراک فصلنامۀ ترجمان را با تخفیف از اینجا خریداری کنید:
https://tarjomaan.shop/product/sub4014/

@tarjomaanweb

چند سال پیش توی خود فصلنامه‌ی ترجمان این مطلب رو خوندم و اون موقع واقعا برام جالب و خوب بود. پیشنهاد می‌کنم بخونیدش

Mood