Оказалось что многие упустили. Оригинальную статью с предполагаемыми деталями GPT-4 удалили, но вот тут есть сборник твитов с обзором. Да, судя по всему оценка в 1.8 триллионов параметров на 120 слоях оказалась правдивой, как и работа в режиме группы экспертов.
Напоминаю, это не официальный, но довольно достоверный обзор. Опираться на него нельзя, но обсуждать можно threadreaderapp.com/thread/16785
Read and Share Twitter Threads easily!
Thread Reader helps you read and share the best of Twitter Threads