Власник TikTok розробляє ШІ-модель, схожу за масштабом до Anthropic Mythos

Як повідомляє FT, власник TikTok — китайська компанія ByteDance — запустила процес навчання нової моделі штучного інтелекту, яка може сягнути колосальних 10 трильйонів параметрів. Це робить її потенційно найпотужнішою серед китайських розробок та однією з найбільших у світі.

Наразі проєкт перебуває на початковій стадії попереднього навчання, яка зазвичай триває від трьох до шести місяців, після чого на модель чекає етап донавчання та, за умови успіху, офіційний реліз.

За обсягом параметрів нова розробка ByteDance приблизно втричі перевершує Kimi K3 від компанії Moonshot (наразі рекордсмена в КНР) і навіть обганяє модель Anthropic Mythos 5, чию потужність фахівці оцінюють орієнтовно в 8 трлн параметрів. Хоча експерти зауважують, що підсумкова якість ШІ залежить не лише від кількості параметрів, а й від методів навчання та якості даних, ByteDance реалізує найамбітніший проєкт у країні.

При цьому засновник ByteDance Чжан Їмін закликав команду принципово створювати «модель світового рівня» з нуля, відмовившись від простішого методу дистиляції на основі чужих розробок і не зважаючи на тимчасове відставання від суперників.