Китайская компания ByteDance, известная по TikTok, работает над моделью искусственного интеллекта с объёмом до 10 трлн параметров. О разработке сообщает издание Ferra.
Если оценка подтвердится, новая система окажется более чем втрое крупнее китайской Kimi K3 от Moonshot AI, которая содержит 2,8 трлн параметров. По отраслевым оценкам, у самой продвинутой модели Anthropic Mythos 5 может быть около 8 трлн параметров, а у Fable 5 — примерно 5 трлн.
Параметры представляют собой числовые настройки, которые модель получает во время обучения и использует для обработки данных и выполнения задач. Однако их количество говорит лишь о масштабе системы и не гарантирует высоких результатов.
Сейчас модель ByteDance находится на этапе предварительного обучения.