Tencent открыла модель Hunyuan Hy4 preview с 770 млрд параметров

Компания Tencent представила и открыла исходный код своей новой большой языковой модели Hunyuan Hy4 preview. Модель насчитывает 770 миллиардов параметров при 49 миллиардах активных и поддерживает окно контекста, превышающее 1 миллион токенов. По утверждению Tencent, Hy4 preview входит в верхний эшелон открытых моделей и создавалась в расчёте на реальные производственные задачи — программирование, офисную работу и научные исследования.

Модель уже доступна как в открытом виде, так и через продукты Tencent — WorkBuddy, CodeBuddy, Yuanbao и ima, а также по API через Tencent Cloud TokenHub и OpenRouter. На двух первых платформах модель две недели предлагается бесплатно, а доступ к предыдущей версии Hy3 продлён до 30 сентября.

Ставка на продуктивность

Hy4 preview обучалась на данных, подготовленных вместе со специалистами Tencent в области разработки ПО, игр, финансов и безопасности. В программировании модель, по словам создателей, лучше справляется с планированием, отладкой и проверкой в длинных контекстах, а также с фронтендом. В офисных сценариях она ориентирована на анализ данных, финансовую аналитику и работу с документами, таблицами и презентациями. В геймдеве Hy4 preview обещает собрать играбельный прототип по одному текстовому запросу, а в науке — помогать в задачах от молекулярной динамики до фундаментальной математики.

Во внутреннем слепом тестировании Tencent с участием 163 экспертов и 203 инженерных заданий модель набрала в среднем 2,99 из 4,00, немного опередив GLM-5.3 (2,92) и Kimi K3 (2,94).

Модель, которая помогает создавать себя

Любопытная деталь: по заявлению Tencent, Hy4 preview впервые участвовала в оптимизации собственной разработки — предлагала подходы к методам обучения, стратегиям работы с данными и низкоуровневым операторам, ставила эксперименты и итеративно улучшала результаты. Компания называет это ранним контуром рекурсивного самоулучшения. Кроме того, модель самостоятельно проанализировала узкие места своей системы вывода и после нескольких раундов оптимизации подняла сквозную пропускную способность на 31,8% относительно базовой конфигурации.

Цены на API составляют 0,834 доллара за миллион входных токенов, 2,501 доллара за миллион выходных и 0,042 доллара за миллион токенов при попадании в кеш. Следующие модели серии Hy4, как обещает Tencent, выйдут в ближайшее время.

Источник: Hacker News