Tencentは、次世代の大規模言語モデルHy4 Previewをオープンソースとして公開した。コーディング、オフィスアプリケーション、科学研究に重点を置くこのモデルは770 billionパラメーターを備え、Mixture-of-Expertsアプローチにより、処理ごとに49 billionパラメーターが有効化される。コンテキストウィンドウは1 millionトークンを超える。
Tencentが163人の専門家と203のエンジニアリングタスクを用いて実施したブラインドテストで、Hy4 Previewは4点満点中2.99点を獲得した。Kimi K3は2.94点、GLM-5.3は2.92点にとどまった。同社は、結果が自社の内部評価に基づくものだと説明している。
このモデルは、長いコンテキストを扱うソフトウェア開発、データおよび財務分析、文書・電子表計算・プレゼンテーションの作成、ゲームのプロトタイプ開発、科学的問題の解決に利用できる。Tencentはまた、Hy4 Previewが学習、データ、評価、オペレーター最適化に貢献し、自社インフラのボトルネックを解消することで、エンドツーエンドの処理能力を31.8%向上させたと発表した。
このモデルは、WorkBuddy、CodeBuddy、Yuanbao、ima、Tencent Cloud TokenHub、OpenRouter、Hugging Faceを通じて提供されている。APIの価格は、1 million入力トークンあたり0.834ドル、1 million出力トークンあたり2.501ドルで、キャッシュから利用する1 millionトークンについては0.042ドルに設定された。
なぜ重要か
Hy4 Previewがオープンソースとして提供されたことで、このモデルはTencent独自の製品に限定されたサービスではなくなり、開発者や研究者がさまざまな利用シナリオで検証できる選択肢となった。1 millionトークンを超えるコンテキスト容量により、特に長期にわたるソフトウェアプロジェクト、膨大な文書、大規模なデータセットを扱うチームにとって、モデルは一度により広範な内容を処理できる。WorkBuddy、CodeBuddy、Tencent Cloud TokenHub、OpenRouter、Hugging Faceを通じたアクセスに加え、APIの価格が明らかにされたことで、利用の判断を技術的な特性だけでなくコストの面からも評価できるようになった。一方で、性能優位の主張はTencent独自の内部ブラインドテストに基づいているため、異なる独立した評価でも同じ結果が得られるかどうかは明らかになっていない。