最新模型
Hy4 Preview、770B MoEの重みを公開——疎な注意機構と組み込みMTPで長文コンテキスト・エージェントを狙う
Tencentは、Hy4 PreviewのApache 2.0ライセンスの重み、FP8版、およびvLLMとSGLang向けのデプロイ手順を公開した。このモデルは、770Bのパラメータのうちtokenごとに約49Bを活性化する。100万tokenのコンテキストに対応するが、品質と自己最適化の成果を裏付ける根拠は、現時点では主にTencentの内部評価に基づいている。