Seed に関する報道

ByteのSeedチームは、DeepSeek-V4の長文脈検索パフォーマンスにおいて4トークンごとに周期的変動が発生することを発見した。この現象は、KV Cache圧縮とアテンション機構の位置に対する選好に起因している。これは、長文脈最適化技術が推論効率を追求する一方で、予期せぬ構造的盲点をもたらす可能性があることを示している。大規模言語モデルが超長文脈を処理する際、効率と安定性のバランスは依然として現在のアーキテクチャ設計における核心的な課題である。