PyTorch Conf に関する報道
関連記事 1 件
DeepSeek DeepInfer: オープンソース SOTA 推論 155T トークン/日/クラスタを実行し、81 日間の回収で ~80% のマージンで 1 日あたり 2,200 万ドルを稼いでいます
DeepSeek DeepInfer: Open Source SOTA Inference running 155T toks/day/cluster making $22m/day at ~80% margin for a 81 day payback
AI インサイトDeepSeekがDeepInferをオープンソース化し、極めて高い粗利益率とスループット性能を示したことは、LLMの推論が、クローズドソースの商業的スタックへの依存から、オープンソースの高性能インフラストラクチャの競争へと移行しつつあることを意味しています。極限のエンジニアリング最適化が従来の推論コストの制約を打ち破り、業界全体にAPIの経済モデルの再定義を迫っています。重要度 92/100