行情
…

xAI Ethan He:影片模型的智慧源自 LLM,下一個 Sora 是影片 Agent

前 NVIDIA Cosmos 世界模型主導工程師 Ethan He 加入 xAI 後,率小型團隊在三個月內從零建出 Grok Imagine,並在 Latent Space podcast 拋出反直覺核心論點:影片模型的「智慧」主要來自 LLM,不是來自看更多影片訓練資料。

xAI Ethan He:影片模型的智慧源自 LLM,下一個 Sora 是影片 Agent

xAI Ethan He:影片模型的智慧源自 LLM,下一個 Sora 是影片 Agent

前 NVIDIA Cosmos 世界模型主導工程師 Ethan He 加入 xAI 後,率小型團隊在三個月內從零建出 Grok Imagine,並在 Latent Space podcast 拋出反直覺核心論點:影片模型的「智能」主要來自 LLM,不是來自看更多影片訓練資料。這個判斷直接改寫了影片生成的下一步路線圖。

Ethan He 曾主導 NVIDIA Cosmos 世界模型,隨後加入 xAI。三個月衝刺 Grok Imagine 留下的工程教訓只有兩條:迭代速度高於幾乎一切,最大的效能躍升往往來自修掉資料集與訓練 pipeline 裡的微小 bug,而非架構大改。技術棧涵蓋 VAE、diffusion transformer、音影對齊與推論加速,以及大規模影片資料集移動的隱性成本。

He 認為影片生成將複製 coding AI 的演化弧線,從比拚單次輸出品質與成本,走向多輪規劃、生成、編輯、批評、迭代的 agent 系統,最終瓶頸落在「編排」而非單次生成能力。對做多模態或生成式媒體的團隊,訊號已經很清楚:當 realism、一致性、prompt 遵循達到門檻後,該押注的是能跨整個創作任務統一調度的完整系統。He 同時點名 Flipbook 是影片即時客製 UI 的早期訊號,隨推論成本持續下降,這個方向比多數人預期的更近。

→

繼續閱讀

查看全部 →
NewsAI 快訊

LegalOn 如何砍 65% Codex 成本?按任務路由 Astra/Sol/Luna 的做法

LegalOn 把 Codex 的 Astra、Sol、Luna 按任務分工,日費估算砍 65%、速度持平

DeltaMedia 編輯部2 分鐘
NewsAI 快訊

用 AI agent 自己蒸餾小模型:16 美元做一個 0.8B 模型的完整做法

2026 年 10 月 8 日,Hugging Face 部落格記錄一位開發者透過 ML Intern 將 Qwen-Image 2.1 的 9B 提示詞改寫器蒸餾成 0.8B 版本,從下達需求到取得可部署模型只花了一天。

DeltaMedia 編輯部5 分鐘
NewsAI 快訊

AI 推理成本為何史上下降最快?Epoch 數據與 20 億 AI agent 的算力帳

截至 2027 年出貨的 AI 晶片,理論上可同時支撐 3000 萬至 1.7 億個前沿模型智慧代理不間斷執行,換算全職工時約等同於 1.4 億至 7.2 億名全職員工

DeltaMedia 編輯部6 分鐘
NewsAI 快訊

AI 算力狂飆可養活 20 億個 agent,但市場真有這麼大需求?

Epoch AI 研究顯示,截至 2027 年出貨的 AI 晶片可支援 3000 萬至 1.7 億個前沿模型 agent,若改用低成本模型則可達近 20 億個,但需求是否存在仍是開放問題。

DeltaMedia 編輯部7 分鐘