#视频
Artificial Analysis@ArtificialAnlysAI 评分5050
MarkTechPostAI 评分5555 NVIDIA 联合 MIT 与牛津发布 Physis-Lang,助力 Cosmos 3 在物理基准上超越 Veo 3.1
NVIDIA、MIT 和牛津团队发布 Physis-Lang,一个自进化的物理语言框架,通过在视频描述中加入 physics_reasoning 字段和 physics_negative_prompt,把物理语言用于数据筛选、训练和推理。
MarkTechPostAI 评分6464 Google Research 推出 AI 视频联合导演,用 4 个智能体框架生成连贯的长视频
Google Research 推出 AI 视频联合导演,由 4 个智能体框架组成,运行在 Gemini 和 Veo 之上,用于解决多镜头 AI 视频中的身份漂移和级联错误问题。
Google Research:BlogAI 评分5151 Google 发布 AI 视频联合导演研究:多智能体框架生成数分钟连贯长视频
Google Research 推出 AI 视频联合导演研究,一个构建在 Gemini 与 Veo 之上的多智能体编排框架,将长视频生成转化为全局优化与世界状态跟踪问题。
Rohan Paul@rohanpaul_aiAI 评分5757引用Visko Platform@viskoaiOur evaluation results for Orbis 1.0: Across automated benchmarks, Orbis scores highest on DOVER aesthetic and technical quality, and on VideoAlign visual and motion quality. It also leads three physical-plausibility protocols: VideoPhy-2, Physics-IQ, and VBench-2.0 Physics. In a randomized human Arena study of state-of-the-art real-time interactive video systems, Orbis ranked first in overall preference and first in temporal stability, the prerequisite for long-form generation. Full report: https://www.visko.ai/blog/papers/files/Visko_Orbis_1_0__A_Live_Model_for_Real_TimeInteractive_Long_Video_Generation.pdf
LMSYS Blog精选AI 评分6565 MiniMax-H3 在 8×H200 上基准测试:无损加速 1.95×,最高 6.24×(SSIM 0.76–0.91)
SGLang Diffusion 团队在 8×NVIDIA H200 上对 MiniMax-H3 视频生成进行基准测试,其密集无损路径较 Diffusers 快 1.85–1.95×,无近似损失。
推荐理由:把视频生成加速的取舍量化成可复现配置,质量优先时 Cache-DiT 单独使用比叠加稀疏注意力更划算。
Apple Machine Learning ResearchAI 评分5050 Beyond Visual CoT:Internalized Visual Thinking 实现主动视频推理
多模态大语言模型常用视觉思维链(Visual CoT)进行空间、时间与具身环境推理,但生成中间推理图像带来大量推理开销。新提出的后训练框架 Internalized Visual Thinking(IVT)在训练阶段内化视觉思考,推理时直接进行文本预测与优化,从而在不增加推理成本的前提下实现主动视频推理。
MarkTechPostAI 评分5353 小米 MiLM Plus 发布 PROVE:面向感知对齐的目标移除评测指标 RC-S 与 RC-T 及真实世界视频基准
小米 MiLM Plus 团队发布 PROVE 评测框架,包含 RC-S 与 RC-T 两项感知对齐指标及 PROVE-Bench 真实世界视频基准,已获 ACM MM 2026 接收。
Apple Machine Learning ResearchAI 评分5555 CalibAtt:无需训练的稀疏注意力方法,将文生视频速度提升至 1.58 倍
Apple 与特拉维夫大学联合提出 CalibAtt,一种无需训练的校准稀疏注意力方法,通过离线识别 token 间可跳过的低分连接并编译为优化操作,在推理时跳过无关计算。在 Wan 2.1 14B、Mochi 1 及少步蒸馏模型上,CalibAtt 实现最高 1.58 倍端到端加速,在保持视频质量和文本-视频对齐的同时优于现有免训练方法。
IT之家·人工智能AI 评分4646 谷歌 DeepMind 发布 GenCeption:基于阿里 Wan2.1,打破计算机视觉桎梏
谷歌 DeepMind 发布 GenCeption 模型,将预训练视频生成器逆向改造成单一模型,可同时完成深度估计、图像分割等核心视觉任务。该模型基于阿里 Wan2.1 训练,一次前向传播即可输出结果,小模型处理 81 帧视频约需 6 秒。
Apple Machine Learning ResearchAI 评分5151 通过先进模态条件与交互驯服文本到有声视频生成
苹果与中国人民大学联合研究聚焦文本到有声视频生成任务,提出Cross-Referential Rewriter(CRR)caption框架。该框架采用双agent管线:Semantic Checker提取有依据的语义锚点,Cross-Modal Rewriter生成解耦的TV和TA caption对,消除模态干扰并弥合密集训练caption与简洁用户提示之间的差距,解决了联合音视频训练中的文本条件瓶颈与跨模态特征融合不清两大关键挑战。
Apple Machine Learning Research精选AI 评分5656 VideoFlexTok:可变长度粗到细视频分词
VideoFlexTok提出一种可变长度token序列的视频表示方法,采用粗到细结构——首个token捕捉语义和运动等抽象信息,后续token添加精细细节,生成流解码器支持任意token数量的视频重建。相比传统3D网格分词,该结构允许根据下游需求调整token数,在相同预算下编码更长视频。在类别和文本到视频生成任务中,VideoFlexTok以1.1B参数(5.2B的1/5)达到可比生成质量(gFVD和ViCLIP Score)。训练一个处理10秒81帧视频的文本到视频模型仅需672个token,比同等3D网格分词器少8倍。
推荐理由:把视频 tokenization 从固定网格改成变长 coarse-to-fine,训练效率提升明显,还能做更长的视频。研究角度挺漂亮,但离产品落地还有距离,做视频生成的可以追一下。
The Decoder:AI NewsAI 评分4545 微软研究院 Mirage:赋予视频生成持久空间记忆,不遗忘“转角后的场景”
微软研究院与多所高校联合开发的视频世界模型 Mirage 将场景信息直接存储在潜在空间中,而非基于像素的点云。这大幅降低了计算时间和图形显存消耗,同时能在长镜头移动中保持场景空间一致性。不过,该模型目前仍无法可靠地跨片段跟踪运动物体。
公众号:龙猫LongCat精选AI 评分6565 美团 LongCat 提出 WBench:首个交互式视频世界模型多轮评测基准
美团 LongCat 团队提出 WBench,这是首个面向交互式视频世界模型的系统性多轮评测基准,包含 289 个测试案例和 1058 个交互轮次,覆盖导航、主体动作、事件编辑和视角切换四种交互方式。
推荐理由:将导航能力独立归因于空间状态表示,揭示连续交互位姿误差累积是迭代生成范式的结构性缺陷,为评估与改进交互式世界模型提供了新框架。
Saining Xie@sainingxieAI 评分6767引用Sihyun Yu@sihyun_yuCan MLLMs actually track what's happening in a video? Introducing VSTAT 🎯, our new benchmark for visual state tracking. The tasks are simple: count cups, read typed words, count page flips. Humans solve them easily. MLLMs don't. https://vision-x-nyu.github.io/vstat-site/ 🧵 [1/11]
公众号:龙猫LongCatAI 评分5454 美团 LongCat 团队发布交互式视频世界模型评测基准 WBench
美团 LongCat 团队发布 WBench,首个面向交互式视频世界模型的系统性多轮评测基准,已开源。
IT之家·人工智能AI 评分6262 小米汽车发布 Xiaomi Auto World Model 世界模型全新框架:重建 + 生成一体化,主流基准测试全面 SOTA
小米汽车发布 Xiaomi Auto World Model 框架,首次将三维重建与视频生成深度耦合,打破行业独立拆分的技术路线。该框架在 Waymo、nuScenes 等主流基准测试中全面取得 SOTA,并已在合成数据生成(已交付超10万 clips 数据)、仿真测试、辅助驾驶学堂三大场景落地。
CMU:Machine Learning Blog精选AI 评分6363 教视觉-语言模型说“电影语言”
研究团队与百余名专业创作者历时一年,构建了一个视频描述生成流程,其核心在于扩展精细化的人类-AI协同监督,而非单纯扩大模型规模。该研究(入选CVPR 2026亮点论文)指出,当前主流视频生成模型在理解和生成具有电影感的专业运镜(如希区柯克式滑动变焦、精确的焦点转移或荷兰角镜头)时存在明显不足,常产出通用或焦点错误的画面。这项工作揭示了一条通过提升监督质量来增强模型“电影语言”表达能力的新路径。
推荐理由:这篇CVPR 2026 Highlight的博客版很有意思,它用100多个专业电影人来标注视频,教VLM学会推拉摇移的镜头语言,不是又多一个数据集,而是提醒我们:高质量的人工标注可能比堆模型更重要。
OpenAI:官网动态精选AI 评分7171 OpenAI 发布 Sora 系统卡,说明视频生成模型的能力与输入输出设计
OpenAI 发布 Sora 系统卡。Sora 是 OpenAI 的视频生成模型,可接收文本、图像和视频输入并生成新视频,基于 DALL-E 和 GPT 模型的经验构建,旨在为人们提供更丰富的叙事和创作表达工具。