#多模态
Rohan Paul@rohanpaul_aiAI 评分6161Latent SpaceAI 评分5555 Elorian 发布 DecoyCount 基准,前沿模型视觉计数得分低于 50%
Latent Space 采访 Elorian CEO Andrew Dai,介绍其与 Mercor 联合发布的 DecoyCount 基准,测试模型是真正数数还是依赖视觉捷径。
Ars Technica:AIAI 评分6363 自然语言走进蛋白质与基因组设计:Pinal 与 Hugging Face 的 Carbon X
Ars Technica 介绍了一种以自然语言提示设计蛋白质的工具 Pinal,它由 T2struct 将文本转为结构蓝图,再由 SAProt-T 生成氨基酸序列,训练数据包括 8 亿关键词-蛋白质对和 AlphaFold 预测结构。
IT之家·人工智能AI 评分5757 报告称豆包引用抖音权重从10.79%升至31.8%,视频成主力信源
新榜智汇本月报告显示,豆包对抖音的引用权重从5月的10.79%升至8月的31.8%,每引用3条内容就有1条来自抖音;百度6月首次将B站和好看视频纳入信源库,二者权重之和达12%。报告指出,标题关键词覆盖度与引用次数的相关系数为ρ=+0.149(抖音+0.157),高于语义相似度的+0.117,建议视频创作者标题贴合用户提问用词,并确保与目标提问词语义相似度达标。
Apple Machine Learning ResearchAI 评分4242 GHARP:基于大规模重建先验的实时高斯头部动画
Apple 研究团队提出 GHARP,可从少量输入图像和驱动表情信号实时驱动 3D 人头动画。该方法将问题拆为离线构建身份几何与外观表示、运行时用轻量网络预测表情相关残差两阶段,并加入身体对齐网络消除身体姿态与衣物位置带来的歧义。在 Ava-256 基准上达到 SOTA 质量,在 A100 GPU 上运行速度最高提升 13×,高斯数量减少 8×。
Google Research:Blog精选AI 评分6363 Google Research 发表 AI 盲扫超声孕周评估研究,准确性与专家操作相当
Google Research 在 JAMA Network Open 发表前瞻性多中心研究,评估基于"盲扫"超声的 AI 孕周评估模型在不同临床环境和设备上的泛化能力。
推荐理由:研究给出跨芝加哥与内罗毕的前瞻验证数据,读者可据此评估 AI 超声在低资源场景落地的可行性。
IT之家·人工智能AI 评分6666 研究称 AI 仅凭一张面部照片可预测癌症患者生存几率
据彭博社报道,研究人员在《柳叶刀·数字健康》发表研究,开发出仅凭一张面部照片预测癌症患者生存几率的 AI 工具。模型使用超过 4000 万张人脸图像和 3 万多名癌症患者照片训练,可生成风险评分,分数最高者更可能在 90 天内死亡,估算年龄误差约 5 岁,并能在不同年龄、种族、性别和癌症类型人群中生效。
MIT NewsAI 评分4343 MIT 等团队开发 E(3)-Pose:用对称性先验提升胎儿脑 MRI 成像可靠性
MIT、波士顿儿童医院与 Inria 的研究者开发并训练了深度学习模型 E(3)-Pose,可在胎儿头部运动时辅助成像,生成供放射科医生查看的高分辨率三维图像。该模型把胎儿头部的左右对称性等物理原理嵌入网络架构,而非仅从数据中学习物理规律,从而更准确地识别大脑朝向。相关论文已在 2026 年欧洲计算机视觉会议(ECCV)上展示,目前模型主要基于第三孕期胎儿训练。
IT之家·人工智能AI 评分6666 研究发现:AI 可篡改人类记忆,植入从未发生的虚假事件
据 Washington Post 报道,MIT 媒体实验室教授 Pattie Maes 团队让 200 名受试者观看照片,看过 AI 篡改图片的人产生错误记忆的概率大幅上升,且对虚假记忆更自信。
MIT NewsAI 评分4242 MIT 团队构建多模态 AI 模型,让模型“看懂”材料的三维晶体结构
MIT 研究人员构建了一个多模态 AI 模型,将晶体的 3D 原子结构与自然语言描述结合,生成涵盖化学成分、结构、性质、加工与应用的统一描述。在发表于 Nature Communications 的论文中,该系统在筛选固态锂离子电池电解质材料时给出的高分结果包含已被独立认定为有前景的候选材料,表现优于仅用文本训练的模型。
IT之家·人工智能AI 评分4949 阿里 Qwen 开源 BlenderWorld:223 道题、2651 条标准的 3D 建模基准
阿里 Qwen 团队于 10 月 14 日开源 BlenderWorld,一个评测视觉智能体在 Blender 中完成真实 3D 创作任务的基准,采用 MIT 许可证,代码与数据集已发布至 GitHub、Hugging Face 和 ModelScope。
Apple Machine Learning ResearchAI 评分4343 Apple 提出 SSR:用选择式结构化推理打造高效多模态搜索智能体
Apple 研究团队提出 Selection-based Structured Reasoning(SSR),将推理从开放式生成改为从预设可复用自然语言候选中选择,无需辅助任务头。在 2B 和 4B 模型、七个多模态搜索基准上,SSR 平均成功率与同规模领先搜索智能体相当,每轮推理延迟降低超 90%,单题模型总推理延迟降低 28–54%。
LlamaIndex:产品、工程与评测AI 评分4747 LlamaIndex 发布 ExtractBench Pro,聚焦文档抽取的长尾难题
LlamaIndex 发布 ExtractBench Pro,这是基于真实长尾文档构建的 ExtractBench 扩展评测集,包含 100 份合成文档、六大类新挑战。该数据集由确定性流水线从种子和配置文件生成,覆盖图表取值、跨页规则、内部术语、图示关系等场景,刚性流水线表现吃力,而配备合适工具的智能体系统更能适应。
IT之家·人工智能AI 评分7272 上海人工智能实验室团队用书生 S2 大模型完成三维 Ghys 猜想证明
上海人工智能实验室发文宣布,许地生团队依托书生科学多模态大模型 S2,通过人机协同完成困扰数学界 30 余年的三维 Ghys 猜想证明。北京大学董彬、刘若川院士团队用 SHEAF 框架完成形式化验证,论文已发布于 arXiv,形式化代码开源在 GitHub。上海人工智能实验室表示该范式可推广至其他搜索空间大而专家稀缺的基础研究领域。
MarkTechPostAI 评分4949 Datalab 发布 OmniParseBench:16,288 项通过/失败测试的开源 OCR 基准
Datalab 发布开源文档解析基准 OmniParseBench,用 16,288 项 yes/no 测试覆盖 2,937 页、2,343 份文档和 92 种语言,数据集与代码公开。
Apple Machine Learning ResearchAI 评分5959 Apple 发布三模态掩码扩散模型设计空间研究
Apple 团队发布首个从零预训练的三模态掩码扩散模型(MDM)研究,在文本、图文和音频文本数据上训练。论文系统分析了多模态缩放规律、模态混合比例、噪声调度和 batch size 影响,提出基于 SDE 的重参数化方法免去调优最优 batch size,并在 3B 模型规模(6.4T tokens)上验证了文本生成、T2I 和 T2S 任务的表现。
蚂蚁 inclusionAI:GitHub 新仓库AI 评分4545 蚂蚁 inclusionAI 开源 ZwZ2 系列模型:无需缩放即可跨区域连接细粒度视觉证据
蚂蚁 inclusionAI 发布 ZwZ2-4B/9B/27B 三个视觉模型,基于 Qwen3.5-4B、Qwen3.5-9B 和 Qwen3.6-27B,用 20.4K 条经跨模型验证的多区域 VQA 样本做 GRPO 强化学习训练。
公众号:小红书技术AI 评分4646 小红书提出 AdaptEvo:面向规则约束情境决策的 Agent 学习框架
小红书 AllSpark 团队联合社区审核算法团队提出 Agent 学习框架 AdaptEvo,将置信度自适应强化学习 CA-GRPO 与决策知识、评价准则的演化交替进行。
Apple Machine Learning ResearchAI 评分4040 苹果研究:LLM 做机器翻译质量标注,人类与模型都面临挑战
苹果研究团队评估了 LLM 在 MQM 和 ESA 两种机器翻译质量标注方案下与人类标注者的一致性,测试覆盖 70 个语言对的长上下文测试集及 WMT23、WMT25 公开数据。结果显示,LLM 在某些任务上与人类的一致性超过人类标注者之间的一致性,但在多数标注方案、语言对和领域下仍不可靠。人类在细粒度 MQM 标注和低资源语言对上尤为吃力,LLM 则难以处理细微错误、错误语言变体和错误跨度标注。
蚂蚁 inclusionAI:GitHub 新仓库AI 评分4141 蚂蚁 inclusionAI 发布 PolyOCR-Venus:2B/9B 统一 OCR 基础模型
蚂蚁 inclusionAI 开源 PolyOCR-Venus 系列 OCR 基础模型,含 2B 和 9B 两个版本,基于 Qwen3.5 视觉语言骨干,统一支持文本识别、定位、文档解析、信息抽取与 OCR 推理。
The Decoder:AI NewsAI 评分5858 JEPA-Anything 论文将 LeCun 的 JEPA 扩展为跨物理到生物的通用世界模型
PhAI Labs 联合 Stanford、Oxford 和 Princeton 的团队发布 JEPA-Anything,将 Yann LeCun 提出的 JEPA 架构扩展为可覆盖物理、机器人、天气、生物等七个领域的统一世界模型,方法是把预测状态拆成四个正交因子分别预测再重组。
MarkTechPostAI 评分4949 JEPA-Anything:用一套配方为 7 个领域构建世界模型
PhAI Labs、CUHK、复旦、斯坦福、牛津与普林斯顿的研究者发布 JEPA-Anything,一个领域无关的世界模型框架,用共享学习配方覆盖视觉、生物、临床轨迹、控制、分子动力学、物理场和天气 7 个领域。
Cohere Labs:官方研究博客AI 评分4545 Cohere Labs 研究:数据混合如何解锁多语言母语推理
Cohere Labs 基于 32K 上下文长度的 Tiny Aya 基础模型,用数据混合策略训练出 Tiny Aya L2-Thinker,在 60 种语言上实现超 93% 的母语推理率。
The Decoder:AI NewsAI 评分4848 NASA 与 IBM 开源月球基础模型:用 17 年轨道器数据构建月球科学基座
NASA 与 IBM Research 联合多家学术机构发布 NASA-IBM Lunar Foundation Model,称其为最早的开源月球科学基础模型之一。
The Decoder:AI NewsAI 评分5454 LEGO-Anything研究:编码智能体可将单张照片转成可执行Blender 3D场景程序但几何自评接近随机
LEGO-Anything让编码智能体从单张图像迭代编写可执行的Blender场景程序,并推出LEGO-Bench基准(208张图像、104个场景、443个注册资产),用仿真渲染提供精确3D真值。
MIT NewsAI 评分4949 MIT CSAIL 与 Google 推出 InstructMesh:可修复 AI 生成 3D 模型再打印
MIT CSAIL 联合 Google 和东北大学推出 InstructMesh,将微软 TRELLIS 的 3D 生成能力与 GPT-4 的推理能力结合,用户可用自然语言标注并修改 AI 生成的 3D 设计后再打印。
Hugging Face 社区博客AI 评分5151 Hugging Face 推出 Open TTS Leaderboard:用客观指标评测多语言 TTS 与语音克隆
Hugging Face 推出 Open TTS Leaderboard,用 WER/CER、RTFx、TTFA 和 WavLM 嵌入相似度等客观指标评测开源 TTS 模型,将评测周期从数周缩短到数小时。榜单支持多语言与语音克隆对比,提供 Listen 试听和 Streaming 排名,评测脚本即将开源。
MarkTechPostAI 评分6464 Google Research 推出 AI 视频联合导演,用 4 个智能体框架生成连贯的长视频
Google Research 推出 AI 视频联合导演,由 4 个智能体框架组成,运行在 Gemini 和 Veo 之上,用于解决多镜头 AI 视频中的身份漂移和级联错误问题。
IT之家·人工智能AI 评分7575 阿里达摩院发布食管癌 AI 模型 DAMO EAGLE,平扫 CT 不插管识别早期病变
阿里达摩院联合四川省肿瘤医院、中山大学肿瘤防治中心等机构发布食管癌筛查 AI 模型 DAMO EAGLE,无需插管和造影,从平扫 CT 识别包括早期和癌前病变在内的食管癌,论文 9 月 22 日发表于《自然·医学》。
Amazon ScienceAI 评分5555 Amazon Bio Discovery 发表三篇论文,用 AI 设计并实验验证抗体
Amazon Bio Discovery 团队发布三篇论文,分别针对抗体结合强度排序、可开发性预测和端到端抗体设计。
Google Research:BlogAI 评分5050 Google 研究用生成式 UI 让教师创建互动学习模拟
Google 分享最新研究实验,让教育者借助生成式 UI(GenUI)动态生成贴合课程目标的互动学习模拟,并已发布 30 多个面向初高中 STEM 的英文学习互动示例库,全部由 AI 生成、教师审核。
IT之家·人工智能AI 评分6060 新型脑机接口首次同步解码语言与肢体动作
NIH 宣布加州大学旧金山分校研发出可同时解码瘫痪患者预期语言和上肢动作的新型脑机接口,成果发表于《自然·神经科学》。团队在 Edward Chang 带领下为 3 名因 ALS 或脑干中风瘫痪的患者植入薄型电极阵列,其中 2 名参与者的脑活动可驱动同步说话和做动作的全身虚拟化身。
IT之家·人工智能AI 评分4444 NJIT 团队发布 EarlyDetect 模型,提前 9.24 小时捕捉太阳活动区信号
美国新泽西理工学院(NJIT)牵头的科研团队发布机器学习模型 EarlyDetect,可从太阳声学活动和磁场变化中识别活动区形成前兆,性能最佳的版本平均提前 9.24 小时识别信号。
IT之家·人工智能AI 评分4646 新加坡科技设计大学研究发现老年群体更看重 AI 陪伴聊天机器人的真实感而非拟人化
新加坡科技设计大学研究人员让 140 名 60 至 89 岁老年人与其社交聊天机器人 Ami Chat 互动,研究发表于《老龄化创新》期刊。结果显示,社会关系相关三个指标(拟人化、真实性、AI 社交互动强度)在使用意愿差异中额外解释了 27%;感觉更真实、互动更具回应性时使用意愿更高,但认为机器人更像真人的参与者意愿反而更低;自评健康状况较差者使用意愿更强。
Google Research:BlogAI 评分5252 Google 与 NASA JPL 发布 MAPL-EMIT:用深度学习从卫星高光谱数据全球绘制甲烷排放
Google Research 与 NASA JPL 在 PNAS 发表 MAPL-EMIT,一个基于 Swin-S 视觉 Transformer 的框架,可从 EMIT 高光谱辐射数据自动检测、定量和定位甲烷羽流。
Rohan Paul@rohanpaul_aiAI 评分4141
Apple Machine Learning ResearchAI 评分5252 STARFlow2:用归一化流桥接语言模型,实现统一多模态生成
STARFlow2 提出将自回归归一化流与语言模型统一,用于多模态生成。该方法观察到自回归归一化流与 LLM 共享因果掩码、KV-cache 机制和从左到右结构,从而弥合文本与图像生成的架构差异,避免离散 token 化带来的视觉保真度损失。