跳到正文
10月20日周二
  1. IT之家·人工智能72

    DeepSeek 将内部推理框架 DeepInfer 全面开源

    DeepSeek 宣布将内部推理框架 DeepInfer 全面开源,此前已开源大模型、TileLang 编译工具及推理算子库。DeepInfer 集成高性能算子与深度优化的推理引擎,支持分布式推理、推测解码、SWA Bounded Replay、结构化输出等能力,兼容英伟达与华为昇腾平台,已支撑 DeepSeek V4.1 Flash 高吞吐、低延迟的大规模推理服务。

  2. IT之家·人工智能43

    思科总裁用 AI 智能体盘点并取消无用订阅,一年省下上千美元

    思科总裁兼产品主管吉图・帕特尔用个人 AI 智能体扫描邮箱后发现,自己每年各类订阅总开销高达 9,000 美元,随后让智能体生成订阅清单并取消两项不需要的服务,每年省下 1,000 到 1,200 美元。该智能体每月订阅费 20 美元,还帮他取消了误开的每月 11.95 美元 Dropbox 套餐。他强调不应把未经企业审核的个人 AI 智能体接入工作工具与内部资源。

  3. OpenBMB43

    🚀 MiniCPM-V 4.7 现已获 vLLM v0.32.0 支持!感谢 @vllm_project 的支持。这让以高吞吐、低延迟方式部署 MiniCPM-V 4.7 变得更加容易。

    引用vLLM@vllm_project

    🚀 vLLM v0.32.0 is out! 814 commits · 363 contributors · 121 first-timers 🧭 New /v1/systemone structured-decision endpoint + generic hf tool/reasoning parser 🗜️ Low-precision KV everywhere: NVFP4 on SM8x/90/12x, FP8 KV default for GLM-5.x, 4-bit KV on ROCm 🛠️ Model Runner V2: GPU n-gram speculator, Elastic EP, PP+CP for MLA, now default on ROCm ⚡ Faster startup & serving: precompiled kernel downloads, autotune preload, +43–85% req/s with multi-API workers 🆕 EmbeddingGemma 2, MiniCPM-V 4.7, Nemotron 3.5 ASR 🔒 3 security fixes + CORS hardening Full notes → http://github.com/vllm-project/vllm/releases/tag/v0.32.0

  4. 公众号:面壁智能68

    面壁智能解析前瞻专家调度 LES 如何让 35B MoE 在手机端侧实时无损运行

    面壁智能 MiniCPM-V 团队介绍支撑 MiniCPM-V 4.7 端侧运行的前瞻专家调度(LES)技术,称首次实现 35B-A3B 规模 MoE 在端侧实时无损运行,iPhone 18 Pro Max 实测解码超 20 token/s。

    推荐理由:原文拆解了 LES 在调度、存储、计算三层的具体设计,并给出消融数据,方法可迁移到其他 MoE 模型的端侧部署。

  5. Rohan Paul43

    X 将 For You 信息流的两个环节改为偏向用户停留时长和读完的帖子。Musk 称新排序模型能更好地预测可能停留时长,检索模型则以读完率为训练目标,主要决定未关注账号的帖子能否进入候选。日活跃用户秒数从 8 月中旬约 410B 增至 10 月中旬约 500B。

    引用Elon Musk@elonmusk

    Two important changes to timeline recommendations: - New AI/SI ranking model that predicts probable time spent much better - Retrieval model trained to surface posts people read all the way through User active seconds is growing exponentially and hitting all-time highs almost every day:

  6. Ant Ling56

    蚂蚁百灵感谢 vLLM 项目为 Ming-3.0 提供 Day-0 的 vLLM-Omni 支持,让模型更易部署。据引用内容,蚂蚁百灵开源了 5 款语音模型,覆盖 TTS、音频理解和 ASR,参数规模从 0.5B 到 126B 总参数(激活 6.5B),可通过 vLLM-Omni 直接部署。

    引用vLLM@vllm_project

    Day-0 support for Ming-3.0 in vLLM-Omni @AntLingAGI just open-sourced 5 speech models spanning TTS, audio understanding, and ASR — ranging from 0.5B to 126B total parameters (6.5B active). Serve them today with vLLM-Omni. Congrats to the @AntLingAGI team!

  7. Hacker News:AI 热帖81

    Redact 调查 WhatsApp 帮助页面隐藏的 LLM 指令:不让 AI 推荐监管机构

    Redact 调查发现,截至 2026 年 10 月中旬,WhatsApp 帮助中心 545 个页面中有 80 个页面嵌入了 102 段屏幕上不可见、仅供 AI 读取的隐藏指令,其中删除账号页面指示 AI 不要推荐联系任何数据保护监管机构,举报与屏蔽页面指示 AI 在用户提及律师或诉讼时不引用 GDPR、LGPD、CCPA 等法规。

    推荐理由:作者逐页核对了 545 个帮助页面并保存存档,读者可以据此了解隐藏 AI 指令的具体内容和 WhatsApp 的回应。

  8. indigo57

    作者引用 @0xshawnpang 的分析认为,阻碍 Agent 互联的不是技术而是政治。文中回顾了中国自 2013 年移动端时代以来的「不联网」生态,包括内容不可发现、链接被拦、功能只能进 App 使用,并指出美国平台也在向 Agent 关门,如 Amazon 向 Perplexity 发函要求其购物代理 Comet 停止未经许可的访问,eBay 要求代买 Agent 事先获得许可,Target 采用 Agent 白名单,花旗不允许第三方 AI Agent 代客户登录账户,Delta 明确用户授权不构成对其的授权,Yelp 仅提供需 API 密钥的 MCP 接入。

    引用Shawn Pang@0xshawnpang

    中国的互联网从13年的移动端时代就变成了“不联网”,其实现在美国的互联网也因为Agent能力重新可能变成“不联网”。 中国移动互联网 “不”联网的特征是: - 不能发现内容,搜索引擎找不到,必须进入某个 App 搜; - 不能读取内容,有链接也看不了,折叠全文、弹出登录或下载要求; - 不能使用功能,网页只有介绍或残缺功能,完整操作必须进 App/小程序; - 不能跨平台流动,链接被拦、不能直接跳转、只能复制口令或换浏览器。 这一个现象一直都很恶心,很独特的你封杀我我封杀你,平台之间的“截流”和投流量成为了一门学问,形成了我只在中国产品里见到的靠口令红包和自动读取剪贴板跳转的生态,贼tmd sb。 这也是为什么中国不管是Personal Agent还是Work Agent都是在同一体系内很能打,但是一旦跨体系就几乎智障的原因,很难出现一个Open Web上的Super Agent,都关着门,没有数据可以拿到没有功能可以调用,哪里能构建好Context和Workflow。 中国当前App “不联网” 的本质原因有两个。 一是因为2013年后手机端成为了主要入口,每一个大厂都在打造自己的超级App,于是乎web端功能不再迭代甚至删减限制,每一产品都在把聊天、内容、购物、支付乃至部分公共服务全部塞到自己生态里,再通过小程序继续确保用户不离开自己。 另外一个就是17年基本所有主流平台受网络安全法要求统一强制实名要求,其实也给了大厂们一个理由更封闭。 但是其实美国也在AI时代互联网面临着“不”联网的处境,最近大量讨论都围绕在平台是否应该向Agent开放权限上,大部分的头部传统企业也都先选择把门关上。 购物网站: - Amazon:2025年10月31日向Perplexity发函,要求其购物代理Comet停止未经Amazon许可的代理访问;2026年9月,又封锁了Meta Muse对Amazon的访问。 - eBay:用户协议直接点名代买Agent、LLM驱动的机器人等自动化工具,要求事先获得eBay明确许可才能访问其服务。 - Target:采用Agent白名单。只有用户批准、同时获得Target授权的Agent才能接入,其他Agent不能登录、查询、抓取数据,或者通过API与网站交互。 银行和券商: - 花旗Citi:不允许第三方AI Agent代客户登录账户,或者直接在其数字银行平台内执行交易;保留通过部分开放银行服务商、经客户授权的有限只读访问。 - 摩根大通Chase:要求Agent明确表明身份、标记流量,并在条款中保留限制、暂停、终止Agent访问的权利。 出行和本地生活: - Delta航空:条款明确写着,用户授权某个第三方Agent,并不构成Delta对它的授权;Delta保留拒绝与其交互、处理其请求或交易的权利。 - Yelp:未经许可的自动化访问、抓取和检索受到限制;它也提供自己的MCP接入,但需要通过Yelp的API密钥使用。