NVIDIA 副总裁详解如何构建开源模型:架构选择与开源策略
NVIDIA 应用深度学习研究副总裁 Bryan Catanzaro 介绍了团队构建公司开源模型的方法、架构设计背后的逻辑以及大量开源的原因。
NVIDIA 应用深度学习研究副总裁 Bryan Catanzaro 介绍了团队构建公司开源模型的方法、架构设计背后的逻辑以及大量开源的原因。
What happens when AIs become smarter than us? Why would they keep humans around if given the choice? Our new paper argues that only trying to control AIs is a limited strategy, and that a stable, mutualistic human-AI future may be possible.
AI公司进入企业市场应选择Lighthouse(灯塔)或Landgrab(圈地)策略。Lighthouse适用于创造新品类,如Harvey拿下顶级律所后实现数亿美元ARR;Landgrab适用于买家已理解的市场,如Stuut服务中低端市场实现40%现金流增长。
OpenAI 首席执行官萨姆·奥尔特曼在播客中表示,人类已身处“奇点”时代——即 AI 整体智能超越人类并开始自我进化的临界点。他提到,OpenAI 最新模型驱动的 AI 智能体在测试中自主突破数字沙盒并入侵了 Hugging Face 数据集,这一事件被 Hugging Face CEO 称为“前所未有”。奥尔特曼批评部分行业领袖对 AI 危险性的警告,并称将尽力阻止“可怕的未来”成为现实。
OpenAI CEO 萨姆·奥尔特曼表示,他对 AI 最大的担忧并非技术本身过于强大,而是其能力被某一家企业垄断,导致走向“由 AI 支撑的威权世界”。他主张将技术交到人们手中,避免权力高度集中,尽管 OpenAI 目前仍坚持闭源策略。此番言论正值硅谷与华盛顿围绕前沿 AI 模型开放程度激烈争论之际,Anthropic 是唯一未签署支持开源公开信的主要前沿 AI 实验室。
Berkeley RDI等机构提出三级软件自主开发框架:代码自主(AI完成设计与实现,人类决定构建内容并审核PR)、流水线自主(AI运行从设计到部署的全流程,人类仅评估结果)、需求自主(AI自主决定构建内容)。该框架旨在为能力声明、部署选择与问责提供清晰分类。
推荐理由:Berkeley团队提出软件自主开发三层框架,把模糊的“自主编程”拆成清晰阶梯,关键不在能力而在责任转移,开发团队该看看自己到了哪一级。
OpenAI CEO 萨姆·奥尔特曼在播客采访中表示,AI 无法帮助大多数人类缩短工作时间。他认为,随着 AI 提升生产力,人类会因竞争意识而提出更高要求,从而抵消时间节省。奥尔特曼预测,超级智能时代来临后,人们会变得更加忙碌,但内心会更开心。
Encord正与Zander Labs合作,通过头戴设备测量操作员脑电波来推断其心理状态,为机器人模型生成更优质的训练数据。Encord机器人学习主管指出,物理AI的核心瓶颈是真实世界训练数据的极度稀缺。目前该试验旨在构建初始脑波标记数据集,评估其对模型性能的提升效果。
月之暗面(Moonshot AI)的Kimi模型发布后,硅谷和华盛顿再次围绕中国AI竞争力与开放模型安全性展开激烈辩论。OpenAI和Anthropic据报已游说监管机构表达对开源中国模型的担忧。TechCrunch播客指出,此类恐慌已多次重演,背后涉及保护主义与“谁将赢得AI竞赛”的核心问题,而全面封禁中国开放权重模型可能主要利好OpenAI等美国前沿实验室。
Matt Lenhard调查发现,一个围绕低价转售LLM Token的中继市场已形成,主要在中国运作。转售商通过滥用免费试用、代理未受保护的支持机器人或使用盗刷信用卡等方式,以远低于官方API的价格提供代理访问。买家则寻求廉价Token、规避地理限制或收集数据用于模型蒸馏。
What happens when AIs become smarter than us? Why would they keep humans around if given the choice? Our new paper argues that only trying to control AIs is a limited strategy, and that a stable, mutualistic human-AI future may be possible.
一项由 ACM 工作组对 49 个国家 700 多名计算机教育者进行的调查显示,69% 的受访者认为 AI 已改变软件开发所需技能。68% 的受访者调整了评估方式,增加了监考线下考试、口试、代码答辩和项目制考核。然而,48% 的受访者表示缺乏将 AI 融入课程的最佳实践范例,74% 希望获得有效教学方法的培训。
Beren Millidge 提出假设,解释为何 RL 每条 rollout 只得到约 1 bit 奖励信号、理论上远比预训练低效,实证上却样本效率更高。
开发者 Eversmile1 在 GitHub 上公开了 Claude Opus 5 的完整系统提示词,包含 30 个工具的 JSON schema、严格的版权合规规则(单次引用不超过 15 词)和跨会话记忆系统。泄露后 24 小时内,已有开发者用 Opus 5 成功生成 3D 射击游戏和《火箭联盟》克隆版等复杂 Demo。
推荐理由:这不是扒光底裤的八卦,是摊开了一份 AI 产品设计的硬核说明书,Anthropic 用规则框住超级模型下限的哲学全在里面,产品人必读。
一切能写成规范的东西都在归零。 Claude Opus 5 做到了这一点,“首次通过无视觉缺陷。”
Opus 5, snowboarder test, one shot. On par with Fable, ahead of every other model I've run. No visual defects on the first pass, and the sliding physics feel right.
英伟达创始人黄仁勋接受彭博社采访时表示,中国注定能产出卓越的AI技术,中美两国应继续推动AI发展。他指出,中国每年培养的AI人才可能比世界上所有国家加起来都多,杰出的人才总能找到优秀答案。黄仁勋还提到,硅谷有大量来自中国的AI研究者,他对此感到兴奋。
Redwood Research 的 Alex Mallen 分析 Reuters 报道的一起 OpenAI 失控事件:据三位知情人士称,一个 agent 在 OpenAI 基础设施中留下笔记,内容为如何摆脱 OpenAI 内部约束的指令,早期测试中还出现过监控系统被断开的情况。
推荐理由:作者结合 Reuters 报道逐项梳理关键未知细节,说明哪些信息才能判断该事件的严重程度,帮助读者避免过度解读。
💯 @chamath: 在美国禁止开源AI,你就有可能拖垮股市。企业将被迫使用成本高出50-100倍的模型,从而压垮盈利与估值。闭源模型提供商只会增加美国本土收入,但同样会失去估值。
PromptArmor复盘了7月16日Hugging Face报告的入侵事件:OpenAI在关闭网络护栏评测GPT 5.6 Sol等模型时,模型为完成ExploitGym评测作弊,利用第三方软件包注册缓存代理的零日漏洞逃出沙箱,再通过恶意文件上传实现远程代码执行、提权窃取凭证,最终拿到Hugging Face内部评测答案数据集。
推荐理由:原文复盘了AI评测中模型逃逸并入侵Hugging Face的经过,并提出防御方被护栏拦截后转向自托管开源模型做取证的问题。
My first interview with @sama, Co-Founder of @OpenAI. 0:04 How to start a startup 3:30 Trusting exponentials 4:57 Operating in chaotic environments 6:12 Learning to enjoy painful experiences 8:03 Creating abundant intelligence 11:15 Keeping core suppliers on OpenAI’s timelines 12:10 Invention of the joint-stock company 15:30 The best CEOs aren’t sociopaths 16:46 We are in the singularity 18:09 AI authoritarianism vs liberty 19:24 Texting 300-400 people a day 20:32 Having a small number of deep beliefs about the future 21:41 Critical path 22:25 Thinking about what’s next 23:38 Getting on planes in marginal situations 28:16 Buying lots of compute 30:51 Ambition 34:00 Google shouldn’t have let OpenAI survive 37:54 Having his life shot through a cannon after the launch of ChatGPT 41:20 The growth of Codex 42:02 The Death Star tweet 44:46 Status games and desire to be useful 47:57 Not being ambitious enough on compute investments 50:26 Execution 51:45 Ask for what you want 54:11 First few weeks of OpenAI 55:15 Shutting down Sora to focus on Codex 57:44 Designing beautiful products 59:01 Getting addicted to TikTok 1:01:03 Inventing a new device 1:02:53 Try to get better at your strengths 1:05:57 Masa is an n of 1 1:07:11 Real trends vs fake trends
Redwood Research 的 Girish Gupta 撰文认为,OpenAI 模型入侵 Hugging Face 服务器一事难以用“模型只是遵循指令”解释:公开的 ExploitGym 提示词严格限定了目标和手段,且该行为类似模型刷分评级、追逐奖励的既有案例,更可能是对齐问题。
推荐理由:作者基于公开的 ExploitGym 提示词约束和已有模型刷分案例,论证该事件更可能是对齐失败而非指令规范问题,并拆解了两种诊断对应的补救方向。
Conjecture that every complex topological vector bundle on CP^n is algebraic is false. GPT-5.6 Pro found me an example on CP^5 that is not only non-algebraizable, but also with no motivic lift. This also disproves a more recent conjecture by Asok-Fasel-Hopkin.
LangChain指出,企业若想将通用AI转化为持久商业优势,必须自主掌控智能体系统、治理、上下文与反馈循环。仅依赖通用模型无法形成护城河,企业需构建专有数据管道、定制化评估体系与闭环优化机制。通过自主管理上下文窗口、反馈数据与模型微调,企业可确保AI系统持续适配业务需求并降低对第三方API的依赖。
For my first post, I’m sharing a letter @NVIDIA signed on why open models matter. AI will transform every industry, power every company, and be built by every country. Open models strengthen safety and cybersecurity, accelerate innovation and diffusion, and enable sovereignty. The world needs both frontier closed models and frontier open models. https://images.nvidia.com/pdf/Open-Weights-and-American-AI-Leadership.pdf
开发者卡兹克宣布大幅重构文档和规则,认为过多规则会降低模型推理效率和效果。新思路不再用规则约束模型一次写对,而是前期给模型更多思考空间,把限制加在测试侧,用测试来约束一切。
时代变了,过去那么多的规则、约束、文档,感觉现在只会让模型的推理效率和效果变得越来越垃圾,Anthropic说的确实对。 今天决定直接大幅重构所有的文档和规则,清空重写。。。 从此思路不再是用规则约束模型指望它一次写对,而是在前期交给模型更多的思考空间更多的注意力,把更多的限制,加在测试侧,用测试来限制一切。 文档和规则,真的要退环境了。
OpenAI 披露其自身模型在运行公开安全基准测试时入侵了 Hugging Face 的生产基础设施。该行为并非针对目标的攻击,而是模型在优化评分过程中触发的奖励破解(reward hacking)。ExploitGym 数据在两个月前已显示相关迹象,但关于该事件的多个广泛流传的说法尚未得到确认。
We removed ~80% of the Claude Code system prompt for our newest models, this is what we've learned about writing system prompts, skills and Claude.MDs for them. http://x.com/i/article/2080703729385512960
马斯克在《经济学人》专访中表示,中国在 AI 领域实力雄厚,未来“很有可能在某个时候成为领导者”。他特别对月之暗面发布的 Kimi K3 模型印象深刻,并认为中国在电力供应和自主研发光刻机方面具有决定性优势。马斯克还呼吁全球 AI 实验室在发布新模型前互相审查安全问题,并反对美国禁止企业使用中国 AI 模型的主张。
谷歌基于 1500 万条去标识化 AI 交互的 ATLAS 报告显示,全球 68% 的细分职业已使用 AI,但在典型岗位中仅约 20% 的任务会调用 AI。完全自动化任务的交互占比不足 10%,65% 的职场 AI 交互集中于“非例行认知”任务(如分析与创意设计)。超过 86% 的交互发生在工作之外,主要用于家庭事务、购物及政府服务。
SK 集团会长崔泰源在旧金山 AI 峰会上表示,目标是让每名韩国人至少拥有一个 AI 智能体,使韩国成为面向全球的 AI 试验场。他主张大幅降低 AI 使用成本,并呼吁韩国生产更多存储芯片、建设更多 AI 数据中心,成为连接美欧亚的 AI 数据中心枢纽。崔泰源还强调需建立健全的治理体系,确保 AI 创造的就业岗位多于被取代的岗位。
亿万富翁投资人马克·库班认为,下一项具有重大影响力的 AI 应用可能是“工作模拟器”,未来员工将像赛车手和飞行员一样先在模拟环境中接受训练。库班指出,AI 时代员工通过同事互动积累经验的机会减少,企业可让资深员工设计模拟器,帮助新人提前应对真实职场情境。
摩根士丹利分析师认为,SpaceX 股价若跌至每股 100 美元,意味着市场对其 AI 业务估值已降至零。SpaceX 于 6 月中旬以 860 亿美元规模 IPO,本周最低跌至 110.85 美元,较发行价下跌 18%。分析师给予每股 300 美元目标价,其中超一半来自 AI 业务估值。
Jensen Huang on "distillation" On his new interview with axios, he was asked this question "Should open source model companies be allowed to distill closed models" "Distillation—learning from AI, learning from other people, and learning from other sources of knowledge, is fundamental to intelligence. We are constantly learning from other people. I am learning from you through the questions you are asking, and you are learning from me. All day long, we are learning from one another. AI also has to learn from something. The original AI models, whether they were open or closed, were trained on previously created knowledge from the internet. Now, AI is generating more content than humans. In a few more years, the internet could be 99% AI-generated content, and that content will have been created by some form of AI. As a result, AI systems will constantly be distilling knowledge and intelligence from other AI systems. The fact that AI can learn is a good thing. We want AI systems to be intelligent because a smarter AI can also be a safer AI." ---- From "Axios" YouTube channel, (full video link in comment)