跳到正文
2025年7月23日周三
  1. Noam Brown

    OpenAI 在 IMO 数学竞赛的突破让专业数学家陷入身份危机。作者以"能与狗对话的人发现翻译器在沃尔玛只卖4.99美元"比喻这种独特技能被 AI 商品化的失落感。这种职业终结的悲伤未来数年将蔓延至所有数学家、程序员和知识工作者,甚至让人提前面对生命终结的恐惧。

    引用Dave White@_Dave__White_

    OpenAI 的 IMO 消息这个周末对我打击挺重的 我想我还处在冲击的急性期 我自认为是一名职业数学家(一些真正的职业数学家可能会对这个说法有异议,但这是我的地盘我做主),而我觉得自己连一道 IMO 题都答不上来 好吧,是的,IMO 是数学里一个有点像竞技体育的细分领域,我并没有为此训练过,等等等等,但是。如果我在现实中遇到一个拥有 IMO 金牌的人,我会立刻更新为“这个人在数学上比我强得多” 现在一堆机器人能做到这件事了。作为一个把大量身份认同和实际生活都建立在“擅长数学”之上的人,这是一记重击。这是一种死亡。 就像,有一天你发现自己能和狗说话。这很有趣也很新奇,于是你做得更多,学习它们语言的精妙之处和它们最深层的习俗。你了解到别人对你的能力感到惊讶。你一直都不太合群,但你发现人们欣赏你的能力,想要你在身边帮忙。狗也欣赏你,你是唯一真正懂它们的双足动物。你为自己拼凑出一种归属感。然后有一天你醒来,万能狗语翻译器在沃尔玛只卖 4.99 美元 IMO 这个结果严格来说不算新闻。事实上,如果你看看 METR 的智能体任务时长随时间变化的图,我认为智能体能解决约 1.5 小时的问题正是如期而至。所以某种意义上我们不该感到惊讶。而且确实,似乎多家公司都取得了同样的结果。只是……潮水上涨的速度和它一直以来的上涨速度一样快 当然,为我作为数学家的个人身份(和/或作为社会中有生产力的一员)而悲伤,是这个故事里最小的部分 把这份悲伤乘以*每一位*数学家,乘以每一位程序员,也许每一位知识工作者,每一位艺术家……在未来几年里……这就是一个稍微大一点的故事了 当然,除此之外,还有对真正死亡的恐惧,这个也许我以后会再详细谈。 这一整套东西——对相关性的悲伤、对生命的悲伤、对我所熟知之物的悲伤——并不是 AI 时代独有的之类的东西。我认为这是当一个人接近职业生涯终点或生命终点时的一种常态。只是可能对许多人来说,它来得稍微早了一点,而且一下子全来了。 我想知道我们准备好了没有

    推荐理由:Noam Brown 引用数学家反思:AI 攻克 IMO 带来知识工作者的身份危机

2025年7月22日周二
2025年7月20日周日
2025年7月19日周六
2025年7月12日周六
2025年7月2日周三
  1. Yann LeCun

    DeepSeek 时刻后,AI 人才正从封闭的 OpenAI、Anthropic 流向拥抱开放科学与开源的 META。这种「拥抱开放」的趋势有利于行业透明度、科学进步与安全监管。OpenAI 承诺今夏发布开放权重模型,或将改变这一格局。

    引用Nirit Weiss-Blatt, PhD@DrTechlash

    在当前的AI人才争夺战中,大家都聚焦于那些大数字(据称的薪酬方案)。这忽略了更大的图景:DeepSeek时刻之后的文化转变。 META是美国在开放科学(出版物)和开源(Llama)方面的领导者。OpenAI和Anthropic都众所周知地不开放。 AI人才流向META,就是拥抱开放性的AI人才。 这对行业是好事。对科学是好事。甚至对安全关切也是好事(更多透明度,更多人关注问题,更多解决方案)。这是一个值得庆祝的趋势。 OpenAI在今年夏天晚些时候发布一个开放权重模型(如下所承诺)可能会改变这种平衡。

    推荐理由:LeCun 谈 DeepSeek 时刻后 AI 人才流向 Meta 与开源文化的关系

2025年7月1日周二
2025年6月28日周六
  1. Saining Xie

    metaquery 现已开源——数据和代码均已开放。

    引用Xichen Pan@xichen_pan

    The code and instruction-tuning data for MetaQuery are now open-sourced! Code: https://github.com/facebookresearch/metaquery Data: https://huggingface.co/collections/xcpan/metaquery-instruction-tuning-data-685b0f16d81ce54bcb7ea3a8 Two months ago, we released MetaQuery, a minimal training recipe for SOTA unified understanding and generation models. We showed that tuning few learnable queries can transfer the world knowledge, strong reasoning, and in-context learning capabilities inherent in MLLMs to image generation. With the training code now available, you can train MetaQuery yourself almost as easily as fine-tuning a diffusion model. We have also open-sourced our 2.4M instruction-tuning dataset. Sourced from web corpora, it offers diverse supervision beyond copy-pasting and unlocks many new exciting capabilities. Thanks @metaai for their support in making it open source!

2025年5月9日周五
  1. Saining Xie

    恭喜 @rob_fergus!FAIR 的重大胜利

    引用Rob Fergus@rob_fergus

    1/ Excited to share that I’m taking on the role of leading Fundamental AI Research (FAIR) at Meta. Huge thanks to Joelle for everything. Look forward to working closely again with Yann & team.

2025年4月24日周四
2025年4月5日周六
2024年12月19日周四
  1. Hugging Face 社区博客71

    Answer.AI 与 LightOn 发布 ModernBERT 编码器模型,支持 8192 序列长度并全面超越 BERT

    Answer.AI 与 LightOn 发布 ModernBERT 编码器模型系列,提供 base(149M 参数)和 large(395M 参数)两个规格,可作为 BERT 类模型的直接替代。

    推荐理由:原文详细披露了架构改进、训练数据和实测效率数字,读者可据此评估它在现有 BERT 类工作流中能否直接替换。

2024年12月6日周五
2024年12月3日周二
2024年9月25日周三
2024年7月23日周二
2024年5月8日周三
  1. LMSYS Blog

    技术博客:Llama 3 表现如何?Arena 数据分析

    Meta 于 4 月 18 日发布的开源模型 Llama 3-70B 在 Chatbot Arena 排行榜迅速登顶,参与超 5 万次对战。该模型在开放式写作和创意任务上表现突出,胜率达 60%,但在数学、编码等封闭式技术任务上逊于 GPT-4-Turbo 和 Claude 3 Opus。随着提示难度增加,其胜率从 50% 显著下降至 40%。分析显示,Llama 3 的输出风格更友好且具对话性,这成为其获得用户偏好的关键因素。

2024年4月18日周四
2024年3月25日周一
  1. EleutherAI:Blog

    Yi-34B、Llama 2 与 LLM 训练常见实践:对《纽约时报》的事实核查

    文章针对《纽约时报》关于 Yi-34B 与 Llama 2 关系的报道进行事实核查,澄清 Yi-34B 在架构设计、训练数据及分词器实现上与 Llama 2 的实际差异,同时系统梳理了当前大语言模型训练领域的行业常见实践,强调在遵循开源协议前提下基于现有架构进行技术迭代是 AI 社区的标准做法。

2024年3月1日周五
2023年10月22日周日
2023年10月18日周三
2023年8月25日周五
2023年7月18日周二