跳到正文
10月21日周三
10月20日周二
  1. OpenBMB62

    @techNmak 用面壁 MiniCPM-V 4.7 35B-A3B 实验构建了一个 Neo-Brutalist 风格的作品集 UI,OpenBMB 转发致谢并期待其后续作品。该模型总参数 35B、每次仅激活 3B,在 iPad Pro M4(16GB)上达 17+ tokens/s、iPhone 17 Pro Max 上达 13+ tokens/s,优化移动端设置下内存占用约 3GB;另有面向 OCR、图表、数学和通用理解的 1B 紧凑版本,两个版本均支持 256K 上下文窗口,权重、推理代码和微调代码开源,GitHub 与 Hugging Face 可获取。

    引用Tech with Mak@techNmak

    Spent some time experimenting with MiniCPM-V4.7 35B-A3B and built this Neo-Brutalist portfolio UI, featuring bold colors, chunky layouts, and a slightly unconventional visual style. What makes this experiment interesting is the model behind it. OpenBMB’s MiniCPM-V 4.7 is pushing multimodal AI toward more practical deployment on everyday hardware. With 35B total parameters but only 3B activated at a time, MiniCPM-V 4.7 35B-A3B delivers 17+ tokens/s on iPad Pro M4 (16GB) and 13+ tokens/s on iPhone 17 Pro Max, using just ~3GB of memory in its optimized mobile setup. 🤯 There’s also a compact 1B variant designed for tasks like OCR, chart, math, and general understanding. Both variants support a 256K context window, and the model weights, inference code, and fine-tuning code are open source. For me, the interesting part of multimodal AI is its potential to work with visual information beyond text, and to make those capabilities more accessible through efficient, flexible deployment. Explore MiniCPM-V 4.7 from @OpenBMB: GitHub:http://github.com/OpenBMB/MiniCPM-V Hugging Face:http://huggingface.co/collections/openbmb/minicpm-v-47

  2. OpenBMB58

    面壁智能 OpenBMB 转发 @aiwithsilly 的演示,用 MiniCPM-V 4.7 35B-A3B 在本机跑自动化报告生成,输入结构化数据与图表,输出含记分卡、分部拆解、利润率驱动与多空观点的长篇 markdown 报告,无需 API 和云端。演示称模型一次读取图表和密集表格并关联数据推导结论,得益于 35B 总参数仅约 3B 激活的 MoE 架构,GitHub 和 Hugging Face 已提供下载。

    引用Sally Stockholm@aiwithsally

    I built an automated report generator that runs entirely on my own machine. Input: structured data + charts. Output: a full long-form report — earnings interpretation, weekly summaries, whatever you need. No API. No cloud. No monthly bill. -> Here's MiniCPM-V 4.7 35B-A3B doing exactly that 👇 It read the charts AND the dense tables in one pass, then streamed out analyst-grade markdown: scorecard, segment breakdown, margin drivers, cash flow, even a bull/bear case. The part that got me: it didn't just OCR numbers. It connected them — input costs → margin pressure → guidance risk. That's the jump from "text extraction" to "actual analysis." Why this works locally: → 35B total params, only ~3B active (MoE) → Efficient visual encoding keeps multi-chart inputs cheap → Structured markdown output — goes straight into your doc pipeline Try it GitHub: http://github.com/OpenBMB/MiniCPM-V Hugging Face: https://huggingface.co/collections/openbmb/minicpm-v-47

  3. 公众号:面壁智能68

    面壁智能解析前瞻专家调度 LES 如何让 35B MoE 在手机端侧实时无损运行

    面壁智能 MiniCPM-V 团队介绍支撑 MiniCPM-V 4.7 端侧运行的前瞻专家调度(LES)技术,称首次实现 35B-A3B 规模 MoE 在端侧实时无损运行,iPhone 18 Pro Max 实测解码超 20 token/s。

    推荐理由:原文拆解了 LES 在调度、存储、计算三层的具体设计,并给出消融数据,方法可迁移到其他 MoE 模型的端侧部署。

10月19日周一
10月18日周日
  1. IT之家·人工智能46

    世界银行敦促发展中国家开发小型 AI 模型

    世界银行正敦促发展中国家开发可在手机等设备端侧运行的小型 AI 模型,以帮助网络条件较差的地区发挥 AI 潜力。首席知识官帕斯卡尔·多诺霍表示,AI 可加速新兴经济体发展,但须按当地需求调整,并以印度农民用手机运行小型 AI 分析土壤的 AgriConnect 计划为例。世界银行将与各国政府和私营部门合作推动这类产品问世。

  2. NVIDIA Blog64

    NVIDIA RTX Spark 笔记本开售,起售价 $2,399

    NVIDIA RTX Spark 笔记本现已开售,起售价 $2,399,来自 ASUS、Dell、HP、Lenovo、Microsoft 和 MSI。RTX Spark 超级芯片组合 Blackwell RTX GPU 与 Grace CPU,提供最高 1 petaflop AI 算力和 128GB 统一内存,面向本地 AI、内容创作和游戏。

    同一件事,精选收录的是《NVIDIA RTX Spark 笔记本今日开售,主打 128GB 统一内存与本地 AI》

  3. Aravind Srinivas40

    Perplexity Decider Flash 相当不错,运行速度极快,还能在你的 M4 Mac 16GB 上端侧运行。

    引用Wolfram Ravenwolf@WolframRvnwlf

    Perplexity Flash takes the crown! ⚡ In our tests, it matched Wald's accuracy at nearly twice the speed on a 16 GB Mac mini. Synthetic agent decisions, real email threads, prompt injections: see why Flash is our new pick for email-completion checks. 👇 https://x.com/i/article/2111461650440110080

10月17日周六
  1. 公众号:数字生命卡兹克67

    卡兹克实测37999元RTX Spark轻薄本:一周实现本地Token自由

    数字生命卡兹克分享华硕ProArt创16(RTX Spark N1X芯片、128G统一内存、37999元)的一周深度使用体验,该机全球开售时128G版本在京东几分钟内被抢空。

    推荐理由:作者用一周实测讲清了如何在128G统一内存的RTX Spark笔记本上部署本地模型,并给出可复用的WorkBuddy专家整合流程。

  2. Unsloth AI62

    Unsloth 宣布配合 NVIDIA RTX Spark,可在笔记本上本地运行并训练 120B+ 参数模型,训练扩散、决策和多模态模型比此前快约 2.7 倍,来自针对 ARM CUDA 优化的内核和二进制文件,统一内存最高 128GB。

    引用NVIDIA RTX Spark@NVIDIARTXSpark

    NVIDIA RTX Spark is here. Build AI locally, bring your creative ideas to life, and take your favorite games along. A new beginning for @Windows PCs starts today.

  3. NVIDIA Technical Blog:Agentic AI / Generative AI69

    NVIDIA RTX Spark 发布,单机完成编码、测试与部署的 AI 开发工作流

    NVIDIA 发布面向 AI 开发的 RTX Spark 笔记本与小型台式机,基于 GB10 SoC 和最高 128GB 统一内存、1 petaflop FP4 算力,可在单机上运行本地编码智能体并完成编码、测试与部署。

    同一件事,精选收录的是《NVIDIA RTX Spark 笔记本今日开售,主打 128GB 统一内存与本地 AI》

10月16日周五
  1. The Verge:AI76

    Meta 发布 Muse Spark Open 模型,与 Apple 合作支持在 Mac Studio 上运行

    Meta 发布 Muse Spark Open AI 模型,称其为迄今最强的美国开放权重模型,权重今日放出。Meta 称该模型是同类中首个可在桌面端用两台 Apple M5 Ultra Mac Studio 配合最新 MLX 框架运行的模型。

    同一件事,精选收录的是《Meta 发布开源权重模型 Muse Spark Open,816B 参数、1M 上下文》

10月15日周四
  1. NVIDIA Blog71

    NVIDIA 发布开源 Nemotron 3.5 Super VL 及 Bolt 两款边缘模型

    NVIDIA 发布开源 120B 参数多模态模型 Nemotron 3.5 Super VL,面向高频智能体任务,官方称其准确率可比自家最大推理模型、参数量约为五分之一,吞吐比同类次优模型快至 5 倍;同时推出边缘模型 Bolt 74B-A9B 24GB(原生 2-bit 量化,可本地运行于 RTX/DGX Spark)和 Bolt E4B 4GB(10 月 23 日上线)。

    推荐理由:原文给出三款开放模型各自针对的部署层级和量化、训练数据规模,读者可据此判断哪一档适合自家智能体场景。

  2. Black Forest Labs:Blog77

    Black Forest Labs 发布开源文生图模型 FLUX 3 Image Klein(5.6B)

    Black Forest Labs 发布 5.6B 参数开源权重模型 FLUX 3 Image Klein,支持文生图、图像编辑和最多 10 张参考图的多参考生成,采用 FLUX Kommunity License。

    推荐理由:官方公布了参数规模、显存门槛、生成速度和评测对比,读者可以评估它在本地部署与微调场景中的适配性。

  3. OpenBMB60

    面壁智能 MiniCPM-V 4.7 已在 ModelScope 开源,是 35B-A3B 的 MoE 多模态模型,采用 Apache 2.0 协议。官方称其可在 iPhone 17 Pro Max 上以 13+ tokens/s 流畅运行端侧无损推理,Instruct 模式下整体得分高于 Qwen3.6 35B-A3B 且推理时间更短;支持 4x/16x 视觉 token 压缩,提供 35B-A3B 和 1B 两种规格及 FP8、GPTQ、AWQ、BNB、GGUF 变体,兼容 SGLang、vLLM、llama.cpp、Ollama、SWIFT 和 LLaMA-Factory,可运行于 iOS、Android 和 HarmonyOS,并支持 Rockchip、Houmo、Intel、AMD、Arm 的 day-0 适配。

    引用ModelScope@ModelScope2022

    MiniCPM-V 4.7 is now open source on ModelScope: a 35B-A3B MoE multimodal model built to run on-device without compromising performance. Apache 2.0. 🤖 https://modelscope.ai/collections/OpenBMB/MiniCPM-V-47 📱 First open-source MoE with smooth, lossless on-device inference, running at 13+ tokens/s on iPhone 17 Pro Max. 🔥 New Pareto frontier: in Instruct mode, it reaches a higher overall score in less inference time than Qwen3.6 35B-A3B. ⚡ Mixed 4x/16x visual token compression lets developers balance visual detail and inference cost per task. 🛠️ Two sizes (35B-A3B and 1B) with FP8, GPTQ, AWQ, BNB, and GGUF variants. Works with SGLang, vLLM, llama.cpp, Ollama, SWIFT, and LLaMA-Factory. 💻 Runs on iOS, Android, and HarmonyOS, with day-0 support for Rockchip, Houmo, Intel, AMD, and Arm.