跳到正文
2022年10月14日周五
2022年10月13日周四
2022年10月12日周三
2022年10月7日周五
  1. Hugging Face 社区博客51

    Hugging Face Hub 支持为模型和数据集生成 DOI

    Hugging Face 宣布用户可直接在 Hub 上为模型或数据集生成 DOI(数字对象标识符)。该功能与 DataCite 合作实现,在仓库设置中即可申请,他人可通过模型或数据集页面的 Cite 按钮引用;DOI 绑定元数据且提供永久链接,版本更新后 DOI 可同步更新,带 DOI 的对象将长期保留,删除需向支持团队提交请求。

2022年10月5日周三
2022年10月3日周一
2022年9月28日周三
2022年9月27日周二
  1. Hugging Face 社区博客71

    Hugging Face 讲解 Accelerate 如何借助 PyTorch 加载和运行超大模型

    Hugging Face 发布博客讲解 Accelerate 如何加载和运行超出单机内存的超大模型。核心做法是用 PyTorch meta device 创建空模型、用 infer_auto_device_map 自动计算 GPU、CPU 与磁盘的设备分配,并按分片加载权重,通过 hooks 在每次前向传播前后搬运权重。

    推荐理由:原文逐层拆解 Accelerate 借助 PyTorch meta device 与分片加载运行超大模型的机制,并给出可在免费 Colab 复现的做法。

2022年9月26日周一
  1. Hugging Face 社区博客69

    Hugging Face 联合 Intel Labs 与 UKP Lab 发布少样本文本分类框架 SetFit

    Hugging Face 与 Intel Labs、UKP Lab 发布少样本学习框架 SetFit,无需提示词即可微调 Sentence Transformer 做文本分类。

    推荐理由:原文给出 SetFit 在少样本文本分类上的具体对比数字和训练成本,读者可以据此评估小样本场景下是否用它替代大模型微调。

2022年9月16日周五
2022年9月12日周一
  1. Hugging Face 社区博客75

    Hugging Face Diffusers 0.3 发布:图生图、Textual Inversion 与低显存优化

    Hugging Face 发布 diffusers 0.3,为扩散模型库新增图生图、Textual Inversion、实验性 inpainting、ONNX 导出和 macOS M1/M2 推理支持等功能。优化后 Stable Diffusion 显存占用降至 3.2GB,代价是约 10% 的速度损失;社区还贡献了视频生成、可解释性工具和日语、动漫方向的微调模型。

    推荐理由:原文梳理了 diffusers 0.3 的图生图、Textual Inversion、低显存优化等新功能,开源图像工作流的使用者可以对照更新自己的用法。

2022年9月8日周四
2022年9月7日周三
2022年8月31日周三
2022年8月24日周三
2022年8月22日周一
2022年8月19日周五
2022年8月17日周三
  1. Hugging Face 社区博客79

    Hugging Face 详解 LLM.int8() 8 位量化在 transformers 中的集成与使用

    Hugging Face 与 bitsandbytes 合作,将 LLM.int8() 8 位矩阵乘法完整集成到 transformers 和 accelerate 库,使 BLOOM-176B 等大模型推理显存占用减半且无性能下降。

    推荐理由:文章由集成团队亲自讲解 LLM.int8() 的原理、异常值处理和 transformers 集成细节,并附基准数据与代码示例。

2022年8月12日周五
  1. Hugging Face 社区博客46

    Hugging Face 的 TensorFlow 哲学

    Hugging Face 阐述了其 transformers 库在 TensorFlow 上的设计理念:所有 TensorFlow 模型都是 Keras Model 对象,所有层都是 Keras Layer 对象,用户可直接调用 fit()、compile() 和 predict()。库通过 TFAutoModel 等类一行代码加载预训练模型,并配合 AutoTokenizer 完成匹配的预处理。

2022年8月11日周四
2022年8月5日周五
2022年8月3日周三
  1. Hugging Face 社区博客40

    Hugging Face 推出 Private Hub:机器学习协作与部署的新方式

    Hugging Face 推出 Private Hub(PH),为机器学习全生命周期提供统一工具,让团队以安全合规的方式协作开发与部署模型。PH 以拥有 60K+ 模型、6K 数据集和 6K 演示应用的 Hugging Face Hub 为核心,支持基于 Git 的模型、数据集与 Spaces 版本管理,以及组织账号和权限控制。

2022年8月2日周二
2022年7月28日周四
2022年7月27日周三
  1. Hugging Face 社区博客61

    Hugging Face 用 TensorFlow 与 XLA 加速文本生成,部分场景提速超 100 倍

    Hugging Face 宣布 🤗 transformers 的 TensorFlow 文本生成现可通过 XLA 编译加速,某些场景提速超过 100 倍,在多数基准中比 PyTorch 更快,最高快达 9 倍。

    推荐理由:Hugging Face 官方讲解如何用 jit_compile=True 加速 TensorFlow 文本生成,给出编译缓存机制、padding 技巧和实测数据,方法可直接复用。

2022年7月25日周一
2022年7月14日周四
2022年7月13日周三
2022年7月12日周二
  1. Hugging Face 社区博客78

    Hugging Face 发布 1760 亿参数开源多语言大模型 BLOOM

    Hugging Face 与 BigScience 发布 1760 亿参数的开源多语言大模型 BLOOM,支持 46 种自然语言和 13 种编程语言。模型由 70 多个国家、250 多个机构的 1000 多名研究者历时一年协作完成,在法国 Jean Zay 超算上训练 117 天,算力来自 CNRS 和 GENCI 价值约 300 万欧元的资助。

    推荐理由:原文来自 BLOOM 团队官方发布,给出了参数规模、语言覆盖、训练成本和开放使用方式,读者可以了解这个开放大模型的实际边界。

2022年7月7日周四
2022年6月30日周四
2022年6月29日周三
  1. Hugging Face 社区博客43

    如何用 Sentence Transformers 开启你的第一个机器学习项目

    Hugging Face 发布入门指南,以 Sentence Transformers(ST)为例讲解如何从零启动第一个机器学习项目。ST 可将句子、段落和图像转为嵌入向量,并通过 util.cos_sim 计算余弦相似度,支持语义搜索、聚类和模型蒸馏等任务。该库在 GitHub 已获近 8,000 stars,超过 3,000 个项目和包依赖它。

2022年6月28日周二
2022年6月23日周四
2022年6月22日周三
2022年6月15日周三
2022年6月7日周二