跳到正文

内容形态

教程实践 最新动态

拿来就能用的实操内容:提示词技巧、工作流搭建、工具用法与踩坑经验。

89 条精选近 30 天 5 条共收录 270 条

更新

精选归档 · 第 5 页

10月13日周四第 81–89 条
  1. Hugging Face Blog63

    Hugging Face Diffusers 支持 JAX/Flax 实现 Stable Diffusion TPU 并行推理

    Hugging Face 在 Diffusers 0.5.1 中加入对 JAX/Flax 的支持,允许用户在 Google TPU 上快速运行 Stable Diffusion 推理。利用 TPU 包含 8 个加速核心的特性,结合 jax.pmap 和 JIT 编译,系统可将参数与提示词分片后并行生成 8 张图片;在 TPU v2-8 上单次推理测试耗时约 7 秒。

    推荐理由:原文给出了基于 JAX/Flax 在 TPU 上并行运行 Stable Diffusion 的完整步骤与测速数据,便于开发者迁移到分布式推理环境。

9月27日周二
  1. Hugging Face Blog74

    Hugging Face Accelerate 如何借助 PyTorch 运行超大模型

    Hugging Face 详细介绍了 Accelerate 库如何借助 PyTorch 特性在消费级硬件甚至免费 Colab 实例上加载并推理超大模型。该方案结合 PyTorch meta 设备先构建空模型骨架,通过自动设备映射(device_map)按需将层级分配至 GPU、CPU 内存或磁盘,并借助分块权重(sharded checkpoints)渐进式加载参数。

    推荐理由:文章详细拆解了通过 meta 设备、设备映射与分块加载实现超大模型显存卸载与推理的底层机制。

8月22日周一
  1. Hugging Face Blog95

    基于 Diffusers 库运行与定制 Stable Diffusion 完整指南

    Hugging Face 官方发布了使用 Diffusers 库运行 Stable Diffusion 的实践指南,详解了潜空间扩散模型的工作原理与底层架构。文章阐明了 VAE、U-Net 和 CLIP 文本编码器的协同机制,并提供了从常规开箱即用调用到手动编写自定义去噪循环、替换调度器的完整代码实现。

    推荐理由:文章不仅提供了开箱即用的推理代码,还完整拆解了潜扩散模型各模块,方便读者按需替换调度器或定制生成管线。

7月14日周四
  1. Hugging Face Blog70

    Hugging Face 详解 BLOOM 176B 模型背后的训练与工程技术

    Hugging Face 详细公开了 176B 参数多语言大模型 BLOOM 背后的完整软硬件工程方案与训练实践。项目在 Jean Zay 超算上使用 384 块 80GB A100 GPU 耗时 3.5 个月完成 350B token 的训练,软件端结合 Megatron-LM 与 DeepSpeed 实现了由张量并行、流水线并行及 ZeRO-1 组成的三维并行。

    推荐理由:文章详细拆解了千亿参数模型训练中的硬件网络配置与多维并行策略,为超大规模集群工程落地提供了真实参考。

6月7日周二
  1. Hugging Face Blog71

    带注释的扩散模型:DDPM 理论与 PyTorch 逐步实现

    Hugging Face 官方发布去噪扩散概率模型(DDPM)的带注释实战教程,系统讲解离散时间扩散模型的数学原理并提供完整的 PyTorch 逐步实现。教程基于 U-Net、正弦位置嵌入和注意力机制构建噪声预测网络,详细演示了前向加噪过程、均值重参数化损失计算、Fashion-MNIST 训练与反向去噪采样流程。

    推荐理由:原文完整拆解了 DDPM 的数学原理与 PyTorch 核心实现,读者可以据此掌握扩散模型的加噪去噪机制与训练全流程。

5月4日周三
  1. Hugging Face Blog61

    Hugging Face 深度强化学习入门教程与基础概念解析

    Hugging Face 发布免费深度强化学习课程第一单元,系统介绍强化学习的核心概念、数学框架与实践路径。内容涵盖智能体与环境交互机制、奖励假设、折扣率、状态与动作空间,并对比了基于策略与基于价值两大求解路线及神经网络的作用。教程提供配套实践指南,支持读者训练月球着陆智能体并一键上传至 Hugging Face Hub。

    推荐理由:原文系统梳理了强化学习的核心框架与策略价值方法差异,读者可以通过配套代码实践将训练好的智能体发布至 Hub。

3月12日周五
  1. Hugging Face Blog63

    使用 Hugging Face Transformers 微调 Wav2Vec2 实现英文语音识别

    Hugging Face 官方发布了使用 Transformers 库微调预训练 Wav2Vec2 模型实现英文自动语音识别的端到端教程。该方案基于 Connectionist Temporal Classification(CTC)算法且不依赖外部语言模型,在仅 5 小时训练数据的 Timit 数据集上微调取得了 22.1% 的测试词错误率(WER)。

    推荐理由:教程展示了无需外接语言模型的端到端语音识别微调全流程,读者可以直接迁移到自定义英文音频数据集。

3月1日周日
  1. Hugging Face Blog66

    Hugging Face 详解 Transformers 文本生成解码方法

    Hugging Face 官方发布博客,系统梳理了使用 Transformers 库进行自回归文本生成时的主要解码策略及代码实现。文章对比了贪婪搜索、束搜索(Beam search)以及温度采样、Top-K 和核采样(Top-p)的生成表现,分析了重复生成等常见缺陷的成因与缓解方案。开发者可通过调整 generate 接口的参数快速组合不同解码方式,以平衡生成文本的多样性与连贯性。

    推荐理由:教程梳理了自回归生成的多种解码策略及其优缺点,读者可以掌握在 transformers 库中配置参数调优文本质量的方法。

2月14日周五
  1. Hugging Face Blog62

    如何使用 Transformers 与 Tokenizers 从零训练新的语言模型

    Hugging Face 官方发布教程,演示如何使用 transformers 与 tokenizers 库从零预训练一个 84M 参数量的类 RoBERTa 语言模型 EsperBERTo 并微调。

    推荐理由:文章完整演示了从词表构建、预训练到下游微调的端到端流程,为小语种或专用领域训练语言模型提供了清晰实践范式。