Hugging Face Hub 上线 Xet 存储并开启首批仓库迁移
Hugging Face 宣布将 Xet 存储技术引入 Hub,已完成首批模型和数据集仓库从 Git LFS 到 Xet 的生产迁移并开放等候名单。Xet 通过约 64KB 内容定义分块实现字节级去重,修改模型元数据或追加数据时仅传输变化部分,大幅降低大文件传输耗时。
推荐理由:原文详细复盘了从 Git LFS 迁移至块级去重存储时的网络放大与缓存瓶颈,展示了真实大流量下的底层工程调优方案。
公司与模型
Hugging Face 开源社区动态:热门模型与数据集、排行榜变化与开源生态的晴雨表。
32 条精选近 30 天 1 条共收录 51 条
Hugging Face 宣布将 Xet 存储技术引入 Hub,已完成首批模型和数据集仓库从 Git LFS 到 Xet 的生产迁移并开放等候名单。Xet 通过约 64KB 内容定义分块实现字节级去重,修改模型元数据或追加数据时仅传输变化部分,大幅降低大文件传输耗时。
推荐理由:原文详细复盘了从 Git LFS 迁移至块级去重存储时的网络放大与缓存瓶颈,展示了真实大流量下的底层工程调优方案。
Hugging Face 发布 Open R1 项目第三期进展,推出基于 DeepSeek-R1 蒸馏的 OlympicCoder-7B 与 32B 代码模型,并开源 IOI 评测基准及近 10 万条 CodeForces-CoTs 数据集。
推荐理由:团队不仅开源了针对竞赛编程的代码推理模型与评测集,还总结了长思维链微调中样本打包等关键工程避坑经验。
Hugging Face 联合 Yaak 推出开源自动驾驶多模态数据集 L2D(Learning to Drive),原生支持 LeRobot 具身智能训练管线。
推荐理由:该数据集整合了多视角视觉与底层控制动作,为端到端自动驾驶与具身智能模型的训练提供了可扩展的数据参考。
Hugging Face 发布了一篇端侧大模型部署教程,详细介绍如何通过 React Native 与 llama.rn 库在 iOS 和 Android 设备上本地运行开源 LLM。
推荐理由:提供了一套基于 React Native 和 llama.rn 在手机端离线运行轻量大模型的完整跨平台实现方案与配套代码。
Cohere For AI 正式开源 Aya Vision 8B 与 32B 多语言视觉语言模型,覆盖 23 种语言并在 AyaVisionBench 等评测中展现出超越同尺寸甚至更大模型的表现。
推荐理由:文章公开了合成标注扩充多语言数据与多模态模型融合的技术配方,为中小参数视觉语言模型在跨语言场景下的优化提供了可迁移方案。
Hugging Face 推出 FastRTC,这是一个专为 Python 设计的实时音视频通信库,旨在降低实时 AI 应用的开发门槛。该库内置自动语音活动检测与轮流发言控制,支持 WebRTC 与 WebSocket,可自动生成 Gradio 交互界面或单行挂载至生产级 FastAPI 服务。
推荐理由:该库简化了 Python 实时音视频应用的开发流程,开发者可以直接复用其内置的语音检测与传输能力构建交互应用。
Hugging Face 在 Diffusers 库中推出实验性 Remote VAE 功能,允许开发者将扩散模型的高分辨率 VAE 解码计算委托给远程 Inference Endpoints 处理。
推荐理由:通过将高显存消耗的解码环节移至远程端点,开发者可以在消费级显卡上低显存运行大分辨率图像与视频生成模型。
Hugging Face 宣布在 Open LLM Leaderboard 中引入 Math-Verify 验证工具,彻底重新评测了此前提交的全部 3,751 款大语言模型,解决了旧评测流程因格式匹配脆弱和 SymPy 符号解析缺陷导致的误判低估问题。
推荐理由:原文展示了因答案提取和符号解析缺陷导致的评分失真,为大模型数学评测实践和榜单排名修正提供了具体参考。
Hugging Face 团队开源了一套面向小规模视频生成模型微调的数据集构建管线与脚本工具,涵盖视频获取、质量过滤与多模态标注三个阶段。管线通过 yt-dlp 分割镜头,利用 LAION 水印检测、美学评分模型及 OpenCV 运动评分完成过滤,并接入 Florence-2 或 Qwen2VL 生成文本描述。
推荐理由:文章拆解了视频生成数据集从镜头切分、水印与美学过滤到打标的三阶段管线,为微调视频模型的开发者提供了具体的参数取舍经验。
Hugging Face 发布 Open R1 项目第二期更新,正式推出包含 22 万道题目验证推理轨迹的数学推理数据集 OpenR1-Math-220k。
推荐理由:文章公开了用本地集群复现高质量数学推理数据的完整过滤流水线与吞吐方案,为开发者构建领域蒸馏数据提供了可复现的工程参考。
Hugging Face 宣布将 Physical Intelligence 开发的机器人基础模型 π0 与 π0-FAST 移植到 LeRobot 开源生态中,并提供了 PyTorch 版本实现。
推荐理由:文章详解了 VLA 模型的块稀疏注意力优化与动作分词方案,为具身智能开发者在 PyTorch 生态部署机器人策略提供了工程参考。
Hugging Face 开源了复现 OpenAI Deep Research 的智能体方案 Open Deep Research,在 GAIA 验证集上取得 55.15% 的得分。
推荐理由:用代码表达智能体动作相比传统 JSON 能节省调用步数,为本地搭建深度研究智能体提供了可迁移的工程参考。