Hugging Face 推出 Cosmos 3 Edge:边缘设备上的高效AI推理新方案

Hugging Face·18 小时前

Hugging Face 近日宣布推出 Cosmos 3 Edge,这是一个面向边缘计算环境的新一代AI推理框架。该框架针对在资源受限的终端设备(如手机、嵌入式设备或物联网节点)上部署和运行大语言模型(LLM)等AI模型进行了深度优化。Cosmos 3 Edge 重点提升了推理效率、降低了内存与计算开销,并支持模型压缩、量化等关键技术,使得原本需要云端强大算力的AI能力能够更便捷、更低延迟地运行在边缘侧。这一发布进一步扩展了 Hugging Face 的生态系统,为开发者提供了从云端训练到边缘部署的更完整工具链,有望推动AI在实时交互、隐私保护、离线应用等场景的落地。

Hugging Face边缘计算推理框架大语言模型AI部署

原文来源:https://huggingface.co/blog/nvidia/cosmos3edge

相关阅读

Hugging Face推出Grabette:开源机器人操作数据记录系统
NVIDIA NeMo Automodel 与 🤗 Diffusers 强强联合,规模化微调视频与图像模型
NVIDIA Nemotron 3 Embed 登顶 RTEB 基准榜首,推动智能检索新突破
模型迭代,优势依旧:OpenAI 新模型延续领先地位
Hugging Face 披露2026年7月安全事件

← 返回