AI360
资讯
首页
专栏
快讯
应用中心
API 平台
#
苹果芯片
1 篇相关内容
相关话题
推理优化
边缘计算
大语言模型
开源工具
BaseRT:苹果芯片原生推理引擎,大模型性能提升超50%
研究人员推出专为苹果芯片设计的原生Metal推理运行时BaseRT,在Qwen3、Llama 3.2等模型上实现比现有方案最高1.56倍的解码吞吐量提升,为边缘设备AI推理提供新方案。
a
arXiv
·
19 天前
推理优化
苹果芯片
边缘计算
大语言模型
a