端侧 AI 崛起:Mistral 发布 Ministral 3B 8B,“全球最好的边缘模型”
2024-10-20 09:04:31 AI 33观看
摘要 10 月 17 日消息,Mistral 公司最新推出了 Ministral 3B 和 Ministral 8B 两款 AI 模型,并不需要连接云服务器,重点提高笔记本电脑和智能手机等设备的本地化 AI 体验,官方声称是“世界上最好的边缘模型”。Mistral

10 月 17 日消息,Mistral 公司最新推出了 Ministral 3B 和 Ministral 8B 两款 AI 模型,并不需要连接云服务器,重点提高笔记本电脑和智能手机等设备的本地化 AI 体验,官方声称是“世界上最好的边缘模型”。rfG28资讯网——每日最新资讯28at.com

Mistral 公司表示越来越多的企业希望能够在个人设备上运行 AI 模型,一方面确保安全的数据处理,另一方面也提高响应速度。rfG28资讯网——每日最新资讯28at.com

上述两个模型可在没有互联网接入的情况下,执行翻译服务、本地分析和机器人等多项服务。rfG28资讯网——每日最新资讯28at.com

这两个 AI 模型的上下文窗口均为 128K,相当于一次可以处理 50 页文档。rfG28资讯网——每日最新资讯28at.com

Ministral 8B 的价格为每百万个 tokens 售价 0.1 美元,而 3B 版本则为 0.04 美元,适合小规模操作或初创开发者。Ministral 8B 采用了特殊的交错滑动窗口注意力机制,这种设计可以在推理时更快且节省内存。附上相关性能图表如下:rfG28资讯网——每日最新资讯28at.com

rfG28资讯网——每日最新资讯28at.com

rfG28资讯网——每日最新资讯28at.com

rfG28资讯网——每日最新资讯28at.com

rfG28资讯网——每日最新资讯28at.com

本文链接:http://www.28at.com/showinfo-45-9167-0.html端侧 AI 崛起:Mistral 发布 Ministral 3B 8B,“全球最好的边缘模型”

声明:本网页内容旨在传播知识,不代表本站观点,若有侵权等问题请及时与本网联系,我们将在第一时间删除处理。

显示全文

上一篇:摩托罗拉 Moto AI 开启便捷生活新篇章:点咖啡、叫网约车等一句话搞定

下一篇:AI 尽头是核电?继微软和谷歌之后,亚马逊大规模投资模块化核反应堆

最新热点