集微网 · 2023年07月25日 · 江苏

高通携手Meta利用Llama 2赋能终端侧AI应用

2023年7月18日,圣迭戈——高通技术公司和Meta正在合作优化Meta Llama 2大语言模型直接在终端侧的执行,无需仅依赖云服务。能够在智能手机、PC、VR/AR头显和汽车等终端上运行Llama 2一类的生成式AI模型,将支持开发者节省云成本,并为用户提供更加私密、可靠和个性化的体验。

因此,高通技术公司计划支持基于Llama 2的终端侧AI部署,以赋能打造激动人心的全新AI应用。这将支持客户、合作伙伴和开发者构建智能虚拟助手、生产力应用、内容创作工具和娱乐等用例。这些由骁龙®赋能的全新终端侧AI体验,可在没有网络连接的区域、甚至是飞行模式下工作。

高通技术公司高级副总裁兼技术、规划和边缘解决方案业务总经理马德嘉表示:“我们十分赞赏Meta对于AI技术采取的开放且负责的策略。高通技术公司致力于推动创新,通过将生成式AI引入终端侧,将为各种规模的开发者降低开发门槛。为了将生成式AI有效地规模化扩展至主流市场,AI需要同时在云端和边缘终端上运行,比如智能手机、笔记本电脑、汽车和物联网终端。”

Meta和高通技术公司长期合作,共同推动技术创新,打造下一代顶级终端体验。双方目前在支持Llama生态系统方面的合作,覆盖了研究和产品工程技术工作。凭借终端侧AI的领导力,高通技术公司在支持Llama生态系统方面具备独特优势。公司拥有领先的边缘侧布局,其行业领先的AI硬件和软件解决方案赋能了数十亿智能手机、汽车、XR头显与眼镜、PC和物联网等终端,为生成式AI的规模化扩展提供了广阔机遇。

高通技术公司计划从2024年起,在搭载骁龙平台的终端上支持基于Llama 2的AI部署。现在开发者可以开始使用高通AI软件栈面向终端侧AI进行应用优化。高通AI软件栈是一套支持在骁龙平台上更高效处理AI的专用工具,让轻薄的小型终端也能支持终端侧AI。

推荐阅读
关注数
24848
文章数
1984
专业权威的ICT产业服务平台。芯无止境,积微成著。
目录
极术微信服务号
关注极术微信号
实时接收点赞提醒和评论通知
安谋科技学堂公众号
关注安谋科技学堂
实时获取安谋科技及 Arm 教学资源
安谋科技招聘公众号
关注安谋科技招聘
实时获取安谋科技中国职位信息