2023年末,各大智能手机品牌接连发布一系列新品。人工智能——即常说的AI,正以更高调的方式进入消费者视野,新品的宣传重点,也从影像、性能等方面,更倾向于全面进化的AI能力。
事实上,早在2017年起,智能手机已有初步的AI应用,如智能相机滤镜、场景识别、语音助手等,但在ChatGPT横空出世的刺激之下,仅仅1年时间,端侧生成式AI就已在智能手机落地,而联发科等头部芯片设计厂商,发挥了关键作用。
可以预测,生成式AI将使智能手机使用方式发生突破性转变,逐渐渗透并改变用户操作手机的交互习惯,推动手机实现第二次进化。不论对于消费者还是厂商,未来AI能力将逐渐成为智能手机的又一个重心,具有广阔的市场和应用前景。
联发科前瞻布局,成为AI Smartphone先锋
人工智能的发展,与硬件技术紧密相关,传统AI大模型推理通常部署在云端,不受资源限制,但由于人们对于隐私的担忧和便捷性的考虑,近年来难以普及。AI大模型要想在手机端实现运行,不仅需要强大性能,还对功耗、兼容性、内存效率有着苛刻要求,对芯片厂商提出了严峻挑战。
联发科作为SoC行业的先行者,多年前就已前瞻性布局终端AI技术,并凭借NeuroPilot AI开发平台构建了丰富的AI生态。联发科在2023年11月推出的天玑9300旗舰芯片中集成了第七代AI处理器APU 790 。新一代APU性能强悍,最高可支持终端运行330亿参数AI大语言模型;一系列联发科领先技术的加持,让众多生成式AI应用在智能手机端运行成为可能。随后推出的天玑8300 SoC芯片,同样集成AI处理器APU 780,至高支持100亿参数大模型,将生成式AI功能赋予更多主流智能手机。
根据AI-Benchmark网站排行榜,搭载天玑9300的三款手机最高跑分达到3423分,高居2024年1月智能手机AI性能榜首。
以近期发布的vivo X100 / X100 Pro、iQOO Neo9 Pro、OPPO Find X7等手机为例,得益于天玑9300旗舰芯和内置的AI大模型,这些智能手机已经可以实现AIGC图片智能消除、AI通话摘要、AI文生图、AI写真、AI降噪、AI超级分辨率/运动补偿,以及与ChatGPT媲美的智能文字创作、对话学习问答等功能。有了AI功能的加持,用户通话结束后手机可自动生成通话摘要,总结关键内容,一键安排日程、备忘录,同时避免内容上传至云端带来的安全隐患。在图片/文字搜索、日程安排、照片后期等众多方面,AI都可以大大提高智能手机的操作效率,为用户解决烦恼。端侧AI可以做到千人千面,为用户量身定制,有了端侧大模型,更加智能的AI Smartphone可以颠覆原有手机用户的使用体验。
2023年可以看作AI智能手机真正发展的元年。根据研究机构Canalys预测,AI手机的市场份额在2024年将达到5%,到2027年,这一比例将上升至45%。联发科技陆忠立博士表示,生成式AI技术也会对已有的AI体验进行革新,并且站在用户体验层面,现阶段很多日常使用手机的高频场景都将因此受益。
AI领域深耕,天玑芯片已适配多款主流大模型
早在2019年,联发科便围绕Transformer模型进行APU层面的架构、算法适配做预研,尤其是在图像和语音方面。得益于联发科芯片技术的快速进步、算法优化以及AI开源生态的发展,联发科正在与多个AI行业伙伴和终端厂商,共同推进端侧AI大语言模型和生成式AI应用落地与普及,实现移动芯片支持Android、Meta Llama 2、百度文心一言大模型、百川智能百川大模型等前沿主流AI大模型。
在2023年,联发科就已联合百度发起飞桨和文心大模型硬件生态共创计划,以AI大模型赋能终端设备。双方的合作将支持基于联发科芯片的智能手机、汽车、智能家居、物联网等终端设备上运行文心大模型,赋能终端设备提供更安全、可靠和差异化的使用体验。
联发科还利用Meta新一代开源大语言模型(LLM)Llama 2以及联发科先进的AI处理器(APU)和完整的AI开发平台(NeuroPilot),建立完整的终端侧AI计算生态。联发科基于Llama 2模型成功实现直接在终端设备上运行生成式AI应用。
当前联发科最新移动SoC天玑9300、天玑8300芯片所搭载的新一代APU处理单元,专为生成式AI设计,整数运算和浮点运算性能大幅提升,深度适配Transformer模型进行算子加速。此外,联发科开发了混合精度INT4量化技术,结合联发科特有的内存硬件压缩技术NeuroPilot Compression,可以更高效地利用内存带宽,大幅减少AI大模型对终端内存的占用,使天玑9300支持终端运行10亿、70亿、130亿、最高可达330亿参数的AI大语言模型。
拥抱AI时代,联发科NeuroPilot平台提供全面赋能
人工智能设备未来前景广阔,不仅限于智能手机。联发科目前已打造NeuroPilot AI开发平台来推进AI手机生态系统,更能覆盖智能家居、可穿戴、物联网及联网汽车领域,开发人员可轻易利用联发科业硬件平台的多样运算能力,高效开发人工智能应用。凭借联发科SoC出色的运算性能、实时流畅的体验,设备制造商可在短时间内打造全新的AI产品序列。
为了加快终端人工智能开发,NeuroPilot SDK支持所有联发科具备人工智能的硬件,它允许开发人员为现有和未来的联发科技硬件平台以及包括智能手机,汽车,智能家居,物联网等在内的所有产品线做一次编写,随处应用。这不仅简化创建过程,也节省成本和上市时间,其所支持的软件生态系统包括安卓和Linux操作系统,并提供完整的编译程序,分析器和应用程序库。
天玑9300平台非常成功,2024年第四季度会推出天玑9400,表现将更进一步,创造另一个高峰。
联发科技陆忠立博士表示,以端侧AI的复杂度来讲,每年增加的幅度可能都是两倍、三倍,甚至是十倍,这个差距没有办法完全靠摩尔定律来弥补,所以就需要在硬件上面有所创新,和在算法以及软件层面优化。
AI手机确实是非常重要的趋势与潮流,生成式AI不仅推动手机的升级需求,也将带动整体旗舰级和高端手机市场的增长。据悉,联发科将于今年第四季度推出天玑9400,相信凭借联发科敢于创新的架构设计、对端侧生成式AI路线坚定投入,联发科未来将继续保持AI Smartphone领先地位。
展望未来,人工智能的应用势必将更加深入。随着消费者对AI应用的逐步接受和掌握,预计端侧生成式AI将成为智能手机乃至汽车不可或缺的重要功能,持续改善用户体验。在AI大模型开发者、芯片公司以及设备厂商的努力下,人工智能也将全面进入用户生活。