国产RISC-V狂奔: 端侧能跑大模型, AI计算成重头戏

玩数据还有点懒2024-04-09 16:33:54  131

2023年,毫无疑问是算力需求大爆发的转折之年,如今随着国内两批超20个大模型获得审批、种类多样的大模型相关应用显现,企业对私有化部署的需求也水涨船高。

面向这一行业趋势,2023年世界互联网大会乌镇峰会上,国内云端RISC-V大芯片创企希姆计算就联合国鑫发布了基于开源指令架构RISC-V打造的大模型系列一体机。其中包括2U4卡、4U8卡机,支持部署6B、7B、13B参数规模的大模型,这也是专门针对私有化部署提供的系统级解决方案。

RISC-V迈向AI计算和高性能领域

目前中国有数百家公司在关注或以RISC-V指令集进行开发。RISC-V International的25个高级会员中有阿里、华为、腾讯等12家中国企业,去年达摩院领导了13个技术小组的标准制定。

张建锋在演讲中分享了一些数据:RISC-V正呈高速发展,在可穿戴MCU、计算笔记本、通信5G、消费级AI加速、工业智能电网、自动驾驶AI驾驶等主流应用中的占比接近或达到30%;未来几年在主流市场年复合增长率预计超过40%。

倪光南院士预测,未来世界三大主流CPU生态将是:1)服务器/桌面的Wintel联盟;2)移动终端的安卓Arm生态;3)智能物联IoT的RV++(1套RISC-V指令集架构+1套基础软件+N种定制化芯片)。其中,AIoT生态会出现数万种定制化需求,而RISC-V最有优势。

他认为RISC-V自定义扩展指令是实现特定领域架构(DSA)的有效途径,随着RISC-V扩展指令集功能的充分发挥,芯片定制化或”芯片定义”将会被人们所普遍接受。

端侧AI迎来黄金增长期

端侧AI是大模型应用落地的重要场景之一,但面临着软硬件难适配、开发环境不完备等诸多挑战。通过与联发科的深度合作,双方共同攻克了一系列底层适配及上层开发的技术难题,成功将大模型“装进”手机芯片中,探索出了端侧AI的Model-on-Chip部署新模式。

这一模式的成功落地,不仅提升了手机在离线情况下的AI对话能力,使得多轮对话成为可能,更为未来端侧AI的发展奠定了坚实基础。随着云端大模型规模的指数级增长,端侧计算将逐渐承担起支撑大规模用户使用的重任。云端协同将成为未来的重要趋势,由云侧计算建立天花板,端侧计算将为用户提供更加流畅、高效的服务体验。

除了联发科外,其他芯片厂商也在积极推动大模型在手机终端的落地。例如,高通宣布推出了支持100亿参数级别大语言模型的第三代骁龙8s移动平台,并得到了小米Civi 4 Pro等手机的青睐。这一趋势表明,越来越多的手机厂商和芯片厂商开始认识到端侧AI的重要性,并纷纷加大投入力度,以期在激烈的市场竞争中抢占先机。

当然,端侧AI的发展也离不开政策的支持和市场的推动。随着国家对新一代信息技术产业的重视和扶持力度不断加大,以及消费者对智能手机功能的日益多样化需求,端侧AI的市场前景将更加广阔。根据咨询机构IDC的预测,2024年中国智能手机市场出货量将达到2.77亿台,其中AI手机出货量将大幅增长。可以预见,未来端侧AI将在智能手机领域发挥越来越重要的作用。

1、本号不对发布的任何信息的可用性、准确性、时效性、有效性或完整性作出声明或保证,并在此声明不承担信息可能产生的任何责任、任何后果。

2、 本号非商业、非营利性,转载的内容并不代表赞同其观点和对其真实性负责,也无意构成任何其他引导。本号不对转载或发布的任何信息存在的不准确或错误,负任何直接或间接责任。

3、本号部分资料、素材、文字、图片等来源于互联网,所有转载都已经注明来源出处。如果您发现有侵犯您的知识产权以及个人合法权益的作品,请与我们取得联系,我们会及时修改或删除。

转载此文是出于传递更多信息目的。若来源标注错误或侵犯了您的合法权益,请与本站联系,我们将及时更正、删除、谢谢。
https://www.414w.com/read/168734.html
0
随机主题
5月23日菜百首饰黄金价格710元/克出道似整容! 天庭饱满地阁方圆的金晨, 原来12年前和现在判若两人峥嵘二十载, 一图细数文博会的“高光时刻”美国14岁少年挑战最辣玉米片, 一命归西, 辣死人是真的存在余承东采访提及雷军;35款设备可升级鸿蒙4.2;魅族加入快充协会因“孩子随父姓”被群嘲, papi酱的回应很霸气, 网友看完拍手叫好科比没有詹姆斯一样强悍的身体天赋, 否则生涯绝对不仅仅是5冠已经找不到像样的工作了虎牢关时期, 谁能抵挡吕布100招? 仅2人可以, 关羽张飞赵云都不行小鹏汽车或迎全新营销副总裁! 传一加手机营销负责人将加入为陕西省樱桃生长提供专业气象支持 陕西省首家樱桃气象科技小院挂牌成立「王阳明」——文成贤圣王阳明,千载光辉照后人#致每一个热爱生活的你创新新材: 5月22日召开业绩说明会, 投资者参与冈田武史调侃: 浙江队主场氛围非常好, 我执教时为何没这待遇?苏里南商业环境的特点和机遇618不知道怎么入手数码产品? 这四款产品不容错过!狼派磁白轴 上手体验丛明晨凌晨4点发博庆祝夺冠: 兄弟们牛逼 纯纯躺赢米莱重申“将阿根廷美元化”承诺: 阿根廷央行将会停印比索, 让美元取而代之印度美女远嫁中国, 弟弟前来中国祝贺, 直言: 中国人真是尖酸刻薄三个女学生相约抗日, 两人半途而废, 一人成为开国大将夫人
最新回复(0)