把大模型“装”进小盒子, 云天励飞在想什么?

未来科技力2024-04-01 21:55:09  63

3月28日,云天励飞举办AI大模型产品发布会,发布“深目”AI模盒,同时宣布自研大模型“云天天书-2.0-68B”版本免费向合作伙伴开放。

云天励飞董事长兼CEO陈宁在发布会提到:“未来3年,全球80%的企业都将使用大模型。大模型一次训练成本在千万级,主流的训推一体机价格普遍在百万元,绝大多数企业都无法承担这样高昂的成本。”云天励飞此次发布的“深目”AI模盒,属于边缘计算设备,侧重在推理端,搭载了云天励飞的自研大模型边缘训推芯片DeepEdge10Max,以及自研多模态大模型“云天天书”,具备算法边缘侧在线学习能力。

这种边缘端标准化硬件,再加上大模型,除了通过能够边缘端部署,解决数据隐私问题,还可以实现对多种长尾场景的覆盖。其搭载的DeepEdge10芯片可以针对不同的场景提供差异化算力,并且可以在线下载更新多种算法。

在云天励飞为客户提供的算法训练平台上,有大量与生态合作伙伴共同打造的算法商城,用户可以直接调用预训练算法,并上传自身场景图片完成算法的微调和升级,快速训练出高精度算法。针对无训练数据的极端场景,例如加油站场景的吸烟识别,云天励飞还使用了AI合成数据来训练算法,并在这一过程中引入了3D引擎,从而填补数据空白。

“推理芯片没有垄断性巨头”

AI芯片可以分为训练芯片和推理芯片。训练芯片多用于服务器,推理芯片则主要部署在边端设备之上。当大模型训练完成,开始进入到了实际应用之后,对于AI推理的需求将会更多。云天立飞的AI芯片就定位在推理的应用。DeepEdge10系列是云天励飞去年推出的大模型推理芯片,该芯片采用自主可控的国产工艺,内含国产RISC-V核,支持大模型训练推理部署。依托自研芯片DeepEdge10Max创新的D2Dchiplet架构打造的X5000推理卡,已适配并可承载10亿级SAM、百亿级Llama2等大模型运算,可应用于AIoT边缘视频、移动机器人等场景。

谈及推理芯片,陈宁表示,如果训练芯片是英伟达一骑绝尘,占有绝对的市场占有率,那么推理芯片今天没有垄断性的巨头,今年大火的Groq也是AI推理芯片。

“云天天书”是云天励飞自研的多模态大模型,由CV大模型、NLP大模型和多模态大模型组成。云天励志在通用基础大模型的基础上,训练出行业大模型,包括智慧城市、智慧安防、智慧交通、智慧商超等等,最后再针对落地细分的场景,将数据集进行微调,从而实现落地。

深圳CV独角兽,“算法芯片化”为核心竞争力

云天励飞成立于2014年,是一家以计算机视觉(CV)应用起家的公司,2022年4月4日,作为“深圳AI第一股”在科创板上市,主营业务为视觉AI软硬件产品及解决方案。解决方案中又以面向公共安防及交通治理领域为主。公司为客户提供算法软件、芯片等自研产品,并按照客户需求,将自己的产品,外购的硬件产品、安装施工服务等打包交付。

2023财年,云天励飞营业收入5.35亿元,同比下降2.14%;归母净利润亏损3.9亿元,比上年同期的-4.47亿元有所收窄。

值得一提的是云天励飞具备算法芯片化能力,同时自研的AI芯片也已实现商用。公司的AI芯片在2018年成功流片,2019年开始逐步对外销售,客户包括海康威视、阿里巴巴平头哥、富瀚微电子等。

并购智能穿戴公司,G、B、C全都要?

“深目”AI模盒的发布是云天励飞从AI方案化到AI产品化的一次尝试,通过AI技术或解决方案转化为标准化、通用化的产品或服务,从而满足更广泛的市场需求。

在大模型方向上,作为一家在机器视觉赛道方向积淀已久的的AI企业,云天励飞并没有直接发布面向C端用户的LLM产品。毕竟大模型需要长期巨量烧钱,且商业化尚处于早期阶段。而是选择通过“深目”AI模盒这样的边缘计算盒子,将大模型与自身AI产品落地相结合,寻求在G端和B端场景实现标准化和规模化。

在ToC方向上,云天励飞也有所布局。近期,云天励飞发布公告称拟以不超过人民币1.8亿元的对价收购智能穿戴方案设计公司岍丞技术。岍丞技术主要从事智能穿戴产品的软硬件开发与技术服务,属于智能耳机、智能手表等智能穿戴设备的IDH(系IndependentDesignHouse的缩写,直译为“独立设计公司”)方案商。收购岍丞技术后,云天励飞拟开展智能穿戴产品的软硬件开发与技术服务业务,探索"大模型+智能可穿戴"深度融合。

云天励飞董事长兼CEO陈宁曾表示,“过去10年,AI行业基本走完了ToG的基础设施建设的历程,在向ToB的企业级服务转变;预计3年左右的时间,人工智能的行业会走向ToC的服务,尤其是随着ChatGPT和多模态大模型的逐步成熟,行业最终会走向ToC的服务。”这似乎也表明了云天励飞未来的探索方向。另外值得注意的是,同为视觉AI起家的商汤科技也在今年发布了面向C端消费者的AI台灯产品。

大模型技术加持下的AI行业竞争愈演愈烈,考验着每一位参与者的底层技术能力、资金实力和战略定力。并非所有玩家都能实现大而全的全面领先,聚焦自身的差异化优势,实现市场的精准定位和有效突围,或许才是破局之道。

转载此文是出于传递更多信息目的。若来源标注错误或侵犯了您的合法权益,请与本站联系,我们将及时更正、删除、谢谢。
https://www.414w.com/read/96422.html
0
最新回复(0)