极目新闻记者陈红
“大家好,好久不见,我是你们的老朋友东哥……”面对众网友喊话开直播,“刘强东”以新的形式与大家见面。
4月16日下午6时18分,由京东云言犀打造的“采销东哥”AI数字人开启直播首秀,同时亮相京东家电家居、京东超市采销直播间。此前一天,京东官方发布了预热视频,不少网友笃定视频中不是AI,“这么多小动作,肯定是真人!”
“采销东哥”AI数字人是如何练成的?
“采销东哥”讲话时偶尔搓动手指
在4月16日的直播首秀中,“采销东哥”AI数字人一改刘强东以往坚忍不拔的拼搏风格,让网友们看到了他的另一面:谈笑自若,聊自己在运动、烹饪方面的心得,还对直播带货的大屏电视、一日三餐的健康搭配滔滔不绝,成为当天京东直播的“首席采销”。
不少网友惊叹,“采销东哥”AI数字人近乎百分百还原了东哥的表情、姿态、手势、音色,即便是数字分身也能拥有鲜活的生命力。不仅要“形似”,更要“神似”,数字人作为人类形象的模仿和延伸,这是怎么做到的?
“‘采销东哥’AI数字人是由京东云言犀制作的。大模型会注意捕捉和呈现东哥的习惯性表情和动作,比如在讲话时偶尔搓动手指,强调某件事时会配合更大幅度的手部动作,还有时不时地点头等。”京东相关负责人介绍说,AI数字人其实更具挑战的是声音还原,听过东哥讲话的人,对他的宿迁口音印象深刻,会发现他语速比较快,吐字比较轻,有些词语会习惯连读,他对“时间”“正是”中的“sh”发音带有重鼻音,还喜欢称呼“兄弟们”鼓舞大家的士气……
据了解,要让数字人说好普通话并不难,但要让“采销东哥”AI数字人说好“宿迁普通话”,学习本人的发音习惯并不容易。比如要不要加鼻音,哪里要连读,就需要大模型给出准确判断。这背后依托了京东言犀大模型对形象与声音的不断学习与训练优化。
京东相关负责人还透露,为了让声音更适合直播带货,以及把“兄弟们”这样的口头禅用在合适的地方,京东云言犀团队对这些细节进行了模型调优。他们起初“喂”给大模型的演讲素材,虽然充满激情、爆发力强,但过于正式。为此,他们用最新录制的闲谈作为主要素材,其中有东哥娓娓道来生动的旅行经历,再提取5分钟演讲的韵律特征灌给大模型,通过不断优化,最终塑造出“采销东哥”AI数字人亲切自然、贴近用户的声音。
训练时被“喂”入5万小时语音数据
京东云言犀数字人已服务超4000家品牌直播间
“采销东哥”AI数字人诞生背后,离不开京东云言犀多年的技术深耕与积累。
据了解,言犀语音大模型在训练时,被“喂”入5万小时海量鲜活的语音数据,这让言犀数字人可以智能匹配不同直播风格,比如用沉稳的音色营造专业的氛围,又或者用极具感染力的声音吸引用户下单,还赋予言大姿态肢体表现。实验表明,绝大部分用户在120秒内难以察觉这是数字人。
言犀数字人在零配置基础上,覆盖了直播间70%的常见问询,还能借助大模型智能问答调优助手自我迭代。一方面根据商详页与脚本自动生成问答,一方面直播结束后自动补足没有覆盖的知识点,高效、实时地回答海量咨询。比如,他能像精通业务的资深导购那样,当有人提问“有没有适合女生的公路自行车”或“有没有适合大学生的手机”时,给出适合的商品推荐,应答准确率超90%。
令人惊讶的是,如果直播时有缺货商品,直播中控台将如同言犀数字人的“大脑”,及时调整直播话术,比如跳过缺货的商品,或为爆品增加讲解频率。还能监测直播间交互是否过于频繁,并调整交互频次和机制,确保顺利。
据悉,目前京东云言犀数字人已服务超4000家品牌直播间。自去年7月,京东发布言犀大模型,以其为基座,京东陆续推出了近100种创新应用,包括京东智能导购助手“京言”、医疗健康大模型“京医千询”、京东物流超脑、京东智能客服、京小智、言犀多模态数字人,通过底层算力到模型服务与AI平台的全栈技术创新,服务平台运营、专业品类知识增强、消费体验优化、决策成本降低、智能搜推、商家带货转化等场景。
百度创始人李彦宏同日因AI亮相
巧合的是,同样在4月16日,百度创始人李彦宏也再次活跃在公众视线中,为自家技术应用站台。在Create2024百度AI开发者大会上,李彦宏强调了未来AI应用发展的一个重要趋势,并连发多款AI开发工具,给出“开源模型会越来越落后”的判断。
会上,李彦宏发表了“人人都是开发者”的主题演讲,他表示,AI正在掀起一场创造力革命,未来开发应用就像拍个短视频一样简单,人人都是开发者,人人都是创造者。会上,百度正式发布文心大模型4.0的工具版。使用者可以在工具版上体验代码解释器功能,通过自然语言交互,实现对复杂数据和文件的处理与分析,还可以生成图表或文件,能够快速洞察数据中的特点、分析变化趋势、为后续的决策提供高效和精准的支撑。
李彦宏说,大语言模型本身并不直接创造价值,基于大模型开发出来的AI应用才能满足真实的市场需求,“这是百度根据过去一年的实践,踩了无数的坑,交了高昂的学费换来的。”
转载此文是出于传递更多信息目的。若来源标注错误或侵犯了您的合法权益,请与本站联系,我们将及时更正、删除、谢谢。
https://www.414w.com/read/247720.html