马斯克xAI推出Grok-1.5大语言模型

IT之家2024-03-29 13:50:51  156

IT之家3月29日消息,马斯克旗下人工智能公司xAI今天在官方博客中宣布,正式推出Grok-1.5大语言模型。

Grok-1.5具有改进的推理能力和128k的上下文长度,其中最显著的改进之一是其在编码和数学相关任务中的表现。Grok-1.5将在未来几天内在平台上向早期测试人员和现有的Grok用户推出。

在官方测试中,Grok-1.5在MATH基准上取得了50.6%的成绩,在GSM8K基准上取得了90%的成绩,这两个数学基准涵盖了广泛的小学到高中竞赛问题。此外,它在评估代码生成和解决问题能力的HumanEval基准测试中得分为74.1%。IT之家附测试对比表如下:

长上下文理解方面,Grok-1.5能够在其上下文窗口内处理多达128ktokens的长上下文。这使得Grok的内存容量增加到之前上下文长度的16倍,从而能够理解更长文档中的信息。

据介绍,Grok-1.5构建在基于JAX、Rust和Kubernetes的自定义分布式训练框架之上。自定义训练协调器可确保自动检测到有问题的节点并将其从训练作业中剔除。xAI还优化了检查点、数据加载和训练作业重新启动,以最大限度地减少发生故障时的停机时间。

转载此文是出于传递更多信息目的。若来源标注错误或侵犯了您的合法权益,请与本站联系,我们将及时更正、删除、谢谢。
https://www.414w.com/read/86966.html
0
随机主题
汪峰女友森林北旧照,牙齿参差不齐黑眼圈严重,与普通人没差别上合外长会议召开,中方没与印外长对话,莫迪想在金砖“出风头”掌握牛头滚,轻松应对屏风马两头蛇#象棋丰田打响“价格战”, 合资B级车, 从近17万降至11万多, 20年也开不坏可远程摧毁! ASML承认在光刻机中留了后手!LOL官方推特: 如果全世界都与Faker为敌, 那我就与全世界为敌1928年,张作霖被炸身亡,却意外拉进了张学良与蒋介石的关系球王待遇!超远任意球还得2人堵门,盐湖城为了防梅西真的是绞尽脑汁连续挽救3局点, 逆风翻盘定乾坤! 时隔5天复仇, 高昉洁晋级八强!朱一珺新搭档孙文骏 孙文骏(石宇奇教练孙俊之子)库尔勒森林消防大队大力开展实战化野外化练兵活动新垣结衣老公被曝出轨 ,对象为一位新婚的NHK女主播西康高铁最长桥梁建设取得新进展, 通车后关中陕南一小时内可达身处“底层”的游戏文案亚当·兰伯特的中国改造: 告别高跟鞋, 美甲, 欢迎甜心版张震岳!交警:如果连“锯齿车道”都不认识,千万别开车,弄明白了再上路《庆余年》第二季: 庆帝的这个举动, 揭示了他内心深处真正想法据阿根廷统计机构, 阿根廷3月经济活动比去年同期下降8.40%深蓝CEO称在电动化的浪潮下 硬派的燃油时代结束了广东男篮出局后三大难题森林狼大战独行侠! 李凯尔1分钟砍7分 唐斯打铁 麦克丹尼尔斯爆发
最新回复(7)
  • 艾玛老师2024-03-29 21:49
    引用7
    这个没有app吗?只能用网页?
  • Chris健身2024-03-29 21:44
    引用6
    我感觉这马斯克是中国人
  • 访蕊看宏观2024-03-29 17:58
    引用5
    不管汽车还是火箭还是ai ,源神每次都是只开放中文汉化版本的源,别的什么美英德法意日韩都不开,[点赞]心系人民心系党[点赞]我哭死[哭哭]
  • 冷裤的番茄2024-03-29 16:53
    引用4
    马上开源阿[捂脸哭]虽然输别人上一代产品[笑着哭]至少水军还可以再吹波
  • 古剧戏说2024-03-29 14:29
    引用3
    马斯克给世界带来了光明和希望……这是真本事,对比中国那些所谓企业家就看出差距了
  • 宝鉴娱乐2024-03-29 12:44
    引用2
    你可能无法相信马斯克又开源。
  • 金金四季如春2024-03-29 11:18
    引用1
    马斯克是不是玩不起?