文心大模型日均调用量超7亿,百度竭力为其寻找落地机会

来源: 美国《大西洋月刊》:“灯塔式父母”的孩子往往更自信

责任编辑: 蒯瑭

发布时间: 2024-09-28 22:25:42

0

0

图片来源:官方

界面新闻记者 | 崔鹏

界面新闻编辑 | 宋佳楠

925上午百度在云智大会上推出百舸AI异构计算平台4.0千帆大模型平台3.0AI基础设施产品并公布多项AI相关业务最新数据其中,文心大模型日均调用已经超过7亿距离百度上次公布6亿数据进一步提升

刚结束的阿里云栖大会阿里巴巴CEO吴永铭表示阿里云单网络集群已经拓展至10级别,百度也不甘于落后百度集团执行副总裁、百度智能云事业群总裁沈抖特别强调百舸4.0不仅仅万卡集群而是具备了成熟的10集群部署管理能力

百度今年一直在强调大模型落地应用。百度CEO李彦宏在最近一次内部讲话中表示具备应用场景能够持续迭代升级大模型,与其它模型产品的差距会越来越大。

基于此,百度找来了长安汽车三星大量客户为其站台,以展示百度大模型在各行各业的落地应用成果。

沈抖表示过去一年,百度感受到客户模型需求猛增需要的集群规模越来越大,企业模型推理成本下降预期越来越高

训练大模型的前提是创建集群,这并非简单地买来GPU组装即可,通常需要几个月的时间进行设备配置调试

此前有云厂商提到,组建集群可以压缩1,而沈抖百舸4.0能够做到最快1小时完成组建,主要采用业界流行训练工具框架进行内置的方式。

一旦进入到大规模训练阶段最重要的就是稳定性大模型领域一直遵循著名的Scaling Law(尺度定律),认为模型性能会随着参数、算力和数据集的规模增加而提高

根据沈抖的说法,GPU集群需要耗费巨额建设和运营成本,通常建设一个万卡集群GPU采购成本高达几十亿元。如果10集群服务器一天消耗电量大约300千瓦时相当于北京东城区一天居民用电量

这种大规模集群上硬件不可避免出现故障规模越大出故障的概率越高这些故障中绝大多数GPU引起的因为GPU非常敏感的硬件温度湿度环境波动反应灵敏

沈抖提到Meta训练Llama3模型时,用了1.6万张GPU卡的集群,平均每3小时就会出一次故障。

大模型的训练庞大的单一任务一个节点出错整个集群就需要停下,回滚上一个记忆点考虑到GPU集群成本非常昂贵一分钟就会白白烧钱有效训练时长”便成为非常重要的指标

针对大模型训练过程中故障频发问题百舸4.0故障检测手段自动容错机制进行升级目前万卡集群有效训练时长达到99.5%沈抖这高于同行对手数据表现。此外,百舸4.0主流的长文本推理效率提升1以上同时降低了推理成本

在百度最新的财报电话会上,李彦宏透露,二季度百度智能云AI贡献的收入占比进一步提升至9%,而上一季度为6.9%。

大模型工具性能提升固然重要但对于百度来说模型落地成果更具有现实意义

除升级百舸平台外,百度还着重介绍了最新的千帆3.0平台。根据沈抖公布的数据,在千帆大模型平台上,文心大模型日均调用量超过7亿次,累计帮助用户精调了3万个大模型,开发出70多万个企业级应用。千帆3.0可调用包括文心系列大模型在内的近百个国内外大模型,也支持调用语音、视觉等各种传统的小模型。

目前,大模型落地三大主要需求分别是应用开发模型推理模型开发

应用开发层企业级RAG企业行业数据做成外挂知识库大模型Agent智能体两大常见大模型落地场景

其中,智能体接到任务后,会进行自主思考、任务拆解、方案规划,并调用工具,全程自主进行能够完成过往需要3到4APP才能完成的任务

沈抖表示百度内部千帆平台提供百度搜百度地图超过80官方组件用来提升智能体特定任务上的能力

而在李彦宏看来,智能体是大模型发展的下一个重要方向。“有很多人看好智能体这个发展方向,但是到今天为止,智能体还不是共识,像百度这样把智能体作为大模型最重要的战略、最重要的发展方向的公司并不多。”

百度在今年的Create大会上曾发布过三款产品,分别是AgentBuilder、AppBuilder和ModelBuilder。其中,AgentBuilder和AppBuilder都与智能体相关,一个门槛更低,另一个更强调功能性。

根据百度最新透露的数据,智能体在百度生态的分发量大幅增加,7月日均分发次数超800万次,为5月数据的两倍。

百度旗下数字人平台智能客服产品也有了最新进展其中曦灵数字人平台4.0,支持根据文字快速生成不同妆造、不同行业特色的3D数字人形象和视频,并将3D超写实数字人的价格从万元降至199元。

智能客服产品“客悦”则在用户意图理解、多模态信息交流等方面进行了优化,提升了处理复杂问题的能力。

按照百度的说法,目前业内“问题自主解决率”平均水平是80%,升级后“客悦”将这一指标提升至92%。该产品已累计帮助企业客户服务超过1.5亿人次,交互超5亿次。

新闻热榜

1

“送命题”:以色列想消灭却离不开工程处?

2

美对华强硬,华裔担忧“仇恨氛围”

3

黎巴嫩平民流离失所被迫逃难联合国呼吁立即停火

4

夫妻带孩子来教堂,孩子哭闹不停,神父举动惊呆了全场!

5

安倍遗孀获准注册安倍晋三商标

6

资阳安岳:定制客运班线,打通客运服务“最后一公里”

7

全球服刑时间最长死囚,近60年后重审获判无罪

8

俄军攻入红军村东郊,小泽终于意识到了严重性,普京却不给回头路

9

中欧双方同意继续推动电动汽车价格承诺协议谈判

10

《潍坊市风筝文化产业促进条例》将于10月1日起施行

11

178元美甲翻车

12

省粮食和储备局第一书记联合济南展鹏文旅俱乐部捐赠爱心图书

13

纽约二十国集团外长会举行讨论全球治理改革

14

不忍了!加拿大再次对我国出手,不到2天,中方宣布重磅反制决定

15

米线店月流水50万

16

“海伦妮”增强为3级飓风向美佛罗里达州逼近

17

河北小伙娶小12岁乌克兰绝色美女,结婚11年后,妻子出轨波兰农民

18

2024年三亚市海棠区人才职业技能竞赛圆满落幕

19

曾任正局级秘书、市长、市委书记、省政府秘书长等,李显刚被逮捕

20

喜讯!济南市皮防院在2024年健康科普作品创新创意大赛获佳绩

21

台风贝碧嘉等级

22

遇见·四子王旗

23

国务院国资委产权管理局原局长贾立克接受审查调查

24

国庆机票价两极分化

25

景区禁止游客吃泡面

26

无须再忍!华为硬刚苹果谷歌,3款机型将公测鸿蒙系统!

27

两位夜跑消防员,遇到战友出警,义无反顾并肩作战

28

为改革“取真经”

29

西拉米是纯天然美人,略施粉黛美得不可方物,苏提达黯然失色

30

劳工活动人士呼吁废除,家政服务人员提出意见,韩国“菲佣”计划可能将泡汤?

31

美国直言猪队友,日本一个无意之举,竟侧面解决我国30年难题

32

一条闲置臭水塘,如何变身了“聚宝盆”

33

襄垣县召开会议宣布市委、县委有关干部任职决定

34

顾艳华被判无期,曾当了17年省粮食局局长

35

#这个世界会好的#日常vlog“人各有各,不过尔尔,允许自己做自己,允许别人做别人”

36

"官宣大好消息!

37

拜登:将解锁500亿美元俄罗斯资产帮助乌克兰重建

38

·中东地区补给舰严重受损美海军出现“疲劳症”?专家分析

39

京藏高速北辅路新建昌平西关西收费站正式开通原陈庄收费站将关闭

40

“新总统上台,斯里兰卡将寻求中国最大支持”

20

湘潭市与长宁区举行友好城市交流座谈会暨两地工商联(总商会)友好合作签约仪式2024-09-2706:49

20

坚定走好创新驱动高质量发展之路——访河南省副省长宋争辉

20

印度6岁女童险遭性侵时,被一群闯入的猴子打断“搭救”。

20

重庆否认增雨都打偏

20

中国籍人员在意丧生

20

这是怎么回事呢?

20

下一届美国政府处理中美关系的最大挑战是台海问题

20

伦敦市长说特朗普坏话,让选民投票给哈里斯,美国归伦敦管了吗

20

高铁上百人有票没座

热门攻略

1

被拐儿童钟彬找到了

2

特朗普宣布将与泽连斯基见面

3

南京市召开台企“智改数转网联”暨专精特新企业培育推进会

4

中美关系紧张,美国富豪提出惊人想法,令人大跌眼镜

5

蔡正元:联合国发言人说台湾是中国一个省还不是一部分

6

滞留太空宇航员发声

7

《共同书写的历史——外地干部支援云南迪庆口述史》出版

8

【清风益阳·党风廉政建设在路上】沅江:监督促推“办不成事”窗口解决群众急难愁盼问题

9

南水北调引江补汉工程首台TBM“江汉先锋号”在郑州下线

10

国家消防救援局:全国高层建筑火灾呈逐年上升趋势今年前8个月

11

美军配备激光武器军舰将部署日本,专家:针对中国

12

香港楼价跌回八年前

13

刘健开展国庆节前安全生产检查要求时刻紧绷安全生产弦

14

#美国

15

死蟹有毒,蟹吃不完怎么延长存活?亲测有效的养殖经验来了!

16

陈显华中将逝世

17

24岁生下唐氏患儿

18

美国明尼苏达州比特币矿场计划因噪音担忧撤回申请

19

以总理办公室否认达成黎以停火协议内塔尼亚胡指示继续全力战斗

20

普拉桑或再奔江浙沪

20

持续强化山地旅游品牌引领助推贵州旅游产业高质量发展

20

乌克兰总统抵美首站参观兵工厂

20

离职45元卖室友电脑

20

美国财长耶伦:利率最终将下降至中性水平

20

成都:以务实创新举措推进新时代“枫桥式”税务所建设

20

英媒:OpenAI正酝酿其组织结构“巨变”

20

#多国警告美国#中美关系#中国美国

20

开启农产品流通新篇章西南海吉星智慧产业园项目推介会在成都举行

20

台湾文旦柚恢复输陆,民进党当局存心污蔑,国台办驳斥

20

南京江北新区美女领导陈潺嵋落马,其戴的翡翠吊坠估计不便宜

20

女生快递站被猥亵

20

海地武装部队总部遭袭击

20

林诗栋3比0林昀儒

20

当地时间9月26日,俄罗斯总统普京在“俄罗斯"

20

美国家运输安全委员会就部分波音737飞机发布“紧急安全建议”

20

中央气象台:今年第16号台风“西马仑”未来对我国海域无影响

20

日本老年人数创新高

20

林文斌任福建省委统战部部长

20

美总统拜登签署短期支出法案,避免政府陷入“停摆”

20

#人民日报

20

宿舍没建好,新生报到时间推迟,校方回应→

20

山东:做好小种子里的司法保护“大文章”

20

国庆假期广铁预计发送旅客2450万人次

20

印度外长:中印关系是亚洲未来的关键,声称印度不会顾此失彼

20

欧盟回应俄罗斯总统普京关于更新俄罗斯核理论的言论

20

日照大学科技发展集团开展民族团结进步宣传活动

20

辽宁舰入列12周年

20

今年年底莱芜光大生活垃圾焚烧发电二期项目将建成投用

热门游戏

  • 1
    芬兰提议把俄踢出五常,废除中方一票否决权,美国率先反对?为何

    射击枪战 /热度:65989

    点击下载

    消费品“以旧换新”成效显著

  • 2
    印度三星工人罢工

    射击枪战 /热度:14710

    点击下载

    海地武装部队总部遭袭击

  • 3
    泽连斯基已不买特朗普的帐

    射击枪战 /热度:46939

    点击下载

    乌克兰大使越来越出格,美国众议院议长不惯着:必须炒鱿鱼

  • 4
    崩坏3 中方参加俄海上军演

    射击枪战 /热度:90254

    点击下载

    废除中国权利,芬兰对华连开2枪,退返我国熊猫,中方接下挑战书

  • 5
    原神 俄罗斯会不会失败?#俄罗斯乌克兰局势#俄罗斯敢不敢使用核武器

    射击枪战 /热度:66481

    点击下载

    乌军入侵库尔斯克,为什么没有一个国家出兵,援助俄罗斯?

  • 6
    出发吧麦芬 欧盟针对中国这一决定毫无依据,匈牙利外长:将投反对票

    射击枪战 /热度:85378

    点击下载

    9月25日局势图解:俄军在纽约村发动进攻!库尔斯克地区趋于平静

  • 7
    永劫无间手游 博罗好高中|如何提升高中生的知识融会贯通能力?

    射击枪战 /热度:05531

    点击下载

    以总理办公室否认达成黎以停火协议内塔尼亚胡指示继续全力战斗

  • 8
    向僵尸开炮 外网看钓鱼岛,评论区各国网友纷纷支持中国的主权

    射击枪战 /热度:47867

    点击下载

    巴基斯坦媒体刊文:中国发展是世界希望和进步的灯塔

  • 9
    鸣潮 那个号称高度发达的资本主义国家美国,却是对资本家最狠的政权

    射击枪战 /热度:04079

    点击下载

    祝福祖国繁荣昌盛民安康

  • 10
    艾塔纪元 柬埔寨突然退群!“堪比英国脱欧”

    射击枪战 /热度:86309

    点击下载

    芬兰计划提前归还大熊猫:动物园基于对自身现状的考虑

关于我们 | 联系我们 | 加入我们 | 网站地图 | 自助投稿 | 在线举报 | 玩家心声 | 最新咨询 | 游戏文化探索 | 游戏创意工坊 | 账号安全 |