算力管理复杂、训练成本过高,专家谈AI困境如何破解
中新网6月29日电(中新财经记者 吴涛)“大模型的高速发展使得AI不得不面临算力管理复杂、训练推理成本高、任务调度难等多方面发展瓶颈。”
发布会现场。供图
近日,在蚂蚁数科举行的一场发布会上,中国信息通信研究院云大所副所长栗蔚指出,云原生凭借其高可用、弹性、可扩展等优势成为突破AI困境的关键,云原生PaaS平台的大模型产品工具链不断完善,将加速大模型技术在行业应用中落地。
栗蔚表示,根据调研,云原生除了作用于AI之外,之前它作用于很多互联网应用的研发,超过一半中国企业大部分互联网化应用程序都是云原生的架构,甚至传统的核心架构现在也都在云化。
据介绍,在AI时代,因为大模型对算力需求很大,GPT3.5的时候是1750亿参数,需要500个英伟达的卡,到了GPT5是10万亿的参数,需要50万张英伟达的卡。这种情况下,云将发挥出新的关键作用。
“50万张英伟达卡计算是不可能在一个数据中心完成的,所以很多大模型计算跨域不可避免,但跨域以后对方是英伟达的卡吗?或者智算底层基础设施都不一定。这种情况下,我们需要什么?中间谁能把应用部署在算力上跑起来呢?”
栗蔚给出答案,她认为,就是云,AI时代几个发展瓶颈问题基本都是要靠云原生满足的。云原生屏蔽了底层算力的差异,其应用不在乎你底下是CPU还是GPU,还是用了什么样的规格的卡,我只是将应用部署在上面,用你的计算能力,所以云原生发挥了这样的作用。
“很多企业通过用了云原生,对于底下上千台服务器进行统一的纳管,从而全方位提升效率和降低成本。”栗蔚强调,云跟AI结合才能充分降低AI的工程化成本,让AI大模型真实地跑起来变成服务。(完)
- 最近发表
-
- 随机阅读
-
- 春运前的返乡者:有人千里带药回乡,有人回村排队就医
- 小海岛大工厂 浙江离岛型产业园如何巧解“千家结”?
- 赵传回应万人大合唱:父母辈的青春同样灿烂美好
- 罗伯特·库恩:中国走向共同富裕,民营经济是创新主力军|两会·世界观
- 2023年沪深A股共分红2.2万亿,706股连续现金分红十年
- 普京发布这个重磅消息后,美国和北约火速回应
- 山东探索构建经济发展新生态 特色园区成产业新增长极
- 干一单挣一单的钱,“计件工”休假谁给钱?
- 西藏芒康:增殖放流 23万尾鱼苗投放金沙江
- 7死、7伤!蓄意瞒报的弘霖煤矿,曾多次被指有安全风险
- 鸣沙山月牙泉景区开放及售检票时间调整为05:00—20:30
- 微短剧成文娱消费新风口,付费乱象待规范
- 5月中国棉纺织行业景气回升
- 脂肪中小分子“作恶”,影响糖尿病患者认知
- 俄举行胜利日红场阅兵 普京发表讲话
- CR450动车组样车发布
- 大提琴演奏家王健:最珍贵的艺术出处
- 广州国际照明展收官 逾三千品牌企业觅商机
- 西藏察隅县森林消防中队开展水域救援训练
- 三亚往返曼谷国际客运航线正式恢复
- 热门推荐
-
- 7.97亿欧元!欧盟对美国Meta公司开出巨额罚单
- 首儿所的热线为何这么“热”
- 可可西里腹地卓乃湖保护站5G基站开通运行
- “沈阳—温哥华”跨境电商全货机新航线开航
- “五一”假期首日中国铁路预计发送旅客2040万人次
- “中吉(尔吉斯斯坦)经典著作互译计划”首批成果发布
- 德国政府向乌克兰提供新一批军事援助
- 参加“我的葬礼”,来一场自我死亡教育
- 创新合作绿色低碳 推动可持续发展
- 在景区和商场,上个女厕咋就这么难
- 俄乌局势进展:英国将向乌提供远程无人机 南非重申和平解决乌克兰危机的立场
- 今年新疆霍尔果斯口岸通行中欧(中亚)班列突破一千列
- 文旅部提醒游客:元旦春节假期做好个人防护
- 英国非法移民庇护申请量创20年来新高
- 36万亿元!今年前10月我国外贸进出口总值同比增长5.2%
- 刑侦剧《黑白诀》热播 解构正义新写法
- 东莞—香港国际空港中心货运量突破1万吨
- 黑河市文博会在嫩江开幕 以高空跳伞促文旅融合
- 欧盟称对中国电动汽车加征反补贴税获得成员国“必要支持”
- 江西安义借“铝博会”助力铝型材及门窗产业转型升级