算力管理复杂、训练成本过高,专家谈AI困境如何破解
中新网6月29日电(中新财经记者 吴涛)“大模型的高速发展使得AI不得不面临算力管理复杂、训练推理成本高、任务调度难等多方面发展瓶颈。”
发布会现场。供图
近日,在蚂蚁数科举行的一场发布会上,中国信息通信研究院云大所副所长栗蔚指出,云原生凭借其高可用、弹性、可扩展等优势成为突破AI困境的关键,云原生PaaS平台的大模型产品工具链不断完善,将加速大模型技术在行业应用中落地。
栗蔚表示,根据调研,云原生除了作用于AI之外,之前它作用于很多互联网应用的研发,超过一半中国企业大部分互联网化应用程序都是云原生的架构,甚至传统的核心架构现在也都在云化。
据介绍,在AI时代,因为大模型对算力需求很大,GPT3.5的时候是1750亿参数,需要500个英伟达的卡,到了GPT5是10万亿的参数,需要50万张英伟达的卡。这种情况下,云将发挥出新的关键作用。
“50万张英伟达卡计算是不可能在一个数据中心完成的,所以很多大模型计算跨域不可避免,但跨域以后对方是英伟达的卡吗?或者智算底层基础设施都不一定。这种情况下,我们需要什么?中间谁能把应用部署在算力上跑起来呢?”
栗蔚给出答案,她认为,就是云,AI时代几个发展瓶颈问题基本都是要靠云原生满足的。云原生屏蔽了底层算力的差异,其应用不在乎你底下是CPU还是GPU,还是用了什么样的规格的卡,我只是将应用部署在上面,用你的计算能力,所以云原生发挥了这样的作用。
“很多企业通过用了云原生,对于底下上千台服务器进行统一的纳管,从而全方位提升效率和降低成本。”栗蔚强调,云跟AI结合才能充分降低AI的工程化成本,让AI大模型真实地跑起来变成服务。(完)
- 最近发表
-
- 随机阅读
-
- 读懂中国——欧洲青年体验中国式现代化丨电商“加速度”看跨境电商如何火遍全球
- 强冷空气预定“国庆档期”!这些地方降温10℃以上!
- 第七届进博会签约企业数量已超800家
- 电影《海的尽头是草原》热播 “国家的孩子”袒露真情
- 印尼撤销新冠疫情大流行紧急状态
- 陕西旬阳一医院规定“到龄不续聘” 官方回应
- 欧盟调派近500名消防员和7架消防飞机应对希腊野火
- 菲律宾国家警察总署中文培训班开班仪式举行
- 天津港文化旅游区试运营开园 “港口工业游”优化升级
- 外籍人员来华热情升温
- 内塔尼亚胡一边出庭一边收防长“小纸条”
- 经济随笔丨从各地两会前瞻全国两会的三个视角
- 趣味游园迎端午 北京全市公园推出87项特色文化活动
- 国内首例多基因编辑猪皮救治特重度烧伤患者获成功
- 如何老而不衰?上海科研人员开启细胞充能新赛道
- 福建龙岩启动防暴雨IV级应急响应 永定土楼部分景区暂时关闭
- 地方国企应争当“示范生”
- 尼泊尔一飞机坠毁已致18人死亡
- 联合国安理会将就伊朗袭击以色列举行紧急会议
- 怎样判定是否患有高血压?如何测量血压更准确?
- 热门推荐
-
- 仿膳饭庄庆祝99岁生日 仿膳茶社启幕迎宾
- 促进家居行业加快回暖 山西推出家居促消费系列活动
- 日元对美元汇率创去年10月以来最低水平
- 让艺术的风,拂过阿尔山乡村
- 盘点:因空难去世的各国领导人有哪些?
- “围炉煮茶”成中国年轻人社交新宠 催生春节消费新风潮
- 全国首个大中小学思想政治理论课“金课”建设联盟在北京成立
- 沟通渠道再“升级” 民营企业诉求“一键达”
- 张沈川之女、李白之孙向历史陈列展捐赠珍贵史料
- 广东民企:坚持科技创新赋能 加快打造新质生产力
- 天津邮局海关查获象牙画轴轴头
- 外国专家:谁有动机炸毁“北溪”管道?
- 遭遇有气象记录以来最大汛情 湖南平江面临哪些挑战?
- 日本航空公司遭网络攻击致航班延误或取消
- 台风“格美”已致福建逾62万人受灾 多条江河发生超警戒水位洪水
- 2023年全国“质量月”苏浙皖赣沪共同行动在沪启动
- (经济观察)中欧新能源经贸摩擦 中方释放三信号
- 传统评弹相遇现代话题 浦东戏曲戏剧节展演季在沪开幕
- 20多个省份发放数十亿元文旅券——带着消费券去旅游
- 福建宁德海警局成功处置一起渔排火情