算力管理复杂、训练成本过高,专家谈AI困境如何破解
中新网6月29日电(中新财经记者 吴涛)“大模型的高速发展使得AI不得不面临算力管理复杂、训练推理成本高、任务调度难等多方面发展瓶颈。”
发布会现场。供图
近日,在蚂蚁数科举行的一场发布会上,中国信息通信研究院云大所副所长栗蔚指出,云原生凭借其高可用、弹性、可扩展等优势成为突破AI困境的关键,云原生PaaS平台的大模型产品工具链不断完善,将加速大模型技术在行业应用中落地。
栗蔚表示,根据调研,云原生除了作用于AI之外,之前它作用于很多互联网应用的研发,超过一半中国企业大部分互联网化应用程序都是云原生的架构,甚至传统的核心架构现在也都在云化。
据介绍,在AI时代,因为大模型对算力需求很大,GPT3.5的时候是1750亿参数,需要500个英伟达的卡,到了GPT5是10万亿的参数,需要50万张英伟达的卡。这种情况下,云将发挥出新的关键作用。
“50万张英伟达卡计算是不可能在一个数据中心完成的,所以很多大模型计算跨域不可避免,但跨域以后对方是英伟达的卡吗?或者智算底层基础设施都不一定。这种情况下,我们需要什么?中间谁能把应用部署在算力上跑起来呢?”
栗蔚给出答案,她认为,就是云,AI时代几个发展瓶颈问题基本都是要靠云原生满足的。云原生屏蔽了底层算力的差异,其应用不在乎你底下是CPU还是GPU,还是用了什么样的规格的卡,我只是将应用部署在上面,用你的计算能力,所以云原生发挥了这样的作用。
“很多企业通过用了云原生,对于底下上千台服务器进行统一的纳管,从而全方位提升效率和降低成本。”栗蔚强调,云跟AI结合才能充分降低AI的工程化成本,让AI大模型真实地跑起来变成服务。(完)
- 最近发表
-
- 随机阅读
-
- 南怀瑾纪念展在沪开幕
- (新春见闻)侨乡温州“家乡味”制作忙
- 第十四届北京国际电影节开幕 张艺谋获特别荣誉奖
- (两会声音)全国人大代表汤建伟:建议加快新能源游览排筏产业升级
- 浙江“多规合一”打造高质量一体化国土空间体系
- 5年期以上LPR降至3.95% 专家:对房贷市场将产生积极影响
- 海口至莫斯科航线开通
- 生态环境部发布10月上半月全国空气质量预报会商结果
- 7国学员广西南宁感受节气饮食之理
- 中国最珍贵的鹿类动物海南坡鹿将有“新家”
- 广东2024年计划营造修复红树林3838.33公顷
- 证监会核准设立摩根士丹利期货(中国)有限公司
- 体重超标 当心“变笨”
- 西藏自治区退役军人创业创新大赛展现退役军人双创风采
- 柬埔寨首相洪玛奈:欢迎更多中国游客访柬
- (两会速递)中国2024年春运人流量创同期历史新高
- 历史的耳语 陈先发长诗新作《了忽焉》分享会举办
- 国际最新研究称,南美洲高温、干旱和火灾风险不断上升
- 柬埔寨将延长教育机构免税激励措施
- 20省咖啡师保山竞技 争夺“全国技术能手”
- 热门推荐
-
- 加大改革力度 确保人民群众从改革中获益
- GDP同比增长5.2%!经济运行新亮点新变化明显增多
- 乌议会批准解除列兹尼科夫防长职务 是否影响前线局势?
- (乡村行·看振兴)山西吕梁:汇聚老兵力量 乡村振兴再出发
- 全球连线 | 英国高通胀下罢工潮持续,究其根源还是社会不公
- “悟空”挖出山西文旅宝藏
- 全国统一大市场,到底该怎么建?又将如何改变我们的生活?
- 深圳海空港正发力 疏通物流经济“筋络”
- 应季蔬菜比反季蔬菜更营养吗?
- 赵明诚和《金石录》
- 高科技让文物保护“如虎添翼”
- 港澳台和海外华媒感受湖南郴州古韵新貌
- 欧阳黔森长篇新作《莫道君行早》:深情书写山乡巨变
- 日本首相岸田文雄抵达美国 将参加北约峰会
- 西藏扎囊县“农文旅体”深度融合 点亮乡村诗画田园
- 被小说骗了!“草船借箭”不是诸葛亮干的
- 印尼多座火山为何集中喷发?
- 民航旅客信息岂是“唐僧肉”
- 拜登向美国国会申请增加1050亿美元预算用于军事援助方案
- 节约用电,这道“加减题”要答好