AI大模型技术应用爆发,云市场也在加速变革。4月18日,火山引擎在其举办的“原动力大会”上发布自研DPU等系列云产品,并推出新版机器学习平台:支持万卡级大模型训练、微秒级延迟网络,让大模型训练更稳更快。火山引擎总裁谭待表示,AI大模型有巨大潜力和创新空间,火山引擎会服务客户做好大模型,共同推动各行业的智能化升级。
“国内有数十家做大模型的企业,大多已经在火山引擎云上。”谭待认为,大模型不会一家独大。与其他云厂商力推自家大模型不同的是,火山引擎将接入多家大模型深度合作,为企业和消费者提供更丰富的AI应用。
(相关资料图)
会上,火山引擎宣布与字节跳动国内业务并池。基于内外统一的云原生基础架构,抖音等业务的空闲计算资源可极速调度给火山引擎客户使用,离线业务资源分钟级调度10万核CPU,在线业务资源也可潮汐复用,弹性计算抢占式实例的价格最高可优惠80%以上。
图说:字节跳动副总裁杨震原分享抖音的机器学习实践 采访对象提供(下同)
让大模型训练快速跑起来
自2022年底发布以来,ChatGPT成为人类历史上最快获得上亿用户的消费级互联网应用。最新的GPT-4大模型,更是在法律、数学、生物学等多项测试中超过90%人类。
谭待表示,国内很多科技公司投入到大模型建设中,他们有优秀的技术团队,也有丰富的行业知识和创新想法,但往往缺乏经过大规模场景实践的系统工程能力。火山引擎要做的就是为大模型客户提供高稳定性和高性价比的AI基础设施。
据悉,火山引擎机器学习平台经过抖音等海量用户业务长期打磨,支持单任务万卡级别的超大规模分布式并行训练场景。GPU弹性计算实例可灵活调度资源,随用随取,最高可以为客户节省70%的算力成本。
字节跳动副总裁杨震原认为,业务创新需要试错,试错要大胆、敏捷,但试错也一定要控制成本。通过潮汐、混部等方式,火山引擎实现资源的高利用率和极低成本。以抖音推荐系统为例,工程师用15个月的样本训练某个模型,5小时就能完成训练,成本只有5000元。火爆全网的抖音“AI绘画”特效,从启动到上线只用一周多时间,模型由一名算法工程师完成训练。
MiniMax是目前国内少数已经推出自研大模型产品的AI技术公司,拥有文本、视觉、声音三种通用大模型引擎能力。据MiniMax联合创始人杨斌介绍,MiniMax与火山引擎合作建立了超大规模实验平台,实现千卡级常态化训练;超大规模推理平台有万卡级算力池,支撑单日过亿次调用。在火山引擎的云上,MiniMax大模型业务实现快速突破。
谭待透露,火山引擎的大模型云平台获得智谱AI、昆仑万维等众多企业的良好反馈。国内大模型领域,七成以上已是火山引擎客户。
图说:火山引擎总裁谭待宣布支持“多云多模型”的未来架构
向“多云多模型”架构演进
有评论称,大模型将成为云厂商弯道超车的机会。对此,谭待表示,大模型还在发展初期,面临数据安全、内容安全、隐私保护、版权保护等许多问题需要努力解决。但可以预见,大模型将带动云上AI算力急剧增长,AI算力的工作负载与通用算力的差距会越来越小,这会为各家云厂商带来新的机会,同时也会对数据中心、软硬件栈、PaaS平台带来新的挑战。
以数据中心的算力结构为例,谭待表示:“大模型需要大算力,虚拟化会带来资源损耗,规模越大就损耗越多。未来3年内,大规模的算力中心,都将形成‘CPU+GPU+DPU’的混合算力结构,CPU负责通用计算,GPU负责AI计算,DPU负责资源卸载、加速和隔离,提升资源效率。”
此次原动力大会上,火山引擎发布了新一代自研DPU,实现计算、存储、网络的全组件卸载,释放更多资源给业务负载。火山引擎尽管是“最年轻”的云厂商,其自研DPU已达到业界领先水平,网络性能高达5000万pps转发能力、延迟低至20us。基于自研DPU的各类计算实例性能也有显著提升,例如适用于大模型分布式并行训练场景的GPU实例,相较上一代实例集群性能最高提升3倍以上。
自动驾驶公司毫末智行与火山引擎合作打造智算中心,为DriveGPT自动驾驶生成式预训练模型提供强大的算力支持。毫末智行CEO顾维灏介绍,DriveGPT使用量产车4000万公里的人驾数据训练,参数规模达1200亿,对自动驾驶认知决策模型进行持续优化。
谭待表示,在大模型及下游应用发展推动下,无论传统企业还是初创企业,对AI算力都有迫切需求,企业使用多家云服务将成为常态。同时,各行业有自己高质量的私有语料,大模型不会一家独大,而是会在千行百业生长,形成多模型共生甚至协作的生态,“未来将是‘多云多模型’的时代”。
火山引擎也顺势推出了分布式云原生平台、多云安全、多云CDN、veStack混合云平台等系列产品,支持客户更好地使用多家云服务。“字节跳动用过全球几乎每一朵公有云,以及大多数CDN,形成一套完整的分布式云管理体系和架构实践。”谭待坚信火山引擎是最懂多云和分布式云的云服务商,这些技术能力都会毫无保留地提供给客户。
杨震原进一步表示,火山引擎对内对外提供统一的产品,抖音、今日头条等APP开屏都加上了“火山引擎提供计算服务”。杨震原说:“数字化时代,机器学习可以智能、高效地围绕目标解决问题。数字化的下一步是智能化,我们在机器学习方面的技术积累和经验,都会通过火山引擎提供给外部客户,帮助更多企业做好智能化。”
新民晚报记者 金志刚
关键词:
-
临夏县:乡村振兴教育优先 尊师重教蔚然成风
9月8日,在第39个教师节到来之际,临夏县北塬镇举行“躬耕教坛,强国有
-
西安工业大学明德学院录取分数线?
西安工业大学明德学院是西安工业大学下属的一所全日制本科学院,成立于
-
“一喷多促”提产量 农业专家深入田间做好秋粮管护
央视网消息:眼下,山西省玉米、大豆秋粮作物正处于提升产量的关键期。
-
又一老字号终止创业板IPO!津同仁主动撤单 面临诉讼风险
上会前夕取消审核,时隔一年后,津同仁创业板IPO宣告终止。9月7日晚间
-
天气早知道丨“蓝天白云”高颜值天空来了
这个双休日蓝天白云+东向风体感稍微舒适一些但要小心午后局部的短时阵
-
马基雅维利主义(尼各马可伦理学)
1、《尼各马可伦理学》EthikaNikomachea亚里士多德的伦理学著作。2、据
-
股票行情快报:星球石墨(688633)9月8日主力资金净卖出65.55万元
截至2023年9月8日收盘,星球石墨(688633)报收于33 06元,上涨0 3%,换
-
9月9日上市公司重要公告集锦:中油工程签订30.33亿元施工总承包合同
重要公告广汽集团:8月新能源汽车销量万辆,同比增长%中油工程:签订亿
-
我国秋粮陆续进入成熟期 长势总体正常丰收有希望
人民网北京9月8日电(记者李栋)当前,我国秋粮陆续进入成熟期,距离大
-
新疆喀什:戈壁滩上养出澳洲淡水龙虾
“这是天山雪水养出来的澳洲淡水龙虾,外壳干净活性好,肉质非常紧实。
-
中国香醋市场消费现状 2023中国香醋市场调查研究
香醋主要用于日常饮食,直接客户主要为经销商,之后经由经销商渠道流向
-
摩尔每升等于多少毫克每升 摩尔每升
1、M=mol L=量浓度=摩尔浓度。2、英文:M=molarity=molarconcentration。
-
山东响马安徽贼河南的流光锤是什么意思(山东的响马 四川的贼 河南净是溜光锤 什么意思)
大家好,小乐来为大家解答以上的问题。山东响马安徽贼河南的流光锤是什
-
今日qq登录失败是为什么(qq登录失败怎么回事)
您好,来为大家解答以上问题。qq登录失败是为什么,qq登录失败怎么回事
-
我认为几乎所有人都知道Xposed和RRO主题都可以修改系统的框架
Google几天前在 r AndroidDev上宣布了AMA。AMA已经完成,所以这是我们
-
西北工业大学 华北工业大学
1、华北工业大学不在教育部公布的全国普通高校名单中,媒体披露其虚假
-
香港昨夜暴雨降雨量创1884年有记录以来新高
香港天文台在9月7日晚上11点到午夜之间录得158 1毫米的降雨量,创1884
-
田径世锦赛:中国队首枚奖牌入账 巴希姆无缘男子跳高四连冠
2023年布达佩斯田径世锦赛22日结束第四个比赛日争夺。中国队首枚奖牌入
-
日语就业前景和薪酬分析(日语就业前景和薪酬)
诸多的对于日语就业前景和薪酬分析,日语就业前景和薪酬这个问题都颇为
-
湖北观察丨武汉经开区真金白银助推企业上市 力争2030年上市公司达50家
湖北观察丨武汉经开区真金白银助推企业上市力争2030年上市公司达50家,