游客发表
封面往事记者 欧阳宏宇
在BAT、助推自研360 、国产高功商汤等国内企业纷纭宣告入局AI大模子之后 ,大模面向大模子磨炼的科技高功能合计需要也迎来井喷式削减 。
克日 ,企业腾讯吐露自研高功能合计收集星脉高功能合计集群。纷纭据介绍,加码集妄该合计集群具备3.2T通讯带宽,助推自研能提升40%的国产高功GPU运用率,节约30%~60%的大模模子磨炼老本,为AI大模子带来10倍通讯功能提升 。科技基于腾讯云新一代算力集群HCC,企业可反对于10万卡的纷纭超大合计规模 。
不久前,加码集妄为了飞腾算力支出,助推自研OpenAI开始限流。这眼前是通用家养智能的火发生起了AI大模子参数目级飙。为反对于海量数据的大规模磨炼,需要大批效率器经由高速收集组成算力集群 。国内厂商正试图经由技术的演进对于算力运用效益优化。
往年4月 ,阿里云也已经吐露了其高功能AI磨炼合计平台灵骏智算;上月尾,遥想高功能合计与家养智能主任技术照料郝常杰也对于外展现,在高功能合计上走凋谢融会技术道路。此外,华为云 、商汤、科大讯飞在高功能合计集群上都有妄想。
不外 ,大集群不即是大算力 ,相同 ,GPU集群越大 ,发生的格外通讯斲丧越多。好比 ,千亿 、万亿参数规模的大模子 ,磨炼历程中通讯占比最大可达50% ,传统低速收集的带宽远远无奈反对于。同时