大模型降本第一步,从智算中心开始

大模型降本第一步,从智算中心开始大模型的发展 经历第一阶段拼算力 关注基础模型领先性之后 当前已进入更务实的第二阶段 即商业化落地应用 如何将大模型应用成本降下来 成为行业关注的焦点

欢迎大家来到IT世界,在知识的湖畔探索吧!

大模型的发展,经历第一阶段拼算力、关注基础模型领先性之后,当前已进入更务实的第二阶段,即商业化落地应用,如何将大模型应用成本降下来,成为行业关注的焦点。

京东云从智算中心开始,迈出大模型降本第一步,通过使用液冷技术降低制冷开支、引入AI进行智能化能耗管理等,帮助客户将大模型使用成本降下来。

大模型降本第一步,从智算中心开始

京东云(廊坊)数据中心

将制冷成本降下来

在智算中心的运营上,电费占运营支出的60%以上,其中很大部分来自于制冷产生的费用,优化制冷系统,已经成为数据中心提高能源效率、降低成本的重要环节。

液冷作为一种高效、节能、稳定的散热方式,冷却剂传递热量的速度是空气的6倍以上,正在成为智算中心的“标配”。

京东云自主研发的阿尔法智能算力模块,采用创新性的液冷技术,可以满足算力密度从20kW/柜到100kW/柜的部署需求,算力模块制冷因子CLF低至0.07,即制冷系统能耗只有IT设备能耗的百分之七,帮助客户显著降低制冷能耗。

此外,通过采用EVAC散热器及液冷技术,京东云新一代液冷服务器可使散热效能提升50%;并基于多元供电方案,在单机柜20kW的条件下,单机柜功耗1年可节省8500度电。

大模型降本第一步,从智算中心开始

京东云阿尔法智能算力模块

能耗节省率提上去

智算中心往往功率密度更高,是传统数据中心的5倍以上,对运维的要求也呈几何级增长。

为确保每一瓦特电力都能发挥最大效用,京东云推出了节能宝产品,利用高精度建模,对基础设施中全链路的暖通或相关机电系统实现1:1仿真构建,通过AI算法实现全局节能的精细化,节能率可达10%-45%。

基于京东云自研的精维软件平台,集成故障定位、容量管理,动态环境监控等功能,以及空调智能节能运行管理,在保证可用性的同时,极大提升电力系统使用效率。

降本实践对外服务产业

除了服务于自身,京东云也积极将智算中心降本提效相关能力对外输出。

博大数据投资建设的前海智算中心示范基地,采用京东云“阿尔法”算力模块产品,从规划到项目交付不到90天,借助液冷技术,基础设施能耗节省超30%

此外,京东云还支持青海电信智算中心的建设运营,通过共同打造稳定、可靠的商用智算集群,向社会输出普惠的高性能AI算力,为大模型的应用落地提供强劲动能。

当前,随着技术的不断演进,智算中心正逐步迈向更高层次的自动化和智能化升级,京东云拥有从MaaS服务到智算集群,再到硬件基础设施的数智算力矩阵,并基于成熟的智算云运营体系,让客户能够享受到更高效、更经济、更稳定的智算服务。

本文源自金融界资讯



欢迎大家来到IT世界,在知识的湖畔探索吧!

免责声明:本站所有文章内容,图片,视频等均是来源于用户投稿和互联网及文摘转载整编而成,不代表本站观点,不承担相关法律责任。其著作权各归其原作者或其出版社所有。如发现本站有涉嫌抄袭侵权/违法违规的内容,侵犯到您的权益,请在线联系站长,一经查实,本站将立刻删除。 本文来自网络,若有侵权,请联系删除,如若转载,请注明出处:https://itzsg.com/94376.html

(0)
上一篇 6小时前
下一篇 6小时前

相关推荐

发表回复

您的邮箱地址不会被公开。 必填项已用 * 标注

联系我们YX

mu99908888

在线咨询: 微信交谈

邮件:itzsgw@126.com

工作时间:时刻准备着!

关注微信