邬贺铨院士关于算力的十点思考



一键收听,ICT最新资讯
欢迎加入"
我的小程序

近日,2022中国算力大会在济南开幕,在以“算力筑基高质量发展”为主题的主论坛上,中国工程院院士邬贺铨发表《对数据中心“数学”与“算术”的思考》的主题演讲,提出了对算力的十大思考。邬贺铨解释“数学”即研究数据的科学,“算术”即研究算力的技术。

以算为主还是以存为主?


邬贺铨表示,AI应用驱动算力需求快速增长。基于GPU/NPU/FPGA等构建的AI智算中心适于训练数据导出模型。

训练出数学模型后,深度神经网络的使用并不需要调度非常多的参数,降低了对算力的需求。基于CPU的通用算力的IDC适于在已知数学模型下的计算任务。

邬贺铨指出,是否可以认为AI智算中心主要任务是算,IDC主要任务是存?

三类算力如何合理比例?


目前算力可以分为基础算力(基于CPU芯片)、智能算力(基于GPU和NPU芯片)和超算算力(基于超算)。

从2021年全球算力分布来看,美国占31%,中国占27%,其次是日本、德国、英国等其他国家。美国的基础算力占全球35%,智能算力占15%,超算占30%,而中国这三类分别为27%、26%和20%。

邬贺铨表示,可以看到美国以基础算力为主,中国智能算力的能力远远超过美国。中国的超算和AI智能中心是以政府为主,基础算力以运营商和互联网企业为主,美国则主要是互联网企业为主。

冷数据与热数据


IDC数据显示,人类历史上90%的数据都是在过去几年间产生的,50%在短短两年内生成的,预测到2025年数据量年均将以30%增长,即两年增70%。

一般来说,最近产生的是热数据,经历一周或数月后将转为温或冷数据,冷、温、热数据分别占累计数据总量约80%、15%和5%。

冷数据主要是存储,计算需求非常态。东西部分别适合处理热和冷数据,东数西算实际上是东数西存。

存算分离与存内计算


存算分离架构在控制单元指令下从存储器读数据并交到CPU计算,得到的结果还需送回存储器。但对冷数据I/O往复并不频繁,因此更适用于冷数据处理,例如云平台建模,边缘计算训练与仿真。另外,存算分离可采用开放存储体系和磁带存储介质,存储器可同时服务多服务器,池化存储支持多云,高利用率,降成本与能耗。

不过,热数据需快速计算,但受限于存算分离I/O瓶颈,且CPU能力受累于存储器访问速度难以发挥,更需要存内计算。存内技术以RAM代硬盘,在RAM内完成所有运算,例如自动驾驶可以在车内同时完成存与算,但目前实现复杂和成本高。

邬贺铨表示,虽然西部以处理冷数据为主,但也需要处理当地的热数据,冷热数据是否需要分别采用不同的存算架构?

封闭系统存储与开放系统存储


服务器一般由CPU和内存组成,如果将存储也放在一起,则称为封闭存储系统,但是容量有限。因此,大多数情况下是将存储和服务器分离,即开放系统存储,实现存储容量为多服务器共享,以池化方式支持多云应用。不同存储架构适应不同任务,可按照任务来软件定义存储。

PUE与IT能效


PUE是数据中心能耗占IT系统能耗之比,反映了制冷系统的水平,但并非衡量IT系统的能效。据统计在IDC的IT系统的能耗中,服务器约占50%,存储系统约占35%,网络通信设备约占15%。

数据中心需要7*24小时工作,但通常并非7*24小时都在计算,非计算状态下也耗能,此时存储系统的能耗成为主体。据麦肯锡报告:大部分电能用于维持服务器状态,仅6-12%用于计算。

因此,要降低能耗,首先对冷数据存储采用磁带代替磁盘,预计100PB十年存储成本可下降73%;其次,热数据存储用闪存代替磁盘,改进访速、吞吐量及能效,但目前成本还较高;另外,还要探索通过数据预处理改进能效。

数据可信与灾备保护


数据最重要的是安全,目前主要有两种灾备保护方案。一是三副本方案,容量利用率较低,但读写快,适于小文件;二是4+2纠删码方案,容量利用率较高,但读写慢,适用于大文件场景。这时候就要思考,大小文件需要分区存储,以便采用不同可靠性技术方案吗?

同时,灾备是数据中心刚性要求。据华为/罗兰贝格报告,美国数据保护占存储投资为33.3%,全球平均为27.4%,而我国仅7.8%,并且异地备份的比例更低,防灾能力堪忧。

此外还有值得研究的是对数据备份还是算力备份?算力与存力需要等比例备份吗?

存算协同的思考


根据华为/罗兰贝格报告,中国与美国相比存算比低一倍,导致中国算力利用率也较低,可以理解为,虽然算力有了,但存储没跟上。而存算比并非固定,例如对于冷数据其计算频度低,存算比应比热数据更高。因此,对冷数据和热数据分别的合理存算比应该是多少值得思考。

另外,带宽(吞吐量)和每秒/O操作数(IOPS)是衡量存储性能的两大指标,前者需要聚合更多存储单元的带宽,后者希望减少每次数据存取请求涉及的存储单元数,二者难以兼得。可以从计算任务调度入手,为存储系统提供预判此次任务的IO模式的信息,以便做出针对性的缓存策略和数据一致性策略,甚至将数据调度到合适的存储位置,获得更好的数据存储效能。

算网容量配比的思考


2021年全球数据中心流量分布,数据中心内占71.5%、数据中心到用户占比14.5%、数据中心间占比13.6%。主备数据中心间的数据传输要求同步动态更新数据,实时性高,不过每次更新的数据量不大。但对主备间链路可靠性要求高,通常需要端到端双路由。

另外,东西部数据中心间传输系统容量双向不对称。从东部定期将由热转冷的数据转移到西部,数据量大,但实时性要求不高,瞬时带宽不必很高。西部数据按需计算后的结果需要回传东部,数据量不大,但实时性可靠性要求高。东西数据中心间链路在数据中心到所在城市段需要双路由。我国需要有更多的调研和经验数据来决定数据中心间及到用户间的传输通道容量优化设计。

对于数据中心内,邬贺铨表示,IDC内网多级交换引入时延,需用智能无损交换机和拥塞控制机制。因为,0.1%的丢包率会使网络吞吐率降50%,宁可降速慢传也优于丢包重传。

东数西算的思考


东数西算使得算力设施的布局超越了数据中心枢纽的范畴,虽然设想东部与西部互为冷热数据的配对,但东部西部间应如何比例?

以广东数据中心规划为例,设计省内算力70%,省外算力30%,这与冷数据占比80%差别很大,是否理解冷数据占80%是指存储容量而非算力的比例?另外,在市场经济条件下,东部与西部并非固定配对,各自独立设计部要如何能做到容量最佳利用?

同时,同一数据中心枢纽或集群内部也有很多比例需要优化。数据中心枢纽内有多个数据中心,每个数据中心内部多业主,如何实现枢纽内各数据中心所需的能源与网络资源集约化,并建立业主间资源共享机制,提升利用率。每一个数据中心需要设计算力、存力与网络能力合理的比例以及相应灾备比例,会视冷热数据有不同的优化。数据中心需立足长远建设能效更高的大型数据中心,但切忌一步到位.

此外,Gartner认为,2025年约超75%的数据将在边缘侧处理,需规划边缘与集群数据中心算力比例。

最后,邬贺铨表示,关于数据中心的“数学”与“算术”还有很多需要深入研究的内容,要善于从实战中学习创新。

澎湃新闻从中国工程物理研究院获悉,著名核材料与工艺专家、中国工程院院士、中国工程物理研究院研究员武胜因病医治无效,于2023年1月4日8时30分在成都逝世,享年89岁。武..

2003年“非典”期间,蒋华良带领研究团队率先在国际上成功表达了SARS重要蛋白,标记了一条可能的SARS感染途径,获得了一批有效的SARS病毒化合物。不仅研究化学,江苏武进人..

12月24日,中科院上海药物所微信公众号发布讣告,著名药学家、中国科学院院士、中国民主同盟盟员、中国科学院上海药物研究所原所长、研究员蒋华良先生因病医治无效,于2022..

12月18日,网络“大V”司马南通过微博发布消息称,我国著名粒子物理和理论物理学家、中科院院士何祚庥与夫人庆承瑞双双染疫在家、无人护理,“没有医务人员与他们联络过,社区的、中科院的都没有”。12月19日晚,记者致电何祚庥院士夫妇所在的中科院理论物理研究所(以下简称理论物理所)及其秘书了解..

新华社天津12月14日电题:张伯礼院士解读疫情热点:中药西药可以一起吃吗?网上流传的抗疫中药方靠谱吗?……新华社“新华视点”记者张建新、白佳丽近一周来,奥密克戎病毒..

中新经纬12月11日电 (王玉玲 魏薇)“十月份的时候,我通过药店朋友渠道弄到了几百盒连花清瘟胶囊,想着卖给街坊邻居,结果没人要。这几天都被抢完了,还有人高价..

“您为什么要选择在国际上公开,放弃专利?”“我只想病人能好。”著名血液学专家王振义一改“杀死肿瘤细胞时损害正常细胞”的疗法,引导肿瘤细胞“弃邪归正”,让急性早幼..

中国科学院、中国工程院18日公布2021年院士增选情况,分别选举产生65名中国科学院院士和25名中国科学院外籍院士,84名中国工程院院士和20名中国工程院外籍院士。本次增选后..

2021年两院院士增选结果今天揭晓,共149人当选。其中,中国科学院增选院士65人,平均年龄57.4岁,最小年龄45岁。院士队伍结构得到进一步优化,特别是通过特别推荐评审机制..

聚焦BBC歪曲报道河南特大暴雨并发表无理“声明”,中方提出严正交涉。中央网信办督促网站平台通过取消诱导粉丝应援打榜的产品功能等方式,强化榜单、群圈等重点环节管理。..

【学习小组按】中国科学院第二十次院士大会、中国工程院第十五次院士大会和中国科学技术协会第十次全国代表大会5月28日上午在人民大会堂隆重召开。中共中央总书记、国家主..

据湖南日报报道,记者22日晚从袁隆平院士家属处获悉,根据袁隆平院士丧事从简的遗愿和当前疫情防控形势,23日长沙明阳山殡仪馆不安排接待群众前来悼念。视频来源:新京报我..

中国侨都院士之乡⑥江门五邑是院士之乡,以不到全国千分之一的面积孕育了34位院士,在全国名列前茅、广东第一!今天,小编为大家奉上“中国侨都 院士之乡”系列报道之..

每一件革命文物背后都是一个个有血有肉的人和一段段可歌可泣的故事本期《开讲啦》邀请到中国博物馆协会理事长国家文物局原副局长刘曙光他将与三位红色故事讲解员通过视频连..

本文由 C114通信网 来源发布

邬贺铨院士关于算力的十点思考

评论问答