架构师必读!“架构师成长计划”牵手百度,聚焦未来数据中心基础架构
在全球疫情爆发、经济低迷的特殊背景下,新基建成为提振中国经济的全新战略,聚焦了全球的目光。大数据中心成为新基建的七大领域之一。
随着5G网络、人工智能、工业互联网等产业的成熟,生产运营所需要和产生的数据量呈指数级增长,反过来,大数据对于经济社会与人们日常生活的影响深入到各个层面,社会对于数据处理能力的需求急剧增长。大数据中心故而自带流量,已经成为新晋“网红”。
在大数据中心产业中,离不开针对数据收集、分析、运算、处理的硬件设备制造商与软件算法提供商,而对于互联网、制造业、金融、政府等各类大数据使用部门,必须借助成熟可靠的大数据中心指挥控制解决方案,对大数据进行快速传输、可视化呈现与高效分发,发挥大数据的作用。为此对于担纲重要任务的架构师更是需要紧跟技术与市场趋势,follow技术“网红”,努力成为技术潮人。
为此,Science与英特尔首度联袂推出“架构师成长计划”在线系列课程,共同为架构师修筑成就优秀之路,助力架构师构建未来,让智者更强。
我们正处于一场企业级数据中心革命性转变中,随着规模的不断扩大, 传统数据中心将计算、存储、网络类资源分隔,辅以虚拟化软件进行资源简单调度和管理的方式已经无法满足需求。
2010年至2019年,数据中心行业经历了波澜壮阔的十年,当前随着“新基建”的浪潮,数据中心又将迎来下一个黄金时期。高密成为新常态,快速部署成为刚需,AI等新兴技术的驱动促使数据中心实现数字化转型和智能升级。
了解未来数据中心面临的挑战及发展趋势则成为必修功课,“架构师成长计划”由百度集团副总裁侯震宇开讲第三课——《未来数据中心基础架构》。
侯震宇负责智能云事业群组云计算产研团队和技术中台群组工程团队,是贴吧、知道、空间、网盘、基础架构部等业务的奠基工程师之一,历任新产品研发部架构师、基础架构部主任架构师、百度移动云首席架构师、系统部执行总监。先后负责系统部和基础技术体系的管理工作。
本课程结合百度及侯震宇的自身实践,介绍如何根据挑战与趋势设计未来数据中心基础架构。本课程一共分为 4 个部分:
第一部分:未来数据中心是怎样的?
国民经济加剧数字化、互联网化,这些几乎都建立在云的基础上,如今混合云日益成为大多数企业的首选。由物联网设备增多带动的边缘计算增长不一定会取代云计算,相反,边缘计算和云计算的结合将带来更强大的数字化和物理化的基础设施。
第二部分:未来数据中心的挑战。
整个物理世界不断被数字化,大量数据在近年来不断产生,尤其是随着AI的爆发,相关算力的需求也飞速增长,数据对存储的需求也越来越旺盛,这是未来数据中心将面临的一大挑战。
第三部分:软件定义的数据中心。
软件定义技术的发展范围旨在从底层硬件组件中提取数据中心资源,并进行虚拟化、自动化和编排的强大组合。同时,仅依靠软件定义存储(SDS)和软件定义网络(SDN)来解决基础设施管理难题并不足够,正确的实施需要适当的硬件设置。
第四部分:硬件重构的数据中心。
除软件外,未来数据中心同样需要面临硬件重构,进一步探索全新的IT 架构变迁。例如,更猛烈的计算需求促进了异构类芯片的研发;达到高访问速度又能实现非易失访问的新型存储介质也涌现出来,这些变化也为数据中心带来变革。
大咖面对面,英特尔对话百度:
如何看待计算和存储的池化解耦趋势?
交流碰撞火花,沟通启迪灵感,我们为每门专题课程都设置了对话环节,此次,由英特尔首席工程师李志明与百度集团副总裁侯震宇围绕未来数据中心基础架构的趋势展开探讨。
李志明提出,在存储领域,有一类硬件属于超融合的结构,即计算和存储在物理上合在一起;而另外一类则是解耦和池化,物理上计算节点和存储设备是分开的,中间通过高速网络进行互联。随着近年来的网络速度发展,池化和解耦的模式得到了越来越多的青睐。
对于池化和解耦的趋势,侯震宇表示赞同,尤其随着云计算发展规模越来越大,整个资源池化成为云或者大规模集群中非常明显的趋势。
他同时指出这种趋势为网络层面带来非常大的挑战——在做超融合等的时代里一些惯用经验,如果计算要应该发生在数据所在的存储节点上,需要通过减少数据交换,减少网络通迅,提升利用单机的能力来提升整个系统的吞吐。但是现在有了高速网络,这一些问题能够得到非常大的一个解决。
在所谓的计算和存储之间,其实一直存在着所谓的冯·诺依曼瓶颈——一直制约整个体系结构的发展。但如今我们在整个大的IDC、集群侧,可以通过高速的网络,能够让所谓的冯·诺依曼的瓶颈至少能够变得更宽,能够让数据的交换快速、变得更加的方便,来实现更好的IOPS和更好的成本融合。侯震宇认为对于大的云厂商来说,存算分离这种资源池化一定是更大的趋势。
李志明也阐明在现在新的池化模型下,可以更多地关注业务侧的优化、硬件的优化。
对于这样的趋势,英特尔也不断进行硬件设计优化。目前,英特尔已经开发并推出以太网适配器800系列Columbiaville,采用PCIe插槽,能够满足高达100Gbps的连接速率,同时致力于通过应用设备队列(ADQ)和动态设备专用化(DDP)等特性降低网络延迟。
意犹未尽?剧透有限,还等什么,赶紧点击阅读原文进行报名吧!
文章转载自:ScienceAAAS
本文仅代表媒体观点
文章图片等素材的版权归其所有者
延伸阅读
★ 架构师必备!英特尔携手Science联袂推出“架构师成长计划”,来自阿里云、AWS、百度、顺丰、平安等头部大厂专家分享实战经验
★ 架构师必读!英特尔携手Science联袂推出“架构师成长计划”,10位业界顶级架构师亲授实战经验
长按识别二维码
“芯”有灵犀,你也“在看”!