AI业界人人热议“大模型”,针对AI算力对数据中心的要求,虚拟化是数据中心建设的较优方案
  r3GfnFSr3J7R 2023年11月02日 26 0

生成式人工智能技术是指具有文本、图片、音频、视频等内容自动生成能力的模型及相关技术。随着生成式人工智能技术的持续迭代和深度学习,更加“聪明”的大模型将会广泛应用于各行各业和进入到更多的生活场景。

我们发现当前面对AI“大模型”算力挑战,亟需数据中心夯实基础设施建设,来应对海量数据的高要求处理。

在软件定义数据中心的模型中,虚拟化技术扮演着最核心的角色之一,通过软件的形式对物理资源重新抽象为计算、存储和网络等能力。毫无疑问,在20余年的发展历程来看,以VM为代表的虚拟化解决方案取得了巨大的成功。

从原来的互联网到云计算再到AI人工智能这样一个时代,AI人工智能对整个数据中心的基础架构、业内生态带来了几个变化,主要有三个方面的问题:

1.对硬件的要求会变得更加强大

整个AI大模型数据的迭代速度是比摩尔定律更快的,对硬件的要求,无论是性能、资源管理方式、还是规模都是重新上一个档次。

2.AI人工智能取决于数据

首先每个企业之间需要进行更加安全、高效的数据交换、学习,让AI变得更加强大。其次从硬件和软件结合的角度,硬件和软件如何更好地保障AI数据交换、数据使用、数据隐私发展等高安全性问题。

3.在AI技术发展背后,复杂程度远远超过对大模型的需求,同时也会有很多不同的模型

AI模型可能部署在云、部署在端,甚至部署在虚拟中心。大模型的多样化、部署多样化,一定会推动软件架构的灵活性、可靠性以及管理便捷性。这对供需双方都会带来更大的挑战。

这就需要关注软硬件融合问题。AI人工智能的海量数据,需要一些高敏捷性的开发效果,在这种条件下,软件的价值会变得更加重要。同时硬件也发生一些变化,首先是硬件变得更加异构,更快地满足客户的需求,也变得更加开放,与软件保持更好地一体化协同,推动行业发展。软件和硬件的功能需要更紧密的加强,才能满足目前高速爆发的数据增长。

当今,数字化转型升级与国产化浪潮,虚拟化在视频处理、人脸捕捉等AI人工智能中发挥作用,虚拟化也在如何把硬件的功能更好地应用到软件,实现软硬件融合发展方向努力。

云架构下的数据中心,虚拟化不能缺席

越来越多的企业意识到,采用一家云计算供应商,必然会带来设备或生态绑定、低效竞争、数据权属等一系列问题,于是多云架构在头部或腰部用户中成为一种非完全技术驱动的趋势。多云管理下可能包括公有云、私有云、虚拟化资源池以及多样化的设备,通过多云管理平台实现异构资源的治理和成本优化。

AI业界人人热议“大模型”,针对AI算力对数据中心的要求,虚拟化是数据中心建设的较优方案_数据中心

多云架构的潮流下,虚拟化是保持竞争力和最优投入的战略

数据中心虚拟化的核心主要包含计算(服务器)虚拟化、存储虚拟化、网络虚拟化。计算和存储虚拟化支持的规模取决于软件能力和商业考量等因素,从软件能力的角度实现同时支持成千上万个节点的规模并非难事,可以通过分布式多层调度架构、多区域调度等设计达到理想的效果;之所以建立集群数量控制或者接入条件等约束,主要是考虑到作为软件层的独立与广泛兼容性、对复杂环境的广泛适应性,无论是超大规模部署、中大型虚拟数据中心甚至单一节点的部署。与全栈云平台天然设计于分布式架构应用不同,虚拟化提供适应各类应用(包括单体架构、三层架构、SOA架构等)更为充分考虑的连续性和可靠性保护

虚拟化技术的演进过程还在继续,并向另一个成熟的级别迈进,包括但不限于:RAS(可靠性、可用性和可服务性)保护的提升、PB级内存池、DPU的融合与协同、隐私计算等新模式的支持、LLM的支持与基础架构治理等,这类新的演进方向将引领新的需求潮流,和以虚拟化为基础的其他数字化解决方案交相辉映。

分布式存储为代表的存储虚拟化技术,更是具有显著的线性扩展、多副本保护、跨数据中心等优势,并作为全栈云平台默认存储资源的提供者。

至于网络虚拟化,在解决逻辑网络到物理网络的映射和模拟后,当前热议的SDN更是面向中大型数据中心、跨数据中心大二层网络打通而生,为解决虚拟化的虚拟机大规模网络调度策略的一致性问题逐步发展成熟。

以上可以看到,虚拟化能够轻松驾驭大中小微等不同的数据中心规模,但在商业落地过程中往往要衡量技术与市场模式。各类云操作系统及解决方案经过数字化转型的“美颜”能够高歌猛进,背后也存在着虚拟化这位低调的功臣。

虚拟化已深耕中大型数据中心

事实上,虚拟化已经无处不在。虚拟化的垂直领域表现最为活跃的包括zf、电信、教育、媒体、制造业等,细分的应用发展(例如新媒体、视频处理、人脸捕捉等)导致的大规模数据积累推动虚拟化市场的增长。

AI业界人人热议“大模型”,针对AI算力对数据中心的要求,虚拟化是数据中心建设的较优方案_AI_02

当今的企业依靠数据运作、制定商业策略,数据的不断增长推动IT基础设施必须能够快速有效地支撑数据的处理。以虚拟化为基础的大规模云计算数据中心,在抽象的计算资源池内以一定的粒度进行进一步的细化分配,以透明的方式为用户提供基于虚拟化资源的调度、供应、度量等的超级计算能力,达到数万台物理服务器规模是尤为正常的;随着硬件性能不断增强,虚拟化比例早已突破20:1、50:1,运行数十万个虚拟机的规模是完全可以预见的。以Google全球36个数据中心为例,利用虚拟化、SDN网络架构创新、可再生能源等技术支持超过30W台物理服务器规模。

根据Global Market Insights的最新预测,预计到2030年,数据中心虚拟化市场将以超过20%的CAGR扩张达到200亿美元,其中zf推动公共数据数字化的举措以及大型公司对云和数据的重大投资是该行业的主要驱动力。

当数据的服务化需求逐渐超出虚拟化基础范畴时,用户会寻求基于虚拟化的数字化服务方案,即云操作系统或云解决方案的形式。但云操作系统(例如openstack)本身并不具备虚拟化能力,仍然需要虚拟化作为负载的支撑底座。因此,无论公有云还是私有云,本质上仍是基于虚拟化为基础的数据中心。

面对“纷繁杂乱”的虚拟化市场,如何“稳准狠”地下手挑选适合的虚拟化产品?

四招挑选合适的虚拟化产品

第一:看产品稳定可靠

虚拟化产品的稳定性,看使用场景的多少,越多的用户使用这个产品,产品的稳定性就越好。因此推荐选择应用场景更加灵活、多样化的虚拟化产品,如CNware系列积木式架构的轻量级产品,可满足信创环境下不同设备规模的建设场景,并提供企业级虚拟化管理特性、资源智能调度、高可⽤保护、故障检测等能⼒,最长在客户生产环境系统中稳定运行10年以上。

第二:看产品生态圈

产品生态,就是软件可以运行在不同的平台上,软件和平台互相的做过了严格的测试和互相的认可。相对来说,优秀的虚拟化厂商更注重生态的培养,使自己的产品更多元化的同时,更注重厂商之间的合作与认可。因此选择与国产六大芯片等信创生态兼容适配的厂家,可同时满足主流x86、国产ARM架构等生态,并与数百家信创生态合作厂商的独立第三方信创虚拟化产品,以完成国产化适配。

第三:看核心技术投入

虚拟化厂商对产品的核心功能,投入大,特别是在丰富产品功能上和客户体验上,相对投入巨大的。因此推荐持续投入占比70%的研发精力、研发占比高、产品功能更符合用户体验,同时支持在线迁移、统一纳管VM,以更加符合国人的用户操作界面体验和国产兼容性等特点的虚拟化软件厂商。

第四:看响应速度和服务能力

系统运行出现异常或与期望的状态不符时,能够及时提供售后保障服务,快速高效响应,保障用户业务不中断,为用户解决实际问题。因此推荐有HA高可用、容灾功能的虚拟化产品来保障业务稳定性,以及拥有高度灵敏的售后服务团队来保障故障及时修复的厂家,支持7*24小时实时故障处理,解决后顾之忧。

【版权声明】本文内容来自摩杜云社区用户原创、第三方投稿、转载,内容版权归原作者所有。本网站的目的在于传递更多信息,不拥有版权,亦不承担相应法律责任。如果您发现本社区中有涉嫌抄袭的内容,欢迎发送邮件进行举报,并提供相关证据,一经查实,本社区将立刻删除涉嫌侵权内容,举报邮箱: cloudbbs@moduyun.com

  1. 分享:
最后一次编辑于 2023年11月08日 0

暂无评论

r3GfnFSr3J7R