1. 创业头条
  2. 前沿领域
  3. 企业应用
  4. 正文

企业私有云建设中的存储架构规划

 2018-06-01 11:20  来源:互联网  我来投稿 撤稿纠错

  【推荐】海外独服/站群服务器/高防

和大家一起分享人教社在过去的6年中,在私有云建设及存储系统建设中的一些经验和教训,希望能给各位同仁在数据中心建设,尤其是存储系统建设的工作带来一些有益的帮助。

谈到私有云,相信大家已经不陌生了,在最近的两年,越来越多的听到我身边的朋友、同仁的企业开始了私有云建设,希望通过数据中心技术的升级改造,为企业带来更大的业务灵活性及更短的IT响应时间。和绝大多数虚拟化技术厂商在产品宣传方面提到的差不多,虚拟化技术和云计算确实具有非常多、非常好的特性,能够在帮助企业的IT部门更快速、更从容的面对各种业务需求变化的同时,实现诸如降低IT总体拥有成本以及节能环保等目标,但是,作为云计算系统建设者和管理者的我们,必须同时意识到,企业数据中心的核心运行方式的转变,绝不仅仅是搭建一套私有云系统,并将业务逐步迁移上去那么简单。建设一套能够完整承载企业全部IT系统运转的私有云系统,是包含了计算、通讯、存储系统建设及建立相应的管理模型、监控模型、应急处置模型、状态评估模型等一系列工作的复杂系统工程,这些工作,应该随着私有云建设及应用的不断深入,逐步的建立和完善,最终,建立起一套真正可靠、高效、能够应对快速业务变化及需求的私有云基础架构体系。

人教社对虚拟化技术的研究启动于2005年,2008年开始小规模应用,2010年完成了约80%业务系统的虚拟化工作。截止到上个月,位于北京魏公村业务楼的人教社主数据中心已经装备了总计1008颗CPU核心、5.3TB内存、1.2PB储存能力的私有云系统,承载着包括人教社在内的6个上下属企业共300余台虚拟服务器的运转,覆盖了ERP、CRM、ECM、OA、VDI、WCM、网站及数字出版产品等业务类型。存储系统方面,我们主要装备了IBM DS8870、V7000、V3700磁盘阵列系统及IBM TS3310磁带库系统,通过SAN网络,为虚拟化计算节点提供存储服务。

大体的铺垫我做到这里,下面,我们就进入今天的正题。请大家和我一起回顾和总结一下,一个出版企业在私有云建设中的存储系统架构是如何规划和建设起来的。

第一个问题,构建企业私有云,对存储系统有什么要求?

对虚拟化技术不陌生的朋友一定知道,私有云架构的核心技术是服务器虚拟化,说白了,就是对单体服务器计算资源的细颗粒划分和利用。在实际的应用场景中,主要体现为在一台虚拟化宿主服务器上运行多个具有独立操作系统环境的虚拟服务器,从而实现CPU资源的最大化利用。在一台物理服务器承载了更多计算需求后,相应的存储需求也就产生了,主要体现在存储能力和IO能力两方面;除此之外,要想实现虚拟服务器在多台物理服务器间的快速移动,还要求我们的存储系统具备同时为多台服务器提供同一内容数据的能力,即共享能力,便于虚拟机在进行宿主服务器迁移时,能够直接将存储数据从源宿主指向到目标宿主,并快速激活,而不是通过缓慢的数据拷贝方式;再者,由于要为多台宿主服务器提供存储服务,也就意味着虚拟服务器的正常运行依赖于存储系统的可靠性,所以,在私有云系统中,对存储系统的可靠性要求是有明显提供的,作为管理者,相信谁都不愿意看到因为存储系统故障,而导致所以业务系统停顿的情况;最后,为了确保整套系统的连续性,存储系统要具备良好的冗余和维护能力,在常见的诸如更换磁盘、更换电池、存储网络维护的过程中,无需停止存储服务。

那么,总的来看,构建企业级的私有云系统,对存储系统的要求就主要包括了存储能力、IO性能、连接能力、可靠性及可维护性几个方面,另外,作为补充,还包括可扩展性、升级性等方面。

第二个问题,私有云系统中的存储系统关键指标需求如何估算?

前面说到的,大家可能会觉得没有意义,因为目前市面上销售的几乎所有的存储系统都能满足这些要求。但如果我们正在面对构建这样一套系统,我们该从哪些方面进行评估,就要参考前面提到的几个关键能力指标了。

首先,我们先来看看关于设备的存储容量,我们该如何去计算呢。和传统运维模式一样,私有云系统的存储系统也需要满足业务存储和数据备份的空间需求,同时,作为虚拟化系统的特性之一,根据管理需要,我们可能还需要为快照准备额外的存储空间,方便我们的测试、更新和快速备份工作。那么,在存储容量需求方面,我们的经验是,存储系统的总容量需求,分为四个部分,即业务需求、备份需求、快照需求及增量需求。其中,业务需求就是我们私有云系统需要承载的业务负载所需的真实存储需求,主要由操作系统、平台软件及用户数据组成,把所有业务系统的这三个方面的数据加起来,就是我们的业务需求容量了。特别需要注意的是,因为我们将数据增量单独考虑了,所以业务需求容量是不包含数据增量需求的;接下来我们来看看备份需求,在传统运帷模式时代,我们的备份内容主要是数据,操作系统、平台、配置等内容往往不在我们的备份范围之内,原因很简单,在传统运帷方式下,受到硬件配置差异及裸系统恢复不便等限制的影响,全系统备份的实际价值和恢复难度都不理想,在基于虚拟化技术的私有云平台中,这一情况得到了根本的改变。

由于虚拟机的硬件是被虚拟中间层软件定义的,这就意味着所有虚拟机的硬件环境是可以方便创建和变更,而不再受到物理硬件的影响,使全系统备份和裸系统恢复变得异常简单,所以,在私有云环境下,全系统部分将成为备份的主体,其存储资源的需求也就可以基于业务服务器实际的存储需求来估算了。在人教社,我们的常规业务服务器的数据备份存留时长为7天,关键业务服务器的数据备份则会超过半年,总体来看,数据备份所需要的存储空间,大约使业务需求容量的1.5倍左右,即1TB业务数据,需要1.5TB的备份空间;快照空间需求包含备份用途的快照开销和运帷用途的快照开销,其中,备份快照开销主要用于备份过程中的快速数据准备,而运帷用途快照则用于补丁部署和应用更新阶段的系统快速回滚。备份开销以全平台中存储容量最大的系统的存储需求为界限,加上未来一段时间的数据增量即可,例如数据密集型的ECM系统的存储使用为35TB,未来两年的数据增量约在10TB左右,则准备45T的备份快照空间即可。这里需要注意的是,快照空间受到单一磁盘阵列边界的限制,即如果你有多个磁盘阵列系统,则需要在每个磁盘阵列上单独规划备份快照空间。运帷快照的磁盘需求不大,预留全部业务数据2%存储空间即可;最后,对于数据增量的存储需求,每个企业根据自身业务特点的不同有所区别。人教社的数据增量存储空间保持在业务需求、备份需求及快照需求综合的15%-30%区间。

说完了存储空间需求,我们再来看看IO需求。说到IO性能,几乎所有的技术控们都会无休止的追求更高、更快、更强的目标,但在当下企业成本控制越来越严格的形势下,提出合理的IO需求估算,有利于突出选型方案的科学性。由于各种业务系统的IO性能需求存在差异,即使是同一种业务系统,在不同企业的IO消耗也由差别,所以IO性能需求很难用一个计算公式去简单的核算,但我们依然可以根据一些经验来宏观的估计一套私有云系统的IO需求。以人教社各类型的业务为例,其IO需求大体情况为:

应用 50IOPS 5MB/S 吞吐

数据库 140IOPS 15MB/S

邮件系统320IOPS 20MB/S

VDI桌面 15IOPS 4MB/S

网站 1400IOPS 18MB/S

文件服务器 80IOPS 9MB/S

根据这些参考,我们可以粗旷的估计出私有云系统的存储IO需求。除了估算实际IO需求外,我们还要为IO需求变化及未来新增IO需求留出空间。当估算出总体IO需求后,选择存储设备时,新设备的满配情况下最大IO能力应至少高于总体IO需求估值的1.5倍以上,以便在IO性能不足时,能够进行性能扩充。在这里特别需要注意的是,磁盘阵列系统的IO性能与装备的磁盘数量有直接关系,即装备的磁盘数量越多,则IO性能越强。对于IT系统对IO性能需求比较大的企业,SSD加磁盘的混合模式可以在装备较少磁盘数量的情况下,得到几倍于传统磁盘的IO性能,是平衡磁盘数量和IO性能的很好手段。

容量需求和IO性能需求是两个最关键的指标,完成了这两项需求的估算,基本上就可以开始寻找相应的阵列产品了。

第三个问题,iSCSI、FC、FCoE如何选?

这是一个历史悠久的话题了,大家在度娘上随便就能找出上千篇相关文章,在这,我就不做更多的阐述了。在当下SAN网络的构建成本和FCoE系统差距越来越小的情况下,人教社选择了SAN,它提供了足够的性能、可靠性和可管理性,而更重要的是,使用了SAN网络,存储工程师再也不用和网络工程师去讨论性能分配的问题了。

最后一个问题,也是最重要的一个问题,企业私有云系统的存储系统架构该如何规划?

其实每个企业的IT都有自己的特点,任何一种存储架构都有它的优势和劣势,在这和大家分享几个我这几年做私有云存储系统建设的小心得,希望能对大家的存储系统规划有所帮助:

1.部署的阵列系统越少越好,管理更多的陈列,只会增加工作量。如果已经在使用大量小型磁盘阵列,用一个大型的代替它们是值得的。

2.尽可能保证架构简单,能不用FC交换机就不用。

3.对于虚拟化系统,快照功能是必须的。

4.阵列的可靠性高于一切,不怕慢,就怕站。

5.如果IO很大,上SSD吧,2%的容量就行。

6.私有云的备份,磁盘是必选的。

7.对于私有云,现阶段的存储虚拟化水平是在用人力投入换硬件投入,趋势很清楚,人力成本在涨,硬件成本在降,除非你存储管理经验丰富,否则慎用。

8.RemoteMirro是好东西,本地可以做阵列间冗余,远程可以做灾备。

9.不要完全信任集成商,对于私有云,他们多数仍在学习期,让自己强大起来是正道,另外就是相信高手在民间。

10.私有云系统中,存储系统最重要,搞好了一切就都好了。

更多私有云项目加盟请访问:https://www.admin5.com/xm/list-17.html

申请创业报道,分享创业好点子。点击此处,共同探讨创业新机遇!

相关文章

  • CRM SaaS增长焦虑笼罩,Salesforce、纷享销客欲破局

    头部CRMSaaS厂商的运营情况往往综合反映行业的景气程度,是整个行业的晴雨表。

  • SW-LIMS条码管理助力钢铁行业可视化、电子化流程管理

    近年来,面对日益激烈的市场竞争,如何实现生产原料和成品的高品质、低成本、高效率逐渐成为大部分公司的目标。条码管理技术的开发和应用可以使企业从传统的生产管理方式中彻底走出来,向数智化转型的方向迈进。北京三维天地科技股份有限公司在实验室数智化领域具有丰富的行业经验,致力于为客户提供信息化整体解决方案及相

  • 信雅达助力人行数字供应链金融服务平台电子保函系统建设

    2024年1月22日,人行数字供应链金融服务平台电子保函模块正式上线运行,全国首批共5家试点行于日前完成验收与上线工作。信雅达以专业、丰富的系统建设经验助力3家试点行(宁波银行、南京银行、徽商银行)电子保函系统建设,并于1月21日前完成系统上线准备工作,1月22日与人行同步正式上线系统运行,其中宁波

  • 打造工业4.0的5G+边缘云服务产业生态,艾灵完成1.5亿元A轮融资

    近日,艾灵完成1.5亿元A轮融资。本轮投资方包括英特尔资本、深圳天使母基金直投基金、TCL中新融创、浦耀信晔、住友商事亚洲资本、新电投资(SingtelInnov8)、华迪创投。据透露,艾灵本轮融资将用于深化工业5G、工业智能等核心产品的研发,加速在更多行业落地推广,推动重要行业市场大规模商用落地,

    标签:
    云服务
    5g技术
  • 企业级软件的2024,在进化中遇见“新机遇”

    十年,是时间的标尺,也是发展的刻度。从2012年的2.5万亿到2022年的10.81万亿,国内软件产业收入增长了近4倍。特别是近两年,得益于数字经济的蓬勃发展,软件产业更是迎来了黄金期。在外部数字化需求的拉动下,产业内生动力强劲,服务商不断地加速产品进化、生态布局,以寻求新一轮增长。然而,一半是火焰

    标签:
    企业管理软件
  • 越来越“贵”的企业支出,该怎么省?

    如今,很多CFO开始关注企业支出数据,希望通过精细化洞察分析,实现有效降本。但由于费用支出零散化、报销流程繁琐化、支出管理割裂化,导致支出数据分析无抓手,数据沉淀不完整导致分析结果无效。暗藏的合规行为如果没有及时发现,还会带来经营风险。分贝通近期发布《一体化支出管理案例集·春季版》,收录了智能制造、

    标签:
    企业管理软件
  • 全面普及后 ,你需要了解这样的数电票

    从推出全电发票、改名数电票,到十多种票面样式落实;从少数城市试点,到试点城市覆盖全国范围......从“以票治税”到“以数治税”,数电票作为“金税四期”工程的重要载体,已进入全面普及时代!全面普及后,数电票的概念、数电票与纸质票的区别、如何开具和收票等......每家企业更要做到心中有数。01数电票

    标签:
    电子发票
  • 国产化攻坚战 企业管理软件的机遇在哪里?

    摘要:在信息技术快速发展和数字化浪潮席卷全球的今天,中国企业正积极迎接数字化转型的挑战和机遇。在这个过程中,国产化替代正成为中国企业提升信息安全性、实现自主创新与可控性、降低采购成本的重要路径。“从企业自身来讲,在推进精益化管理的进程中,实现软件产品的升级迭代,一方面,要汲取国外先进软件的精髓,另一

    标签:
    企业管理软件
  • 赋能“一带一路”高质量发展 | 凌锐蓝信助力新能源行业客户实现全球化布局

    伴随“一带一路”的高质量发展,国内企业“走出去”在海外的布局越来越广,出海产业也不断升级迭代,对信息化、数据化建设也越来越重视,信息技术的不断发展在企业全球化布局起着至关重要的作用。凌锐蓝信为用户的全球业务提供高性能、安全和稳定的数智网络服务,消除用户的关键任务应用程序和全球实时流量的连接和延迟问题

  • 青云科技云研报·金融 |打造数字化新生态,全球业务支撑平台为何是关键?

    随着全球化的加速和数字技术的普及,金融业面临着日益激烈的市场竞争和不断变化的客户需求。为了更好地适应新时代的要求,不少金融企业,特别是银行,正在积极推进数字化改革,打造一个全球业务支撑平台,以提高运营效率、降低成本、提升服务质量。根据德勤《DigitalBankMaturity2022》报告显示,银

    标签:
    数字化技术

编辑推荐