- ?
数据中心里的数据销毁技术
忆梅
展开
数据中心是信息处理的集中场所,每天都会产生海量数据,这些数据不仅要占用很多的存储设备空间,还影响了应用的计算效率。这些数据中大部分都是交易数据、过程数据、用户数据或者中间计算数据,数据中心永久存留这些数据并无益处,还有一些时效性的数据,过期数据,让这些数据在数据中心的存储设备里睡大觉,不如清理出去,节省出来存储空间,这样可以大大节省数据中心的运营支出,提升数据中心的生产效率。如何对这些数据进行销毁,这里也大有学问。
首先,数据质量远比数据的数量重要,数据中心为了不断增长的数据而在软硬件上连续投资的做法,实在是一个代价昂贵的错误,要注重有效数据的处理。表面上看,数据中心的数据总量增长是非常迅猛的,全球数据量以每年58%的速度增长,不到两年就翻一倍,在未来这个速度会更快,其中大部分数据都是在数据中心里产生的。我们的数据中心是不可能每两年就扩容一倍的容量,所以任由数据量增长下去,数据中心会很快陷入不断扩容的怪圈,结果数据中心的规模越来越大,而数据中心业务并没有实质增长,数据中心的盈利水平下降。就好像是一个胖子,总是吃炸鸡可乐,将会越来越胖,但实际上身体的体质在不断下降,最后除了一身赘肉,什么也干不了。数据切不可成为数据中心的负担,该清理时就清理,该销毁时就销毁。
其次,我们要对数据进行销毁,就要分清哪些数据是有用的,哪些数据是无用的。这就要从数据产生的源头做起,在数据中心产生增量数据时,要将这些数据进行分类、整理归档,存储到分类的存储空间里去,同时对这些数据进行明确标记名称,通过名称就可以知道数据的大概内容,以便作为数据是否无用的判断准则,如果在数据记录时不明确,那么后来的数据销毁就无法做到精准,不仅销毁数据效率低下,还可能将有用的数据误销毁。管理这些数据是非常复杂的,涉及到数据辨识、清理、优化等等,而这些工作又是周期性,需要花费时间和一定的人力资源,且不会带来明显的收益,常常被忽视。其实,数据的有效存储工作将对数据中心的业务产生长期和正面的收益,且越早行动收益越明显。
第三,数据的销毁并不是简单的删除清空这样简单,数据销毁也有标准可遵循。美国国防部的DOD 5220.22-M标准是应用最广的一套规范,许多人都把DOD 5220.22-M直接当作数据清除与销毁的标准。销毁的手段也有几种,这和销毁希望达到的效果有关。一般销毁分为软销毁和硬销毁两种。软销毁是通过数据覆盖等软件方法数据销毁或者数据擦除。硬盘数据销毁中的硬销毁则通过采用物理、化学方法直接销毁存储介质,以达到彻底的硬盘数据销毁的目的。软销毁一般只是将数据文件进行销毁,并不能真正将磁盘区数据擦除,操作系统由于考虑到操作者操作习惯或者误操作,数据销毁后各种非常情况等诸多方面因素,用户所使用的删除命令,只是将文件目录项做一个删除标记,把它们在文件分配表中所占用的簇标记为空簇,并没有对数据区进行任何改变也就是没有对这些信息做任何数据擦除、数据销毁的操作,这样数据其实依然占用存储空间,没有达到节省存储空间的目的。所以数据中心的数据销毁都采用硬销毁的方式,真正将存储空间释放出来,用来存放更有意义的数据。硬销毁常用的方法有:格式化硬盘、硬盘分区、文件粉碎软件。格式化仅仅是为操作系统创建一个全新的空文件索引,将所有的扇区标记为“未使用”状态,让操作系统认为硬盘上没有文件,因此,若采用数据恢复工具软件是可以恢复格式化后数据区中的数据的,格式化也分高级格式化、低级格式化、快速格式化和分区格式化几种。低级格式化的销毁最为彻底,很难通过软件再将已经销毁的数据还原回来,硬盘存储空间得到充分释放。硬盘分区的方式销毁数据,也只是修改了硬盘主引导记录和系统引导扇区,绝大部分的数据区并没有被修改,没有达到数据销毁数据擦除的目的。文件粉碎软件是专门用于彻底删除文件达到数据销毁数据擦除目的的,在网上也出现了不少,一些反病毒软件也增加了数据销毁数据擦除的功能,用于处理一般的私人数据可以,但不能用于处理带密级的数据。以上的硬销毁方式虽然可以将数据销毁,但是不够安全,还是有可能被恶意份子还原出来,拿到数据去做坏事。还有一种硬销毁是采用专用的消磁硬盘机或者折弯机来彻底销毁数据,不管是直接对硬盘进行消磁,还是对硬盘进行折弯,都是破坏性的行为,硬盘将被损坏,不仅数据不能再还原,硬盘也无法再进行使用,这种硬销毁往往是用来对已经故障的硬盘进行处理,避免故障硬盘里存着的数据被坏人还原出来,拿着数据去做坏事。
及时对数据中心中的无用数据进行销毁,不仅可以节省硬盘存储空间,为数据中心节约运营成本,还可以提升安全性,避免一些数据泄露,给数据中心带来安全隐患。有些数据也许对数据中心或者部分数据中心用户是无用的,但并不代表对所有人都无用,数据的有用性完全要看将数据放在了什么样的环境中,若是这些数据被人所利用就给数据中心带来安全隐患,所以对于无用数据要进行彻底销毁,不让任何人有可乘之机,更不能让人有机会再还原出来利用。
- ?
数据中心遭雷劈 全球第二大云服务无法运行
牟魂幽
展开
【PConline 资讯】微软云服务 Azure 报告,9月4日 09:29 UTC,它的美国中南区数据中心附近发生了雷击在内的恶劣天气事件,导致了影响冷却系统的电压增加,进而导致其多个 Azure 服务出现连接问题,客户难以访问储存在中南区数据中心的资源。
微软的Azure客服人员在微博网站Twitter上发布的帖子称,在微软位于德州的数据中心附近出现了“恶劣的天气情况,包括打雷闪电”,结果导致功率骤增,影响了制冷系统。
这个数据中心已暂停运行,以防止Azure服务器和其他设备出现过热现象。受到此次Azure服务中断影响的还有微软的Office 365产品和Active Directory服务。
Azure是一组云端服务,用于开发、测试、部署和管理应用程序和服务。这些服务包括网站经营、存储空间和数据网络管理。微软Azure与亚马逊AWS等云服务形成了竞争。
微软Azure客服部门发帖称,工程师们已成功恢复数据中心的电能,而且恢复了受到影响的大多数网络设备。该公司称,它仍然进行各种“抢修工作”,力争让所有受到影响的服务重新开始正常运行。
受到影响的服务包括:Office365、Active Directory、Visual Studio Online、Visual Studio Team Services 等等,这些服务下线了数个小时甚至更长时间。这起事件影响到了很多微软 Azure 客户的工作,VSTS 是许多公司重要的生产力工具。
PS:我国贵州地区数据中心较为集中,其配套的电力设施相信比美国更好,建议Azure将数据中心迁移至我国将会彻底杜绝这类事件的发生。
- ?
对于数据中心来说 这些你不能不知道的UPS亮点
浅浮伤
展开
【PConline 杂谈】对于数据中心行业来说,硬件层面的升级往往会带动整个产业的快速迭代,尤其是对于数据中心行业来说尤其如此,近些年关于数据中心能源发展的讨论开始增多,根据权威预测,数据中心的能耗在未来10年将会有一个接近三倍的增长,随着能源成本和可持续观念的深入,数据中心的所有者和运营者需要对其损耗进行不断地优化,并采用可再生能源保持数据中心的可用性和恢复能力,这些措施将至关重要。
重中之重:能源效率
对于数据中心来说,在整个运营过程当中最为重要的就是能源效率,能源效率的高低直接反映了人们对于可持续发展以及气候变化的态度转变,数据中心的运营商正在考虑如何更好地应用基础设施中UPS电源系统,以最大限度地提高效率,同时以最小的资本支出(CAPEX)提供一致性和弹性。这促进了高效节能的模块化UPS系统日益普及,并且随着客户负载增长而扩展,同时保持100%的正常运行时间。
在过去的数据中心运营模式当中,企业为了满足负载不断增长的需求,在数据中心当中会部署大量的UPS电源系统,这样一来,就大大影响了数据中心的整体运营和成本开支。
数据中心的锂离子电池
在UPS供电系统中应用锂离子电池具有许多好处:与同等规格的铅酸蓄电池相比,其体积缩小70%,并且重量更轻,这意味着可以将更多的机房空间分配给服务器。锂离子电池还具有更长的使用时间,这使得锂离子电池有望替代铅酸蓄电池。
由于锂离子电池价格一直在下降,未来将会安装部署更多的锂离子电池。但人们预计锂离子电池将更多地应用在时间较短的待机应用,或应用于需要快速充电能力和放电、充电周期的电网中。
电源对于数据中心意味什么
对于数据中心来说,由于电源容量以及数据中心当中很多基础设施的限制,使得现在很多数据中心的现代化机架设计更加“吃香”,同时企业还大大提升了数据中心的高功率密度,因为过去那种采用传统设计的数据中心已经越来越不能满足现在用户的严苛需求。
而一些电网基础设施具有一定的局限性,因此,需要更多的创新技术,而太阳能和电池储能系统将成为数据中心供电的一种可行的选择。这也是为什么我们现在可以看到很多国外的数据中心企业在电源系统以及基础设施建设方面不断的加大投入力度。[返回频道首页]
- ?
2018年数据中心行业三大发展趋势
窦太兰
展开
数据中心管理人员在2017年面临着一些挑战:只有不到30%的企业做好了灾难恢复的准备;2021年网络安全成本预计会每年增加到6万亿美元;IT团队和数据中心管理人员很难掌握需要采取的直接和可行的步骤。
考虑到在新的一年中将不可避免地呈现出这些"假如"的情况,组织需要对行业趋势发展的一些预测来提供重要洞察力。
根据2017年的发展情况,以下是所预计的2018年数据中心行业发展的三个趋势:
1.对灾后恢复采取积极主动的态度
2017年全球多地经历了前所未有的自然灾害,很多数据中心管理人员正在被迫评估当前的灾难恢复计划,云计算基础设施解决方案占据主导位置,并将灾难恢复策略列为2018年的首要议程。例如,通过云计算工具使用功率封顶策略,在遭遇停电事件时将允许以较低的功率继续运行,因为实施功率策略可以提供最大功率消耗的一些保证。
组织制定备份计划可以扩展运行服务器的操作,而不必关闭和重新启动服务器。更重要的是,依靠云计算解决方案进行灾难恢复,组织可以通过监控服务器温度来检查基础设施冷却失败的情况。由于采用最新的灾难恢复计划,所以组织在新的一年中都不能忽视这一战略。尽管无法预测2018年将会遭遇的自然灾害,但有一点可以肯定,数据中心管理人员将会优化计划以防止出现意外。
2.数据中心健康检查可以减少停机时间
"每天一苹果,医生不找我",不管人们是否愿意承认这一点,这个古老的说法是完全正确的,通过这种方式保持健康可能会让医生远离。机器也不例外。他们也需要持续的监测和健康检查,以确保数据中心设施的质量。为了在问题成为灾难之前主动解决和减轻问题,制定数据中心健康管理战略对每个组织都是至关重要的。
不幸的是,只有三分之一的企业组织了健康管理战略,并且只有在遇到切实的问题时才这样做,在电力中断之后被迫实施,或见证其他地方出现故障,或被高级管理人员施加压力才会这样做。到2018年,电力中断事件可能只有小幅增加,因为一些组织不再提供被动方案,而组织的每次平均停电损失超过75万美元。
3.云计算 vs托管数据中心 vs 内部部署:IT决策者将在2018年做出重大决策
如今,数据中心市场正在升温,并没有放缓的迹象。根据调研机构451 Research公司的调查,目前云计算应用成为数据中心行业增长最快的部分,并处于领先地位。
预计到2020年,全球托管数据中心基础设施的空间年复合增长率将达到16%。托管和批发数据中心市场的复合年增长率预计将达到7%,这表明很多数据中心管理人员将他们的设备进行托管而不是在自己的数据中心运营管理,这是一个重大转变。
随着2018年的到来,数据中心管理人员将会继续面临与数据中心外包环境相关的收益和挑战,可以预期这些转变和对话将会持续。
除了优先考虑灾难恢复主动性,定期健康检查,以及满足迅速变化的行业期望以外,那么在2018年,组织还需要实施哪些重要的数据中心战略?
来源:互联网
- ?
什么样的备份容灾系统才真正适合云化数据中心?| 技术头条
灌溉
展开
作者 | 陈元强
责编 | 郭芮
以虚拟化、超融合、云平台等为形态的云化数据中心已经成为越来越多的企业机构数据中心升级方案。据权威媒体统计,云每年以25%的速度增加,其中虚拟化渗透率大于80%。云在按需交付、资源池化等方面有先天的优势,但随之也带来更多的数据和业务安全风险。无论是自建的云还是公有云,每年都频繁发生大量的数据安全和业务中断事故。
在备份容灾管理领域,一方面IT基础架构的云化变化速度已经大大超出了现有的数据保护技术的变化速度,而另一方面不少厂商又都声称自家的产品可以备份云。那么到底该如何选择真正适合云化数据中心的备份容灾系统,本文重点从以下几个方面展开讨论。
什么是云化数据中心?
简单讲,就是当业务需要,数据中心可以在数分钟内增加或减少业务所需要的计算、存储、网络等资源。再简单讲,就是随时增加或减少可以安装部署业务应用软件的服务器。
自建云化数据中心的方案有多种思路,如下:
1、虚拟化为中心的经典架构
这种方案是目前最主流的云化数据中心方案,主要采用的方案就是虚拟化操作系统、服务器与企业级集中式存储,该方案成熟度最高。这种方案,随着虚拟机规模增加,底层的集中存储会越来越感觉到不够用。这时候需要增加新的存储或服务器部署,重新迁移或分布虚拟机系统。
2、以OpenStack为代表的开源大集成架构
这套体系接近公有云平台的体系,主要的3个核心服务都采用高度弹性的方案来构成。随着引入的服务越多,运维管理复杂度也大幅度提升。目前开源体系最大的问题在于企业级运维管理的能力较弱,可靠性不能很好保障,可管理性差,易用性方面门槛很高,需要高度依赖商业发行版企业来保障持续的运行。
这类平台通常是从几千到上万个虚拟机规模,是一些大型企业在重点升级的云架构方案。
3、各类公有云的企业部署版本
国内的云计算公司,都相应推出了企业内部部署的版本,与OpenStack的架构类似,核心也包含3大核心服务,以及各类上层应用服务。第2、第3这类通常是一些大型企业,或者技术运维能力很强的机构才会采用。通常需要企业自己配置开发运维团队。
4、采用商业超融合的架构
第2、3涉及到的硬件投入、软件投入以及人力投入都很大,一般的中小企业都难以部署和运维。超融合把云计算里最核心的能力:虚拟化计算、软件定义网络与分布式存储三大核心服务融合在一起,形成3-4个服务器节点一组的模块化方案。
通过分布式文件系统融合服务器集群管理技术,把服务器的存储能力连接起来,形成可以被服务器共享的存储池,服务器内置的虚拟化操作系统。通过Web 管理控制台,可以为企业打造按需交付的云平台。
该方案无需外置其他存储设备,更容易交付和运维,企业自建私有云变得简单很多。通常超融合方案按照3 个服务器节点起进行部署,如果需要扩容,再按3-4个节点一组进行扩容。
云化数据中心与传统的数据中心有何不同?
1、传统数据中心的典型结构
下面我们来看一看传统数据中心的架构示意图:
一般每台服务器上跑1-3个业务不等,各业务通过不同的安装目录和不同网络端口来隔离。所有服务器数据都存入NAS/SAN 等集中式存储。
2、成本与运维效率对比
两种数据中心,由于底层架构不一样,无论在成本、效率、以及运维管理方法等方面区别很大。
这也是为什么越来越多的企业机构加速数据中心云化,只有这样才能更敏捷支持业务发展需求,提高资源利用率。
3、数据备份和业务连续运行保护模型对比
传统数据中心和云化数据中心在保护模型上,区别非常大。了解这些区别后,才有利于我们选择合适的保护方案。
当前的云化数据中心数据备份容灾现状
1、用物理机时代设计的保护模型保护云
国内外一些厂家产品都源于物理机保护的模型,延展到虚拟化领域。其基本的架构设计模型如下:
基本上就是一个简单的集成架构,把备份软件部署到服务器上,然后交付到客户。增加了虚拟机备份支持,本质上,在保护架构设计上没有特别变化。
2、保护容量固定
通常这类架构在底层选用的备份存储容量上,很固定。厂家在做方案时候,通常会考虑预留较大的空间用于备份数据增长的需求。
这会带来两个问题,一是初次投入较高,二是无法适应云数据规模增长的需求。最终空间会用满,这时候必须增加新的设备。增加新的设备,由于设备之间相互独立。势必会带来维护、迁移和更多的数据存储开销。
3、备份策略模型笨重
传统备份方案有全量、增量、差异备份方式。由于一直以来,考虑到底层存储和各种情况导致的数据错误,厂商通常采用几种方式结合的方案来保护物理机模型的备份数据。其中全量模型,会大幅度增加系统的存储开销,在云场景由于数据量大数十倍,显然是不合适的。
4、恢复速度慢
物理机时代设计的数据恢复方案,通常考虑的是数据回写恢复的方式。这种方式在数据规模不大的情况下,可以工作得很好。一旦数据规模很大的时候,这种方式恢复效率非常低。
5、容灾粒度粗
在传统物理机数据中心时代,关键业务要做容灾保护,通常采用的是存储级复制方案。这种方案,在物理机时代工作得很好。通常一些重要业务如数据库等是独享存储资源的。
在云化时代,所有的业务都共享存储,采用这种复制方案,显然是缺少优先级、重要性区分。在异地容灾效率方面,不能很好地解决业务重要性和业务带宽资源分配的关联关系。
具备云化数据中心级保护能力的备份系统的八个特征
特征一、支持虚拟化在线全增量即时合成模式的备份
通过云平台输出的API来备份数据,而不是安装客户端去备份Guest虚拟机内部数据。通过云平台输出的API 来备份数据的兼容性好,数据一致性更能得到保障。
在备份模型选择上,选用全增量模型备份是非常有必要。第一次采用全量备份,第2次以后采用增量备份方式,可以最有效的降低数据读取量,减少网络传输,最大程度提高备份系统的效率。同时系统可以根据增量数据即时合成为全量版本,用于快速恢复。
特征二、支持Scale Out模型的扩展方案
虽然可以采用插满硬盘槽位(ScaleUp)或多台组合的方案,来备份整个云数据中心。但这不是最佳实践。这种方式会大幅度提高运维管理难度。人为的分割和迁移数据、任务。规模越大,这种方案越难用。到了上千节点的规模,涉及数百TB 到PB 级数据,一般的方案需要多台设备(10 台到20 台不等)组合到一起,这种方案几乎难以实际运用。
应云而生的是Scale Out 的横向扩展模型。简单来说,就是一组一组地扩展,而组与组之间可以无缝融合成一个大组。所有组内的服务器节点数据都是共享的。另外,系统也能自动平衡内部的数据和任务分布。数据存储和任务处理性能,同步提升。
Scale Out 模型理论上能达到无上限的数据存储能力和保护能力。
特征三、集群范围的全局数据处理消重压缩能力
不少的备份厂家产品是支持数据消重技术,但由于架构设计的原因,也仅仅是在单套系统内部。单套系统保护的云主机规模有限,重删效果也大大降低。
对于高度重复的云化数据中心来说,备份系统具备集群范围的消重压缩能力,是一个关键指标,一些情况甚至高达90%的重复比例。如果用传统的方案,会投入数倍的成本来存储重复的数据。对于一些数千个云节点的大规模云平台,这将是巨大的投入。
特征四、批量并发即时恢复能力
如果还是按照现有的传统数据恢复方案,对于高度敏捷的云平台,慢如蜗牛的恢复速度,显然是不能容忍的。即时恢复,就是采用先在数分钟内(最短时间)应急恢复业务,然后再在线迁移。
批量即时恢复能力要求备份系统能够识别和支持并发的随机IO 流,并能很好的支持并发频繁的随机IO 读写需求。
特征五、多节点对等任务并行执行能力
云平台天生就是节点数量多,数据量大。
对于备份系统,是否能并行处理任务显得非常重要。否则是无法有效、即时保护好整个云平台。现有的方案还未准备好去支持数以百计的并行备份任务。
云平台的备份系统,不仅要求能够保护更多的任务,同时应该能够具备在集群备份系统内部,任务可以在失败后,跨节点执行,以满足更高的可靠性要求。
特征六、无限制版本管理能力
内置无限制的版本管理能力,可以有效提高云平台数据应用能力。无论1 个月前、2 个月前、3 个月前的数据,都可以得到有效的恢复、复制、克隆等。
区别与云自己的快照,该能力可以基于任何历史点执行任意多次的恢复、克隆、读写等。
特征七、细粒度恢复和数据复制能力
备份系统既能够备份整体云主机(虚拟机)数据,也需要能够执行文件级的数据恢复能力,根据业务情况组合使用。
对于执行异地容灾的场景,任务级粒度复制数据,可以有效降低带宽的使用,优先保护好重要业务。
特征八、备份系统能够输出管理API
备份系统能够输出管理API ,可以更加容易管理生产系统和备份系统。轻松集成在云管理平台,或企业IT 集中管理平台。使得整个备份流程更加容易根据企业需求自动化统一管理。
关于云化数据中心备份容灾选择常见的几个误区
1、支持了虚拟机备份就是云架构的备份系统
支持虚拟机备份是基本条件,而通过云平台输出的备份API 来备份虚拟机系统是云架构的备份系统的必要条件。
云架构备份系统工作是否良好,除了能支持基本的备份外,备份速度是否高,备份效率是否高,是否能快速恢复业务、是否能支持API 对接等,都是需要考虑的。
2、过度依赖品牌,品牌越知名越放心
在传统以物理机为基础构建的数据中心,以品牌来选择是合情合理。很多厂家的方案都是超过十年以上的研发,积累了大量的数据备份容灾实践。
尤其是一些一线大品牌,甚至超过20 年的历史,对数据库、操作系统、小型机以及各种变形的高可用架构的保护,都非常擅长。
但在云化数据中心时代,由于IT 架构的变化很大,大品牌擅长的兼容性、可靠性、性能、备份模型全都优势不再,一切从零开始。大公司、创新品牌都是从同一起点出发。谁起步早?谁更专注?谁就越有优势,谁就能最早适应客户的云场景。
3、备份软件安装在客户机系统里(Guest OS)
在客户机操作系统里面安装客户端的方案,这是保护物理机的方案。如果一台宿主机通过云化系统虚拟出10 个客户机系统,就需要安装10 个客户端。这种方式,运维管理复杂,也额外会占用更多的系统资源。
这种方案,对客户端的设计会提出更高的要求。直接拿备份物理机的软件过来在客户机内部部署,这是最差的方案。
4、备份系统的容量按照物理机应用数据模型估算
根据应用数据的规模和增长,来确定保护容量是传统数据中心保护方案常用的方案。云化时代,需要重新根据系统和应用数据两个维度来估算备份系统的容量,才能达到最好的保护和应用效果。
5、不考虑平滑的扩容方案
在传统数据中心,备份系统配置的容量一般能很好支持3 年以上的运行,所以扩容不是最需要考虑的要素。在方案的选择上,扩容不是最迫切的需求点。
而在云化时代,数据增长与变化的速度会很快。半年到一年的扩容周期是非常正常。因此拿已有的经验去确定方案,后期的成本更高,系统升级、扩容、迁移等管理就很复杂。
后记
在云时代,数据保护和管理的应用场景已经在发生革命性的变化,但很多用户和行业从业者还停留在传统架构中来思考和选择解决方案,这势必将更多的云环境下的数据置于无有效保护的险境之中。
本文从技术层面剖析,抛砖引玉,欢迎大家交流。
作者:陈元强,深圳市木浪云数据有限公司联合创始人 & CEO,木浪云云数据管理创建人,多备份在线备份云服务创始人。超过18年网络与数据安全、分布式系统与海量业务架构设计、云服务创业等经历,曾就职于腾讯盛大、宜搜、永达,并担任大数据、搜索、移动、信息安全等业务线总监岗位。曾发起创立腾讯第1 套具有核心专利技术百亿级实时大数据平台,更早负责永达大型网络安全管理平台研发(保护全国铁路客票核心业务系统和数十万节点安全),防DDOS 系统研发等。声明:本文为作者投稿,版权归对方所有。
- ?
数据中心运维里的那些“潜规则”你不可不知
Kemi
展开
数据中心是信息处理的重要场所,里面的设备承载着很多重要的业务,对连续稳定运行都有很高要求。
可是业务的运行还是要靠成千上万台的电子设备稳定运行来保证,为了确保这些设备运行不出问题,或者出了问题也让业务层面感知不到,数据中心运维的技术人员想了很多办法,有些还逐渐成为了行业运维的标准,很多数据中心都效仿和执行。
其实,有时技术人员做这些不成文的规定也是实属无奈,根本目的还是为了保证数据中心业务的连续稳定运行。业务中断对于数据中心都是天大的事儿,业务中断的损失很多都是以秒来计费,所有的规定都是为数据中心服务的。那我们就来看看,运维的工作都有哪些好玩的不成文规定。
01重大节假日必封网
每逢重大节假日来临,各大网络运营商,重要行业企业等的数据中心纷纷进行封网。所谓封网,就是停止一切对数据中心的人为操作和业务变更,让设备自己运行,不进行人工干预。封网并不是减少人员的值班,而是要加强人员的值守,确保数据中心运行不出问题,若出问题也及时处理和消除。此时封网可以减少一些人为故障,要知道百分之八十的故障都是人为操作产生的,不去动它反而是最安全的。
谁也不想在关键时刻自己的数据中心掉链子,出风头。重大活动时,主流的数据中心都已经封网,不再允许做任何的网络变更操作(设备出现故障的除外),有的数据中心机房甚至已经上锁,无人可以进得去。这项制度也是数据中心在运维的工作中摸索出来的,从以往的历史经验看,只要减少人为干预,让设备自己运行,出现问题概率会大大下降,所以在关键时期坚决不做任何变更操作,就让数据中心自行运行,发生故障的概率最低。
02定期重启设备
我们的手机如果用久了速度会变慢,如果重启一下再用会发现好很多。其实对于数据中心里的设备也是这样,数据中心里的设备常年不中断运行,运行时间久了,各种内存垃圾,各种软件BUG就容易暴露出来,设备出问题的风险随之增加,定期对设备进行重启,将有助于减少故障的发生,延长设备使用寿命。如果设备上业务没有备份,重启设备可能对业务造成影响。
所以,在重启设备前要做好评估,避免主动重启给业务造成影响。如果重启一次设备对业务造成的中断时间可以接受,那么可以定期,比如半年或一年对设备主动进行一次重启,如果设备使用的软件版本较老,也可以借此进行软件升级,不要认为重启了设备就是一件很丢人的事情。这就像马拉车,走的时间久了,马也需要休息一下。有的数据中心每年都做一两次的故障模拟演练,这其中就包括对设备的重启,来检查数据中心系统的稳定性和冗余性,有这个演练就很好,不仅可以让设备临时休息一下,也可以及时发现数据中心运行的漏洞,进行修补。千万不要被动等出了严重问题时,再考虑重启设备恢复,这时往往会给业务造成严重损失。
03加强对设备操作管理
数据中心里有很多设备,不同的设备来自不同的厂家,使用的功能也不同,对这些设备的操作人员要进行严格管理。避免不熟悉设备的人误操作设备,这些人为故障数不胜数。所以一定要对访问设备的权限做控制,不同的设备由不同的人来管理,由最熟悉它的人来控制。对于一些设备变更操作,要提前做评估,配置是否符合规范,是否有已知风险,让设备厂商也参与到变更操作中来,以防出现变更未达预期的情况出现。数据中心对登录设备管理非常严格,对不同的人员都有不同的权限要求,如果需要申请相应更高访问权,需要到高级领导那里去申请,并且将操作的理由和原因说清楚,这是数据中心运维管理工作的重要组成部分。
04隔离/离线/重启三把斧
数据中心运行过程中出现故障,第一时间就是恢复业务,定位故障原因是其次,所以运维人员处理故障时,首先要明确故障位置,如果短时间内无法完全明确,也要尝试进行恢复业务的操作,这时常用的就是这三把斧:隔离、离线、重启。这三把斧都是针对具体设备的,因为数据中心故障都是来自具体设备,稳定运行过程中出了故障基本都是其中某个或某些设备出问题了。
隔离就是只根据业务故障的范围,对故障的设备端口、VLAN或流量进行切换,切换到其它正常的通道上来,如果故障范围无法明确这些细,就考虑对设备尽心离线,即将设备下线,整个设备的业务切换到其它设备上来,比如某个服务器业务异常了,将这个服务器上的虚拟机迁移到其它服务器上来,尽快恢复业务。
有时,设备之间没有备份无法进行离线处理,比如一些核心的网络设备,离线需要做大量的业务切换工作,这时就考虑对设备进行重启了,看重启能否恢复,一般运行异常的设备通过重启基本都能恢复,在短时间内继续正常运行,这样为分析问题原因赢得了宝贵时间。一方面继续分析原因,一方面让数据中心业务正常运行下去,找到问题原因后,再将隐患补救。
数据中心运维人员在日常的工作中逐渐摸索出了很多经验,这些都是一个个血的教训换来的,是数据中心的宝贵财富。有些规定虽然没有太深的技术支撑,但却非常实用,这些也是运维人员面对数据中心故障时想到的办法。俗话说“话糙理不糙”,这些不成文的规定看似简陋,关键时刻却非常管用。(文章转自互联网,侵权删。)
ServiceHot独立研发的IT服务运营管理平台(ITSOM),一款专业的云运维管理平台,现提供免费试用哦!
热文推荐:
牛X了,这款运维软件到底包含了多少最佳实践?!
中国企业级服务SaaS市场 将迎来新一轮资本投资高潮
上市的 SaaS 公司有什么特质
- ?
数据中心决策之虚拟化管理与灾难恢复
阿宝
展开
目前对于虚拟化管理软件,70%的商业专家希望虚拟化管理软件能监控服务器的可用性。60%的人希望软件可以监控网络的性能,50%的人希望能够管理系统安全性,53%的人希望软件对容量规划做出一份公告,52%的人希望软件能管理配置和变更以及执行其他任务。
在所有这些期待的特点中,虚拟化采购团队中大部分人(46%)认为价格是决定他们采购决定的主要因素,其次是管理控制台的性能和可用性,以及虚拟化平台的兼容性(分别都是42%)。
无论你的虚拟化管理软件都提供了什么功能,没有它似乎是不行的。在954份调查回访里,只有18%的组织数据中心内部没有任何虚拟化管理工具。
数据中心刺激了购买灾难恢复的迫切需求
IT团队追求着保持负载的尽可能长的在线时长,当有停用的情况发生时,灾难恢复系统的质量直接决定了故障停机的时间和引发的对工作负载的影响。
企业的灾难恢复业务连续性调查表明了,有59%的灾难恢复采购团队希望在数据之间有远程的拷贝或数据同步。如果类似电力故障导致系统停用,会影响所有的服务器和存储,因此远程同步可以在生产环境数据中心以外多份备份。
远程拷贝可以依赖于自由的数据中心,托管场地的自有设备,或者类似磁盘柜之类的冷备存储设备。另一个方案是使用云备份,将数据拷贝到托管的云存储上。
对于IT商家来说高度聚合的基础设施盒子使远程同步更简单了,对于小型企业来说在高度聚合的基础设施中,删除重复数据和压缩的特性使备份和恢复更重要而且更不复杂。
对于网络而言,数据中心的管理员希望简化网络操作过程,另外一方面,IT人员也会购买云存储服务。。
- ?
数据中心未来发展六大趋势
赵映容
展开
近年来,由于金融电信等行业需求的增长、既有机房的升级改造、以及政府公共服务平台建设的加大投入等各方面的驱动下,数据中心获得了空前的发展,但同时,也面临着多方挑战。主要有下列几个方面:
1. 能耗压力。随着不断增加的电力开支,耗电和散热成为数据中心的一大挑战;
2. 资源整合。当前数据中心系统大多庞杂,从而导致运维效率低下,各种存储、计算及信息资源难以共享;
3.信息安全。数据中心作为企业IT系统的核心,其安全性尤为重要。
数据中心未来发展六大趋势:
基于当前数据中心的现状和挑战,数据中心未来的发展趋势将呈现以下几大方面:
趋势一:绿色化
数据中心规模的剧增带来了运营成本的大幅提高,其中电力成本是最主要的运营成本,如何提升电源利用效率(PUE,越低越好。)成为各大数据中心大户的一大课题。目前包括Google、Facebook、微软、BAT在内,都在积极引入各种绿色节能技术以降低PUE。除了水冷、自然冷却、冷热封闭通道、取消UPS、高温运行等通用做法,新能源技术也在逐步引入,而利用软件调度技术降低能耗将成为发展趋势。
趋势二:模块化部署
云计算和移动互联网的发展给数据中心的部署就绪时间提出了更高要求,目前整机柜、集装箱部署模式可将数据中心的建设周期大幅缩短,但整体并未得到规模化应用。因此,未来几年整机柜将是主要部署模式,而集装箱可在大型会议、活动等特定场合作为临时数据中心应用。
趋势三:自动化
随着单数据中心规模的不断扩大,传统模式所需的运维力量大幅增加,成本也不断增加。对此,Google等巨头很早就引入软件方式实现数据中心的自动化运维,提升运维效率,提高客户体验,这也将成为未来的一大趋势。
趋势四:虚拟化与软件定义化
虚拟化可以极大地提高数据中心的资源利用效率,并已得到广泛应用。而软件定义技术,可以为大规模用户提供快速灵活的多租户异构资源配置、隔离和供应,但存储和网络是瓶颈,这就需要引入软件化技术,通过存储和网络虚拟化的实现,为客户快速提供虚拟化数据中心业务,让每个客户都感觉拥有独立的一体化数据中心。
趋势五:集约化和集群化部署
互联网、移动互联网、云业务等大规模应用需部署在多个数据中心,这给数据中心带来繁重的同步以及高昂的宽带成本,因此数据中心集群化部署和集约化部署将成为发展趋势。集群化部署,相当于将多个数据中心形成一体,大二层网络建设成为趋势,SDN在这里有用武之地。而集约化部署则可以节省数据中心之间的交互成本,也有利于降低部署和运维成本。
趋势六:安全与可信
安全性不仅是指防火墙、IPS/IDS、入侵检测、防病毒等安全防范措施,更包括火灾、飓风以及其他灾害应对。因此,数据中心建设在初始阶段就应该构建可靠的灾难恢复方案,或建立异地的灾难备份中心。这是当前以及未来数据中心建设需要重视的一大热点问题。
结语:
在信息化时代,数据呈现爆炸式的增长,其影响已广泛涉及各个行业和人们生活的方方面面,因此数据中心建设是大势所趋,更是未来发展必不可少的重要部分。而如何让数据中心更具高效和绿色节能、更好地为企业服务,无疑成为未来研究的重点方向。
- ?
数据中心的能源将会发生什么样的变化
母鹿
展开
日前,数据中心行业专家Russell Bulley对数据中心动力的将来开展,UPS电源的技术提高,以及使用愈加普遍的可再生动力技术将如何影响数据中心的运营停止了讨论。
依据预测,数据中心能耗将在将来10年增长三倍以上。随着动力本钱和可继续开展成绩的添加,数据中心一切者和运营商需求对其能耗停止优化,并采用可再生动力坚持数据中心的可用性和恢复才能,这些措施将至关重要。
Bulley在相关会议上对数据中心和能耗密集型用户如何优化其电力资产的运用停止了剖析,并指出其优化不只要浪费本钱,还要从电网效劳中取得额定支出,同时对数据中心关键负载完成片面的电力维护。
动力效率
动力效率在数据中心行业中变得越来越重要,而这反映了人们对可继续开展和气候变化的态度的转变。而UPS电源技术经过临时的开展变得越来越节能高效。
数据中心的运营商正在思索如何更好地使用根底设备中UPS电源零碎,以最大限制地进步效率,同时以最小的资本收入(CAPEX)提供分歧性和弹性。这促进了高效节能的模块化UPS零碎日益普及,并且随着客户负载增长而扩展,同时坚持100%的正常运转工夫。
在以往,企业爲了满足将来负载增长的需求,在其数据中心中部署了大型UPS零碎,并影响了资本收入(CAPEX)/运营收入(OPEX)。
锂离子电池的影响
在UPS供电零碎中使用锂离子电池具有许多益处:与同等规格的铅酸蓄电池相比,其体积减少70%,并且分量更轻,这意味着可以将更多的机房空间分配给效劳器。锂离子电池还具有更长的运用工夫,这使得锂离子电池无望替代铅酸蓄电池。
由于锂离子电池价钱不断在下降,将来将会装置部署更多的锂离子电池。但人们估计锂离子电池将更多地使用在工夫较短的待机使用,或使用于需求疾速充电才能和放电/充电周期的电网中。
在可预见的将来,铅酸蓄电池依然是UPS电源使用中最具本钱效益的选择。而随着电池技术的不时开展提高,锂离子电池最终能够会取代铅酸蓄电池。
数据中心将来的电源选择
由于电源容量和根底设备的限制,以及古代化机架的高功率密度,采用传统设计的数据中心越来越不能满足用户的需求。而一些电网根底设备具有一定的局限性,因而,需求更多的创新技术,而太阳能和电池储能零碎将成爲数据中心供电的一种可行的选择。
恢复数据中心
-
1、只需3秒快速实现求和
-
2、如何快速填充序号
-
3、如何自动填充序号(公式法)
-
4、数据条的神奇应用
-
5、多文本快速合并
-
6、查找与替换的不同玩法
-
7、快速定位到指定区域
-
8、数据排序、工资条制作
-
9、快速筛选(模糊、精确筛选)
-
10、快速插入空行
-
11、快速删除空行
-
12.快速跳转到天涯海角
-
13、.同时查看两个Excel文件
-
14、用条件格式扮靓报表
-
15、一键插入Excel图表
-
16、批量处理行高、列宽
-
17、利用拆分功能查看数据
-
18、批量录入相同内容
-
19、工作表快速跳转
-
20、批量录入表格模板(精品课程)
-
21、Excel函数与公式的应用、公式循环引用的查找
-
22、IF函数单条件判断同比增长
-
23、用sum函数 格式相同,连续多表数据汇总
-
24、excel快捷键
-
25、VLOOKUP函数——根据销售员匹配销售额
-
26、统计各部门销售总额
-
27、统计指定条件个数
-
28、怎样输入当前日期和时间、星期数
-
29、销售业绩排名
-
30、Sumproduct函数-万能函数(销售额汇总求和)
-
31、根据销售员,地区,商品名称汇总
-
32、批量替换PPT字体
-
33、给销售额数据批量添加万元单位
-
34、一秒快速核对两列数据
-
35、快速定位到指定单元格或区域
-
36、快速制作双行标题工资条
-
37、给你的表格做个瘦身
-
38、快速打开常用的Excel文件
-
39、快速打开多个Excel文件
-
40、利用创建组—快速隐藏/展开多列数据
-
41、快速制作下拉菜单
-
42、复制粘贴表格,如何保留数据源列宽格式一致?
-
43、两列数据位置互换
-
44、1秒钟扮靓报表——如何实现表格隔行换色
-
45、快速删除重复记录——保留唯一值
-
46、快速向下填充、向右填充,文本或公式
-
47、给Excel文件添加密码
-
48、插入带图片的批注
-
49、输入公式后不计算?
-
50、如何设置单元格缩进
-
51、快速解决Excel表格总显示货币格式
-
52、批量添加万元单位
-
53、你会四舍五入么?
-
54、用RAND函数机选彩票
-
55、冻结首行你会么?
-
56、超链接的高级应用
-
57、IFERROR函数-屏蔽错误值
-
58、批量填充颜色
-
59、录入数据
-
60、快速输入工号
-
61、快速行列转置
-
62、自定义缩放界面
-
63、多个单元格同时输入
-
64、如何计算立方米?
-
65、快速制作双行标题工资条
-
66、输入带方框的√和×
-
67、快速将姓名对齐
-
68、快速输入性别
-
69、按单位职务排序
-
70、自动计算合同到期日期
-
71、计算时间间隔
-
72、日期和时间的拆分
-
73、快速处理不规范的日期格式
-
74、快速填充合并单元格
-
75、效率加倍的快捷键
-
76、快速复制表格和对象
-
77、快速创建工作表副本
-
78、快速复制序列号
-
79、快速显示公式
-
80、多个单元格同时输入
-
81、快速调整显示比例
-
82、快速自动填充
-
83、快速填充(Ctrl+E)
-
84、Ctrl与数字键结合
-
85、快速将多列数据整理为1列
-
86、快速将1列数据拆分为多列
-
87、快速定位公式
-
88、快速录入数据
-
89、快速累计求和
-
90、身份证号码显示为0怎么办?
-
91、快速制作斜线表头
-
92、文本竖向显示
-
93、神奇的监视窗口
-
94、不一样的格式刷
-
95、快速美化图表
-
96、快速生成当前日期
-
97、快速找出循环引用
-
98、快速提取信息
-
99、二维表快速转换为一维表
-
100、快速多表合并