南京市档案局机房搬迁项目技术方案-20140713

南京市档案局机房搬迁项目 技 术 方 案 建 议 书 南京擎天科技有限公司 2014年7月份 目录 一机房搬迁概述 (3) 1.1项目背景 (3) 1.2原机房现状 (3) 1.2.1 搬迁设备概况 (3) 1.2.2 服务器信息采集 (7) 1.2.3 网络拓扑及网络情况 (8) 1.2.4 网络连线情况 (11) 1.3新机房状况 (14) 1.3.1 新机房基础环境 (15) 1.3.2 新机房网络环境 (16) 1.4搬迁路线 (19) 1.4.1 楼外搬迁路线 (19) 1.4.2 楼内搬迁线路 (20) 1.5工期要求 (20) 二新机房方案 (20) 2.1网络拓扑图设计 (20) 2.2机架设备图设计 (23) 2.2.1 原机架设备图 (23) 2.2.2 新机架设备图设计 (23) 三搬迁实施方案 (27) 3.1设备搬迁流程 (27) 3.2设备搬迁前工作 (28) 3.2.1 备品备件工具准备 (28) 3.2.2 新机房现场检查 (28) 3.2.3 设备标记 (29) **擎天科技公司I 3.2.4 备份方案 (29) 3.3设备搬迁工作 (32) 3.3.1 设备关机 (32) 3.3.2 设备下架 (32) 3.3.3 设备搬运 (33) 3.3.4 设备上架 (33) 3.3.5 设备连接 (34) 3.4设备搬迁后工作 (34) 3.4.1 设备开机 (34) 3.4.2 功能测试 (35) 四搬迁分工界面 (35) **南京擎天科技有限公司II 一机房搬迁概述 1.1项目背景 南京市档案局办公楼是实现全市档案管理、政务信息化、协同配合一体化的集中办公区域,当前所在位置是南京市北京东路41号。根据南京市政府要求,南京市档案局(馆)于2014年7月底前由南京市北京东路41号搬迁至河西乐山路与梦都大街交汇处的新址。 其中,原址全部信息网络系统包括全部应用服务、数据存备、系统及所涉全部所需硬件设备,需同步整体随迁。并保证政务内、外网系统搬迁中不停运,实现无缝交割。其它既有业务网系统停运时间不超过4个工作日,且在搬迁恢复中实现网络架构的同步优化。 1.2原机房现状 1.2.1搬迁设备概况 南京市档案局现有机房位于南京市北京东路41号,总面积约30平方米。 此次我方涉及搬迁的原机房设备的机架图如下所示: **擎天科技公司第3 页共37 页 其中,搬迁设备概况如下: **南京擎天科技有限公司第4 页共37 页 **南京擎天科技有限公司第5 页共37 页 其中,跟档案业务相关的应用服务器主要有5台,详细信息如下: 1台DELL R910为市档案局最重要的档案信息平台服务器,通过光纤交换机DELL PowerConnect 8024连接DELL PS6010 Eq磁盘阵列,组成应用系 统服务器及存储网络。 **南京擎天科技有限公司第6 页共37 页 ●另外1台DELL R910为市档案局对下属11个区档案局提供共享服务的档 案共享服务器,该服务器连接1台网腾磁盘阵列,并部署1台Hillstone 安全网关在对外网络的边界上。 ●其余3台DELL 2950,2台部署在局域网内分别作为开发测试服务器和备 份服务器,另外1台为部署在政务内网的文档一体化备份服务器。1.2.2服务器信息采集 对市档案馆机房的服务器进行现场调研,信息采集如下: **南京擎天科技有限公司第7 页共37 页 1.2.3网络拓扑及网络情况 当前,南京市档案局机房包括政务内网、政务外网、局馆内部局域网及市区共享专网4张网络。 市区共享专网由市档案局数据中心主体负责,此次我方协助相关设备的搬迁。 **南京擎天科技有限公司第8 页共37 页 政务内网的网络设备在新机房已经统一部署,此次我方主要负责文档一体化备份服务器、曙光NAS服务器和DELL MD3000磁阵的搬迁。 政务外网的网络设备在新机房已经统一部署,此次我方主要负责金山毒霸服务器的搬迁。 局馆内部局域网,为此次搬迁的重点网络。当前涉及本次搬迁的主要网络拓扑如下: 该网络拓扑图详细说明如下: ●包括市档案局的局域网和政务内网。 ●局域网内跟档案业务相关的主要是档案信息平台服务器和测试开发服务 器。 ●DELL PS6010磁阵为档案信息平台服务器的主用存储,存储市档案馆的档 案文件,服务器通过光纤交换机连接该存储。 ●测试开发服务器,为档案信息平台的测试环境。当前虽然通过光纤连接 了DELL PS6010磁阵,但是目前未挂载磁阵硬盘空间。 **南京擎天科技有限公司第9 页共37 页 **南京擎天科技有限公司 第 10 页 共 37 页 ● DELL MD3000i 存储为生产环境的备份存储,提供全部硬盘空间给备份服 务器。 ● DELL MD3000存储一部分硬盘空间提供给备份服务器,一部分硬盘空间 提供给文档一体化备份服务器使用。 ● 文档一体化备份服务器作为部署在市信息中心的文档一体化服务器的备 份服务器,通过市档案局的政务内网专线,和远端生产服务器通信。 市区共享专网当前的网络拓扑如下: 入终端盒 H3C3100V2交换机 烽火F-engine 接口转换设备 Hillstone 安全网关 档案共享服务器 网腾磁盘阵列 交换机 光纤网线 11个区档案局通过广电网络,由光纤接入到市档案局机房,然后由普天光纤接入设备,F-engineer交换机转换成RJ45,接入H3C 3100V2交换机。 此次搬迁,市区共享专网相关设备,由市档案馆数据中心主体负责,广电负责其相关设备例如光纤路由器,烽火F-engine接口转换设备的拆卸下架、新机房的上架上电。我们协助完成Wallstor网腾磁阵、DELL R910档案共享服务器2台设备的拆卸下架、新机房的上架上电。 1.2.4网络连线情况 政务内网、政务外网当前设备较少,网络连线也比较简单,设备都是通过接入交换机直接连接政务内网、政务外网中。 市区共享专网主要通过广电网络连接11家区档案馆,机房内的广电设备及我方负责的DELL R910服务器和Wallstor网腾磁阵分别连接到H3C3100V2交换机,连接相对简单。 局馆内部局域网,网络连线比较复杂,为此次重点。局域网主要由DELL Power connect 8024F光纤交换机和H3C S5120s以太网网络交换机组网而成。DELL Power connect 8024F光纤交换机构建局域网存储网络,H3C S5120s网络交换机构建局域网服务器网络。涉及的网络连线主要包括如下三种: 1)DELL Power connect 8024F光纤交换机 **南京擎天科技有限公司第11 页共37 页 **南京擎天科技有限公司第12 页共37 页 2)H3C S5120s局域网网络交换机: **南京擎天科技有限公司第13 页共37 页 3)局域网服务器-磁阵 1.3新机房状况 新机房按照B级机房建设标准进行建设,机房机架间布线采用下走线方式。**南京擎天科技有限公司第14 页共37 页 机房面积约有120平方米,分两个区域部署18个标准机柜,其中一组16个机柜分2排排列,每排8个机架,现场图如下。 1.3.1新机房基础环境 新机房的基础环境包括: 1)机房电气系统 2)机房智能化系统 3)机房防雷与接地系统 4)配电系统 如上基础环境由新机房承建单位负责,搬迁前我们需要提前做好各项检查和测试工作,以满足系统设备运行的要求 **南京擎天科技有限公司第15 页共37 页 1.3.2新机房网络环境 新机房采用分区组网设计,分为政务内网、政务外网、局管内部局域网及市区共享专网4张网络类型,各网络之间物理隔离,保证网络安全。 市区共享专网由数据中心负责,单独部署在数据中心机房机架之中,其网络环境主要是通过广电网络连接至各个区档案馆。 其余政务内网、政务外网、局馆内部局域网3张网络,分别由楼层接入层,机房汇聚层、服务器接入层、外部网络层(除局域网外)4部分组成。 楼层接入层是指各个楼层办公位的电脑终端通过网线连接到各自楼层的弱电井配线架。 机房汇聚层是指各弱电井配线架通过光纤连接到机房的各个汇聚核心交换机。 服务器接入层是指机房服务器机架的服务器通过网线或者光纤连接到机房汇聚核心交换机。 外部网络层是指通过汇聚核心交换机、防火墙、路由器,连接的外部网络,例如政务外网,政务内网等。 **南京擎天科技有限公司第16 页共37 页 楼层接入层-弱电井配线架现场图如下所示: **南京擎天科技有限公司第17 页共37 页 机房汇聚层-政务外网核心交换机现场如下图所示 : **南京擎天科技有限公司第18 页共37 页 机房汇聚层-政务内网核心交换机现场如下图所示 : 1.4搬迁路线 1.4.1楼外搬迁路线 由原机房将所有服务器、网络设备从正门口运输至河西新机房,整个路程约 16.4公里,道路平坦。搬迁路线图如下所示。 **南京擎天科技有限公司第19 页共37 页 南京市档案局机房搬迁项目技术方案建议书 **南京擎天科技有限公司 第 20 页 共 37 页 1.4.2 楼内搬迁线路 设备下架完成打包后,从机房以人工方式搬运到电梯再运输到楼下装车,到河西新机房后再以人工方式搬运到电梯运输到新的机房预先规划位置安装。 1.5 工期要求 整个搬迁,工期要求控制在4个工作日以内(含节假日),含拆、运、装、调全部时间。 二 新机房设计方案 2.1 网络拓扑图设计 新机房网络拓扑图的设计如下: 南京市档案局机房搬迁项目技术方案建议书 **擎天科技公司第21 页共37 页 该项目网络拓扑图的设计,主要考虑如下几个方面。 ●取消局域网备份服务器和政务内网的连接,使局域网和政务内网之间物 理隔离,提高网络安全。 ●瑞星杀毒服务器、WUSS服务器直接连接到局域网交换机,组建层次清 晰的局域网网络。 ●调整MD3000容量作为文档一体化备份服务器所用,对MD3000i重新划 分后作为一级备份存储,TL2000磁带机作为归档备份存储。 ●对核心数据库,利用一级备份磁盘存储的高性能,降低备份窗口时间。 ●对备份完毕的数据进行磁盘到磁带的复制操作,不影响业务系统的性能。 下面分别对政务内网、政务外网、局域网及市区共享专网各自的网络连接进行详细说明。 市区共享专网:网络架构和原来没有变化,组网图请参考“1.2.3 见上方网络拓扑及网络情况”。该网络由数据中心部门负责,单独部署在新机房的数据中心小机房。 局域网:各服务器通过H3C S5120s交换机连接,H3C S5120s再通过网线连接至局域网网络机架的Alcatel Lucent Omniswitch 6850E-u24X交换机。关于客户提到在局域网架设防火墙的想法,我方在此简单说明一下,防火墙一般用在两个不同的网络之间,放置在网络的边界上。目前来讲,此局域网只存在一个子网网段,如果为了部署防火墙,建议按照部门划分不同的网络子网,再根据各部门访问系统的不同权限在防火墙上进行设置。 政务内网:文档一体化备份服务器和NAS服务器通过网线直接连接到政务内网网络机架的Alcatel Lucent Omniswitch 6850E-u24X-24R交换机。Alcatel Lucent Omniswitch 6850E-u24X-24R交换机作为政务内网核心交换机,再连接防火墙、路由器连接到政务内网中去。对于客户提到在新机房部署Idea Bank **擎天科技公司第22 页共37 页 统一身份认证网关的想法,我方建议Idea Bank可以旁路连接在政务内网的核心交换机上,通过该产品的调试配置,开通相关功能。 政务外网:政务外网当前应用不多,一台金山毒霸服务器通过网线直接连接到政务外网网络机架的Alcatel Lucent Omniswitch 9702交换机。Alcatel Lucent Omniswitch 9702交换机作为政务外网核心交换机,再连接防火墙、路由器连接到政务外网中去。 2.2机架设备图设计 2.2.1原机架设备图 2.2.2新机架设备图设计 **南京擎天科技有限公司第23 页共37 页 **南京擎天科技有限公司 第 24 页 共 37 页 新机架设备图设计如下: **南京擎天科技有限公司第25 页共37 页 机架整体效果图如下: 该项目机架设备图的设计,主要考虑如下几个方面: ●关于机架编号,从新机房大门进入,两排机架从前往后编号为A、B。A 排机架从右至左编号,分别为A1、A2到A8,共8个机架。 ●当前A3、A4、A5机架分别对应政务外网、局域网、政务内网的网络机 架,相应交换机等网络设备已由承建商安装调试。 ●机架A7和机架A8设计为局域网网络,分别为服务器机架及存储机架。 机架A8部署局域网业务服务器及组网所用交换机。机架A7部署业务磁 盘阵列,包括备份磁盘阵列和磁带机,并预留足够机架空间为将来扩容 使用。 ●机架A2设计为政务内网服务器机架,部署文档一体化备份服务器、曙光 NAS服务器及DELL MD3000存储。 ●因为当前政务外网只有1台金山毒霸杀毒服务器,参考客户的建议,设 计该台服务器安装在机架A2,和政务内网设备安装在一起。或者安装在 机架A3上(政务外网网络机架)。 **南京擎天科技有限公司第26 页共37 页 三搬迁实施方案 3.1设备搬迁流程 设备搬迁流程如下图所示。 按照搬迁过程划分为搬迁前准备工作、设备搬迁工作、设备搬迁后工作3个阶段,下面针对这3个阶段的各子项工作进行详细说明。 **南京擎天科技有限公司第27 页共37 页 3.2设备搬迁前工作 3.2.1备品备件工具准备 3.2.2新机房现场检查 经过现场勘查,新机房如下基础环境已经基本完成,具备设备安装上电的条件。 1)机房电气系统已完成 2)机房智能化系统已经完成 3)配电系统要求已经完成 4)机房防雷与接地系统已经完成 新机房网络环境情况如下: **南京擎天科技有限公司第28 页共37 页 ●目标机房机架部署就绪。 ●新机房的楼层办公网络已经构建并调试完成。 ●新机房的楼层办公接入汇聚到局域网、政务内网和政务外网网络机柜 的光纤跳线未部署完成。 ●涉及对外业务的政务内网、政务外网对外传输已构建、调试完成。 3.2.3设备标记 在设备搬迁之前,我们对所有设备及设备连线进行标记。标记规范如下: 设备:网络类型+设备型号十设备编号+设备名称 举例说明,局域网+DELL 2950-1+备份服务器;局域网+DELL R910-2+信息档案平台服务器 线缆:本端(网络类型+设备简称十接口名称+接口编号) 对端(网络类型+设备简称十接口名称+接口编号) 举例说明,局域网DELL Equalogic PS6010磁阵控制器2通过光纤口2连接DELL Power connect 8024F光纤交换机的光纤端口1。 光纤线缆:本端(局域网+PS6010磁控2+FC2) 对端(局域网+SW8024F+port1) 3.2.4备份方案 硬件备份设计 服务器备份方案:当前市档案局共有服务器9台,其中跟市档案局业务相关的主要为3台服务器,分别为档案信息平台服务器、档案共享服务器和文档一体化备份服务器。为防止在搬迁以后,服务器因为任何原因,造成无法正常启动、**南京擎天科技有限公司第29 页共37 页 业务停止的情况发生,我们将在搬迁之前提前联系好服务器供应商,洽谈好服务器租用合同,以备不测之需。 磁盘阵列备份方案:当前市档案局共有磁盘阵列4台,其中最重要的为存储主业务数据的DELL PS6010 Equalogic磁盘阵列,及对主业务数据进行备份的DELL PowerVault MD3000i磁盘阵列。因为有备份存储,该主用存储可用性较高,基本可以保证数据的绝对安全。在搬迁前,我们全面检查主用磁盘阵列和备份磁盘阵列的数据,保证数据的一致性。另外,为了防止在搬迁以后,主用存储硬件出现意外不能启动的情况发生,我们将在搬迁之前联系好磁盘阵列供应商,洽谈好磁盘阵列租用合同,以防止搬迁过程中的任何意外发生。 网络设备备份方案:当前市档案局核心业务组网相关的网络设备主要有1台D ELL Power connect 8024F光纤交换机和1台H3C S5120s局域网交换机。 对于此设备的备份,我们的方案1是提前联系好备机;2是搬迁之前检查并备份好原交换机的配置。一旦搬迁以后,原交换机发生任何意外,都可以保证及时提供备机,顺利完成安装调试,恢复业务。 数据备份设计 数据备份,就是为防止系统出现操作失误或系统故障导致数据丢失,而将全系统或部分数据集合从应用主机的硬盘或阵列复制到其它的存储介质的过程。备份是数据高可用的最后一道防线,其目的是为了系统数据崩溃时能够恢复数据。 机房搬迁前,需要完成重要数据的备份,以备万一。数据备份的对象如下: 1.应用软件及补丁。 2.业务系统数据库数据。 3.业务系统业务数据。 4.文件等重要信息。 5.服务器名称、操作系统版本、IP地址、系统配置等信息。 **南京擎天科技有限公司第30 页共37 页 数据备份的方式如下: 1.复制 对于市档案局的各服务器名称、操作系统版本、IP地址、系统配置等系统信 息,还有应用软件及补丁,可以采用复制的方式。 2.备份软件 对于市档案局重要的业务数据,采用客户已经部署的慷孚备份软件或者其它 备份软件进行备份。备份源位置为DELL Equalogic PS6010磁盘阵列,目 标位置为Dell PowerVault MD3000i磁盘阵列,经现场确认,该磁盘阵列当前 有10T以上的剩余空间。 3.数据库数据备份 采用逻辑备份的方式,逻辑备份就是将某个数据库的记录读出并将其写入到 一个文件中,这是经常使用的一种备份方式。SQL采用系统自带的导入导 出工具。Oracle提供的逻辑备份工具是exp。逻辑备份的恢复过程可以采用 lmp工具来对数据库进行恢复。如果搬迁过程中数据库已经损坏,就需要重 建服务器,所有数据库必须设置成和原有库的信息一致,如实例名、数据库 名、数据库字符集、表空间名等。然后将原有的数据库备份文件copy到新 系统,然后执行数据库的全库恢复操作。 应用系统备份设计 对于南京市档案局的重要业务系统,例如档案信息平台系统、档案共享系统,在机房搬迁之前,建议做好应用系统的备份。 市档案局操作系统基本为windows 2003 Server,在搬迁前,提前做好C盘及应用系统软件、数据库软件的备份。一旦在搬迁过程中,出现因硬件或软件原因导致应用系统服务启动不起来故障的时候,可以使用备份软件,在应用厂商的协助下迅速完成应用软件的安装以及调试。 **南京擎天科技有限公司第31 页共37 页 3.3设备搬迁工作 3.3.1设备关机 在客户陪同下,通过KVM切换到各个服务器,使用密码,登陆系统,按正常步骤进行关机,切断电源。相关注意事项如下: 1.设备停机按不同业务系统进行有序停机; 2.设备切断电源前,应确认设备已经完全关闭,部分设备关机时间较长, 应等其风扇完全停转后切断电源; 3.确认业务系统软件停运注意事项,严格按照系统软件停运步骤进行操作; 4.停机顺序按照先停运业务系统,再停运数据库、操作系统。然后是备份 系统、网络系统的原则进行; 5.系统停机时如发生软件或系统故障,应先排除故障再进行停机操作,不 得野蛮停机,确保操作系统和业务软件系统停运时无故障; 6.切断电源时应先关闭电源插座,再拔设备电源; 3.3.2设备下架 1.采取必要的防静电措施。 2.拔出连接到插座上的电源。 3.拔出设备和外部联接的线缆,同时再次检查并确认线缆上是否已按《标 记的规范》做了标记,是否完好和正确,否则要按标记规范对线缆进行 标记。 4.将需要拆卸的接插件、电路板卡及其他需分离的部件按规范拆卸下来, 并将预先制定好的标签准确,牢靠地贴在适当位置。 5.将设备的门锁和启动控制的钥匙取下,并做好标记。 6.将设备的门扣锁住。 7.网络设备的包装对其各种接口加以特别保护,以防止在运输过程中损坏。**南京擎天科技有限公司第32 页共37 页 8.设备进行包装前,应进行适当清洁保养工作,除去设备上面的灰尘。 9.对于重要设备可在外部表面缠绕三圈发泡薄膜。 3.3.3设备搬运 1.设备搬运过程中,按照最小震动的原则进行移动、搬起、抬高、放下、 落地等各步骤。 2.运输时,所有的设备要求平放。 3.可前期搬运的设备和物品尽量在前期搬运。 4.设备的运输和搬运找有设备运输经验的运输公司承担,设备的包装也会 提前和运输公司协商,运输公司要有明确的责任和工作。 5.运输使用车况良好的封闭式货车,技术人员随车押运。新旧机房,运输 车辆三点间随时保持通讯畅通,车速尽可能限制在慢速,保持在安全范 围之内。 6.设备到达新大楼的机房后,应清点设备,并检查设备是否完好,做记录。 3.3.4设备上架 1、在新机房逐层拆开设备包装材料,按照网络类型找出各自设备,集中堆 放整齐。 2、将涉及此台设备的所有主辅材料集中在预定安装位置附近。 3、主机及外设的重新安装 1)采取必要的防静电措施。 3)将设备的内部线缆,按规范和标记安装到位。 4)将拆卸的接插件、电路板卡及其他分离的部件,按规范和标记安装到 位。 5)将设备的电源连接到的插座。 **南京擎天科技有限公司第33 页共37 页 6)将设备的门锁和启动控制的钥匙插上。 3.3.5设备连接 设备连接包括线缆及其他辅助设备的安装,安装线缆时,需对应设备接口和线缆接口,对应拓扑图和设备连线表,将设备线缆连接。 3.4设备搬迁后工作 3.4.1设备开机 (一)开机前检查: 1)对物理线路进行检测,确保线路连接正常,连接有无松动。 2)确保物理线路连接是按照网络拓扑结构连接。 (二)按正常步骤进行开机。 1)开机正常后,按规定的步骤进行机器硬件自检。 2)机器硬件自检正常后,进行系统自检。 3)系统自检正常后,查看系统参数和设备配置是否和保留的备份一样。 4)若在自检过程中发生错误,立刻转到故障诊断流程,按规范进行排查。 5)经现场初步断定为硬件或部件故障时,立刻联系硬件供应商,租借备 件。 注意事项 备份系统及存储系统开机:要先启动磁阵存储,再启动服务器,否则有可能出现服务器丢失部分硬盘分区的情况。 **南京擎天科技有限公司第34 页共37 页 3.4.2功能测试 设备加电后,整个网络系统应已处于运行状态,此时需对网络系统的运行状况进行检测。检测步骤如下: 1、通过PING、TRACERT工具等,对网络路由及通畅情况做检测,确保网络 路由通畅; 2、检测各服务器系统运行状态,确定系统运行正常; 3、配合软件厂家及用户对业务软件运行状态做检测,确保业务系统运行正 常。 四搬迁分工界面 为便于项目实施的组织、协调,明确各方责任,确保机房设备搬迁的顺利完成,对工作任务、工作内容做工程界面的如下划分: 我公司的主要工作内容大致如下: 做好机房搬迁前的准备工作; 在用户规定的时间内完成机房设备的拆装搬迁; 在规定的时间内,按照网络新拓扑设计,完成搬迁后机房设备的安装和连接; 配合用户完成应用系统测试; 向用户业务恢复提供技术支持服务; 配合用户完成整个系统的资料整理; 用户主要工作内容如下: 配合实施方做好机房搬迁前期准备工作; 确定搬迁日期并提前通知各有关部门,以及部门设备维护人员; 配合实施方做好系统搬迁前的硬件设备及业务系统的检测工作; **南京擎天科技有限公司第35 页共37 页 协助实施方做好业务系统数据保存工作; 协调各业务系统厂家维护人员,并配合实施方做好系统的再集成工作; 协调各个部门及各系统维护人员,做好再集成后设备及系统的运行检测工作。 **南京擎天科技有限公司第36 页共37 页