1、XX银行机房搬迁oracle数据库迁移方案和操作流程XX银行数据库迁移方案和步骤我行数据中心迁移与重构之际，从提升我行业务系统运行效率和连续性的角度出发，于B城市新数据中心先期部署4套oracle 11g rac集群数据库平台，优化我行A城市生产数据中心现有数据库部署结构。A城市和B城市两地数据中心的oracle数据库，采用第三方同步软件，将A城市生产数据实时同步至B城市新数据中心，此次迁移共包含11个数据库，11个数据库具体对应的业务系统详见9月15日切换B城市数据中心4套RAC集群环境相关系统表.xlsx。为了保证我行业务系统能够顺利迁移至B城市新数据中心，我行定于2017年8月21日至2
2、017年9月10为业务系统准备和测试时间段，截止2017年8月20日第三方同步软件已部署完成A城市和B城市两地数据中心的复制关系，将11个数据库的数据全部同步至B城市新数据中心9个数据库中，用于业务验证测试，并停止A城市至B城市两地数据中心数据复制关系，待9月10完成业务验证测试后重新开启数据库实时同步关系，直至9月15日数据库切换时停止同步关系。9月10日至9月15日第三方数据库同步软件实施和切换方案及步骤如下：一、 9月10日孤岛环境测试完成后，关闭各业务系统程序同时停止相关业务系统虚拟机，避免数据同步期间业务系统软件访问B城市新数据中心数据库。二、 9月11日开启A城市至B城市新数据中心
3、的数据复制关系，把A城市生产数据中心的数据全同步至B城市新数据中心，总数据量约3T估计需要2天时间完成全同步的过程，全同步完成后即开始增量实时同步。三、 9月11日停止B城市新数据中心数据库服务器上操作系统的定时任务crontable和数据库的定时任务jobs或schedule。关闭目标端数据库级别的定时任务jobs或schedulealter system setjob_queue_processes=0 scope=both sid=*;四、 9月15日切换之前确保复制关系正常，在各业务系统软件都关闭并没有任何会话访问数据库的前提下，等待5分钟后，锁定B城市和A城市两地数据库业务系统相关的
4、数据库用户的状态，避免数据核对期间数据发生变更。五、 将第三方同步软件不支持的少部分对象及数据，通过导入/导出命令从A城市生产数据中心导入至B城市新数据中心，11个数据库合计耗时需要1个小时。六、 核实B城市新数据中心sequence(序列)和directory（路径）是否跟A城市生产数据中心一致。七、 按数据库用户名和对象类型统计，确保B城市与A城市两地数据库的对象一致。八、 统计B城市和A城市两数据中心oracle数据库的每个表的数据记录数，确保每张表记录数一致，由于我行部分业务表的数据量非常大，预计需要5小时完成数据记录数核对工作。九、 编译B城市新数据中心11套数据库的存储过程和函数，
5、并检查数据库对象状态，确保两数据库对象状态一致。一十、 数据库对象和记录数核实无误后，停止B城市和A城市两端数据库的第三方同步软件，11个数据库的同步复制软件全部停止合计需要0.5小时。一十一、 启用数据库用户的触发器。一十二、 重启B城市新数据中心的所有数据库，使数据库归档生效。一十三、 解除B城市新数据中心业务系统相关数据库用户的锁定状态，并确保A城市数据中心的数据库用户为锁定状态。一十四、 启用B城市新数据中心数据库服务器上操作系统的定时任务crontable和数据库的定时任务jobs或schedule。一十五、 收集B城市新数据中心数据库的统计信息。一十六、 启动各业务系统软件，确保各
6、业务系统访问数据库正常。一十七、 DBLINK和tnsnames.ora核对数据比对耗时统计表如下，由于tranrac全部统计时间过长接近8小时，因此需要对此库中的业务表数据分类对待，分类后有10张大表在数据迁移前一天完成数据总量核对，迁移完成后当天只核对除这10张大表之外的表数据纪录，经测试时间可以控制在3小时以内。数据库总耗时备注tranrac8小时去掉1亿以上的数据后统计时长可以控制在5小时以内Mgrrac1小时Hrxjrac3小时Ecssdb0.5小时Gltxdb1.5小时cmis0.5小时hxvmdbb20分钟Hxvmdba10分钟Gapsdb3210分钟Cifdb0.5小时Cif1
7、db1小时第三方同步11个数据库切换的详细操作此次迁移A城市数据中心源端共有11个数据库，全部通过第三方同步软件实时同步至B城市新数据中心目标端9个数据库中，第三方同步软件目前有3个数据库（ecssdb,mgrrac,hrxjrac）有很少一部分数据库对象暂时不支持，必须通过数据库导入/导出命令进行迁移。9月15号迁移当天共有5人， A组操作和复核各1人、B组操作和复核各1人，C组机动组1人，以下是每个组的具体分工：A城市数据库IP库名B城市数据库IP库名责任人172.18.1.52Cifdb168.0.0.16168.0.0.17CifdbA组172.18.1.51Cif1dbCif1db1
8、72.18.1.117Hxvmdbb168.0.0.21168.0.0.22TxqddbA组172.18.1.116HxmvdbaGapsdb32172.18.110.46Cmis168.0.0.11168.0.0.12XdxtdbB组172.18.110.47EcssdbNgxtdbGlxtdbGlxtdb172.18.1.129172.18.1.130Tranrac168.0.0.26168.0.0.27TranracB组MgrracMgrracHrxjracHrxjrac机动组C组数据库：hrxjrac此数据库主要承载我行二代支付、超级网银、ESB、轻型柜台和集中作业等12套关键业务系统
9、，9月15日详细切换流程和命令如下：（1）源端/目标端确定复制关系是状态，并锁定用户状态用以下命令确认第三方同步软件复制关系当前状态，如果以下命令没有出来任何文件说明复制关系正常。su - fzs1ls -l $FZS_DATA/msg.err （查看报错日志）ls -l $FZS_DATA/msg.index_err （查看创建失败的索引）ls -l $FZS_DATA/msg.tab （查看坏表文件）在各业务系统软件都关闭并没有任何会话访问数据库的前提下，等待5分钟，然后锁定B城市和A城市两地数据库业务系统相关的数据库用户的状态，避免数据核对期间数据发生变更。alter user MANA
10、GER account lock;alter user VTSODS account lock;alter user ORAYWJK account lock;alter user SOTPGUOMI account lock;alter user IBPS account lock;alter user BACKUP account lock;alter user MONITOR account lock;alter user BUSINESS account lock;alter user IBPSWH account lock;alter user ODS account lock;al
11、ter user INFA account lock;alter user SUNCPS account lock;alter user MMSBO account lock;alter user MMSECIF account lock;alter user MMSPIBS account lock;alter user VTSAPP account lock;alter user SUNDS account lock;alter user RECOG account lock;alter user HCE account lock;alter user VTSIMG account loc
12、k;alter user PAYMENT account lock;alter user QUERYPTS account lock;alter user MMSEIP account lock;alter user SUNFLOW account lock;alter user ESBDATA account lock;（2）同步软件暂不支持的特殊对象处理由于此库有少量特殊类型的数据库对象（如索引组织表和队列等），这类特殊的数据库对象同步软件暂不支持，需要通过导出/导入方式将数据迁移至B城市数据中心，这部分对象数量为187，但是基本上没什么数据，导出和导入非常快，各需要8分钟就可以完成。1、
13、目前导出txt文件已经上传到源服务器相应目录下,源端（A城市数据中心）对象导出只需要执行以下命令即可： expdp parfile=par_ibps.txt expdp parfile=par_payment.txt expdp parfile=par_sotpguomi.txt 2、数据导出后通过以下命令将数据上传至目标端（B城市新数据中心）的数据库服务器对应目录下。 scp *.txt fzs1168.0.0.26:/fzs_de/dzqdpt/fzs1/3、在B城市新数据中心数据库服务器中运行以下导入命令，将187个暂不支持的数据库对象导入B城市数据库中。 impdp /as sysdb
14、a directory=dumpdir dumpfile=ibps.dmptable_exists_action=replace impdp /as sysdba directory=dumpdir dumpfile=payment.dmptable_exists_action=replace impdp /as sysdba directory=dumpdir dumpfile=sotpguomi.dmptable_exists_action=replace（3）B城市和A城市两数据中心数据库的sequence和directory核对1、核对两数据中心的sequence（序列），保证B城市数
15、据中心序列的当前值必须大于等于A城市数据中心序列的当前值。sh switch.shcat seqrc.log2、核对两数据中心的directory（路径），保证两数据中心的directory一致，同时检查directory对应的操作系统目录是否存在，且读写权限正常。（4）按数据库用户名和对象类型统计数据库对象第三方同步软件完成数据同步后，用以下命令核实两端的数据库对象个数是否一致。select t.owner, t.object_type, count(1)from dba_objects t, dba_users awhere a.account_status = OPENand regex
16、p_like(t.object_name, A-Z)and t.object_name not like%$%and a.username = t.ownerand a.username not in (SYS, SYSMAN, DBSNMP, SYSTEM)group by t.owner, t.object_typeorder by t.owner, t.object_type;（5）核对两数据中心数据库记录数数据库同步完成后通过两种方法进行数据比对：1、通过第三方同步软件提供的WEB界面完成数据记录数核对工作2、通过运行脚本调用SQL语句，然后比较两端数据库system.qianyi_c
17、ount表中的数据，具体步骤见数据量核对详细步骤章节。（6）编译无效对象并检查两端数据库对象状态编译B城市新数据中心数据库的存储过程和函数，并检查除了有效状态以外的数据库对象，确保B城市和A城市两数据中心数据库对象状态必须一致。sqlplus / as sysdbaSQL?/rdbms/admin/utlrp.sql验证索引、约束、存储过程等状态，以及当前无效对象-验证无效对象SELECT t.owner, t.object_name, t.object_type, t.status FROM dba_objects T where T.STATUS VALID and T.Temporary
18、 Y and t.owner not in (SYS, SYSMAN, DBSNMP, SYSTEM) and regexp_like(t.object_name, A-Z) and t.object_name not like %$%;-验证无效约束select owner, table_name, constraint_name, status from dba_constraints t where t.status ENABLED and t.owner not in (SYS, SYSMAN, DBSNMP, SYSTEM, OLAPSYS);-重建无效索引select ALTER
19、INDEX |owner|.|index_name| REBUILD; from dba_indexes where status=INVALID;（7）停止B城市和A城市两端数据库的第三方同步软件源端数据库停止同步软件su - fzs1 cd $FZS_DATA fzsstop目标端数据库停止同步软件 su - fzs1 cd $FZS_DATA vshmt -c fzsstop（8）启用触发器 sh ./tools/trigger.sh fzs2/fzs2 sqlplus / as sysdba SQLentri.sql cat trigger.log（9）开启目标端数据库归档目前数据库已
20、开启归档，使用以下命令进行核实即可sqlplus / as sysdbaSQL archive log list;（10）解除目标端数据库用户锁状态解除B城市端新数据中心数据库用户锁状态，并确保A城市数据中心数据库用户为锁定状态。alter user MANAGER account unlock;alter user VTSODS account unlock;alter user ORAYWJK account unlock;alter user SOTPGUOMI account unlock;alter user IBPS account unlock;alter user BACKUP
21、 account unlock;alter user MONITOR account unlock;alter user BUSINESS account unlock;alter user IBPSWH account unlock;alter user ODS account unlock;alter user INFA account unlock;alter user SUNCPS account unlock;alter user MMSBO account unlock;alter user MMSECIF account unlock;alter user MMSPIBS acc
22、ount unlock;alter user VTSAPP account unlock;alter user SUNDS account unlock;alter user RECOG account unlock;alter user HCE account unlock;alter user VTSIMG account unlock;alter user PAYMENT account unlock;alter user QUERYPTS account unlock;alter user MMSEIP account unlock;alter user SUNFLOW account
23、 unlock;alter user ESBDATA account unlock;（11）启用定时任务启用B城市新数据中心数据库服务器上操作系统的定时任务crontable和数据库的定时任务jobs或schedule 。job_queue_processes参数值修改为1000，即启用目标端数据库的job/schedule定时任务，然后用以下SQL语句进行查询，确保B城市和A城市两端数据库的定时任务数量和状态一致。alter system set job_queue_processes=1000 scope=both sid=*;select client_name,status from
24、dba_autotask_client a;select job,log_user,schema_user,last_date,interval from dba_jobs a where a.LOG_USER not in (SYS);select sid,job,last_date from dba_jobs_running a;select * from dba_scheduler_schedules a where a.owner not in (SYS);数据库：tranrac此数据库主要承载我行电子渠道、银银平台和组合服务平台等关键业务系统，9月15日详细切换流程和命令如下：（1）
25、源端/目标端确定复制关系是状态，并锁定用户状态用以下命令确认第三方同步软件复制关系当前状态，如果以下命令没有出来任何文件说明复制关系正常。su - fzs2ls -l $FZS_DATA/msg.err （查看报错日志）ls -l $FZS_DATA/msg.index_err （查看创建失败的索引）ls -l $FZS_DATA/msg.tab （查看坏表文件）在各业务系统软件都关闭并没有任何会话访问数据库的前提下，等待5分钟，然后锁定B城市和A城市两地数据库业务系统相关的数据库用户的状态，避免数据核对期间数据发生变更。alter user ORAYWJK account lock;alte
26、r user HXDXPT account lock;alter user PWBS account lock;alter user RADATA account lock;alter user EPAY account lock;alter user BACKUP account lock;alter user HXDXPTWH account lock;alter user MONITOR account lock;alter user PIBS account lock;alter user EIBS account lock;alter user ODSUSER account loc
27、k;alter user ECIF account lock;alter user GAPS4101 account lock;alter user LINK_01 account lock;alter user GAPS41 account lock;alter user ODS account lock;alter user PAPERLESS account lock;alter user EMBS account lock;alter user LINK_DZQD account lock;alter user NETPASS account lock;alter user RPT a
28、ccount lock;alter user MONITOR_DB account lock;alter user BO account lock;alter user EIP account lock;alter user WXUSER account lock;alter user PMOBILE account lock;（2）B城市和A城市两数据中心数据库的sequence和directory核对1、核对两数据中心的sequence（序列），保证B城市数据中心序列的当前值必须大于等于A城市数据中心序列的当前值。sh switch.shcat seqrc.log2、核对两数据中心的dir
29、ectory（路径），保证两数据中心的directory一致，同时检查directory对应的操作系统目录是否存在，且读写权限正常。（3）按数据库用户名和对象类型统计数据库对象第三方同步软件完成数据同步后，用以下命令核实两端的数据库对象个数是否一致。select t.owner, t.object_type, count(1)from dba_objects t, dba_users awhere a.account_status = OPENand regexp_like(t.object_name, A-Z)and t.object_name notlike%$%and a.usernam
30、e = t.ownerand a.username notin (SYS, SYSMAN, DBSNMP, SYSTEM)groupby t.owner, t.object_typeorderby t.owner, t.object_type;（4）核对两数据中心数据库纪录数数据库同步完成后通过两种方法进行数据比对：1、通过第三方同步软件提供的WEB界面完成数据纪录数核对工作2、通过运行脚本调用SQL语句，然后比较两端数据库system.qianyi_count表中的数据，具体步骤见数据量核对详细步骤章节。（5）编译无效对象并检查两端数据库对象状态编译B城市新数据中心数据库的存储过程和函数，并检查除了有效状态以外的数据库对象，确保B城市和A城市两数据中心数据库对象状态必须一致。sqlplus / as sysdbaSQL?/rdbms/admin/utlrp.sql验证索引、约束、存储过程等状态，以及当前无效对象-验证无效对象SELECT t.owner, t.object_name, t.object_type, t.status FROM dba_objects T where T.STATUS
