中移V3.8版本升级Checklist_R1.0_20200511.xlsx

中移V3.8版本升级Checklist_R1.0_20200511.xlsx

《中移V3.8版本升级Checklist_R1.0_20200511.xlsx》由会员分享，可在线阅读，更多相关《中移V3.8版本升级Checklist_R1.0_20200511.xlsx（14页珍藏版）》请在冰点文库上搜索。

1、秘密EMS升级CHECKLIST操作对象操作步骤获取License授权文件License中心升级前准备license中心升级外围设备检查服务器系统资源占用检查数据库表空间检查清理EMS历史文件Skybility环境变量检查和修改检查告警是否在sybaseIQ数据库入库清除历史告警和通知消息性能从节点查询功能配置检查和修改上传目标版本文件老备份文件清理ICM规划区数据和模型清理检查zdc.cfg参数设置检查ZDC主节点是否启动过同步进程ZDC软件安装路径的权限检查检查ZDC操作系统透明巨页参数设置升级前网管环境检查升级前备份网管版本和数据文件系统动态端口范围调整北向配置规范检查检查从节点同步进程

2、License中心升级License中心升级升级前检查升级前检查共 14 页 , 第 1 页秘密关闭HA监控关闭服务器进程停掉其他无关实例网管升级网管扩容GFNTL五模制式北向接口确认打开EMS上Lincense中心管理功能启动服务器EMS/ICM/ZDC升级后操作网管客户端升级ICM上载下级模型北向配置与性能数据核查HA监控脚本JDK的切换开启HA监控备份数据大文件处理备份数据大文件处理删除本次升级备份文件EMS升级EMS升级EMS升级后操作EMS升级后操作共 14 页 , 第 2 页秘密需要注意操作记录1.本次因为license中心鉴权项目有变化，需要申请全新的license授权文件；2.

3、如果有GFNTL五模扩容需求，现场根据实际情况还需要申请扩容产品License授权文件；1.检查现场网管的配置中心，检查license中心的IP地址填写是否正确；2.License中心备份；3、上传并解压license中心版本。1.关闭license中心；2.升级license中心；3、替换ZXJDK（可选，AIX/Solaris系统安装License中心无需替换，Rehat系统安装的license中心需要替换为ZXJDK）；4.启动License中心；5.安装License中心客户端；6.升级后测试。7.加载License新授权文件；去机房检查网管硬件设备有无告警灯亮起nmon和top等工具

4、查询资源使用情况升级前要对所有Oracle表空间进行检查，确保剩余表空间大于20%对安全基线和个人数据保护增强有要求的局点，如果升级前EMS源版本为V12.18.20之前的版本，在升级前需要删除一些目录存放的历史文件刀片分布式网管检查/etc/bashrc是否配置了Skybility环境变量刀片分布式网管要求升级前必须迁移历史告警到sybaseIQ数据库Oracle数据库中历史告警和通知条目不能超过1000万条刀片分布式网管要求EMS配置文件增加sybaseiq从节点数据库IP上传版本需注意：1、小机集中式网管上传发布的自带OracleJDK的版本包；2、刀片分布式网管需上传合并ZXJDK的版

5、本包。清理文件释放空间，保证升级有足够空间清理掉无用的规划区和配置模型，否则影响升级效率刀片分布式网管需检查sybaseIQ参数，按要求整改刀片分布式网管检查刀片分布式网管检查刀片分布式网管检查1、刀片分布式网管可执行MultiSystemBackupCheckTool工具做升级前检查；2、小机集中式网管需要执行UpdateChecker.pl脚本做升级前检查；3、根据核查结果，如果不满足升级条件的参数，需要进行整改。1.刀片分布式网管备份网管版本和数据库使用MultiSystemBackupCheckTool工具完成，但是SCA的sybaseiq数据库需要手动备份；2、小机集中式网管需要手动

6、执行脚本备份；3、备份版本和数据库时间较长，建议最好能够提前1-2天进行操作，以免影响当晚操作。调整系统端口，避免冲突要求核查CM/PM/FM北向配并记录刀片分布式网管需检查从节点同步进程正常运行状态要求升级V12.20.10版本后必须安排人员值守，确定北向配置、性能和告警的正常上报共 14 页 , 第 3 页秘密1、刀片分布式网管勾选Skybility软件的全局禁用；2、小机集中式网管停止hacmp资源监控；1、刀片分布式网管无需手动停止服务，升级工具自动停止；2、小机集中式网管需手动停止服务；为确保升级快速完成，需要将其他共机部署的进程包括RCT程序，RCT数据库实例停止掉。1、小机集中式

7、网管，根据升级指导书小机相关升级章节操作,特别注意使用oraclejdk版本包；2、刀片分布式网管根据升级指导刀片升级相关章节使用一键式工具同时升级EMS/ZDC/ICM，特别注意使用合并zxjdk的版本包；1.刀片分布式网管根据现场需求决定是否扩容为GFNTL五模制式，只能升级后手动扩容，特别注意如果扩容，需使用合并zxjdk的版本包；2、小机集中式网管因为资源限制，不建议扩容，如果现场有需求，需要联系支持部事先确认，特别注意如果确定扩容，需使用oraclejdk版本包；分别确认北向TL双模的CM/PM/FM接口，确认：1、是否需要回退老规范；2、升级前新规范是否升级后保持不变；3、是否需要

8、开通最新的V3.3.0规范和NSA1.1.0规范。由于网管统一安全认证，license客户端以后不再推荐独立安装使用，在V12.19.20版本，已经把license客户端集成到EMS中，在EMS打开license功能后，推荐使用EMS集成license客户端操作license中心。核查进程启动是否正常1、小机集中式网管确认EMS即可；2、刀片分布式网管确认EMS/ICM/ZDC1、小机集中式网管升级EMS客户端即可；2、刀片分布式网管升级EMS/ICM客户端；待升级OMMB后需要进行ICM模型的上载，如果现场存在多套OMMB分批升级，会存在EMS管理不同版本OMMB模型，需要上载新模型后删除老

9、模型重新上载，否则会导致SON策略出现异常核查NRM、Radio、PM数据是否生成，是否完整升级后，将EMS集群的JDK切换为ZXJDK1、刀片分布式网管去掉勾选Skybility软件的全局禁用；2、小机集中式网管恢复hacmp资源监控；升级后版本运行一段时间，如果确认无问题不需回退版本，可将本次升级过程中的备份数据大文件删除，释放磁盘空间共 14 页 , 第 4 页秘密操作人员操作时间参考时间共 14 页 , 第 5 页秘密共 14 页 , 第 6 页秘密 Confidential操作对象操作步骤升级步骤开始操作时间step1准备现网OMMB版本版本包，预防异常回退step2OMMB目标版本

10、确认step3服务器环境检查step4双机状态检查，心跳状态确认，DRBD主备同步状态检查，ommb集群检查step5双机hosts文件固定IP地址维护step6升级代理部署或升级step7主目录剩余空间检查step8备份目录创建和OMMB服务器参数获取step1确认网管操作用户具有完整的升级管理模块权限step2自动版本注册（或者可选手动注册）step3创建OMMB版本升级任务step4启动OMMB版本升级任务step5OMMB版本确认step6重启DHCP转发器（可选）step7下发集中安全数据（可选）step8ICM配置模型上载step9升级任务确认step1全局资源状态确认其他网元升级

11、顺序注意事项升级V12.20.10版本后，需要完成NDS-L升级 为对应序列版本；否则MR上报异常；OMMB版本升级准备工作OMMB版本升级版本回退共 14 页 , 第 7 页秘密 Confidentialstep2OMMB版本回退（选做）版本回退共 14 页 , 第 8 页秘密 Confidential备注操作人员实际操作历时（分钟）准备源网管版本包，以防需要回退时使用，注意：核对获取到的版本与目标版本是否一致，需要进行SHA256验证，注意：1、小机集中式网管对应OMMB，升级使用包含Oraclejdk的版本包；服务器语言需要确保为zh_CN.GBK，保证网管数据库启停控制正常1、小机集中

12、式网管对应OMMB，确保DRBD心跳状态为connected，主备同步状态为Uptodate，Skybility集群也正常。2、刀片分布式网管对应OMMB，确认Skybility集群正常。由于一键式升级工具根据主机名寻找节点，所以需要把/etc/hosts文件中添加主机名和静态地址关联在主备双机上，如果首次使用，需同时部署升级代理。注意suselinux和redhat linux下的自启动设置区别，必须保证root用户启动代理。如果上次升级已经部署过升级代理，本次一键式工具可自动升级升级代理。确保足够的预留空间，OMMB安装目录剩余空间不能小于10G按照要求在对应的OMMB服务器创建备份文件目

13、录，并记录待升级OMMB服务器登录用户、oracle相关参数信息若操作用户没有权限，会导致无法打开升级管理操作入口自动注册（或者手动注册，二者选1即可）版本需要目标OMMB版本和版本描述文件，如果还有补丁，那么可以同时选上补丁根据升级计划，将目标OMMB加入升级任务，此处需要注意，是否升级的时候同时扩容GFNTL五模，如果扩容则勾选需要扩容的产品。或者升级时不扩容制式产品，则可以升级后手动扩容。启动升级任务，并根据提示，确认“重要步骤”查询OMMB版本，确认升级后的版本与目标版本一致由于新版本转发器和DHCP服务器分离，如果升级后DHCP异常，可在Skybility中重启dhcp服务。升级完O

14、MMB后，如果账户有异常，可执行手动下发集中安全数据ICM模型上载影响CM北向上报，配置模型上载前需要删除无用的配置模型注意：版本升级后，一定不要立即点击确认，否则无法回滚。1.建议观察网络指标和设备运行状态1-2天，确认网络运行正常且达到升级预期结果后，进行“升级结果确认”操作.2.对于同一个服务器上有多个OMMB的场景，需要保障所有OMMB升级任务都完成后，再点击“升级结果确认”否则其他OMMB的升级任务会受影响确保全局资源状态禁用状态，勾选。升级V12.20.10版本后，需要完成NDS-L升级 为对应序列版本；否则MR上报异常；共 14 页 , 第 9 页秘密 ConfidentialO

15、MMB采用一键式完成回滚操作后，进行网管运行状态检查共 14 页 , 第 10 页操作对象操作步骤升级步骤开始操作时间License中心升级step1license中心升级step2导出升级站点的xml文件并在Tomas平台进行升级前数据校验，完成参数检查结果修改升级前5天step3现场利用beforecheck工具完成现场数据校验，并完成参数修改升级前3天step4网管上基站配置全局性参数检查，并完成参数修改升级前3天step5参考 TDD LTE网优类技术通知单-2020003-中国移动V3.8版本升级参数以及相关操作（DV、TY）变更注意事项的技术通告完成待升级区域的参数梳理及升级前后策

16、略确认升级前3天step6CCC系列主控板小区数量确认升级前3天step7UE系统内测量记录数超配检查升级前3天step8PM单板供电能力确认升级前3天step9 ANR黑列表升级前备份升级前1天step10 站间X2+链路关系梳理升级前1天step11SON传输自建链及回滚开关确认并进行CC资产号备份升级前1天step12 BM站点及MM站点筛选独立升级升级前1天其他网元升级顺序注意事项V3.8基站版本升级前，需要完成NDS-L、NexMAX升级 为对应序列版本。eNodeB版本升级前准备step13 完成eNodeB版本注册升级前1天step14创建eNodeB版本下载任务并完成待升级站点

17、的版本下载升级前1天step15 前后台数据一致性检查升级前6小时step16 基站eNodeB网元版本查询升级前6小时step17 确认操作用户具有完整的升级管理模块权限升级前6小时step18 升级计划管理任务清除升级前6小时step19 前后台数据一致性检查20:30step20 备份当前网元数据，导出配置数据21:00step21 备份当前告警21:10step22 备份7天历史告警21:10step23 备份动态数据管理的TDS和LTE的小区状态21:30step24 创建eNodeB版本升级任务23:00step25 创建升级前后对比任务的采集任务23:10step26 TDS/T

18、DL告警状态屏蔽23:30step27 启动升级任务0:00step28 升级后BBU&RRU运行版本查询3:00step29 TDS/TDL小区状态检查3:10step30 通过对比工具对比升级前后网络状态对比3:50step31 ANR黑列表升级后恢复3:50step32 业务验证3:50step33 异常问题处理4:00step34 DV、TY实施及网优参数修改4:30step35 升级任务确认升级后3天step36 eNodeB版本回滚4:10step37 回滚成功后版本确认4:30step38 回滚成功后TDS<E小区状态检查4:30eNodeB版本升级版本回退备注操作人员实际操

19、作历时（分钟）首先需要申请1个月有效期的升级用临时license（升级完成后尽快根据商务策略申请正式license）;升级ems之前，必须先升级lic中心，加载lic最新文件升级前5天需要现场导出升级站点的xml文件并在Tomas平台进行升级前数据校验登录TOMAS平台地址：http:/ V3.80.20.20P30及后续版本中增加了小区数限制约束，CCC单板最大支持的LTE小区数为18个，因此需要在升级前对超过约束的配置进行整改，否则无法进行软件升级。一个网元下UE系统内测量参数表最大记录数不能超过500，升级V3.8会增加默认配置记录（如V3.7升级V3.8 UE系统内测量参数表会增加11

20、2条默认配置记录）；若升级前UE系统内测量参数表配置大量的冗余数据，则可能会导致升级失败。BPQ3、BPQ3B单板、FA4C风扇必须配合支持12A通流能力的PM10B或PMAC0A。如果不更换PM升级至V3.80版本，可能会导致基站因电流问题无法正常运行，存在反复重启问题。目前，黑列表只是保存在前台内存中，当eNodeB重启或者升级时，黑列表信息就会丢失。而黑列表中的邻区对切换成功率和掉话率的影响都比较大，因此，希望V3.7版本已经发现的黑列表信息，升级到V3.8版本后继续可以生效。升级前备份，升级后恢复。由于新旧版本间X2+链路建链过程，存在版本间的消息兼容性问题，X2+建立协商消息不兼容，

21、当前版本不支持跨版本X2+链路协商，只要配置了X2+链路的站点，基站升级后会反复复位防止升级中站点异常脱网，可进行SON自建立恢复筛选BM及MM站点，独立安排升级计划V3.8基站版本升级前，需要完成NDS-L、NexMAX升级 为对应序列版本。产品、平台、固件版本需分别完成独立注册下载过程时间较长且耗时，需要提前进行确保升级前前后台数据一致；针对不一致站点可以联系技术经理和网优经理，确认该站点参数修改原因，并最终决定采用增量同步还是反构前台数据的方式来完成保持数据一致性确保升级前待升级站点的版本为V3.70.20.20；且产品、平台、固件及RRU版本匹配并一致，如果不一致需先升级统一版本至V3

22、.70.20.20系列版本若操作用户没有权限，会导致无法打开升级管理操作入口防止历史任务过多导致升级任务资源不足，异常退出升级确保升级前前后台数据一致；针对不一致站点可以联系技术经理和网优经理，确认该站点参数修改原因，并最终决定采用增量同步还是反构前台数据的方式来完成保持数据一致性通过数据备份和xml数据导出两种方式备份取消勾选“版本包下载”（由于准备阶段已下载，本次取消选中），同时确认“进入升级模式、配置数据升级、版本包激活生效、升级完成确认”步骤勾选为重要步骤。在执行具体的升级步骤前需进行告警和网元资源状态采集屏蔽TDSLTE告警升级后通过版本查询任务确认BBU运行产品、平台、固件及RRU

23、运行版本是否为601P01目标版本备份小区状态及超级小区CP状态通过升级工具自带的对比工具，对比升级前后小区状态，告警变化eNodeB升级成功后立刻恢复黑列表，如果不及时恢复，那么在恢复之前的时间里仍然会影响KPI并且备份出来的黑列表文件，网管最多保存30天，之后就会删除。对升级站点进行常规业务验证，保证业务正常针对升级失败站点进行处理，完成升级操作按照升级前梳理的网优参数进行修改、及DV、TY实施版本升级后，一定不要立即点击确认，否则无法回滚。建议观察网络指标和设备运行状态3-4天，确认网络运行正常且达到升级预期结果后，进行“升级结果确认”操作一键式完成回滚操作后，对基站版本进行检查，确认是否回退到升级前版本状态一键式完成回滚操作后，对基站版本小区状态进行检查，确定TDS及LTE小区状态与升级前一致