中国移动浙江公司IT系统故障详细分析报告模板.docxVIP

中国移动浙江公司?IT?系统故障详细分析报告模板 　　十二月份故障分析报告(12?月?01?日?-12?月?31?日)?1、关于?12?月?4?日客服部分座席多 次出现被突然签出的故障(蓝) 　　2、?关于?12?月?8?日金华用户反映通过社会渠道系统充值话费未到帐的故障?(蓝) 　　3、关于?12?月?26?日部分地市社会渠道客户关系管理系统登陆异常故障(黄) 　　析到?CDN?地址。社会渠道管理平台通过?IP?能正常访问,通过域名访问失?败。?终端系 统、?CRM?新渠道通过?IP?和域名都能正常访问。?判断为?CDN?的问?题,后经和网宿沟通确认, 社会渠道为?https?应用,因网宿没有导入相应?的渠道证书,?导致应用无法访问。?终端系统、 CRM?新渠道系统为?http?页面访问正常。b5E2RGbCAP 　　3、?8:38?通知代理点直接通过社会渠道三个源?IP?访问,业务恢复正常。但因?渠道系统 代理点众多,部分通过域名访问平台的用户仍旧无法访问。p1EanqFDPw 　　4、?8:40?联系网管中心进行?DNS?配置回退,但未联系上厂家。 　　5、?8:42?联系?CDN?进行社会渠道域名回退,将渠道三个域名指向具体的源站?IP?,但 CDN?厂家误认为受影响业务只有社会渠道电信域名,在修改?DNS?配?置时只将社会渠道电信域 名?A?记录指向到源站?IP?5,?另外二?个社会渠道域名未进行源站?IP?切换。 DNS?部署和同步时间超过?20?分钟。?6、?9:05?CMCC?测试?DNS?解析电信域名到源站?IP?,业 务访问正常。但移动和网?通域名?DNS?解析仍然为?CDN?CNAME?记录,业务无法正常访问。部 分代理商?反馈业务正常。DXDiTa9E3d 　　7、?9:10?因仍有部分用户业务未恢复,?网络组要求网宿将渠道三个域名?NS?记?录到 DCN?智能?DNS?服务器?(4?和?4)RTCrpUDGiT 　　网宿反馈无法配置?NS?记录,只能配置?A?记录。这过程部署和同步时间超?过?30?分钟。 　　8、?9:40?CDN?配置生效后,部分用户通过域名访问社会渠道页面仍然无法打?开。 　　9、?9:50?联系网管中心回退社会渠道、?终端、?CRM?新渠道域名的配置,?删除网?管 DNS?相应的?CNAME?记录,增加指向智能?DNS?服务器的?NS?记录。?DNS?同?步时间超过?40?分 钟。5PCzVD7HxA 　　10、?9:50-10:30?在?DNS?配置同步过程中,维护人员页面发现访问社会渠道、?终端、 CRM?新渠道网站会跳转到广告页面,?DNS?解析社会渠道域名会解析?到未知?IP?,出现?DNS?劫 持。jLBHrnAILg 　　11、?10:40?联系电信公司,反馈?DNS?被劫持的情况。 　　12、?10:40?因网管中心全局?DNS?NS?记录同步比较慢?(同步周期?2?小时?)?,维护?人员 联系网管中心删除社会渠道、?终端、?CRM?新渠道域名的?NS?记录,?并将?域名?NS?记录修改 成网宿提供的?CNAME?记录,?DNS?配置同步时间?30?分钟。?13、?11:10 在?DNS?配置同步过 程中,?测试终端、?CRM?新渠道业务在?11:10?页面?恢复,但社会渠道业务仍然未恢复。 xHAQX74J0X 1?/6 　　14、?11:15 测试发现网宿误将社会渠道三个域名?A?记录到?DCN?智能?DNS?接口?地址 4?和?4,而非真实的源站?IP?。LDAYtRyKfE 　　15、?11:20?联系网宿将社会渠道三个域名正确解析到?A?记录源站地址。?DNS?同?步时 间?20?分钟。Zzz6ZB2Ltk 　　16、?11:40?DNS?同步完成,绝大部分社会渠道业务恢复正常,个别用户由于本?地?DNS?同 步刷新时间不同步,导致平台无法访问,已经通过?IP?地址访问?和手工修改本地?DNS?为 ?的方式解决。dvzfvkwMI1 　　处理后效?果?/遗留问?题说明 是否影响 　　集团考核 　　否 　　故障原因 　　是否已在 　　故障池内 　　否 　　4、关于?12?月?27?日部分地市用户充值后余额提醒短信与实际不符的故障(蓝) 　　查询代理是连接外围系统和实时帐务核心系统之间的纽带,?外围系统通过查?询代理进行 资金、余额、账单查询。查询代理目前部署架构是?2?台主机(上塘?和滨江主机,各?20?个进程, 每台主机对外提供?3?个端口供外围调用)?,而外围?主要是?CRM?系统(网厅、?IVR?、短厅、 帐管等)通过不同的接口调用,配置文件?perties?配置查询代理调用的域名和端口,此 文件分为?CRM?APP、?CRM?批量和帐管批量三份。