1、CES/FE 业务分析与故障定位,2013年2月,培训内容：,CES 业务分析及故障定位,FE业务分析及故障定位,小结,CES 业务分析及故障定位-业务特点,固定带宽，固定帧长 E1业务，固定带宽2M 155M业务，承载63个2M时隙， S1O2盘集成8个155M光口 E1和155业务均是TDM（CES）业务，其配置单位为2M;数据敏感，易造成业务中断 丢帧 错包 乱序报文 时钟敏感,3,CES 业务分析及故障定位-思路,4,定位故障电路,一找出问题业务 在网管上右键点工程业务管理，打开过滤 ，输入源网元号或网元名称，宿网元号或网元名称。,CES 业务分析及故障定位-定位故障电路,业务类型分析
2、概述-定位到VC,6,定位工作路径,业务类型分析概述-定位到Tunnel,7,主用备用Tunnel，定位保护路径,CES 业务分析及故障定位-思路,8,分析电路,CES 业务分析及故障定位-分析电路,9,提炼CES故障业务规划表,CES 业务分析及故障定位-分析电路,10,PE7,PE8,PE2,PE6,PE3,PE4,PE5,15/1,15/3,15/4,11/3,6/2,8/1,8/2,7/2,7/1,4/2,4/1,11/3,7/2,提炼CES故障业务拓扑图,CES 业务分析及故障定位-思路,定位故障点,11,CES 业务分析及故障定位-定位故障点,源节点故障 中间节点故障 宿节点故障,
3、12,CES 业务分析及故障定位-定位故障点,分析业务规划表和拓扑图 性能分析方法（源中宿节点逐步定位）1. 端口流量，报文计数2. VP层流量，报文计数,13,源节点,14,端口流量分析,在8号站的交叉盘XCUK1上面查看状态，打开LSP保护状态信息，找到标签为423，查看主备状态，如果都没有告警，说明主备状态都正常。,源节点,CES 业务分析及故障定位-定位故障点,16,中间节点：入口槽位盘显示,宿节点,17,宿节点：入口槽位盘显示,宿节点,宿节点：备用槽位盘显示,CES 业务分析及故障定位,定位到节点并查看该节点丢包原因 点击端口丢包原因查询右边的 按钮,CES 业务分析及故障定位,常见
4、丢包原因 REASON_ING_UNI_SHORTFLOW_ACL_POLICY_DROP： 入口非法，检查VPWS配置情况REASON_ING_NNI_OUTER_LABEL_SPACE_CHECK_ERROR： 外层入标签非法，检查ilm表情况REASON_ARP_INVALID : 出接口查找不到ARP，检查ARP配置情况,20,CES 业务分析及故障定位-思路,21,CES 业务分析及故障定位-分析故障原因,故障节点配置数据检查 网管配置分析端到端配置 主控配置数据分析单网元配置 单盘配置数据分析 单板卡配置,22,数据不同步会造成业务故障,网管配置数据分析,业务配置标签规划与槽位端口
5、与物理走纤一致告警信息端口Link-Los，CRC记数，端口收发光功率正常状态和性能信息仿真链路收发包，端口流量，保护组状态正常LSP流量稳定帧长统计查看业务是否发出,23,网管配置数据分析,业务配置标签规划与槽位端口与物理走纤一致告警信息端口Link-Los，CRC记数，端口收发光功率正常状态和性能信息仿真链路收发包，端口流量，保护组状态正常LSP流量稳定帧长统计查看业务是否发出,24,选中业务，右键查看业务属性UNI接口、业务时隙,业务配置1,业务配置与业务规划是否一致,定位至Tunnel，保护组在8号站（640）上，主用标签是423，备用标签是424,业务配置2,网管配置在主控和单盘上是
6、否同步,告警,27,本地,远端,告警示例 远端链路接入故障和本段链路包丢失,状态,28,异常,正常,Tunnel流量,性能,仿真链路接收的包数和发送的包数是否相等,CES 业务分析及故障定位-主控/单盘,源/宿节点数据分析 VPWS配置 LSP_Tx配置 LSP_Rx配置 ARP配置中间节点数据分析 LSP_Rx配置 ARP配置,30,查看VPWS配置：,查看LSP_TX配置：,查看LSP_RX配置：,协议盘上查看ARP ：,IP地址,MAC地址,单盘配置数据分析,分析步骤 登陆单盘 单盘常用命令 VPWS配置 LSP_Tx配置 LSP_Rx配置 ARP配置 历史配置数据记录,33,单盘命令函
7、数集锦-menu,CES业务工程问题分析,查找过程,1. 找到故障电路 2. 查询流量 3. 中间节点入tunnel表没有lsp表项 4.登陆主控盘，发现有配置数据； 5.登陆NP盘，发现没有配置数据； 6. 检查配置下发时间，较早时间配置数据； 7. 检查主控配置锁开关,36,协议盘查看TNE状态命令：,CES业务工程问题分析,1. 找到故障电路 2. 查询流量 3. 中间节点入tunnel表中流量不对称 4.检查源节点发送数据流量，太少 5.检查单盘配置，发现CES使能开关关闭,38,查找过程,1. 找到故障电路 2. 查询流量，正常 3. 沿路检查端口性能和告警； 4. 发现有CRC计数
8、，端口收光功率过低,39,查找过程,案例4：LSP1:1保护倒换出现异常，没有成功倒换。 查询原因：所在的网元S1O1单盘的设备类型为PTN，影响了背板总线。修改设备类型为IPRAN后，问题解决。 注意：S1O1单盘修改设备类型后单盘会重启，重启时间需要20分钟左右。,CES业务工程问题分析,1. 找到故障电路 2.检查保护组状态 3. 检查流量，业务走向备用路径 4. 登陆交叉盘，检查保护组告警信息 5. 读总线告警信息与备用槽位发送告警信息不一致 6. 查询哪块板卡影响背板；CES板卡-NP板卡逐个定位；,41,查找过程,培训内容：,CES 业务分析及故障定位,FE业务分析及故障定位,小结
9、,FE业务分析,数据不敏感 帧长随机 帧速随机 VLAN操作,43,UNI,NNI,Tag 识别,Vlan 增加/删除,Tag 识别,Vlan增加/删除,Tag不识别,Vlan增加,Tag 不识别,Vlan增加,找故障电路,44,网管查看相关配置,首先在网管上找到出现故障的业务路径，方法如下：右键点击工程1，选中“业务管理”，然后点击“业务管理主视图”中的过滤图标 ，在弹出的对话框中输入原宿网元后点击确定。,网管查看相关配置,找到出现的故障业务后，右击该业务，选中“显示业务属性”，在弹出的对话框中可以看到PE7和PE2节点上VPWS UNI测配置。,网管查看相关配置,47,按照前述方法找到出现
10、故障的业务后，右击该业务，选中“定位到IPRAN VC”，右侧会显示该业务相关标签信息。,LSP保护主备状态,48,右击出现故障的业务，选中“定位到IPRAN TUNNEL”，右侧显示tunnel保护信息。从右侧保护路径可以看出在PE8和PE2上配置了保护。,LSP保护主备状态,49,打开PE8的XCUK1的状态，从上图中可以看到PE8的收标签为315，点击LSP保护状态信息，找到标签值为315的对应项，查看其主备告警信息,LSP保护主备状态,50,PE2上主用路径是11/1，主用标签是317，备用路径是11/3，备用标签是321,。打开PE2的11号槽位的状态信息，点击保护组状态。找到主用标
11、签为317的相应项，即可以看到该tunnel保护组的信息。,51,FE业务工程问题分析,52,提炼以太网业务规划表,组网拓扑图,PE7,PE8,PE2,PE3,15/1,15/1,15/3,15/4,11/3,11/1,11/1,11/3,提炼以太网业务逻辑图,定位故障点,54,定位故障点方法,Ping包分析法ping特定帧长的报文，通过帧长区间统计查看数据路径； Oam包分析法通过OAM包特定流量，进行分析 流量分析法,55,1.1.1.1,2.2.2.2,arp,rarp,ping,ack,MEP1,MEP2,Enable vc,Vc loc,Vc rdi,Enable Vc,56,FE
12、业务分析及故障定位-定位故障点,配置数据检查 网管配置分析 主控配置数据分析 单盘配置数据分析,57,问题定位-配置,58,以PE7到PE2方向的业务出现故障为例，且LSP工作在主用状态。则其工作路径为： PE7(15/1)-(15/1)PE8(15/4)-(11/3)PE3(11/1)-(11/1)PE2。右击出现故障的业务，选中“定位到IPRAN TUNNEL”。,59,FE 业务分析及故障定位-状态,问题定位,60,通过以上步骤确定业务出现故障的网元及槽位后，需在相应网元的槽位上查看丢包原因。查看丢包原因方法如下：点击相应网元，然后右击该网元的相应槽位，点击状态监视。,61,在弹出的对话
13、框中，点击左侧端口丢包原因查询所对应的 图标。,FE 业务分析及故障定位-定位故障点,主控盘配置数据,VPWS LSP_TX LSP_RX ARP,62,原宿节点查看配置,63,原宿节点上有VPWS、LSP-RX、LSP-TX的配置。以下图示均以PE2为例（收pw标签为312）。 1、主控中查看vc的配置,原宿节点查看配置,64,3、在主控盘上查看LSP-TX的配置,原宿节点查看配置,65,5、在主控盘中查看LSP-RX的配置,查看节点上arp配置,66,1、在主控盘上查看arp配置信息,工程ARP故障排除方法-FE业务中断,67,640,R860,R860,R860,640,找到故障电路 分
14、析电路 OAM 分析法，使能VC OAM 流量分析 查找丢包原因 分析主控/单盘ARP配置数据,培训内容：,业务分析概述,CES 业务分析及故障定位,FE业务分析及故障定位,小结,小结-业务特点,CES业务特点 固定带宽(一个2M业务，固定带宽2M) 数据敏感(丢帧、错包、乱序、时钟)FE业务特点 数据不敏感 帧长随机 帧速随机 VLAN操作,69,小结-故障定位思路,故障定位思路 找到故障业务 业务分析 故障点定位 故障分析故障分析方法 Ping包分析 OAM分析 流量分析 丢包原因分析,70,故障关键点,网管信息不正常造成业务故障,71,数据不同步造成业务故障,小结-常用命令,主控命令: sh mpls vc table sh mpls forwarding-table sh mpls ilm-table sh arp单盘命令: menu PrintPortMap DbgGetMplsVpnInfo DbgGetEncapTunnelInfo DbgGetLspInstInfo DbgGetArpInfoByPort,72,
