当前位置: 首页 >同业动态 >辨识来源强管控 分门别类显神通——江苏公司传输告警整治经验

辨识来源强管控 分门别类显神通——江苏公司传输告警整治经验

2021-10-29 18:07:33

导读

       随着全业务的不断发展,传输网络作为无线、集客、家客的承载网络,其网络规模也在不断扩大,各类传输设备呈现出“爆炸式”的增长态势,在引发网络出现海量告警的同时,也造成了大量无效工单的派发,严重影响了网络正常运行维护工作的开展。


      在传输网络的日常维护中,传输告警是发现和解决问题的重要途径,各类告警的处理和管控更是日常维护工作的重中之重,但大量的无效高频告警容易给故障的发现和判断造成很大影响,大大降低了维护工作的开展成效。


      为做好告警整治工作,江苏公司紧扣重点,面向未来,提能力整短板,革思路重实效,全方位分析告警产生原因,针对性开展整治工作,并选择省内宿迁公司作为试点,开启告警整治的破冰之旅

      整治开始前,试点地市在网传输设备5600多台,月均网管总告警量108.5万条,月均单网元告警量190.4条,月高频告警占月告警总数48.5%,月平均高频网元数为478台。


传输告警的基本特点归纳


     根据统计分析,我们将各类告警信息归纳为“光路类”和“非光路类”两个大类共八个因素,具体如下:





      针对这八个因素,我们逐个分析查找主因,建立了“八大因子分析法”,并根据这八大因子对告警进行专项分析整治,在加强防范与强化处理的同时,制定处理流程,分析存在短板,形成了一套行之有效的告警处理规范。



1/8   八大因子之一——

铁拐李:整治光路中断告警的三个拐




例如:

  • 如果两个网元的告警字段“告警定位对象”中包含的对端网元名称则可认定为衍生告警,可区分后进行屏蔽;

  • 数据网管的PING不可达告警上报时,如果有同样告警对象名称的网元链路断或者网管与设备通信失败的传输网管,则只衍生出一条相关告警进行处理并派单。

  • 经过整改,光缆中断处理时长>4h的次数由月均3次下降到0次

  • 光缆中断导致的告警量下降了60.1%

  • 光缆中断导致的高频告警占到总告警量的比例由30.7%下降到29.2%


2/8   八大因子之二——

汉钟离:工程上线/维护割接告警整治四言真经




  • 对传输、互联网、集团、工程、监控等人员宣贯执行《 全专业工程告警屏蔽操作指导手册R2.0》 、《网络割接类告警报备流程》

  • 经过3个月的整改,工程操作告警报备率达到100%,割接类告警下降75%以上。


3/8   八大因子之三——

蓝采和:整治性能异常告警十六字心法



  • 经过整治,提升响了应速度和闭环率,汇聚层以上性能事件处理时间在2小时内的比例由整改前70%提升到85%

  • 能异常告警量和高频/无效告警下降50%以上,有效降低告警量。


4/8 八大因子之四——

张果老:整治客户侧连接和设备问题的“倒骑”视角



      原则:

做好角色转换,学会“倒骑视角”,即加强班组协同,传输维护由尽义务通知的角色转变为牵头角色、监督角色、管理角色,第一时间通知专业班组处理,跟踪处理过程直至闭环。


  • 经过整改,客户侧端口和对端设备故障造成的告警总量下降64.4%

  • 客户侧端口和对端设备造成高频告警占总告警比由整改前的15.2%下降到12.9%


5/8 八大因子之五——

何仙姑:整治PON光路告警三连妙计



6/8 八大因子之六——

韩湘子:整治流量越限告警洞箫四曲




  • 整改后网管流量越限告警下降80%以上,高频告警闪断显著下降。


7/8 八大因子之七——

曹国舅:整治CPU利用率越限告警根源三法




  • CPU类告警由月均4.99万条下降到1.1万条以下; 

  • CPU原因闪报高频网元由月均5台次下降到0台次


8/8 八大因子之五——

吕洞宾:整治高温设备告警云展三点




  • 会同基站维护共同制定并实施《传输高温设备故障认责考核办法》,对高温反复出现的机房和设备重点处理、缩短处理闭环时限,对降温效果差的机房站点进行专项整改。 

  • 高于70度的高温设备4个小时处理闭环率达到95%以上。

  • 高温越限告警量比整改前下降60%


  • 试点地市整改前月均告警总数为108.5万条,整改后告警为45.4万条,告警下降58.2%;

  • 高频告警量由整改前的月均52.6万条下降至4.36万条,绝对值下降91.7%;

  • 高频占总告警比由48.5%下降到9.6%,高频网元设备数、高频网元占全区传输网元总数比例均为全省最低水平。

      经过系统的整治工作,试点地市的月均告警总数下降明显,告警总量和单设备告警量指标位居本省前列,超频告警及无效告警量均达到大会战阶段性标准,告警各项数据提升明显,告警网元整治效率大大提升。