9月13日,国家电网有限公司大数据中心平台处专责郭学良收到业务部门的数据中台业务数据表监测需求后,登录数据中台全链路监测运营平台,应用统一采集探针服务,在2分钟内完成了27家省级电力公司相关数据表的采集监测链路配置。4月以来,天津电力信通公司开展数据中台全链路监测能力提升工作。目前,部分成果已在国家电网有限公司总部数据中台投入使用,明显降低了运维人员的工作量。
数据中台全链路监测运营平台主要针对数据中台数据资源、组件资源和数据服务等提供监测服务和异常告警处置服务,保障数据中台数据链路和数据服务稳定、数据质量完善。
此前,为了掌握多种组件的运行情况,数据中台全链路监测运营平台需要部署相对应的各类探针来采集监测数据,探针开发、部署工作量大。为了降低组件运行数据采集监测成本,天津电力信通公司以优化采集探针适配能力为技术思路,梳理组件运行的数据采集路线和探针工作逻辑,并将其整合嵌入统一的采集探针。统一采集探针适配多种组件,一键部署后即可工作。统一采集探针还可以根据需求调整数据采集的频率和内容。目前,该平台可以支撑采集监测总部、省级电力公司两级数据中台27种组件的运行数据,辅助监测组件上层的6.79万条数据链路、7687项应用服务运行情况。
此前,数据中台全链路监测运营平台的主要服务对象为数据中台运维团队。天津电力信通公司遵循平台建设的实用化初衷,打破专业壁垒,将平台服务对象扩展至业务部门。该公司开发指标可填报功能,引导业务部门通过在线选择合适的数据资源和计算公式,自主快速构建监测指标,满足个性化数据监测需求。目前,国网发展部已自主构建了数据中台同期线损典型场景的多个监测指标,数据中台运维团队常态化按月分析同期线损典型场景工作质量,及时解决相关问题。截至目前,数据中台运维团队针对同期线损典型场景监测指标相关链路,解决了存在180张无效数据表、799项无效任务、39项空跑任务及56项数据服务响应慢等问题,提升了相关数据链路的运行效率。
原标题:探针一键部署 统一采集多种组件运行数据