基于元模型的网管数据质量管理平台

通讯方面相关

基于元模型的网管数据质量管理平台

作为网管系统的重要构成要素，数据质量一直是影响网管系统成败的关键因素。要提供高质量的数据不仅取决于网管内部处理过程的准确，更依赖于上游系统高品质的输入。为保障上层网管所提供的分析结果的数据价值，就必须要建立一个端到端的数据质量综合管理体系。

在此背景下，安徽公司将数据质量监控“探针”前移至信息流“源头”，并以此为基础构建了一套端到端的数据质量核查、预警和知识沉淀体系。实现了从源系统需求变更开始插入监控核查点，贯穿数据提炼的每个流程，实现从数据源到最终展现的质量监控全覆盖。同时，基于元数据平台所构建的数据质量知识库，能够有效地收集、归纳和沉淀在核查中所发现的各类数据质量问题，并应用于数据质量预警体系，进而做到“防患于未然”。

端到端数据质量监控预警子系统 通过构建端到端数据质量监控预警子系统，实现了从源系统需求变更发起开始，直至经分系统最终应用展现全流程的动态实时监控和预警。对源系统需求部署变更的监控：当需求管理平台获取到源系统变更需求时，平台自动将需求变更信息传送给数据质量知识库，数据质量知识库自动监测发生变更的数据表或码表，并依据血缘关系自动形成需求部署变更报告，发给经分系统；经分需求评估人移居血缘关系对关键的经分应用，进行自动化的影响评估，并同步更新数据质量知识库，以供数据质量监控预警子系统能够实时监控变化。对数据质量的实时动态核查：通过在数据质量监控预警子系统上，建立系统化的数据质量核查体系，实现从源系统数据库层、接口层（BUFFER）、仓库层（DW）到应用层（ST）直至最终展现结果的动态实时质量核查。核查的内容包括一致性、及时性、准确性、合理性、唯一性以及完整性。对数据质量问题的告警：对检查发现的数据质量问题进行告警，支持短信、邮件、声音、颜色等多种告警方式，同时支持告警级别、告警升级、告警流转。 网管监控