一、环境生产环境
数据质量监控griffin :
地址: http://xxxxxxxx :4200/#/health
帐户:管理员
密码: 123456
二、格里芬在做什么? 官方介绍大数据模块是大数据平台内数据方案的功能组件,Griffin (以下简称Griffin )是开源大数据解决质量模式,支持所有数据和流数据方式可以从不同维度(执行不同标准结束后,检查源端和目标端的数据数是否一致、源表的数据空值数等)收集数据资产,提高数据的准确性、可靠性。
格里芬的体系结构主要分为定义、测量和分析三个部分,如下图所示。
各部分的责任如下
Define )主要负责定义数据质量统计信息的维,包括数据质量统计信息的时间宽度、统计目标(源和目标数据的数量是否匹配、数据源所在字段的非空数量、不重叠值的数量、最大值、最小值和top5值的数量)