评估体系
- 评估体系提供“质量特性评估”、“数据元件评估”,由空间管理员完成评估配置后,即可基于评估规则自动完成评估。
质量特性评估
质量特性
使用场景:空间管理员可构建数据质量评估体系,通过质量评分等维度形成元件判定规则,自动发现数据元件。
使用角色:空间管理员。
功能描述:平台支持新建质量特性,可用于创建质检规则后绑定质量特性,在质检完成后查看基于质量特性权重和质检结果计算出合规得分,并基于合规得分自动扫描发现元件。
评估规则配置
进入系统管理 > 评估体系界面,点击页面上的“质量特性”标签页,进入详情页后,点击“新建质量特性”,进入到新建质量特性页面,按要求填写信息后“保存”即可。
注意
平台提供内置质量特性可供直接使用,内置质量特性不可修改删除。
规则应用
已创建质量特性可在配置质检作业时关联质量规则,以计算质量合规评分。
内置质量特性推荐关联规则
质量特性 | 推荐关联规则 |
---|---|
完整性 | 非空条数,固定值;非空条数/总条数 |
有效性 | 符合范围条数,固定值;符合范围条数/总条数; 符合枚举值条数,固定值;符合枚举值条数/总条数; 包含关键字条数,固定值;包含关键字条数/总条数; 符合字段长度范围条数,固定值;符合字段长度范围条数/总条数 |
唯一性 | 唯一值条数,固定值;唯一值条数/总条数 |
准确性 | 符合格式条数,固定值;符合格式条数/总条数; 符合身份证校验条数,固定值;符合身份证校验条数/总条数; 符合邮箱校验条数,固定值;符合邮箱校验条数/总条数; 符合手机校验条数,固定值;符合手机校验条数/总条数; 符合座机号校验条数,固定值;符合座机号校验条数/总条数; 符合日期格式校验条数,固定值;符合日期格式校验条数/总条数; 符合IP地址校验条数,固定值;符合IP地址校验条数/总条数; 符合邮编格式校验条数,固定值;符合邮编格式校验条数/总条数; 符合含空白字符校验条数,固定值;符合含空白字符校验条数/总条数 |
数据元件评估
元件判定规则
使用场景:空间管理员可构建数据评估体系,通过配置元件判定规则,自动发现数据元件。
使用角色:空间管理员。
功能描述:平台支持新建元件判定规则,自动对需判定数据表的质检评分、主数据引用诊断评分、标准字段引用诊断评分与规则进行比对,以判定是否需要进行元件打标。
评估规则配置
- 进入系统管理 > 评估体系界面,点击页面上的“元件判定规则”标签页,进入详情页后,点击“新建元件判定规则”,进入到新建元件判定规则页面,按要求填写信息后“保存”即可。
- 名称:必填项,用户根据使用场景自定义名称,空间内不可重复;
- 质量合规得分:必填项,百分制,当实际得分大于等于所输入分值,则判定满足规则;
- 主数据引用诊断得分:非必填项;用户根据使用场景输入最低要求分值;
- 百分制,当实际得分大于等于所输入分值,则判定满足规则;
- 主数据引用诊断得分来源于“主数据引用诊断”风险等级计算公式转换而来,诊断得分=“等级结果”x100。
即:(该表实际引用了主数据且数据一致的列数量)/(该表应引用主数据与已引用主数据的列数量并集)x100
- 标准字段引用诊断得分:非必填项;用户根据使用场景输入最低要求分值;
- 百分制,当实际得分大于等于所输入分值,则判定满足规则;
- 标准字段引用诊断得分来源于“标准字段引用诊断”风险等级计算公式转换而来,诊断得分=“等级结果”x100。
即:(该表实际引用了标准字段且满足值域的列数量)/(该表应引用标准字段及已引用标准字段的列数量并集)x100
- 判定逻辑:默认全部规则满足,用户可自行选择“全部规则满足”或“任一规则满足”。
- 完成规则创建后,需关联资产,即选择参与元件判定的数据表资产,保存后系统会每日凌晨自动对关联资产进行扫描判定,满足条件即标记为数据元件。
注意
- 元件标记刷新逻辑为T+1;
- 元件判定规则修改、删除后,下次判定扫描时生效,即T+1后方可查看新规则的元件标记结果,或清除已删除规则的所有元件标记;
- 元件判定规则删除关联资产后,对应关联资产的元件标记将同步立即删除。
规则应用
进入数据开放 > 本空间资产 > 数据表资产界面,满足元件判定规则的数据表资产将标记为元件资产,并可查看判定详情。