2023年8月更新日志
功能新增
【元数据】trino支持元数据同步【上线版本:6.0】
需求背景:项目上需要实现支持trino的元数据同步
功能:离线、指标、标签等其他产品模块创建项目生成的trino meta数据源资产支持自动引入,且trino meta数据源支持质量项目授权。
【数据质量】支持通过trino实现tdsql和inceptor表的跨源比对【上线版本:6.0】
需求背景:项目需求,inceptor表的比对中之前没有考虑hyperbase、hyperbase drive、search的支持。
功能说明:数据质量可通过trino实现tdsql和inceptor(hyperbase、hyperbase drive、search)表的跨源比对【元数据】分区表支持在表结构中显示分区信息【上线版本:5.3】
功能:若该数据表为分区表,则在表详情-表结构中,新增展示表的分区信息。
【数据标准】支持数据标准的上线、下线审批操作【上线版本:6.0】
功能:数据标准模块普通用户创建的数据标准需要经过审批中心审核完成后才可进行上线、下线,上线后的数据标准才可进行标准映射及标准绑定操作。
【元数据】元数据同步支持配置自动同步过滤规则【上线版本:6.0】
背景:针对监听离线 ddl 语句并实时同步表进入资产的逻辑,客户元数据同步任务是添加了过滤条件的,不想采集 tmp 表到数据地图,通过元数据同步任务是可以过滤掉的,但是实时 ddl 监听的逻辑是没有地方添加过滤条件的,所以离线跑任务的时候,里面的 tmp 表还是会被采集到资产中。
功能:在元数据同步模块新增“自动同步”功能,用于配置自动同步的过滤规则。
体验优化
【数据质量】告警邮件内容增加实例的计划时间【上线版本:5.3】
在告警邮件中增加“计划时间”,原来的“调度时间”修改为“开始时间”,便于用户直接通过邮件等通知观察到具体是哪一天的质量任务校验失败。
【资产盘点】数据源显示优化【上线版本:5.3】
1.已接入的数据源,按数据源数量-库数量-表数据-存储大小的优先级排降序;
2.数据目录分布中,根据当前租户对接的子产品模块来显示数据资源内容。
BUGFIX
1.【元数据】数据表中的字段顺序按照指定的顺序来显示
2.【数据质量】规则配置打开规则加载卡顿提示