Skip to main content

更新日志索引

更新日志功能清单
2023年10月更新日志功能新增
【元数据】元数据周期同步增加数据库过滤条件【上线版本:5.3】
功能优化
【元数据】sparkthrift元数据同步问题处理【上线版本:5.3】
【元数据】元数据同步优化(日志优化)【上线版本:5.3】
【数据质量】任务列表支持展示任务提交人、自定义sql语法校验优化【上线版本:5.3】
【数据治理】「小文件治理」 周期治理规则配置时展示具体每个分区的文件数量【上线版本:5.3】
【数据质量】脏数据存储数据库只能配置数据源中心添加过的catalog【上线版本:5.3】 【数据模型】字段类型设置varchar支持自定义字符长度【上线版本:5.3】
【数据模型】建表时支持配置分区范围【上线版本:5.3】
【数据模型、数据地图】表删除逻辑优化【上线版本:5.3】
【数据标准】标准映射逻辑优化【上线版本:5.3】
针对单表每个字段可以批量生成校验规则【上线版本:5.3】
BUGFIX
【数据标准】概览页面实时更新【上线版本:5.2】
可定义资产概览中展示的默认数据源【上线版本:5.3】
【数据质量】规则集修改之后「任务查询」中历史运行详情被修改【上线版本:5.3】
2023年9月更新日志功能优化
【元数据】表结构字段列表编辑交互优化【上线版本:5.3】
2023年8月更新日志功能新增
【元数据】分区表支持在表结构中显示分区信息【上线版本:5.3】
功能优化
【数据质量】告警邮件内容增加实例的计划时间【上线版本:5.3】
【资产盘点】数据源显示优化【上线版本:5.3】
2023年6月更新日志功能新增
数据模型支持inceptor建表【上线版本:5.3】
质量规则对接资源组【上线版本:5.3】
oushudb支持元数据同步和查看【上线版本:6.0】
功能优化
数据地图查询性能优化【上线版本:5.3】
血缘显示内容优化【上线版本:5.3】
元数据同步优化【上线版本:5.3】
2023年5月更新日志功能新增
【5.3】新增数据源支持Hive_MRS、Trino
【5.2】告警通道中的自定义告警通道支持显示多通道
【5.3】规范建表数仓层级绑定数据库逻辑优化
【5.3】规范建表支持AnalyticDB PostgreSQL表
【6.0】数据脱敏优化
【6.0】数据地图迁移后,所有租户下拥有离线产品权限的用户都自动增加资产的访客权限
【6.0】表生命周期到期后处理方式调整
【6.0】支持离线创建项目生成的Oracle、SQL Server meta数据源在资产的自动授权
【6.0】产品Logo可在业务中心统一配置
功能优化
【6.0】Hive元数据技术属性增加表类型说明,可标识其为Iceberg表或者其他格式的表【5.3】资产监听离线IDE的DDL语句,SQL解析后元数据变更实时更新在资产数据地图 【5.3】离线删除项目后资产自动引入的meta数据源将同步删除
【5.3】所有下拉框增加loading效果,质量校验规则、任务、数据源管理、元数据管理、文件治理的列表筛选框增加模糊搜索
【5.2】数据质量告警的告警top20增加告警时间的显示
2023年3月更新日志功能新增
【5.3】代码规则检查
【6.0】trino跨源校验支持tdsql、inceptor
【6.0】自定义角色
功能优化
【5.2】数据目录批量指定
【5.3】质量规则优化
【5.2】创建任务回滚机制:当质量任务绑定离线任务时,绑定失败,质量任务仍然会创建成功,需要做到两个之中任意一个失败了,质量规则创建失败
【5.2】脏数据存储变更,质量任务重新提交:切换完独立数据校验要重新保存一下任务,不然去获取脏数据的时查的是独立库,但是sql跑的是之前的库,在切换脏数据独立存储后,把相关任务重新提交,包括新增/编辑
【5.3】导入优化,支持覆盖和更新,支持异常数据下载
【5.3】资产盘点-tips:提示数据更新时间
2023年2月更新日志New Feature
【5.3】监控数据变更,数据质量支持对接控制台自定义参数
【5.3】新增hashdata数据源适配,元数据管理、数据标准、数据质量
【5.3】离线侧生成的StarRocks/Green Plum的meta数据源自动授权给数据资产做资产管理
【5.3】标准/词根批量导出,满足无平台权限部门线下对齐数据标准下发规范的需求 Improved
【5.3】实时字段血缘优化
【5.3】独立存储/任务关联的模糊搜索
【5.3】质量-规范校验-枚举值校验为范围校验,只支持固定值校验,提示优化
【5.3】部分页面前端升级:数据地图、元数据同步、资产盘点、数据标准统计
2023年1月更新日志New Feature
全链路血缘 ADB数据源资产适配 Huawei Cloud数据源资产适配 license收敛(自5.3版本起未来不再引入外部数据源)
Improved
血缘优化
前端页面升级 datasourceX优化
2022年11月更新日志New Feature
【数据源新增】元数据管理新增Hive3(Apache)、Hive3(CDP)、TDSQL、StarRocks、Greenplum、DB2、PostgreSQL数据源支持。
【地图】指标接入数据地图。
【智能标签】新增所属实体信息,智能标签采集到的任务支持通过实体进行区分。 【API血缘】API血缘链路打通。
【指标/标签血缘】新增指标和标签的血缘关系。
【meta数据源自动授权】新增TiDB的meta数据源自动授权给资产平台。
【离线数据地图迁移】 数据文件治理功能迁移。
Improved
【Kafka】隐藏Kafka表结构,新增分区查询页。
【API血缘优化】 血缘解析新增truncate关键词。 排除自身到自身的血缘。 血缘流向优化。
【元数据中心耦合关系优化】 增量SQL支持。 数据模型权限控制,没有资产权限的用户,在调用元数据中心的数据模型时会提示没有权限。
【脏数据管理】范围调整为当前项目内的数据源;脏数据存储时效为90天;调整全局提示内容。
【meta数据源】meta数据源自动授权优化。在进行meta数据源同步时,同步的库表范围调整为当前这个数据源对应的库和库下所有的数据表。
【数据地图-快速筛选优化】标签筛选加一道维度过滤,各维度只筛选各自的标签值;为避免和标签平台的标签混淆,标签筛选栏在表维度显示为“表标签”,其他维度显示“标签”。
【UI】UI5.0升级优化。
【词根匹配】字段中文名词根匹配优化,识别准确度提高。 【数据源插件】数据源插件优化。
【数据源】数据源初始化功能去除,平台内支持实时查询库表。