2024年11月15日-Dataphin新版本发布
Dataphin于2024年11月15日发布V4.4版本,本次升级相较于历史版本:
新增注册集群功能,Dataphin支持注册外部集群,从而解决跨Region数据传输以及资源隔离等问题。
新增自定义资源组功能,支持将当前租户的调度资源按照比例划分为不同资源组,且资源组之间相互隔离互不影响,实现调度资源隔离;支持为任务配置不同的调度资源;支持在补数据等临时运维场景下指定单独的资源组。
新增标签工厂功能模块,包括离线标签、离线视图、行为关系、标签市场、标签离线服务和应用管理功能。
新增元数据中心功能模块,包括采集任务和采集实例管理、业务系统管理、元数据清单查看等功能。支持从各业务系统中抽取、加工、集中存储和管理元数据,以支持数据治理,并加强组织内部数据的组织、检索和分析能力。
新增资产目录功能模块,为已上架的资产提供一个数据查找、申请消费权限、资产详情查看的入口。
新增资产消费功能模块,支持为已上架的资产(Dataphin表)申请消费权限;支持创建自助取数、仪表板分析任务;支持在我可用的列表查看有权限的数据资产。
原资产专题管理功能,支持设置多个专题,并为每个专题设置多级目录;可将资产手动上架到不同的资产目录,并配置展示名、查看权限等信息,以提升数据查找效率,降低数据理解成本,助力资产运营。
离线集成任务新增性能诊断功能,可通过读写时长、耗时操作及内存垃圾回收(GC)时长,帮助您排查导致集成任务运行缓慢的原因;新增运行记录列表功能,可管理当前项目下的所有离线集成任务的运行记录。
数据库SQL新增支持PostgreSQL、StarRocks、ClickHouse三种数据源。
数据标准新增标准模板库,系统内置基于国标文件等梳理的常用码表,包括人、经济、区域属性相关的码表。
资产运营升级,支持设置使用说明;支持自定义属性;自动上架规则支持查看最近5次或任一执行结束的执行记录;支持将数据源表及物理表中的字段设置为指标业务类型。
数据服务支持查看API的调用日志;支持设置调用明细日志及调用统计的存储位置;API文档新增支持下载OpenAPI YAML文件。
更多功能更新信息,请参见功能更新动态(2024年)--独享模式(半托管)。
2024年10月29日-Dataphin新版本发布
Dataphin于2024年10月29日发布V4.3版本,本次升级相较于历史版本:
新增运行资源配置,可为离线计算任务分配CPU和内存资源;支持为计算任务配置优先级。
数据质量新增质量规则导出功能,支持根据导出全部、按搜索及筛选条件导出、导出选中规则三种导出方式导出监控对象或单个监控对象;异常归档表支持区分当前生效的自定义的归档表和其他表,并可将其他表指定为生效表。
新增实时集成功能,可将来源端数据源中整库或全部表的数据变化实时集成至目标端数据源中,实现来源端数据源与目标端数据源实时的保持数据同步。
新增SQL注入校验配置,支持在API调用时对输入的SQL语句进行校验,提高语句的准确性。
更多功能更新信息,请参见功能更新动态(2024年)--独享模式(半托管)。
2024年07月26日-Dataphin新版本发布
Dataphin于2024年07月26日发布V4.2版本,本次升级相较于历史版本:
菜单变更:资产模块拆分为治理和资产2个模块,其中,治理模块包含:资产清单(原资产目录)、数据标准、数据质量、数据安全、资源治理;资产模块包含:资产全景、标准清单。
新增数据服务功能模块,包括市场与调用、服务开发、服务运维、服务管理功能,数据服务是基于Dataphin建设数据中台的最后一步,作为统一的数据服务出口,实现了数据的统一市场化管理,有效地降低数据开放门槛,并保障了数据开放的安全。
资产清单可统一查看Dataphin资产和从数据源采集到的业务系统表资产。
更多功能更新信息,请参见功能更新动态(2024年)--独享模式(半托管)。
2024年04月02日-Dataphin新版本发布
Dataphin于2024年04月02日发布V4.1版本:
全局视觉优化:页面主题由传统的深色风格转变为了明亮的浅色主题,更轻盈的颜色搭配不仅可以减轻视觉疲劳,还可以引导使用者的注意力自然而然地集中到页面的主要内容,从而提升工作效率。
数仓规划:数仓规划是数据建设中的蓝图,在开始数据开发前,需要完成数据仓库的规划,数仓规划配置包括:创建数据板块和主题域、计算源、数据源(源数据源和目标数据源)、项目及项目中的成员。
数据集成:数据集成是Dataphin的能力模块,是简单高效的数据同步平台,提供强大的数据预处理能力、丰富的异构数据源之间数据高速稳定的同步能力,为数据中台的建设打好坚实的数据基座。
数据建设:数据建设支持离线代码研发、实时代码研发、智能建模研发、流批一体研发等多种研发方式,其中首创的智能建模研发模式通过设计即开发的数据模型设计+自动化代码开发提供高效的数据研发生产力。
资产治理:资产管理通过数据标准、数据质量、资产安全、资产治理和资产目录实现360°全链路数据洞察与管理,帮助客户构建企业数据资产,并有效降低数据资产背后的成本。
更多功能更新信息,请参见功能更新动态(2024年)--独享模式(半托管)。