企业数据资产管理能力建设需要经历资源化、资产化和资本化三个阶段,对应数据底座建设、资产管理平台建设、流通运营平台建设三大任务。星环科技大数据开发工具 Transwarp Data Studio,在此过程中发挥着承上启下的关键作用。近日,星环科技重磅发布大数据开发工具Transwarp Data Studio 4.0 版本,新版针对数据资产运营和语料管理的过程实现了三大能力提升 。
第一,提升了数据管理的广度:为应对AI时代下对各种语料的基础管理能力,TDS资产目录提供兼具技术视角和业务视角的多重目录体系,在原来管理结构化数据的基础上,支持非结构化数据的管理,同时也覆盖API、指标、消息列队等其他类型数据的支持。新版本提供了一套灵活、多视角的资产编目,提供各种的资产归集归类,能够在上面做管理发布。在资产目录中,可通过资产地图查看业务系统之间的数据流向,通过资产全景查看单个数据资产的全维度信息。TDS还提供资产智能检索、编目智能推荐等功能,助力资产持续运营。
第二,数据管理的深度更深:针对数据资产和语料体量巨大的问题,原来的纯工具管理就必须要接入智能化和自动化。因此TDS4.0 新版本增加了入湖向导和智能盘点的能力。其中入湖向导是基于星环数仓构建方法论标准化数据湖仓构建流程。可通过模板将架构规划、建表、ETL、ODS层表算法设计、任务调度、数据保留策略等功能有机串联,大大简化配置、快速完成批量数据入湖构建。通过智能盘点功能可以对元数据采集、数据资产识别、业务语义补充等数据资产盘点过程提供自动化、智能化产品能力,快速完成资产盘点。
第三,数据价值体现更聚焦高时效性场景:TDS 结合星环分布式分析型数据库 ArgoDB 湖仓集一体的能力,打造了更快的实时同步和对外的服务编排,支持秒级延迟的数据实时同步,保障全链路数据最终一致性,提供高可用性保障和横向扩容能力。提供产品化能力解决复杂数据查询场景中数据合并、流转、存储的需求,兼备任务调度、脚本执行、触发控制等能力,对即时查询业务场景、跨系统任务执行场景等提供支持。
某大型金融机构希望建立集团级的资产管理门户,该企业使用TDS建设数据资产目录,目前已有业务流程、业务对象、业务系统、数仓分层四套编目,纳管数据表上万个、API数千个、数据指标和AI模型若干,服务集团总部8个事业部超 5000人,最高支持上千业务人员同时使用。
除金融行业以外,TDS 还在能源、政府、医疗、交通等多个行业有场景落地,助力客户进行数据资产管理。