ITBEAR科技资讯
网站首页 科技资讯 财经资讯 分享好友

提升数据决策时效,火山引擎DataLeap升级CDC分库分表能力

时间:2023-10-24 20:16:16来源:互联网编辑:汪淼

CDC(Change Data Capture)是一种数据捕获技术,用于跟踪数据库中数据的变化。它的主要目的是捕获数据库中数据的增删改操作,并将这些变化实时或定时地记录下来,以便进行后续的处理和分析。

近日,在原有的整库方案基础上,大数据研发治理套件 DataLeap 重点升级了数据集成CDC分库分表能力,可离线+实时将多个实例的多个数据库多个分表同步到目标端中,更精准适配于业务中的实时分库分表场景。

同时,DataLeap支持将 MySQL 同步到 EMR-Doris、EMR-Starrocks、LAS,助力将最新增量数据,以最快且最低的带宽成本同步到目标库,辅助业务数据分析更加准确、高效。

相比于批量抽取而言,CDC有着成本低、速度快、少干扰三大优势。

通过仅发送增量变更,CDC能力可帮助用户降低通过网络传输数据的成本。同时,CDC可将事务直接传输到专供分析的应用上,帮助用户根据最新的数据做出更快、更准确的决策;CDC 可以通过监听数据库的日志或 API 接口,捕获数据变更事件,并将其发送到目标系统或存储库中,而无需在生产环境中大量传输数据,减少了网络流量的占用,降低了对生产环境的干扰。

图片1.jpg

火山引擎DataLeap——实时分库分表同步能力界面

同时,火山引擎DataLeap CDC分库分表能力目前支持“使用缓存”、“无需缓存,直接同步”两种缓存配置方式,可做到直连同步,也可支持中间件缓存到后kafka后再同步,这样更灵活的缓存同步模式、极大地帮助客户提高了数据消费灵活性。

火山引擎DataLeap通过快速连接云下自建/云上数据源进行数据采集同步,可帮助客户连接各类数据上云,以及云上数据流动,轻松完成数据入仓入湖,有效发挥数据的价值,同时借助CDC分库分表同步能力,支持数据端到端快速同步,数据实时性得到进一步增强,业务决策时效性提高且更准确。

除了上述集成能力,火山引擎DataLeap还可提供数据治理、数据开发、运维、资产等能力,帮助用户提升数据研发效率、降低管理成本,加速推动企业的数据化转型,目前已经应用于泛互联网、制造、新零售、汽车等领域。

更多热门内容
贝壳董事会主席拟捐赠股票投入居住领域并长期运营
4月17日,贝壳最新公告显示,贝壳董事会主席、首席执行官及控股股东彭永东拟捐赠9,000,000股A类贝壳普通股。在承担相应的纳税义务后,此次捐赠股票将50%税后资金用于居住行业服务者及其家庭成员的医疗健康福利、50%税后资金用于应届毕业生等租客群体的租房帮扶。据悉,

2025-04-17

心所想AI所向,2025凯度品牌日暨春季新品发布会盛大举行
面对厨电行业智能化、品质化升级趋势。4月16日,凯度成功举办了以“心所想·AI所向”为主题的2025凯度品牌日暨春季新品发布会。凯度CEO柯漫、董事长傅平及明星生活家王真儿依次登场,通过理念分享、技术解读、场景演绎,全面诠释“高端新厨电”;重磅推出首个AI数字生命体“

2025-04-17

FF为股民而战:五大举措启动“非法做空阻击战”,打赢梦想实现战
4月17日,Faraday Future(简称“FF”)今日宣布,为捍卫股东价值与信心,公司正式启动五大核心举措,标志着“梦想实现战之潜在非法做空反击战”的正式打响。在公司昨日提交Form D文件后,市场上迅速传播出一系列谣言——包括错误声称Form D表明高管正在出售股份;股价跌破

2025-04-17

Mureka火爆海外,今日正式开放国内登陆入口和API
2024年4月,昆仑万维发布了第一代音乐生成模型Mureka V1(SkyMusic)。2024年8月14日,昆仑万维推出AI音乐商用创作平台Mureka。2025年3月26日,正式发布Mureka O1模型与Mureka V6模型。自Mureka上线以来,在海内外获得了非常好的市场反响,成为全球AI音乐界现象级产品。

2025-04-16

问界M8正式发布:车载小艺一路聊,随时随地问问小艺
4月16日,家庭智慧旗舰SUV鸿蒙智行问界M8正式发布上市,据悉其搭载的鸿蒙座舱重塑家庭出行交互新范式,车载智慧助手小艺能力再升级,展现出卓越的语音交互能力,有问题随时随地都可以问问小艺。全新的小艺搜歌功能,仅需告诉小艺歌词与背景信息,即可“搜”听到想听的歌

2025-04-16

掘金AI千亿赛道 金山云获战略股东持续增持
2025年4月16日,金山云(NASDAQ:KC,HKEX:3896)宣布,将公开发行18,500,000股美国存托股(ADS),每ADS代表该公司15股普通股。同时,金山云还授予ADS承销商购买额外美国存托股的30天选择权。并且,为了方便港美股两地投资者认购,投资者可以选择在此次发行中以普通股代替AD

2025-04-16

昂瑞微客户到底是谁,招股说明书闪烁其词
2025年3月28日,北京昂瑞微电子技术股份有限公司(下称“昂瑞微”)科创板IPO申请获受理,成为今年首家未盈利企业申报案例。作为射频前端芯片领域的“国产替代先锋”之一,昂瑞微凭借20.67亿元募资计划、50.88%的营收复合增长率引发市场关注。然而,对于其招股书中客户信

2025-04-16

昂瑞微靠低端产品增收,5G增长乏力,上市之路能走多远?
3月28日,北京昂瑞微电子技术股份有限公司(以下简称“昂瑞微”)向上交所递交IPO申请。作为主营射频前端芯片、射频SoC芯片的集成电路设计企业,其招股书披露的财务数据看似亮眼:2022-2024年累计营收47.19亿元,复合增长率达50.88%。但穿透数据表象可见,公司增长动能过

2025-04-16

小刀电动车怎么样?以科技、美学重构时尚标杆,三登“Ray时尚”TOP榜
凭借卓越的综合实力与对市场需求的精准洞察,近日,小刀电动车产品再次登上“Ray时尚”电动自行车TOP榜,以及“Ray时尚”可持续时尚企业。这是小刀电动车连续三年(2023-2025年)斩获殊荣。这一成就不仅体现了其产品在设计、性能、品质上的持续突破,更印证了品牌“科技

2025-04-15

京东新品成长“百千亿”计划:2025年将打造600款销售亿级新品
4月15日,2025京东新品年度盛典在北京举行,正式推出京东新品成长“百千亿”计划,即在2025年加码百亿流量和百亿资金,并围绕营销能力与数字能力全面升级,实现60000款新品年销售破百万、6000款新品年销售破千万、600款新品年销售破亿。在此次盛典活动上,京东宣布“京

2025-04-15