400 128 6709

行业新闻

CloudCanal v5.3.0.0 发布,无惧海量表的数据实时迁移同步

发布时间:2025-11-28点击次数:

cloudcanal 免费社区版 是由 clougence 公司自主研发的一款可视化自动化的数据迁移与同步工具,集成了 结构迁移数据迁移实时同步数据校验数据订正 等核心能力。产品全面支持 60+ 主流数据库及中间件,涵盖关系型数据库、实时数仓、消息队列、缓存系统和搜索引擎,其中包括国产主流系统如 oceanbasepolardbtidbstarrocksdoris 以及 rocketmq 等。

通过集成开源项目 CloudCanalProcess,用户可轻松实现以下扩展功能:

  • wide-table:宽表处理插件,支持事实表与单维度表的自动组合构建
  • data-transform:通用数据转换插件,支持字段增减、操作类型变更、数据清洗与回填
  • data-gather:分库分表、跨地域或垂直拆分场景下的数据实时汇聚
  • data-compare:基于源端变化实现业务级数据对账
  • business-alert:根据数据波动趋势触发智能告警机制

CloudCanal 在功能上对标阿里云 DTS、Amazon DMS、StreamSets 和 AirByte,致力于帮助开发人员、DBA 及运维团队高效搭建稳定可靠的数据链路。

CloudCanal v5.3.0.0 发布,无惧海量表的数据实时迁移同步

独响 独响

一个轻笔记+角色扮演的app

独响 249 查看详情 独响

核心亮点

  • 支持 MySQL 到 MySQL/StarRocks/Doris/SelectDB/PostgreSQL 的表达式表名匹配,适用于超大规模表的批量迁移与同步
  • 新增 CloudCanal 控制台黑夜模式,提升夜间操作体验

新增链路支持

  • 开通 腾讯云 TDSQL MySQL → TDSQL MySQL 的全量同步、增量同步、数据校验、数据订正、结构迁移及 DDL 同步(包括加列、删列、modify、rename、truncate)

新功能上线

  • 支持 AWS RDS Oracle 的全量迁移与增量同步
  • Oracle/PostgreSQL/SQL Server 源端支持配置数据校验采样率(参数:checkSamplePercent),支持叠加过滤条件,暂不支持断点续传
  • 实现 MySQL → PostgreSQL 多 Schema 场景下的迁移与同步
  • TiDB 源端支持多个任务订阅同一张表,显著降低超大 Region 表拉取变更时出错的概率
  • 支持 MySQL/OceanBase for MySQL → OceanBase for MySQL 的 CHANGE COLUMN 类型 DDL 同步
  • 支持 MySQL → MySQL 场景下地理空间类型数据的同步
  • 支持在任务级别设置延迟告警 WebHook,便于对关键任务进行独立监控
  • 钉钉、飞书、企业微信告警支持 "@所有人" 功能,可通过 配置 > 个人偏好 > CloudCanal > imAlertAtAll 参数开启
  • 语音告警支持通过代理发送,满足全内网环境用户的使用需求
  • 支持将迁移同步节点上的任务日志和主机日志上传至 S3 或 OSS(通过 配置 > 个人偏好 设置存储信息),助力故障排查
  • 支持将任务参数导出为 Excel 文件保存,便于审计与问题追踪
  • 支持导出全量性能、增量性能及机器监控图表为图片
  • 支持修改订阅批量操作中黑名单的生效范围(已订阅表 / 新增表)
  • 支持将现有任务参数保存为模板,并在应用模板时预览内容
  • 提供开放 API 接口(/schema/listTransObjsByMeta),支持按源端和目标端库表信息查询相关任务

体验优化

  • 优化任务处于“删除中”状态时的操作限制,避免误操作
  • 优化任务参数模板的创建、查询与删除流程
  • 完善模板配置项的白名单规则管理
  • 改进创建任务时选择目标表的交互逻辑,提升易用性

缺陷修复

  • 修复 TiDB 源端增量同步时无符号 Decimal 类型解析异常的问题
  • 修复任务参数页面未展示待创建参数的问题
  • 修复未激活状态下提示文案错误的问题
  • 修复在搜索并手动勾选模式下修改映射规则或表名接口调用异常的问题
  • 修复消息源端创建任务最后一步界面显示异常的问题
  • 修复消息源端任务黑名单操作按钮未隐藏的问题
  • 修复消息对端数据库列表 action 过滤按钮未隐藏的问题
  • 修复 Kafka 测试连接时无法获取 Topic 列表的问题
  • 修复设置自定义主键后虚拟列影响汇聚逻辑主键生成的问题
  • 修复个人偏好中 IM 验证签名无效的问题
  • 修复修改邮箱、手机号、密码时报错信息未正确显示的问题
  • 修复异步操作(如创建、重跑、删除任务)失败后仍允许启动任务,导致状态机紊乱的问题
  • 修复创建任务时无法选择表的原因未正常提示的问题
  • 修复开启条件过滤下推后,“下一步/上一步”按钮状态缺失的问题
  • 修复 MySQL 获取最新位点后确定按钮不可点击的问题
  • 修复创建任务指定虚拟列时,若对端存在同名列会导致增量写入为空的问题
  • 修复达梦数据库因 DDL(ADD LOGIC LOG)解析错误引发结构快照异常的问题
  • 修复达梦源端数据过滤配置不生效的问题
  • 修复手动添加阿里云数据源时缺少实例 ID,导致自动建库、IP 白名单等依赖 OpenAPI 的功能失败的问题
  • 修复存量任务查看库表映射时,操作黑名单显示异常的问题
  • 修复超长单行日志导致浏览器卡死或崩溃的问题
  • 修复 MQ/Elasticsearch 对端修改订阅时新增库“确定”按钮无法点击的问题

免费下载与使用

  • 快速体验 SaaS 全托管服务:https://www.php.cn/link/9d43928b9e007bf34b0d8eadb3d0393f

源码地址:点击下载

以上就是CloudCanal v5.3.0.0 发布,无惧海量表的数据实时迁移同步的详细内容,更多请关注其它相关文章!


# oracle  # 青海seo网络推广招聘  # 三亚网站开发优化  # 金昌优质的网站推广  # 璧山专业seo口碑  # 洛阳网站建设联系方式  # 关键词排名软件相信乐云seo  # 阿拉善企业网站推广咨询  # 公众号关键词搜索词排名  # 中文网  # 相关文章  # 并在  # 适用于  # 是由  # 多个  # 主键  # 无惧  # mysql  # excel  # js  # 微信  # 浏览器  # 企业微信  # 工具  # 腾讯  # 阿里云  # ai  # 飞书  # stream  # 钉钉  # 链路  # 丹阳seo快排  # 做推广网站商榷易速达 


相关栏目: 【 行业新闻62819 】 【 科技资讯67470


相关推荐: Win11 AI 助手 Windows Copilot 被吐槽:套皮的 Edge 浏览器  前特斯拉总监、OpenAI大牛Karpathy:我被自动驾驶分了心,AI智能体才是未来!  AI工具助力公司实施每周4.5天工作制,带来巨大效益  统信深度deepin成立 AI SIG 社区,共同提升 Linux 下 AI 体验  华为将于 7 月发布面向 AI 大模型的新款存储产品  苹果在韩举办首届中小企业智能制造论坛,加速推动工业4.0发展  深圳人工智能企业超1900家  亚马逊确认今年不举办re:MARS人工智能大会  Unity 推出面向开发者的 AI 软件市场 AI Hub,股价飙涨 15%  谷歌旗下 DeepMind 开发出 RoboCat AI 模型,能控制多种机器人执行一系列任务  调研海尔智家:AI名,家电命?  美图影像节演讲实录:191次提及AI,发布7款影像生产力工具  “世界上最像人的机器人”接入 Stable Diffusion ,现场完成作画  2025世界人工智能大会(上海)开幕式纪要  AYANEO AIR 1S 掌机发布:R7 7840U,预订价 4699 元起  英伟达的AI领域垄断地位:一直无法撼动吗?  马斯克“揭秘”人工智能真面目  联想首发AI PC于今年秋季,英特尔CEO确认AI PC时代来临  华为云盘古大模型3.0发布 AI云服务同时上线:200亿亿次性能  大模型新品出现井喷,AI产业迎来新时代  苹果头显降临,AI虚拟人的救星还是流星?  羊驼家族大模型集体进化!32k上下文追平GPT-4,田渊栋团队出品  微软bing聊天推出AI购物工具 可进行比价并查看历史最低价  中国移动副总经理高同庆:打造人工智能时代的智能服务运营新范式  OpenOOD更新v1.5:全面、精确的分布外检测代码库及测试平台,支持在线排行榜、一键测试  人工智能和神经网络有什么联系与区别?  创作音乐/音频的Meta开源AI工具AudioCraft,让用户通过文本提示实现  腾讯AI首次模拟拼接三星堆文物,工作取得阶段性的成果  谷歌推出 AI 反洗钱工具,可将金融机构内部风险预警准确率提高2至4倍  Meta发布音频AI模型,仅需2秒片段模拟真人语音  无人机在电力巡检中的应用:全面解析高效巡检流程  MiracleVision视觉大模型功能介绍  郭帆:AI发展日新月异,或是弯道超车好莱坞的最好机会  如布科技发布新产品AI口袋学习机S12  新华三集团总裁兼首席执行官于英涛:人工智能时代需要想象力,更需要精耕务实  水路两栖艇、消防灭火机器人……这个展览“黑科技”抢眼  GPT-4最全攻略来袭!OpenAI官方发布,六个月攒下来的使用经验都在里面了  大模型训练成本降低近一半!新加坡国立大学最新优化器已投入使用  利用AI技术更好地发展农村电商  全国青少年无人机大赛重庆市选拔赛开赛 1252名中小学生参加  CharacterAI - 也许会成为会话人工智能的未来  靠游戏更靠AI 英伟达成唯一首季度两位数增长的公司  研究预测HPC支持的人工智能增长迅速  美版贴吧8000小组自爆停摆!拒绝数据被谷歌OpenAI白嫖,CEO被网友骂翻:背刺第三方应用  一家 380 亿美元的数据巨头,要掀起企业「AI 化」革命  亚马逊CEO:人工智能将成为公司未来战略的重中之重  无需标注数据,「3D理解」进入多模态预训练时代!ULIP系列全面开源,刷新SOTA  国内首家,360智脑通过中国信通院可信AIGC大语言模型功能评估  财联社首档运用虚拟人技术播报栏目《AI半小时》今晚上线!敬请期待  WAIC 2025|云深处科技绝影Lite3与X20四足机器人亮相 

400 128 6709
E-mail

contact@tlftec.cn

扫一扫,添加微信

©  云南淘乐房科技有限公司 版权所有  滇ICP备2025071560号  

云南淘乐房科技有限公司 云南淘乐房科技有限公司 云南淘乐房科技有限公司 云南淘乐房科技有限公司 云南淘乐房科技有限公司 云南淘乐房科技有限公司 云南淘乐房科技有限公司 云南淘乐房科技有限公司 云南淘乐房科技有限公司 云南淘乐房科技有限公司