Navigation

    • Register
    • Login
    • Search
    • Categories
    • Recent
    • Tags
    • Popular
    • Users
    • Groups

    SOLVED mysql到sr增量同步问题

    问答区
    cloudcanal增量同步问题
    2
    5
    130
    Loading More Posts
    • Oldest to Newest
    • Newest to Oldest
    • Most Votes
    Reply
    • Reply as topic
    Log in to reply
    This topic has been deleted. Only users with topic management privileges can see it.
    • A
      ajun1201 last edited by ajun1201

      sr版本:2.0.1
      mysql版本:5.7.26
      cloudcanal:2.1.0.22 、2.2.0.7
      问题描述:
      全量同步比较顺利。转为增量的时候,任务看着在正常运行,但是增量没有数据同步。按照FAQ里对于增量数据不同步的描述,进行了排查,没有发现问题。检查了console、sidecar和task日志,也查看了异常监控里的日志,都没有问题,所以不确定这个问题应该怎么去排查。
      现在提供任务重启后的完整日志如下:
      3b24256a-96be-4da1-9c23-b2ee9c22eec1-image.png
      ee2ff373-33c9-4545-a733-5c6cc53797ab-image.png
      75ae6105-f91a-4795-9913-5585f252af79-image.png

      5adc2dcf-9492-4ff1-b2d9-16f57ac4ff18-image.png

      然后task的日志一直这样。apply_commit.log一直没有日志信息。
      麻烦帮忙提供一下查看这个问题的思路。

      1 Reply Last reply Reply Quote 0
      • CloudCanal-万少
        CloudCanal-万少 last edited by

        已在微信沟通,应该是本身源端Binlog被purge导致没有增量,本地验证没有问题

        1 Reply Last reply Reply Quote 0
        • A
          ajun1201 last edited by

          操作流程:
          流程一:
          1、先建一个任务,任务里只同步一张表。全量和增量都正常。
          2、然后往这个任务里修改订阅加一个表,新加的表全量正常同步。然后任务合并成功。然后两个表的新增都不同步了。
          流程二:
          一开始建任务,任务里同步多张表,全量可以正常,转增量后,都不同步。
          总结:
          总体现象就是:增量时,一个任务里多张表就有问题。
          另外,mysql5.6没有这个问题。

          1 Reply Last reply Reply Quote 0
          • A
            ajun1201 last edited by

            This post is deleted!
            1 Reply Last reply Reply Quote 0
            • A
              ajun1201 last edited by

              This post is deleted!
              1 Reply Last reply Reply Quote 0
              • 1 / 1
              • First post
                Last post
              Copyright © 2020 ClouGence, Inc.备案号:浙ICP备20007605号-2