草庐IT

mysql - 如何在不同服务器上运行的不同数据库(MYSQL)中的两个表之间同步数据

coder 2023-10-19 原文

我有 2 个不同的 mysql 数据库(旧的和新的)在不同的服务器上运行。 OLD 数据库有大约 10 个表，我想同步其中 3 个表数据库 NEW。因此，如果在这 3 个表上发生任何添加/删除/更新，那么这些条目应该在数据库 NEW 上更新。 我已经使用 mysql 转储创建了新数据库。 但我想添加一个 cron 作业，它可以每 1 小时运行一次来​​同步 3 个表。

我想编写一个脚本，使用时间戳跟踪上次同步的数据，然后将数据从旧同步到新。我确实在两个服务器之间建立了连接，但我无法找到实现此目的的方法。

如有任何建议或链接，我们将不胜感激。

最佳答案

首先，你们为什么不回答这个家伙的问题？有时，由于安全限制/合规性/遗留系统，我们不得不这样做。

我将在此处使用伪代码编写一些选项。不确定您的数据库的实时性如何，因此这在所有情况下都不起作用。

要求

为此，数据库必须位于同一个服务器实例中。如果没有，您将需要设置一个联合存储引擎来访问远程数据。正如另一个人所说，MySQL 复制仍然可以用于至少将数据传送到同一台服务器，从而在无需设置联合存储的情况下加快同步速度。 引用:https://dev.mysql.com/doc/refman/5.7/en/federated-storage-engine.html

同步时间

You can synchronize on an event schedule

MySQL 将允许您按特定计划创建事件以执行您的工作(假设您没有任何外部作业计划工具)。

希望您有某种修改日期，您可以每天查询一次或在 modified_at >= DATE_SUB(NOW( ),INTERVAL ? HOUR) 的所有字段上查询更短的时间间隔

如果您能够添加一列，您可以创建一个名为 synced_at 的列，它可以更好地抵抗服务器时钟差异。然后您可以简单地查询 synced_at IS NULL 或 synced_at <=>modified_at

Alternatively, use triggers

MySQL 支持 INSERT/UPDATE/DELETE 等的 BEFORE 和 AFTER 触发器...您可以使用它们来触发您的逻辑。请记住，每笔交易都会对性能造成一点影响，这很容易使非常活跃的生产服务器不堪重负。

BEFORE 和 AFTER 之间确实没有太大的区别，除了如果你使用 BEFORE 风格的触发器，你可以抛出一个 sqlstate 来防止插入到源表中，如果两个表的高度同步很重要的话。

同步逻辑

The INSERT / UPDATE / DELETE pattern

这是伪代码但是...

# new and updated records
INSERT ... ON DUPLICATE KEY UPDATE ...
SELECT FROM source_table
JOIN target_table.id
WHERE target_table.id IS NULL or modified_at > DATE_SUB(NOW(), INTERVAL ..)

# deleted records

TRIGGER AFTER INSERT / UPDATE / DELETE

与上面相同，只是您一次只操作一条记录，并且您正在镜像触发器语句。例如:源表上的 INSERT TRIGGER 应该只查询目标表上的 INSERT。

The nuclear DROP / CREATE / INSERT

简单但不推荐用于报告数据库以外的任何用途。删除整个表并从其他记录重建它。

关于mysql - 如何在不同服务器上运行的不同数据库(MYSQL)中的两个表之间同步数据，我们在Stack Overflow上找到一个类似的问题： https://stackoverflow.com/questions/37818784/

何在mysqlblockquotecodesectiondatabase

有关mysql - 如何在不同服务器上运行的不同数据库(MYSQL)中的两个表之间同步数据的更多相关文章

  1. ruby - 如何从 ruby​​ 中的字符串运行任意对象方法？ - 2

    总的来说，我对ruby​​还比较陌生，我正在为我正在创建的对象编写一些rspec测试用例。许多测试用例都非常基础，我只是想确保正确填充和返回值。我想知道是否有办法使用循环结构来执行此操作。不必为我要测试的每个方法都设置一个assertEquals。例如:describeitem,"TestingtheItem"doit"willhaveanullvaluetostart"doitem=Item.new#HereIcoulddotheitem.name.shouldbe_nil#thenIcoulddoitem.category.shouldbe_nilendend但我想要一些方法来使用

  2. ruby - 其他文件中的 Rake 任务 - 2

    我试图在一个项目中使用rake，如果我把所有东西都放到Rakefile中，它会很大并且很难读取/找到东西，所以我试着将每个命名空间放在lib/rake中它自己的文件中，我添加了这个到我的rake文件的顶部:Dir['#{File.dirname(__FILE__)}/lib/rake/*.rake'].map{|f|requiref}它加载文件没问题，但没有任务。我现在只有一个.rake文件作为测试，名为“servers.rake”，它看起来像这样:namespace:serverdotask:testdoputs"test"endend所以当我运行rakeserver:testid时

  3. ruby - 如何在 Ruby 中顺序创建 PI - 2

    出于纯粹的兴趣，我很好奇如何按顺序创建PI，而不是在过程结果之后生成数字，而是让数字在过程本身生成时显示。如果是这种情况，那么数字可以自行产生，我可以对以前看到的数字实现垃圾收集，从而创建一个无限系列。结果只是在Pi系列之后每秒生成一个数字。这是我通过互联网筛选的结果:这是流行的计算机友好算法，类机器算法:defarccot(x,unity)xpow=unity/xn=1sign=1sum=0loopdoterm=xpow/nbreakifterm==0sum+=sign*(xpow/n)xpow/=x*xn+=2sign=-signendsumenddefcalc_pi(digits

  4. ruby-on-rails - Ruby net/ldap 模块中的内存泄漏 - 2

    作为我的Rails应用程序的一部分，我编写了一个小导入程序，它从我们的LDAP系统中吸取数据并将其塞入一个用户表中。不幸的是，与LDAP相关的代码在遍历我们的32K用户时泄漏了大量内存，我一直无法弄清楚如何解决这个问题。这个问题似乎在某种程度上与LDAP库有关，因为当我删除对LDAP内容的调用时，内存使用情况会很好地稳定下来。此外，不断增加的对象是Net::BER::BerIdentifiedString和Net::BER::BerIdentifiedArray，它们都是LDAP库的一部分。当我运行导入时，内存使用量最终达到超过1GB的峰值。如果问题存在，我需要找到一些方法来更正我的代

  5. ruby-on-rails - Rails 3 中的多个路由文件 - 2

    Rails2.3可以选择随时使用RouteSet#add_configuration_file添加更多路由。是否可以在Rails3项目中做同样的事情？ 最佳答案 在config/application.rb中:config.paths.config.routes在Rails3.2(也可能是Rails3.1)中，使用:config.paths["config/routes"] 关于ruby-on-rails-Rails3中的多个路由文件，我们在StackOverflow上找到一个类似的问题

  6. ruby - 具有身份验证的私有(private) Ruby Gem 服务器 - 2

    我想安装一个带有一些身份验证的私有(private)Rubygem服务器。我希望能够使用公共(public)Ubuntu服务器托管内部gem。我读到了http://docs.rubygems.org/read/chapter/18.但是那个没有身份验证-如我所见。然后我读到了https://github.com/cwninja/geminabox.但是当我使用基本身份验证(他们在他们的Wiki中有)时，它会提示从我的服务器获取源。所以。如何制作带有身份验证的私有(private)Rubygem服务器？这是不可能的吗？谢谢。编辑:Geminabox问题。我尝试“捆绑”以安装新的gem..

  7. ruby - 如何在 buildr 项目中使用 Ruby 代码？ - 2

    如何在buildr项目中使用Ruby？我在很多不同的项目中使用过Ruby、JRuby、Java和Clojure。我目前正在使用我的标准Ruby开发一个模拟应用程序，我想尝试使用Clojure后端(我确实喜欢功能代码)以及JRubygui和测试套件。我还可以看到在未来的不同项目中使用Scala作为后端。我想我要为我的项目尝试一下buildr(http://buildr.apache.org/)，但我注意到buildr似乎没有设置为在项目中使用JRuby代码本身!这看起来有点傻，因为该工具旨在统一通用的JVM语言并且是在ruby中构建的。除了将输出的jar包含在一个独特的、仅限ruby​​

  8. ruby - 什么是填充的 Base64 编码字符串以及如何在 ruby​​ 中生成它们？ - 2

    我正在使用的第三方API的文档状态:"[O]urAPIonlyacceptspaddedBase64encodedstrings."什么是“填充的Base64编码字符串”以及如何在Ruby中生成它们。下面的代码是我第一次尝试创建转换为Base64的JSON格式数据。xa=Base64.encode64(a.to_json) 最佳答案 他们说的padding其实就是Base64本身的一部分。它是末尾的“=”和“==”。Base64将3个字节的数据包编码为4个编码字符。所以如果你的输入数据有长度n和n%3=1=>"=="末尾用于填充n%

  9. ruby - 解析 RDFa、微数据等的最佳方式是什么，使用统一的模式/词汇(例如 schema.org)存储和显示信息 - 2

    我主要使用Ruby来执行此操作，但到目前为止我的攻击计划如下:使用gemsrdf、rdf-rdfa和rdf-microdata或mida来解析给定任何URI的数据。我认为最好映射到像schema.org这样的统一模式，例如使用这个yaml文件，它试图描述数据词汇表和opengraph到schema.org之间的转换:#SchemaXtoschema.orgconversion#data-vocabularyDV:name:namestreet-address:streetAddressregion:addressRegionlocality:addressLocalityphoto:i

  10. ruby-on-rails - Rails - 一个 View 中的多个模型 - 2

    我需要从一个View访问多个模型。以前，我的links_controller仅用于提供以不同方式排序的链接资源。现在我想包括一个部分(我假设)显示按分数排序的顶级用户(@users=User.all.sort_by(&:score))我知道我可以将此代码插入每个链接操作并从View访问它，但这似乎不是“ruby方式”，我将需要在不久的将来访问更多模型。这可能会变得很脏，是否有针对这种情况的任何技术？注意事项:我认为我的应用程序正朝着单一格式和动态页面内容的方向发展，本质上是一个典型的网络应用程序。我知道before_filter但考虑到我希望应用程序进入的方向，这似乎很麻烦。最终从任何

随机推荐