我正在尝试从 Azure Database for MySQL Server 自动执行所有数据库的 mysql 转储。当前数据库大小:
mysql> SELECT table_schema "DB Name", Round(Sum(data_length + index_length) / 1024 / 1024, 1) "DB Size in MB"
FROM information_schema.tables GROUP BY table_schema;
+--------------------+---------------+
| DB Name | DB Size in MB |
+--------------------+---------------+
| db1 | 278.3 |
| db2 | 51.8 |
| information_schema | 0.2 |
| mysql | 8.9 |
| performance_schema | 0.0 |
| db3 | 43.3 |
| sys | 0.0 |
+--------------------+---------------+
7 rows in set (31.80 sec)
我在不同的虚拟机上有一个 python 脚本，它调用 mysqldump 将所有这些转储到一个文件中。但是，我遇到了 db1 的问题。它正在被转储到一个文件中，但速度非常慢，30 分钟不到 ~4MB。然而 db2 和 db3 几乎立即被转储，仅需几秒钟。
我已经尝试了以下所有选项和组合来查看写入速度是否发生变化，但没有变化:
--compress
--lock-tables (true / false)
--skip-lock-tables
--max-allowed-packet (512M)
--quick
--single-transaction
--opt
我目前甚至没有使用脚本，只是在 shell 中运行命令，结果相同。
mysqldump -h <host> -P <port> -u'<user>' -p'<password>' db1 > db1.sql
db1 有大约 500 个表。
我知道它比 db2 和 db3 大，但没那么大，我想知道是否有人知道这里可能是什么问题？
编辑
在这些有用的答案和谷歌研究表明数据库很可能没问题之后，我通过将服务器上的 db1 数据库复制到测试数据库中运行测试，然后一张一张地删除表以减少规模。在大约 50MB 时，写入变得像其他数据库一样即时。这让我相信 Azure 中存在一些限制，因为数据库很好，我们将与他们的支持团队一起处理。我还在 google 上发现了很多关于 Azure 数据库速度的帖子。
与此同时，我更改了脚本以忽略大型数据库。我们将尝试将数据库移动到 Azure 提供的 SQL Server 或带有 mysql 服务器的简单 VM，以查看我们可以在何处获得更好的性能。
最佳答案
有可能它在 MySQL 服务器端很慢，但似乎不太可能。您可以打开第二个 shell 窗口，连接到 MySQL 并使用 SHOW PROCESSLIST 或 SHOW ENGINE INNODB STATUS 检查卡住的查询或锁。
如果存储速度非常慢，也可能在将数据写入 db1.sql 时遇到问题。但是 4MB 是 30 分钟。太荒谬了。确保保存到运行 mysqldump 的实例的本地存储。不要保存到远程存储。如果要写入转储的存储卷有其他繁重的 I/O 流量使其饱和，还要小心，这可能会减慢写入速度。
另一种测试慢速数据写入的方法是尝试 mysqldump ... >/dev/null 如果它很快，那么这是一个很好的线索，缓慢是磁盘写入。
最后，有可能是网络导致了缓慢。如果将转储文件保存到/dev/null 仍然很慢，我怀疑网络。
答案在
https://serverfault.com/questions/233963/mysql-checking-permission-takes-a-long-time这表明“检查权限”的缓慢可能是由于 MySQL 授权表(例如 mysql.user)中的数据过多所致。如果您有数以千计的用户凭据，这可能就是原因。您可以尝试删除这些条目(然后运行 FLUSH HOSTS)。
关于mysql - 使用 `mysqldump ` 缓慢写入数据库，我们在Stack Overflow上找到一个类似的问题： https://stackoverflow.com/questions/46007949/
我正在学习如何使用Nokogiri，根据这段代码我遇到了一些问题:require'rubygems'require'mechanize'post_agent=WWW::Mechanize.newpost_page=post_agent.get('http://www.vbulletin.org/forum/showthread.php?t=230708')puts"\nabsolutepathwithtbodygivesnil"putspost_page.parser.xpath('/html/body/div/div/div/div/div/table/tbody/tr/td/div
我有一个Ruby程序，它使用rubyzip压缩XML文件的目录树。gem。我的问题是文件开始变得很重，我想提高压缩级别，因为压缩时间不是问题。我在rubyzipdocumentation中找不到一种为创建的ZIP文件指定压缩级别的方法。有人知道如何更改此设置吗？是否有另一个允许指定压缩级别的Ruby库？ 最佳答案 这是我通过查看rubyzip内部创建的代码。level=Zlib::BEST_COMPRESSIONZip::ZipOutputStream.open(zip_file)do|zip|Dir.glob("**/*")d
类classAprivatedeffooputs:fooendpublicdefbarputs:barendprivatedefzimputs:zimendprotecteddefdibputs:dibendendA的实例a=A.new测试a.foorescueputs:faila.barrescueputs:faila.zimrescueputs:faila.dibrescueputs:faila.gazrescueputs:fail测试输出failbarfailfailfail.发送测试[:foo,:bar,:zim,:dib,:gaz].each{|m|a.send(m)resc
很好奇，就使用rubyonrails自动化单元测试而言，你们正在做什么？您是否创建了一个脚本来在cron中运行rake作业并将结果邮寄给您？git中的预提交Hook？只是手动调用？我完全理解测试，但想知道在错误发生之前捕获错误的最佳实践是什么。让我们理所当然地认为测试本身是完美无缺的，并且可以正常工作。下一步是什么以确保他们在正确的时间将可能有害的结果传达给您？ 最佳答案 不确定您到底想听什么，但是有几个级别的自动代码库控制:在处理某项功能时，您可以使用类似autotest的内容获得关于哪些有效，哪些无效的即时反馈。要确保您的提
假设我做了一个模块如下:m=Module.newdoclassCendend三个问题:除了对m的引用之外，还有什么方法可以访问C和m中的其他内容？我可以在创建匿名模块后为其命名吗(就像我输入“module...”一样)？如何在使用完匿名模块后将其删除，使其定义的常量不再存在？ 最佳答案 三个答案:是的，使用ObjectSpace.此代码使c引用你的类(class)C不引用m:c=nilObjectSpace.each_object{|obj|c=objif(Class===objandobj.name=~/::C$/)}当然这取决于
我正在尝试使用ruby和Savon来使用网络服务。测试服务为http://www.webservicex.net/WS/WSDetails.aspx?WSID=9&CATID=2require'rubygems'require'savon'client=Savon::Client.new"http://www.webservicex.net/stockquote.asmx?WSDL"client.get_quotedo|soap|soap.body={:symbol=>"AAPL"}end返回SOAP异常。检查soap信封，在我看来soap请求没有正确的命名空间。任何人都可以建议我
关闭。这个问题是opinion-based.它目前不接受答案。想要改进这个问题？更新问题，以便editingthispost可以用事实和引用来回答它.关闭4年前。Improvethisquestion我想在固定时间创建一系列低音和高音调的哔哔声。例如:在150毫秒时发出高音调的蜂鸣声在151毫秒时发出低音调的蜂鸣声200毫秒时发出低音调的蜂鸣声250毫秒的高音调蜂鸣声有没有办法在Ruby或Python中做到这一点？我真的不在乎输出编码是什么(.wav、.mp3、.ogg等等)，但我确实想创建一个输出文件。
我在我的项目目录中完成了compasscreate.和compassinitrails。几个问题:我已将我的.sass文件放在public/stylesheets中。这是放置它们的正确位置吗？当我运行compasswatch时，它不会自动编译这些.sass文件。我必须手动指定文件:compasswatchpublic/stylesheets/myfile.sass等。如何让它自动运行？文件ie.css、print.css和screen.css已放在stylesheets/compiled。如何在编译后不让它们重新出现的情况下删除它们？我自己编译的.sass文件编译成compiled/t
我想将html转换为纯文本。不过，我不想只删除标签，我想智能地保留尽可能多的格式。为插入换行符标签，检测段落并格式化它们等。输入非常简单，通常是格式良好的html(不是整个文档，只是一堆内容，通常没有anchor或图像)。我可以将几个正则表达式放在一起，让我达到80%，但我认为可能有一些现有的解决方案更智能。 最佳答案 首先，不要尝试为此使用正则表达式。很有可能你会想出一个脆弱/脆弱的解决方案，它会随着HTML的变化而崩溃，或者很难管理和维护。您可以使用Nokogiri快速解析HTML并提取文本:require'nokogiri'h
我想为Heroku构建一个Rails3应用程序。他们使用Postgres作为他们的数据库，所以我通过MacPorts安装了postgres9.0。现在我需要一个postgresgem并且共识是出于性能原因你想要pggem。但是我对我得到的错误感到非常困惑当我尝试在rvm下通过geminstall安装pg时。我已经非常明确地指定了所有postgres目录的位置可以找到但仍然无法完成安装:$envARCHFLAGS='-archx86_64'geminstallpg--\--with-pg-config=/opt/local/var/db/postgresql90/defaultdb/po