草庐IT

sql - 如何优化数据库中的查询-基础知识

coder 2023-10-03 原文

似乎所有有关此主题的问题都是非常具体的，尽管我重视特定的示例，但我对SQL优化的基础很感兴趣。我对使用SQL感到很舒服，并且具有硬件/低级软件的背景。

我想要的是既有形的软件工具，又是查看我定期查看的mysql数据库并知道join语句的顺序和where语句之间的区别的方法。

我想知道为什么索引有帮助，确切地说是为什么。我想特别地知道发生了什么变化，并且我想知道我如何才能真正看到正在发生的事情。我不需要工具来破坏SQL的每一步，我只想能够四处摸索，如果有人不能告诉我要索引哪一列，我将可以拿出一张纸，在一段时间内就能提出答案。

数据库很复杂，但并不那么复杂，并且必须有一些很好的资料来学习基础知识，以便您知道如何找到所遇到的优化问题的答案，即使可以在某个问题上找到确切的答案。论坛。

请推荐一些简洁明了，直观且不惧怕底层螺母和 bolt 的阅读 Material 。我更喜欢在线免费资源，但如果推荐书使钉子砸了，我会考虑接受的。

最佳答案

您必须针对每个where条件和每个join ... on条件进行查找。两者的工作原理相同。

假设我们写

select name
from customer
where customerid=37;

DBMS必须以某种方式查找一个或多个customerid = 37的记录。如果没有索引，唯一的方法就是读取表中的每条记录，将customerid与37进行比较。即使找到索引，也无法知道只有一个，因此必须继续寻找其他。

如果您在customerid上创建索引，则DBMS可以非常快速地搜索索引。它不是顺序搜索，而是取决于数据库的二进制搜索或其他有效方法。没关系，接受它比顺序运行要快得多。索引然后将其直接带到适当的一条或多条记录。此外，如果您指定索引为“唯一”，则数据库知道只能有一个索引，因此不会浪费时间寻找第二个索引。 (DBMS将阻止您添加第二个。)

现在考虑以下查询:
select name
from customer
where city='Albany' and state='NY';

现在我们有两个条件。如果只有这些字段之一具有索引，则DBMS将使用该索引查找记录的子集，然后顺序搜索这些记录。例如，如果您有状态索引，则DBMS将迅速找到NY的第一条记录，然后顺序搜索寻找city ='Albany'，并在到达纽约的最后一条记录时停止查找。

如果您有一个包含两个字段的索引，即“在客户(州，城市)上创建索引”，则DBMS可以立即放大到正确的记录。

如果您有两个单独的索引，每个字段一个，则DBMS将具有适用于决定使用哪个索引的各种规则。同样，确切的完成方式取决于您所使用的特定DBMS，但是从根本上说，它试图保持有关记录总数，不同值的数量以及值的分布的统计信息。然后它将顺序搜索那些记录，以找到满足其他条件的记录。在这种情况下，DBMS可能会观察到有比州更多的城市，因此通过使用城市索引，它可以快速缩放到“Albany”记录。然后它将顺序搜索这些，并针对“NY”检查每个状态。如果您有加利福尼亚州奥尔巴尼的记录，这些记录将被跳过。

每个联接都需要某种形式的查找。

说我们写
select customer.name
from transaction
join customer on transaction.customerid=customer.customerid
where transaction.transactiondate='2010-07-04' and customer.type='Q';

现在，DBMS必须决定首先读取哪个表，从那里选择适当的记录，然后在另一个表中找到匹配的记录。

如果您有transaction.transactiondate和customer.customerid的索引，最好的计划可能是找到该日期的所有交易，然后为每个交易找到具有匹配的customerid的客户，然后验证客户是否拥有正确的类型。

如果您在customer.customerid上没有索引，则DBMS可以快速找到交易，但是对于每个交易，DBMS必须顺序搜索customer表以寻找匹配的customerid。 (这可能会很慢。)

假设您仅有的索引位于transaction.customerid和customer.type上。然后，DBMS可能会使用完全不同的计划。它可能会在客户表中扫描所有类型正确的客户，然后为每个客户找到该客户的所有交易，并依次搜索正确的日期。

优化的最重要关键是弄清楚哪些索引真正有用，并创建这些索引。额外的，未使用的索引是数据库的负担，因为维护它们需要花费大量的精力，如果从未使用过它们，这是浪费时间。

您可以使用EXPLAIN命令告诉DBMS将对任何给定查询使用哪些索引。我一直使用它来确定我的查询是否得到了很好的优化，或者是否应该创建其他索引。 (请阅读此命令的文档以获取有关其输出的说明。)

警告:请记住，我说过DBMS会保留每个表中的记录数量和不同值的数量等统计信息。如果数据已更改，那么EXPLAIN今天给您的计划可能会与昨天给您的计划完全不同。例如，如果您有一个将两个表连接起来的查询，而这些表中的一个很小，而另一个很大，那么它将偏向于先读取小表，然后在大表中查找匹配的记录。将记录添加到表中可能会发生较大的更改，从而导致DBMS更改其计划。因此，您应该尝试对具有实际数据的数据库进行解释。在每个表中有5条记录的测试数据库上运行的值(value)要比在实时数据库上运行的值(value)要低得多。

好吧，还有更多可以说的，但是我不想在这里写一本书。

关于sql - 如何优化数据库中的查询-基础知识，我们在Stack Overflow上找到一个类似的问题： https://stackoverflow.com/questions/3191623/

基础知识sqlbr的customeridmysqldatabaseoptimizationquery-optimization

有关sql - 如何优化数据库中的查询-基础知识的更多相关文章

  1. ruby - 如何使用 Nokogiri 的 xpath 和 at_xpath 方法 - 2

    我正在学习如何使用Nokogiri，根据这段代码我遇到了一些问题:require'rubygems'require'mechanize'post_agent=WWW::Mechanize.newpost_page=post_agent.get('http://www.vbulletin.org/forum/showthread.php?t=230708')puts"\nabsolutepathwithtbodygivesnil"putspost_page.parser.xpath('/html/body/div/div/div/div/div/table/tbody/tr/td/div

  2. ruby - 如何从 ruby​​ 中的字符串运行任意对象方法？ - 2

    总的来说，我对ruby​​还比较陌生，我正在为我正在创建的对象编写一些rspec测试用例。许多测试用例都非常基础，我只是想确保正确填充和返回值。我想知道是否有办法使用循环结构来执行此操作。不必为我要测试的每个方法都设置一个assertEquals。例如:describeitem,"TestingtheItem"doit"willhaveanullvaluetostart"doitem=Item.new#HereIcoulddotheitem.name.shouldbe_nil#thenIcoulddoitem.category.shouldbe_nilendend但我想要一些方法来使用

  3. ruby - 其他文件中的 Rake 任务 - 2

    我试图在一个项目中使用rake，如果我把所有东西都放到Rakefile中，它会很大并且很难读取/找到东西，所以我试着将每个命名空间放在lib/rake中它自己的文件中，我添加了这个到我的rake文件的顶部:Dir['#{File.dirname(__FILE__)}/lib/rake/*.rake'].map{|f|requiref}它加载文件没问题，但没有任务。我现在只有一个.rake文件作为测试，名为“servers.rake”，它看起来像这样:namespace:serverdotask:testdoputs"test"endend所以当我运行rakeserver:testid时

  4. ruby-on-rails - Ruby net/ldap 模块中的内存泄漏 - 2

    作为我的Rails应用程序的一部分，我编写了一个小导入程序，它从我们的LDAP系统中吸取数据并将其塞入一个用户表中。不幸的是，与LDAP相关的代码在遍历我们的32K用户时泄漏了大量内存，我一直无法弄清楚如何解决这个问题。这个问题似乎在某种程度上与LDAP库有关，因为当我删除对LDAP内容的调用时，内存使用情况会很好地稳定下来。此外，不断增加的对象是Net::BER::BerIdentifiedString和Net::BER::BerIdentifiedArray，它们都是LDAP库的一部分。当我运行导入时，内存使用量最终达到超过1GB的峰值。如果问题存在，我需要找到一些方法来更正我的代

  5. python - 如何使用 Ruby 或 Python 创建一系列高音调和低音调的蜂鸣声？ - 2

    关闭。这个问题是opinion-based.它目前不接受答案。想要改进这个问题？更新问题，以便editingthispost可以用事实和引用来回答它.关闭4年前。Improvethisquestion我想在固定时间创建一系列低音和高音调的哔哔声。例如:在150毫秒时发出高音调的蜂鸣声在151毫秒时发出低音调的蜂鸣声200毫秒时发出低音调的蜂鸣声250毫秒的高音调蜂鸣声有没有办法在Ruby或Python中做到这一点？我真的不在乎输出编码是什么(.wav、.mp3、.ogg等等)，但我确实想创建一个输出文件。

  6. ruby-on-rails - Rails 3 中的多个路由文件 - 2

    Rails2.3可以选择随时使用RouteSet#add_configuration_file添加更多路由。是否可以在Rails3项目中做同样的事情？ 最佳答案 在config/application.rb中:config.paths.config.routes在Rails3.2(也可能是Rails3.1)中，使用:config.paths["config/routes"] 关于ruby-on-rails-Rails3中的多个路由文件，我们在StackOverflow上找到一个类似的问题

  7. ruby-on-rails - 如何验证 update_all 是否实际在 Rails 中更新 - 2

    给定这段代码defcreate@upgrades=User.update_all(["role=?","upgraded"],:id=>params[:upgrade])redirect_toadmin_upgrades_path,:notice=>"Successfullyupgradeduser."end我如何在该操作中实际验证它们是否已保存或未重定向到适当的页面和消息？ 最佳答案 在Rails3中，update_all不返回任何有意义的信息，除了已更新的记录数(这可能取决于您的DBMS是否返回该信息)。http://ar.ru

  8. ruby-on-rails - 'compass watch' 是如何工作的/它是如何与 rails 一起使用的 - 2

    我在我的项目目录中完成了compasscreate.和compassinitrails。几个问题:我已将我的.sass文件放在public/stylesheets中。这是放置它们的正确位置吗？当我运行compasswatch时，它不会自动编译这些.sass文件。我必须手动指定文件:compasswatchpublic/stylesheets/myfile.sass等。如何让它自动运行？文件ie.css、print.css和screen.css已放在stylesheets/compiled。如何在编译后不让它们重新出现的情况下删除它们？我自己编译的.sass文件编译成compiled/t

  9. ruby - ECONNRESET (Whois::ConnectionError) - 尝试在 Ruby 中查询 Whois 时出错 - 2

    我正在用Ruby编写一个简单的程序来检查域列表是否被占用。基本上它循环遍历列表，并使用以下函数进行检查。require'rubygems'require'whois'defcheck_domain(domain)c=Whois::Client.newc.query("google.com").available?end程序不断出错(即使我在google.com中进行硬编码)，并打印以下消息。鉴于该程序非常简单，我已经没有什么想法了-有什么建议吗？/Library/Ruby/Gems/1.8/gems/whois-2.0.2/lib/whois/server/adapters/base.

  10. ruby - 如何将脚本文件的末尾读取为数据文件(Perl 或任何其他语言) - 2

    我正在寻找执行以下操作的正确语法(在Perl、Shell或Ruby中):#variabletoaccessthedatalinesappendedasafileEND_OF_SCRIPT_MARKERrawdatastartshereanditcontinues. 最佳答案 Perl用__DATA__做这个:#!/usr/bin/perlusestrict;usewarnings;while(){print;}__DATA__Texttoprintgoeshere 关于ruby-如何将脚

随机推荐