我有一个包含大约 100 数百个 Mysql 表的数据库。所有表都在 INNODB 下。
我们公司为我们的用户提供语法检查和翻译服务。
这是简化的数据库模式
每个用户都可以通过搜索引擎通过关键字搜索自己的项目。每个查询都使用全文搜索。
我还创建了一个 View :
create view searches as
Select
project_contents.content_markdown,
project_contents.content_jp_markdown,
project_contents.remarks_markdown,
project_corrections.correction_markdown,
project_corrections.comment_markdown,
project_messages.message_from_markdown,
project_messages.message_to_markdown,
projects.id,
projects.user_id,
projects.project_category_id,
projects.uuid,
projects.teacher_id,
projects.title,
projects.is_deleted,
projects.submit_date,
projects.receipt_date,
projects.correct_date,
project_questions.question_markdown,
project_questions.answer_markdown,
project_rates.content_markdown As rate_content_markdown,
teachers.username,
project_categories.parent_id,
project_additional_writings.append_markdown
From
project_contents
INNER JOIN projects
ON project_contents.project_id = projects.id
INNER JOIN project_messages
ON project_messages.project_id = projects.id
INNER JOIN project_categories
ON projects.project_category_id = project_categories.id
LEFT JOIN project_questions
ON project_questions.project_id = projects.id
LEFT JOIN project_rates
ON project_rates.project_id = projects.id
LEFT JOIN project_corrections
ON project_corrections.project_content_id = project_contents.id
LEFT JOIN project_additional_writings
ON project_additional_writings.project_id = projects.id
LEFT JOIN teachers
ON projects.teacher_id = teachers.id
这里是查询
SELECT `search`.`id`,
`search`.`uuid`,
`search`.`user_id`,
`search`.`parent_id`,
`search`.`project_category_id`,
`search`.`teacher_id`,
`search`.`username`,
`search`.`is_deleted`,
`search`.`title`,
`search`.`submit_date`,
`search`.`receipt_date`,
`search`.`correct_date`,
`search`.`content_jp_markdown`,
`search`.`remarks_markdown`,
`search`.`content_markdown`,
`search`.`correction_markdown`,
`search`.`comment_markdown`,
`search`.`question_markdown`,
`search`.`answer_markdown`,
`search`.`append_markdown`,
`search`.`rate_content_markdown`,
`search`.`message_from_markdown`,
`search`.`message_to_markdown`,
`search`.`memo_markdown`,
(match(`search`.`title`) against('"famous blogger"' IN boolean mode)) AS `search__score_title`,
(match(`search`.`content_markdown`) against('"famous blogger"' IN boolean mode)) AS `search__score_content_markdown`,
(match(`search`.`content_jp_markdown`) against('"famous blogger"' IN boolean mode)) AS `search__score_content_jp_markdown`,
(match(`search`.`remarks_markdown`) against('"famous blogger"' IN boolean mode)) AS `search__score_remarks_markdown`,
(match(`search`.`correction_markdown`) against('"famous blogger"' IN boolean mode)) AS `search__score_correction_markdown`,
(match(`search`.`comment_markdown`) against('"famous blogger"' IN boolean mode)) AS `search__score_comment_markdown`,
(match(`search`.`message_from_markdown`) against('"famous blogger"' IN boolean mode)) AS `search__score_message_from_markdown`,
(match(`search`.`message_to_markdown`) against('"famous blogger"' IN boolean mode)) AS `search__score_message_to_markdown`,
(match(`search`.`question_markdown`) against('"famous blogger"' IN boolean mode)) AS `search__score_question_markdown`,
(match(`search`.`answer_markdown`) against('"famous blogger"' IN boolean mode)) AS `search__score_answer_markdown`,
(match(`search`.`append_markdown`) against('"famous blogger"' IN boolean mode)) AS `search__score_append_markdown`,
(match(`search`.`rate_content_markdown`) against('"famous blogger"' IN boolean mode)) AS `search__score_rate_content_markdown`,
(match(`search`.`memo_markdown`) against('"famous blogger"' IN boolean mode)) AS `search__score_memo_markdown`
FROM `idiy_v3`.`searches` AS `search`
WHERE `search`.`is_deleted` = '0'
AND `search`.`parent_id` = 1
AND `search`.`user_id` = 217
AND ((`search`.`username` LIKE '%famous blogger%')
OR (match(`search`.`title`) against('\"famous blogger\"' IN boolean mode))
OR (match(`search`.`content_markdown`) against('\"famous blogger\"' IN boolean mode))
OR (match(`search`.`content_jp_markdown`) against('\"famous blogger\"' IN boolean mode))
OR (match(`search`.`remarks_markdown`) against('\"famous blogger\"' IN boolean mode))
OR (match(`search`.`correction_markdown`) against('\"famous blogger\"' IN boolean mode))
OR (match(`search`.`comment_markdown`) against('\"famous blogger\"' IN boolean mode))
OR (match(`search`.`message_from_markdown`) against('\"famous blogger\"' IN boolean mode))
OR (match(`search`.`message_to_markdown`) against('\"famous blogger\"' IN boolean mode))
OR (match(`search`.`question_markdown`) against('\"famous blogger\"' IN boolean mode))
OR (match(`search`.`answer_markdown`) against('\"famous blogger\"' IN boolean mode))
OR (match(`search`.`append_markdown`) against('\"famous blogger\"' IN boolean mode))
OR (match(`search`.`rate_content_markdown`) against('\"famous blogger\"' IN boolean mode))
OR (match(`search`.`memo_markdown`) against('\"famous blogger\"' IN boolean mode)))
GROUP BY `search`.`id`
ORDER BY `search`.`submit_date` DESC limit 5
默认情况下,每个查询需要 15 到 25 秒(取决于用户的项目数量、关键字等)。
当我从 project_corrections 表中删除列时,
查询不到 10 秒。
为什么会有这么大的差异?
如何优化我的查询?
最佳答案
添加一个新表,其中包含副本 的用户名和所有标记并连接到一个TEXT 列中。在该列上有一个 FULLTEXT 索引。您的 SELECT 将针对该列执行单个 MATCH,然后 JOIN 到其他表以获取详细信息。
一次 MATCH 的速度大约是进行 13 次 MATCHes 的 13 倍。而且 OR 很难优化。
关于MySQL:具有许多连接的慢查询,我们在Stack Overflow上找到一个类似的问题: https://stackoverflow.com/questions/42437238/
我想安装一个带有一些身份验证的私有(private)Rubygem服务器。我希望能够使用公共(public)Ubuntu服务器托管内部gem。我读到了http://docs.rubygems.org/read/chapter/18.但是那个没有身份验证-如我所见。然后我读到了https://github.com/cwninja/geminabox.但是当我使用基本身份验证(他们在他们的Wiki中有)时,它会提示从我的服务器获取源。所以。如何制作带有身份验证的私有(private)Rubygem服务器?这是不可能的吗?谢谢。编辑:Geminabox问题。我尝试“捆绑”以安装新的gem..
我正在用Ruby编写一个简单的程序来检查域列表是否被占用。基本上它循环遍历列表,并使用以下函数进行检查。require'rubygems'require'whois'defcheck_domain(domain)c=Whois::Client.newc.query("google.com").available?end程序不断出错(即使我在google.com中进行硬编码),并打印以下消息。鉴于该程序非常简单,我已经没有什么想法了-有什么建议吗?/Library/Ruby/Gems/1.8/gems/whois-2.0.2/lib/whois/server/adapters/base.
我正在使用Sequel构建一个愿望list系统。我有一个wishlists和itemstable和一个items_wishlists连接表(该名称是续集选择的名称)。items_wishlists表还有一个用于facebookid的额外列(因此我可以存储opengraph操作),这是一个NOTNULL列。我还有Wishlist和Item具有续集many_to_many关联的模型已建立。Wishlist类也有:selectmany_to_many关联的选项设置为select:[:items.*,:items_wishlists__facebook_action_id].有没有一种方法可以
我知道我可以指定某些字段来使用pluck查询数据库。ids=Item.where('due_at但是我想知道,是否有一种方法可以指定我想避免从数据库查询的某些字段。某种反拔?posts=Post.where(published:true).do_not_lookup(:enormous_field) 最佳答案 Model#attribute_names应该返回列/属性数组。您可以排除其中一些并传递给pluck或select方法。像这样:posts=Post.where(published:true).select(Post.attr
我使用的是Firefox版本36.0.1和Selenium-Webdrivergem版本2.45.0。我能够创建Firefox实例,但无法使用脚本继续进行进一步的操作无法在60秒内获得稳定的Firefox连接(127.0.0.1:7055)错误。有人能帮帮我吗? 最佳答案 我遇到了同样的问题。降级到firefoxv33后一切正常。您可以找到旧版本here 关于ruby-无法在60秒内获得稳定的Firefox连接(127.0.0.1:7055),我们在StackOverflow上找到一个类
我正在使用Rails3.1并在一个论坛上工作。我有一个名为Topic的模型,每个模型都有许多Post。当用户创建新主题时,他们也应该创建第一个Post。但是,我不确定如何以相同的形式执行此操作。这是我的代码:classTopic:destroyaccepts_nested_attributes_for:postsvalidates_presence_of:titleendclassPost...但这似乎不起作用。有什么想法吗?谢谢! 最佳答案 @Pablo的回答似乎有你需要的一切。但更具体地说...首先改变你View中的这一行对此#
文章目录一、概述简介原理模块二、配置Mysql使用版本环境要求1.操作系统2.mysql要求三、配置canal-server离线下载在线下载上传解压修改配置单机配置集群配置分库分表配置1.修改全局配置2.实例配置垂直分库水平分库3.修改group-instance.xml4.启动监听四、配置canal-adapter1修改启动配置2配置映射文件3启动ES数据同步查询所有订阅同步数据同步开关启动4.验证五、配置canal-admin一、概述简介canal是Alibaba旗下的一款开源项目,Java开发。基于数据库增量日志解析,提供增量数据订阅&消费。Git地址:https://github.co
我正在尝试查询我的Rails数据库(Postgres)中的购买表,我想查询时间范围。例如,我想知道在所有日期的下午2点到3点之间进行了多少次购买。此表中有一个created_at列,但我不知道如何在不搜索特定日期的情况下完成此操作。我试过:Purchases.where("created_atBETWEEN?and?",Time.now-1.hour,Time.now)但这最终只会搜索今天与那些时间的日期。 最佳答案 您需要使用PostgreSQL'sdate_part/extractfunction从created_at中提取小时
我从用户Hirolau那里找到了这段代码:defsum_to_n?(a,n)a.combination(2).find{|x,y|x+y==n}enda=[1,2,3,4,5]sum_to_n?(a,9)#=>[4,5]sum_to_n?(a,11)#=>nil我如何知道何时可以将两个参数发送到预定义方法(如find)?我不清楚,因为有时它不起作用。这是重新定义的东西吗? 最佳答案 如果您查看Enumerable#find的文档,您会发现它只接受一个block参数。您可以将它发送两次的原因是因为Ruby可以方便地让您根据它的“并行赋
RSpec似乎按顺序匹配方法接收的消息。我不确定如何使以下代码工作:allow(a).toreceive(:f)expect(a).toreceive(:f).with(2)a.f(1)a.f(2)a.f(3)我问的原因是a.f的一些调用是由我的代码的上层控制的,所以我不能对这些方法调用添加期望。 最佳答案 RSpecspy是测试这种情况的一种方式。要监视一个方法,用allowstub,除了方法名称之外没有任何约束,调用该方法,然后expect确切的方法调用。例如:allow(a).toreceive(:f)a.f(2)a.f(1)