草庐IT

php - 计算网站上对象 'popularity' 的最有效方法

coder 2023-10-26 原文

好的，所以我正在构建一个网站，人们可以在其中发布新闻、评论、问题等。人们还可以对所有这些对象进行评分，最喜欢其中的大部分，分享它们等。该网站是 PHP+MySQL。我用 PHP 编写了一个脚本，它执行以下操作:

  1. 获取过去 5 分钟内添加的所有评论和分数。将每个评论对象的流行度变化添加到“流行度”表中。
  2. 获取添加到其中的所有新闻和分数/观点/收藏夹/分享。计算每个新闻故事的流行度(考虑到从第 1 步开始附加到它们的评论的流行度变化)，并在流行度表中插入一条记录，其中包含每个新闻对象的流行度变化。
  3. 对问题和其他对象类型重复第 2 步

我尝试使用 cron 作业每 5 分钟运行一次此脚本(这实际上是一个 symfony 任务)，PHP 开始阻塞并吃掉我所有的服务器资源。

运行根据 MySQL 数据库中的数据计算新数据然后将计算的数据插入数据库的后台分析脚本的首选方法是什么？我确定我在这里遗漏了一些基本程序。我应该注意到数据库在不同的服务器上并且该服务器没有资源问题。问题似乎仅限于 PHP 在循环遍历对象、计算流行度(简单计算)和插入数据库时​​阻塞应用程序服务器。

谢谢

-- 编辑

如何将数据库复制到仅用于计算的服务器。我可以使用复制的数据库在计算服务器上运行流行度脚本，并将计算出的流行度记录插入到实时数据库中。它当然会稍微延迟，但这不是什么大问题。不过，我不确定这是否会解决 PHP 资源消耗问题。

最佳答案

首先要做的是尝试减少执行的查询数量。如果您的 sql 和 web 服务器位于不同的机器上，这一点尤其重要。尝试使用 JOIN 来计算新闻项的受欢迎程度，而无需逐个查看所有评论。

您可以在同一个查询中计算评论的流行度和新项目的流行度。 (例如 select sum(rating) FROM news, comments, rating WHERE comments.news_id = news.id AND rating.comment_id = comments.id (这个查询过于简单但仍然......))因为你的主要问题是查询量你必须执行，当然你的 mysql 服务器上会有足够的资源。因为大多数时候 sql server 只会等待下一个查询的到来。跨网络的通信比 cpu 和 ram 之间的通信慢 gazillion 倍。基本上发生的事情是:php 向 mysql 服务器发送查询并等待响应。 Mysql 获取一个查询进程，发送响应并等待下一个查询。这种等待需要时间...所以要么减少查询量，要么使用 mysqli 同时发送所有查询 http://php.net/manual/en/mysqli.multi-query.php

关于php - 计算网站上对象 'popularity' 的最有效方法，我们在Stack Overflow上找到一个类似的问题： https://stackoverflow.com/questions/5092414/

站上popularitysection的phpmysqlperformancereporting

有关php - 计算网站上对象 'popularity' 的最有效方法的更多相关文章

  1. ruby - 如何使用 Nokogiri 的 xpath 和 at_xpath 方法 - 2

    我正在学习如何使用Nokogiri，根据这段代码我遇到了一些问题:require'rubygems'require'mechanize'post_agent=WWW::Mechanize.newpost_page=post_agent.get('http://www.vbulletin.org/forum/showthread.php?t=230708')puts"\nabsolutepathwithtbodygivesnil"putspost_page.parser.xpath('/html/body/div/div/div/div/div/table/tbody/tr/td/div

  2. ruby - 如何从 ruby​​ 中的字符串运行任意对象方法？ - 2

    总的来说，我对ruby​​还比较陌生，我正在为我正在创建的对象编写一些rspec测试用例。许多测试用例都非常基础，我只是想确保正确填充和返回值。我想知道是否有办法使用循环结构来执行此操作。不必为我要测试的每个方法都设置一个assertEquals。例如:describeitem,"TestingtheItem"doit"willhaveanullvaluetostart"doitem=Item.new#HereIcoulddotheitem.name.shouldbe_nil#thenIcoulddoitem.category.shouldbe_nilendend但我想要一些方法来使用

  3. ruby - 为什么我可以在 Ruby 中使用 Object#send 访问私有(private)/ protected 方法？ - 2

    类classAprivatedeffooputs:fooendpublicdefbarputs:barendprivatedefzimputs:zimendprotecteddefdibputs:dibendendA的实例a=A.new测试a.foorescueputs:faila.barrescueputs:faila.zimrescueputs:faila.dibrescueputs:faila.gazrescueputs:fail测试输出failbarfailfailfail.发送测试[:foo,:bar,:zim,:dib,:gaz].each{|m|a.send(m)resc

  4. ruby - Facter::Util::Uptime:Module 的未定义方法 get_uptime (NoMethodError) - 2

    我正在尝试设置一个puppet节点，但ruby​​gems似乎不正常。如果我通过它自己的二进制文件(/usr/lib/ruby/gems/1.8/gems/facter-1.5.8/bin/facter)在cli上运行facter，它工作正常，但如果我通过由ruby​​gems(/usr/bin/facter)安装的二进制文件，它抛出:/usr/lib/ruby/1.8/facter/uptime.rb:11:undefinedmethod`get_uptime'forFacter::Util::Uptime:Module(NoMethodError)from/usr/lib/ruby

  5. ruby-on-rails - rails : "missing partial" when calling 'render' in RSpec test - 2

    我正在尝试测试是否存在表单。我是Rails新手。我的new.html.erb_spec.rb文件的内容是:require'spec_helper'describe"messages/new.html.erb"doit"shouldrendertheform"dorender'/messages/new.html.erb'reponse.shouldhave_form_putting_to(@message)with_submit_buttonendendView本身，new.html.erb，有代码:当我运行rspec时，它失败了:1)messages/new.html.erbshou

  6. ruby-on-rails - 按天对 Mongoid 对象进行分组 - 2

    在控制台中反复尝试之后，我想到了这种方法，可以按发生日期对类似activerecord的(Mongoid)对象进行分组。我不确定这是完成此任务的最佳方法，但它确实有效。有没有人有更好的建议，或者这是一个很好的方法？#eventsisanarrayofactiverecord-likeobjectsthatincludeatimeattributeevents.map{|event|#converteventsarrayintoanarrayofhasheswiththedayofthemonthandtheevent{:number=>event.time.day,:event=>ev

  7. ruby-on-rails - 'compass watch' 是如何工作的/它是如何与 rails 一起使用的 - 2

    我在我的项目目录中完成了compasscreate.和compassinitrails。几个问题:我已将我的.sass文件放在public/stylesheets中。这是放置它们的正确位置吗？当我运行compasswatch时，它不会自动编译这些.sass文件。我必须手动指定文件:compasswatchpublic/stylesheets/myfile.sass等。如何让它自动运行？文件ie.css、print.css和screen.css已放在stylesheets/compiled。如何在编译后不让它们重新出现的情况下删除它们？我自己编译的.sass文件编译成compiled/t

  8. Ruby 方法() 方法 - 2

    我想了解Ruby方法methods()是如何工作的。我尝试使用“ruby方法”在Google上搜索，但这不是我需要的。我也看过ruby​​-doc.org，但我没有找到这种方法。你能详细解释一下它是如何工作的或者给我一个链接吗？更新我用methods()方法做了实验，得到了这样的结果:'labrat'代码classFirstdeffirst_instance_mymethodenddefself.first_class_mymethodendendclassSecond使用类#returnsavailablemethodslistforclassandancestorsputsSeco

  9. ruby-on-rails - Rails 3.2.1 中 ActionMailer 中的未定义方法 'default_content_type=' - 2

    我在我的项目中添加了一个系统来重置用户密码并通过电子邮件将密码发送给他，以防他忘记密码。昨天它运行良好(当我实现它时)。当我今天尝试启动服务器时，出现以下错误。=>BootingWEBrick=>Rails3.2.1applicationstartingindevelopmentonhttp://0.0.0.0:3000=>Callwith-dtodetach=>Ctrl-CtoshutdownserverExiting/Users/vinayshenoy/.rvm/gems/ruby-1.9.3-p0/gems/actionmailer-3.2.1/lib/action_mailer

  10. ruby - Highline 询问方法不会使用同一行 - 2

    设置:狂欢ruby1.9.2高线(1.6.13)描述:我已经相当习惯在其他一些项目中使用highline，但已经有几个月没有使用它了。现在，在Ruby1.9.2上全新安装时，它似乎不允许在同一行回答提示。所以以前我会看到类似的东西:require"highline/import"ask"Whatisyourfavoritecolor?"并得到:Whatisyourfavoritecolor?|现在我看到类似的东西:Whatisyourfavoritecolor?|竖线(|)符号是我的终端光标。知道为什么会发生这种变化吗？ 最佳答案

随机推荐