草庐IT

json - 在服务器端缓存 JSON 对象

coder 2023-07-17 原文

我有一个服务器，其中包含根据移动客户端的 API 请求提供的数据。数据是持久的，更新频率非常低(比如一周一次)。但是表设计很重，导致 API 请求服务缓慢

Web 服务是用 Yii + Postgre SQL 实现的。

  • 使用 memcached 是解决这个问题的方法吗？如果是，如果缓存数据变脏，我该如何管理？
  • 对此有任何替代解决方案吗？ Postgre有没有像MySQL中的MEMORY一样的内置机制？
  • redis 怎么样？

最佳答案

你可以使用 memcached，但同样每个人都会攻击你的数据库服务器。在您的情况下，您是说查询结果有点持久，因此缓存来自您的 Web 服务的 JSON 响应可能更有意义。

这可以使用带有内置缓存的反向代理来完成。我想一个示例可能对您最有帮助，我们如何使用 Jetty (Java) 和 NGINX 来做到这一点:

在我们的设置中，我们有一个为我们的移动客户端提供 API 的 Jetty (Java) 实例。该 API 正在监听 localhost:8080/api 并返回从本地 Mysql 数据库上的一些查询中获取的 JSON 结果。

此时，我们可以将 API 直接提供给我们的客户，但是反向代理来了:

在 API 前面有一个 NGINX 网络服务器从 0.0.0.0:80/(无处不在，端口 80)监听 当移动客户端连接到 0.0.0.0:80/api 时，内置反向代理会尝试从其缓存中获取准确的查询字符串。如果失败，它会从 localhost:8080/api 获取它，将其放入缓存中并提供在缓存中找到的新值。

好处:

  • 您可以使用其他 NGINX 好东西:缓存的 JSON 文件的自动 GZIP 压缩
  • NGINX 的 SSL 端点终止。
  • NGINX worker 可能会让你受益，当你有更多的连接时，所有的连接都从缓存中请求数据。
  • 您可以整合您的服务端点

考虑缓存失效:

您必须考虑缓存失效。您可以告诉 NGINX 保留它的缓存，例如，对 localhost:8080/api 的所有 HTTP 200 请求保留一周，或者对所有其他 HTTP 状态代码保留 1 分钟。但是如果有时间，你想在一周内更新 API，缓存是无效的，所以你必须以某种方式删除它或者将缓存时间调低到一个小时或一天(这样大多数人会点击缓存)。

这就是我们所做的:当缓存变脏时，我们选择删除缓存。我们在服务器上运行另一个 JOB，监听通过 Puppet 触发的 Update-API 事件。 JOB 将负责为我们清除 NGINX 缓存。

另一个想法是在您的 Web 服务中添加清除缓存功能。我们决定反对这个解决方案的原因是:Web 服务必须知道它在反向代理后面运行，这会破坏关注点分离。但我会说，这取决于您的计划。

另一件能让您的 Web 服务更正确的事情是为每个 JSON 文件提供正确的 ETAG 和缓存过期 header 。同样，我们没有这样做，因为我们有一个大的更新事件，而不是每个文件的小更新事件。

旁注:

  • 您不必使用 NGINX，但配置起来真的很容易
  • NGINX 和 Apache 支持 SSL
  • 还有著名的反向代理(https://www.varnish-cache.org)，但据我所知它不支持 SSL(还没有？)

因此，如果您要在 Web 服务 + SSL 之前使用 Varnish，您将使用如下配置: NGINX -> Varnish -> Web 服务。

引用资料: - NGINX 服务器:http://nginx.com -清漆反向代理:https://www.varnish-cache.org - 傀儡 IT 自动化:https://puppetlabs.com - NGINX 反向代理教程:http://www.cyberciti.biz/faq/howto-linux-unix-setup-nginx-ssl-proxy/ http://www.cyberciti.biz/tips/using-nginx-as-reverse-proxy.html

关于json - 在服务器端缓存 JSON 对象，我们在Stack Overflow上找到一个类似的问题： https://stackoverflow.com/questions/18095421/

json反向NGINXnoreferrerapipostgresqlredismemcached

有关json - 在服务器端缓存 JSON 对象的更多相关文章

  1. ruby - 如何从 ruby​​ 中的字符串运行任意对象方法？ - 2

    总的来说，我对ruby​​还比较陌生，我正在为我正在创建的对象编写一些rspec测试用例。许多测试用例都非常基础，我只是想确保正确填充和返回值。我想知道是否有办法使用循环结构来执行此操作。不必为我要测试的每个方法都设置一个assertEquals。例如:describeitem,"TestingtheItem"doit"willhaveanullvaluetostart"doitem=Item.new#HereIcoulddotheitem.name.shouldbe_nil#thenIcoulddoitem.category.shouldbe_nilendend但我想要一些方法来使用

  2. ruby - 使用 ruby​​ 和 savon 的 SOAP 服务 - 2

    我正在尝试使用ruby​​和Savon来使用网络服务。测试服务为http://www.webservicex.net/WS/WSDetails.aspx?WSID=9&CATID=2require'rubygems'require'savon'client=Savon::Client.new"http://www.webservicex.net/stockquote.asmx?WSDL"client.get_quotedo|soap|soap.body={:symbol=>"AAPL"}end返回SOAP异常。检查soap信封，在我看来soap请求没有正确的命名空间。任何人都可以建议我

  3. ruby-on-rails - 按天对 Mongoid 对象进行分组 - 2

    在控制台中反复尝试之后，我想到了这种方法，可以按发生日期对类似activerecord的(Mongoid)对象进行分组。我不确定这是完成此任务的最佳方法，但它确实有效。有没有人有更好的建议，或者这是一个很好的方法？#eventsisanarrayofactiverecord-likeobjectsthatincludeatimeattributeevents.map{|event|#converteventsarrayintoanarrayofhasheswiththedayofthemonthandtheevent{:number=>event.time.day,:event=>ev

  4. ruby - 具有身份验证的私有(private) Ruby Gem 服务器 - 2

    我想安装一个带有一些身份验证的私有(private)Rubygem服务器。我希望能够使用公共(public)Ubuntu服务器托管内部gem。我读到了http://docs.rubygems.org/read/chapter/18.但是那个没有身份验证-如我所见。然后我读到了https://github.com/cwninja/geminabox.但是当我使用基本身份验证(他们在他们的Wiki中有)时，它会提示从我的服务器获取源。所以。如何制作带有身份验证的私有(private)Rubygem服务器？这是不可能的吗？谢谢。编辑:Geminabox问题。我尝试“捆绑”以安装新的gem..

  5. ruby-on-rails - 如何验证非模型(甚至非对象)字段 - 2

    我有一个表单，其中有很多字段取自数组(而不是模型或对象)。我如何验证这些字段的存在？solve_problem_pathdo|f|%>... 最佳答案 创建一个简单的类来包装请求参数并使用ActiveModel::Validations。#definedsomewhere,atthesimplest:require'ostruct'classSolvetrue#youcouldevencheckthesolutionwithavalidatorvalidatedoerrors.add(:base,"WRONG!!!")unlesss

  6. Ruby 写入和读取对象到文件 - 2

    好的，所以我的目标是轻松地将一些数据保存到磁盘以备后用。您如何简单地写入然后读取一个对象？所以如果我有一个简单的类classCattr_accessor:a,:bdefinitialize(a,b)@a,@b=a,bendend所以如果我从中非常快地制作一个objobj=C.new("foo","bar")#justgaveitsomerandomvalues然后我可以把它变成一个kindaidstring=obj.to_s#whichreturns""我终于可以将此字符串打印到文件或其他内容中。我的问题是，我该如何再次将这个id变回一个对象？我知道我可以自己挑选信息并制作一个接受该信

  7. ruby-on-rails - Rails HTML 请求渲染 JSON - 2

    在我的Controller中，我通过以下方式在我的index方法中支持HTML和JSON:respond_todo|format|format.htmlformat.json{renderjson:@user}end在浏览器中拉起它时，它会自然地以HTML呈现。但是，当我对/user资源进行内容类型为application/json的curl调用时(因为它是索引方法)，我仍然将HTML作为响应。如何获取JSON作为响应？我还需要说明什么？ 最佳答案 您应该将.json附加到请求的url，提供的格式在routes.rb的路径中定义。这

  8. ruby-on-rails - 如果 Object::try 被发送到一个 nil 对象，为什么它会起作用？ - 2

    如果您尝试在Ruby中的nil对象上调用方法，则会出现NoMethodError异常并显示消息:"undefinedmethod‘...’fornil:NilClass"然而，有一个tryRails中的方法，如果它被发送到一个nil对象，它只返回nil:require'rubygems'require'active_support/all'nil.try(:nonexisting_method)#noNoMethodErrorexceptionanymore那么try如何在内部工作以防止该异常？ 最佳答案 像Ruby中的所有其他对象

  9. ruby-on-rails - 未在 Ruby 中初始化的对象 - 2

    我在Rails工作并有以下类(class):classPlayer当我运行时bundleexecrailsconsole然后尝试:a=Player.new("me",5.0,"UCLA")我回来了:=>#我不知道为什么Player对象不会在这里初始化。关于可能导致此问题的操作/解释的任何建议？谢谢，马里奥格 最佳答案 havenoideawhythePlayerobjectwouldn'tbeinitializedhere它没有初始化很简单，因为你还没有初始化它!您已经覆盖了ActiveRecord::Base初始化方法，但您没有调

  10. ruby-on-rails - 启动 Rails 服务器时 ImageMagick 的警告 - 2

    最近，当我启动我的Rails服务器时，我收到了一长串警告。虽然它不影响我的应用程序，但我想知道如何解决这些警告。我的估计是imagemagick以某种方式被调用了两次？当我在警告前后检查我的git日志时。我想知道如何解决这个问题。-bcrypt-ruby(3.1.2)-better_errors(1.0.1)+bcrypt(3.1.7)+bcrypt-ruby(3.1.5)-bcrypt(>=3.1.3)+better_errors(1.1.0)bcrypt和imagemagick有关系吗？/Users/rbchris/.rbenv/versions/2.0.0-p247/lib/ru

随机推荐