草庐IT

asp.net - Web API缓存-如何使用分布式缓存实现无效

coder 2023-11-07 原文

我有一个目前不使用任何缓存的API。我确实有一个正在使用的中间件,可以生成高速缓存头(Cache-Control,Expires,ETag,Last-Modified-使用https://github.com/KevinDockx/HttpCacheHeaders库)。它不存储任何内容,因为它仅生成 header 。

当If-None-Match header 传递到API请求时,中间件检查传入的Etag值与当前生成的值之间的关系,如果匹配,则发送未修改的304作为响应(httpContext.Response.StatusCode = StatusCodes.Status304NotModified;)

我正在使用Redis缓存,但不确定如何实现缓存失效。我在项目中使用了Microsoft.Extensions.Caching.Redis包。我在本地安装Redis,并在 Controller 中使用它,如下所示:

[AllowAnonymous]
[ProducesResponseType(200)]
[Produces("application/json", "application/xml")]
public async Task<IActionResult> GetEvents([FromQuery] ParameterModel model)
        {
            var cachedEvents = await _cache.GetStringAsync("events");
            IEnumerable<Event> events = null;

            if (!string.IsNullOrEmpty(cachedEvents))
            {
                events = JsonConvert.DeserializeObject<IEnumerable<Event>>(cachedEvents);
            }
            else
            {
                events = await _eventRepository.GetEventsAsync(model);
                string item = JsonConvert.SerializeObject(events, new JsonSerializerSettings()
                {
                    ReferenceLoopHandling = ReferenceLoopHandling.Ignore
                });
                await _cache.SetStringAsync("events", item);
            }

            var eventsToReturn = _mapper.Map<IEnumerable<EventViewDto>>(events);
            return Ok(eventsToReturn);
        }

请注意,此处的_cache使用的是IDistributedCache。这是请求第二次访问缓存时的工作。但是,当修改我要获取的Events时,不会考虑修改后的值。它无需进行任何验证即可提供相同的值。

我的中间件设置为:
缓存头中间件-> MVC。因此,缓存头管道首先将比较客户端发送的Etag值,然后决定将请求转发到MVC或使用304未经修改的响应将其短路。

我的计划是在缓存头中间添加一个中间件(即,我的中间件->缓存头中间件-> MVC),然后等待来自缓存头中间件的响应,并检查响应是否为304。如果304 ,转到缓存并检索响应。否则,更新缓存中的响应。

这是进行缓存失效的理想方法吗?有更好的方法吗?使用上述方法,我将必须检查每个304响应,确定路由,并具有某种逻辑来验证要使用的缓存键。不知道这是否是最好的方法。

如果您可以提供一些有关缓存失效的指南和文档/教程,那将非常有帮助。

最佳答案

这是基于我支持的服务如何在CQRS系统上使用缓存失效的指南。

命令系统从客户端接收创建,更新,删除请求。该请求将应用于Origin。该请求将广播到侦听器。

存在一个单独的失效服务,并订阅更改列表。收到命令事件后,将检查事件中该项的配置的分布式缓存。根据特定系统采取了几种不同的措施。

第一个选项是Invalidation服务从分布式缓存中删除项目。随后,共享分布式缓存的服务的使用者最终将遇到缓存未命中,从存储中检索项目并将项目的最新版本添加到分布式缓存的情况。在这种情况下,服务中所有谨慎的机器之间都存在争用情况,并且Origin可能会在一个短窗口中收到对同一物品的多个请求。如果物品价格昂贵,这可能会使原产地紧张。但是Invalidation场景非常简单。

第二个选项是Invalidation服务使用相同的分布式缓存向其中一个服务发出请求,并要求该服务忽略缓存并从Origin获取该项目的最新版本。这解决了多个称为Origin的谨慎机器的潜在峰值。但这意味着Invalidation服务与其他相关服务之间的联系更加紧密。现在,该服务具有一个API,该API允许调用者绕过其缓存策略。仅需要对Invalidation服务和其他授权调用者进行对未缓存API的访问的保护。

在任何一种情况下,所有使用相同redis数据库的谨慎机器也都订阅命令更改列表。任何一台单独的计算机都只是通过从其本地缓存中删除项目来在本地处理更改。如果该项目不存在,则没有错误。在下一个请求时,将从redis或Origin刷新该项目。对于热物料,这意味着仍然可以从任何已删除热物料且redis尚未更新的计算机上收到对Origin的多个请求。对于谨慎的计算机来说,本地的“缓存”和“正在检索的项目”任务可能是有益的,因为所有后续请求都可以等待而不是调用Origin。

除了谨慎的机器和共享的Redis外,Invalidation逻辑还扩展到Akamai和类似的内容分发网络。一旦Redis缓存已失效,则Invalidation例程将使用CDN API刷新项目。 Akamai的行为举止相当好,如果配置正确,则对更新项的Origin调用会相对较少。理想情况下,该服务已检索到该项目,并且副本在分立机器本地缓存和共享Redis中都存在。如果无法正确预期和设计,则CDN无效可能是请求峰值的另一个来源。

在redis中,从谨慎的机器共享它,使用redis指示某项正在刷新的设计还可以保护源免受同一项目的多次请求。一个简单的计数器,其密钥基于物料ID和四舍五入到最接近的分钟,30秒等的当前时间间隔,可以使用redis INCR命令,获得计数1的计算机访问Origin,而其他所有机器都在等待。

最后,对于热门商品,将“刷新时间”值附加到该商品会很有帮助。如果所有有效负载均具有类似于以下内容的包装器,则当检索到某个项目且其刷新时间已过时,被调用程序将对该项目执行后台刷新。对于热门商品,这意味着它们将在过期之前从缓存中刷新。对于读取量大,写入量少的系统,将项目缓存一小时,而刷新时间少于一小时,这意味着热门项目通常会停留在Redis中。

这是缓存项目的样本包装。在所有情况下,都假定 call 者基于所请求的项目密钥知道类型T。假定写入redis的实际有效负载是已序列化的字节数组,并且可能是gzip-ed。 SchemaVersion提供了有关如何创建redis字符串的提示。

interface CacheItem<T> {
  String Key {get; }
  DateTimeOffset ExpirationTime {get; }
  DateTimeOffset TimeToRefresh {get; }
  Int SchemaVersion {get;}
  T Item {get; }
}

存放时
var redisString = Gzip.Compress(NetDataContractSerializer.Serialize(cacheItem))

检索时,将通过补充的解压缩和反序列化方法重新创建该项目。

关于asp.net - Web API缓存-如何使用分布式缓存实现无效,我们在Stack Overflow上找到一个类似的问题: https://stackoverflow.com/questions/53731376/

有关asp.net - Web API缓存-如何使用分布式缓存实现无效的更多相关文章

  1. ruby - 如何使用 Nokogiri 的 xpath 和 at_xpath 方法 - 2

    我正在学习如何使用Nokogiri,根据这段代码我遇到了一些问题:require'rubygems'require'mechanize'post_agent=WWW::Mechanize.newpost_page=post_agent.get('http://www.vbulletin.org/forum/showthread.php?t=230708')puts"\nabsolutepathwithtbodygivesnil"putspost_page.parser.xpath('/html/body/div/div/div/div/div/table/tbody/tr/td/div

  2. ruby - 如何从 ruby​​ 中的字符串运行任意对象方法? - 2

    总的来说,我对ruby​​还比较陌生,我正在为我正在创建的对象编写一些rspec测试用例。许多测试用例都非常基础,我只是想确保正确填充和返回值。我想知道是否有办法使用循环结构来执行此操作。不必为我要测试的每个方法都设置一个assertEquals。例如:describeitem,"TestingtheItem"doit"willhaveanullvaluetostart"doitem=Item.new#HereIcoulddotheitem.name.shouldbe_nil#thenIcoulddoitem.category.shouldbe_nilendend但我想要一些方法来使用

  3. ruby - 使用 RubyZip 生成 ZIP 文件时设置压缩级别 - 2

    我有一个Ruby程序,它使用rubyzip压缩XML文件的目录树。gem。我的问题是文件开始变得很重,我想提高压缩级别,因为压缩时间不是问题。我在rubyzipdocumentation中找不到一种为创建的ZIP文件指定压缩级别的方法。有人知道如何更改此设置吗?是否有另一个允许指定压缩级别的Ruby库? 最佳答案 这是我通过查看ruby​​zip内部创建的代码。level=Zlib::BEST_COMPRESSIONZip::ZipOutputStream.open(zip_file)do|zip|Dir.glob("**/*")d

  4. ruby - 为什么我可以在 Ruby 中使用 Object#send 访问私有(private)/ protected 方法? - 2

    类classAprivatedeffooputs:fooendpublicdefbarputs:barendprivatedefzimputs:zimendprotecteddefdibputs:dibendendA的实例a=A.new测试a.foorescueputs:faila.barrescueputs:faila.zimrescueputs:faila.dibrescueputs:faila.gazrescueputs:fail测试输出failbarfailfailfail.发送测试[:foo,:bar,:zim,:dib,:gaz].each{|m|a.send(m)resc

  5. ruby-on-rails - 使用 Ruby on Rails 进行自动化测试 - 最佳实践 - 2

    很好奇,就使用ruby​​onrails自动化单元测试而言,你们正在做什么?您是否创建了一个脚本来在cron中运行rake作业并将结果邮寄给您?git中的预提交Hook?只是手动调用?我完全理解测试,但想知道在错误发生之前捕获错误的最佳实践是什么。让我们理所当然地认为测试本身是完美无缺的,并且可以正常工作。下一步是什么以确保他们在正确的时间将可能有害的结果传达给您? 最佳答案 不确定您到底想听什么,但是有几个级别的自动代码库控制:在处理某项功能时,您可以使用类似autotest的内容获得关于哪些有效,哪些无效的即时反馈。要确保您的提

  6. ruby - 在 Ruby 中使用匿名模块 - 2

    假设我做了一个模块如下:m=Module.newdoclassCendend三个问题:除了对m的引用之外,还有什么方法可以访问C和m中的其他内容?我可以在创建匿名模块后为其命名吗(就像我输入“module...”一样)?如何在使用完匿名模块后将其删除,使其定义的常量不再存在? 最佳答案 三个答案:是的,使用ObjectSpace.此代码使c引用你的类(class)C不引用m:c=nilObjectSpace.each_object{|obj|c=objif(Class===objandobj.name=~/::C$/)}当然这取决于

  7. ruby-on-rails - Ruby net/ldap 模块中的内存泄漏 - 2

    作为我的Rails应用程序的一部分,我编写了一个小导入程序,它从我们的LDAP系统中吸取数据并将其塞入一个用户表中。不幸的是,与LDAP相关的代码在遍历我们的32K用户时泄漏了大量内存,我一直无法弄清楚如何解决这个问题。这个问题似乎在某种程度上与LDAP库有关,因为当我删除对LDAP内容的调用时,内存使用情况会很好地稳定下来。此外,不断增加的对象是Net::BER::BerIdentifiedString和Net::BER::BerIdentifiedArray,它们都是LDAP库的一部分。当我运行导入时,内存使用量最终达到超过1GB的峰值。如果问题存在,我需要找到一些方法来更正我的代

  8. ruby - 使用 ruby​​ 和 savon 的 SOAP 服务 - 2

    我正在尝试使用ruby​​和Savon来使用网络服务。测试服务为http://www.webservicex.net/WS/WSDetails.aspx?WSID=9&CATID=2require'rubygems'require'savon'client=Savon::Client.new"http://www.webservicex.net/stockquote.asmx?WSDL"client.get_quotedo|soap|soap.body={:symbol=>"AAPL"}end返回SOAP异常。检查soap信封,在我看来soap请求没有正确的命名空间。任何人都可以建议我

  9. python - 如何使用 Ruby 或 Python 创建一系列高音调和低音调的蜂鸣声? - 2

    关闭。这个问题是opinion-based.它目前不接受答案。想要改进这个问题?更新问题,以便editingthispost可以用事实和引用来回答它.关闭4年前。Improvethisquestion我想在固定时间创建一系列低音和高音调的哔哔声。例如:在150毫秒时发出高音调的蜂鸣声在151毫秒时发出低音调的蜂鸣声200毫秒时发出低音调的蜂鸣声250毫秒的高音调蜂鸣声有没有办法在Ruby或Python中做到这一点?我真的不在乎输出编码是什么(.wav、.mp3、.ogg等等),但我确实想创建一个输出文件。

  10. ruby-on-rails - 如何验证 update_all 是否实际在 Rails 中更新 - 2

    给定这段代码defcreate@upgrades=User.update_all(["role=?","upgraded"],:id=>params[:upgrade])redirect_toadmin_upgrades_path,:notice=>"Successfullyupgradeduser."end我如何在该操作中实际验证它们是否已保存或未重定向到适当的页面和消息? 最佳答案 在Rails3中,update_all不返回任何有意义的信息,除了已更新的记录数(这可能取决于您的DBMS是否返回该信息)。http://ar.ru

随机推荐