我有一个简单的自定义 QueryProvider,它接受一个表达式,将其转换为 SQL 并查询一个 sql 数据库。
我想在 QueryProvider 中创建一个小的缓存来存储经常访问的对象,这样就可以在不命中数据库的情况下进行检索。
QueryProvider 有方法
public object Execute(System.Linq.Expressions.Expression expression)
{
/// Builds an SQL statement from the expression,
/// executes it and returns matching objects
}
缓存作为这个 QueryProvider 类中的一个字段,是一个简单的通用列表。
如果我使用 List.AsQueryable 方法并将上述表达式传递到 List.AsQueryable 的 Provider 的 Execute 方法中,它不会按预期工作。看起来当一个表达式被编译时,初始的 QueryProvider 变成了一个不可或缺的部分。
是否可以将表达式传递给后续的 QueryProvider 并根据需要执行表达式?
调用代码大致如下:
public class QueryProvider<Entity>()
{
private List<TEntity> cache = new List<Entity>();
public object Execute(System.Linq.Expressions.Expression expression)
{
/// check whether expression expects single or multiple result
bool isSingle = true;
if (isSingle)
{
var result = this.cache.AsQueryable<Entity>().Provider.Execute(expression);
if (result != null)
return result;
}
/// cache failed, hit database
var qt = new QueryTranslator();
string sql = qt.Translate(expression);
/// .... hit database
}
}
它不会返回错误,而是陷入循环,在循环中一遍又一遍地调用同一个提供程序。
这里有更多代码展示了我正在尝试做的事情:
收藏:
class Collection<Entity>
{
internal List<Entity> cacheOne { get; private set; }
internal Dictionary<Guid, Entity> cacheTwo { get; private set; }
internal Collection()
{
this.cacheOne = new List<Entity>();
this.cacheTwo = new Dictionary<Guid, Entity>();
}
public IQueryable<Entity> Query()
{
return new Query<Entity>(this.cacheOne, this.cacheTwo);
}
}
查询:
class Query<Entity> : IQueryable<Entity>
{
internal Query(List<Entity> cacheOne, Dictionary<Guid, Entity> cacheTwo)
{
this.Provider = new QueryProvider<Entity>(cacheOne, cacheTwo);
this.Expression = Expression.Constant(this);
}
internal Query(IQueryProvider provider, Expression expression)
{
this.Provider = provider;
if (expression != null)
this.Expression = expression;
}
public IEnumerator<Entity> GetEnumerator()
{
return this.Provider.Execute<IEnumerator<Entity>>(this.Expression);
}
System.Collections.IEnumerator System.Collections.IEnumerable.GetEnumerator()
{
return this.GetEnumerator();
}
public Type ElementType
{
get { return typeof(Entity); }
}
public System.Linq.Expressions.Expression Expression { get; private set; }
public IQueryProvider Provider { get; private set; }
}
查询提供者:
class QueryProvider<Entity> : IQueryProvider
{
private List<Entity> cacheOne;
private Dictionary<Guid, Entity> cacheTwo;
internal QueryProvider(List<Entity> cacheOne, Dictionary<Guid, Entity> cacheTwo)
{
this.cacheOne = cacheOne;
this.cacheTwo = cacheTwo;
}
public IQueryable<TElement> CreateQuery<TElement>(System.Linq.Expressions.Expression expression)
{
return new Query<TElement>(this, expression);
}
public IQueryable CreateQuery(System.Linq.Expressions.Expression expression)
{
throw new NotImplementedException();
}
public TResult Execute<TResult>(System.Linq.Expressions.Expression expression)
{
return (TResult)this.Execute(expression);
}
public object Execute(System.Linq.Expressions.Expression expression)
{
Iterator<Entity> iterator = new Iterator<Entity>(expression, cacheOne, cacheTwo);
return (iterator as IEnumerable<Entity>).GetEnumerator();
}
}
迭代器:
class Iterator<Entity> : IEnumerable<Entity>
{
private Expression expression;
private List<Entity> cacheOne;
private Dictionary<Guid, Entity> cacheTwo;
internal Iterator(Expression expression, List<Entity> cacheOne, Dictionary<Guid, Entity> cacheTwo)
{
this.expression = expression;
this.cacheOne = cacheOne;
this.cacheTwo = cacheTwo;
}
public IEnumerator<Entity> GetEnumerator()
{
foreach (var result in (IEnumerable<Entity>)this.cacheOne.AsQueryable<Entity>().Provider.Execute(expression))
{
yield return result;
}
foreach (var more in (IEnumerable<Entity>)this.cacheTwo.Values.AsQueryable<Entity>().Provider.Execute(expression))
{
yield return more;
}
}
System.Collections.IEnumerator System.Collections.IEnumerable.GetEnumerator()
{
return this.GetEnumerator();
}
}
程序:
class Program
{
static void Main(string[] args)
{
/// Create collection + caches
var collection = new Collection<Giraffe>();
collection.cacheOne.AddRange(new Giraffe[] {
new Giraffe() { Id = Guid.NewGuid(), DateOfBirth = new DateTime(2011, 03, 21), Height = 192, Name = "Percy" },
new Giraffe() { Id = Guid.NewGuid(), DateOfBirth = new DateTime(2005, 12, 25), Height = 188, Name = "Santa" },
new Giraffe() { Id = Guid.NewGuid(), DateOfBirth = new DateTime(1999, 04, 01), Height=144, Name="Clown" }
});
var cachetwo = new List<Giraffe>(new Giraffe[] {
new Giraffe() { Id = Guid.NewGuid(), DateOfBirth = new DateTime(1980, 03,03), Height = 599, Name="Big Ears" },
new Giraffe() { Id = Guid.NewGuid(), DateOfBirth = new DateTime(1985, 04, 02), Height= 209, Name="Pug" }
});
foreach (var giraffe in cachetwo)
collection.cacheTwo.Add(giraffe.Id, giraffe);
/// Iterate through giraffes born before a certain date
foreach (var result in collection.Query().Where(T => T.DateOfBirth < new DateTime(2006, 01, 01)))
{
Console.WriteLine(result.Name);
}
}
}
长颈鹿:
class Giraffe
{
public Guid Id { get; set; }
public string Name { get; set; }
public long Height { get; set; }
public DateTime DateOfBirth { get; set; }
}
特殊情况,例如SingleAndDefault 等被排除在外。我想要工作的部分发生在 Iterator 中,它首先执行 List 的 QueryProvider,然后再执行 Dictionary 的。
两个 Queryable 对象之一可能是数据库或其他对象。
最佳答案
不,查询不会绑定(bind)到提供者。这就是您拥有 IQueryable 接口(interface)的原因:它同时提供表达式和提供程序,因此 LINQ 可以调用提供程序来执行表达式。
您的实现中的问题在于 Query<Entity>代表自己:您将根表达式设置为 Expression.Constant(this) , 其中this是查询(不是集合)。
因此,当您使用 LINQ-to-Objects 执行查询时,它将调用 GetEnumerator在 Query<> ,然后调用 LINQ-to-Objects 来执行 Expression ,它有一个根表达式 Expression.Constant(this) (类型为 Query<> ),然后 LINQ-to-Objects 通过调用 GetEnumerator 迭代此根表达式关于这个Query<>等
问题出在
(IEnumerable<Entity>)this.cacheOne.AsQueryable<Entity>().Provider.Execute(expression)
基本上等于
new Entity[0].AsQueryable().Provider.Execute(expression)
或
linqToObjectsProvider.Execute(expression)
查询返回的提供者未链接到源(this.cacheOne),因此您只是重新执行表达式,而不是查询缓存。
下面的问题是什么?
class Collection<Entity>
{
...
public IQueryable<Entity> Query()
{
return this.cacheOne.Concat(this.cacheTwo.Values).AsQueryable();
}
}
请注意 Concat使用延迟评估,因此只有当您执行查询时,cacheOne 和 cacheTwo 才会连接起来,然后使用额外的 LINQ 运算符进行操作。
(在这种情况下,我会将 Collection<Entity> 设为 IQueryable with Expression equal to Expression.Constant(this.cacheOne.Concat(this.cacheTwo.Values))`。我想你可以取消所有其他类。)
原始答案
但是,我认为这种搭载 LINQ to Objects 的方式永远无法实现您认为应该实现的目标。
至少,您应该保留原始 查询提供程序,以便在缓存未命中时可以调用它。如果您不这样做,并使用您自己的查询提供程序(您没有显示您用于进行实际调用的代码),您的查询提供程序将一次又一次地调用自己。
因此您需要创建一个 CachingQueryProvider 和一个 CachingQuery:
class CachingQuery<T> : IQueryable<T>
{
private readonly CachingQueryProvider _provider;
private readonly Expression _expression;
public CachingQuery(CachingQueryProvider provider, Expression expression)
{
_provider = provider;
_expression = expression;
}
// etc.
}
class CachingQueryProvider : IQueryProvider
{
private readonly IQueryProvider _original;
public CachingQueryProvider(IQueryProvider original)
{
_original = original;
}
// etc.
}
public static class CachedQueryable
{
public static IQuerable<T> AsCached(this IQueryable<T> source)
{
return new CachingQuery<T>(
new CachingQueryProvider(source.Provider),
source.Expression);
}
}
此外,如果您想缓存结果,则需要在缓存之前具体化结果,否则您缓存的是查询,而不是结果。结果本身不应该再次执行,因为它已经是您应该返回的数据。
我的方向是:
class CachingQueryProvider : IQueryProvider
{
public object Execute(Expression expression)
{
var key = TranslateExpressionToCacheKey(expression);
object cachedValue;
if (_cache.TryGetValue(key, out cachedValue))
return cachedValue;
object result = _originalProvider.Execute(expression);
// Won't compile because we don't know T at compile time
IEnumerable<T> sequence = result as IEnumerable<T>;
if (sequence != null && !(sequence is ICollection<T>))
{
result = sequence.ToList<T>();
}
_cache[key] = result;
return result;
}
}
标记为Won't compile的部分,你将不得不做一些反射技巧。
注意:字符串实现了 IEnumerable,所以要小心不要尝试具体化单个字符串结果值。
关于c# - 将 LINQ 表达式传递给另一个 QueryProvider,我们在Stack Overflow上找到一个类似的问题: https://stackoverflow.com/questions/10704027/
使用带有Rails插件的vim,您可以创建一个迁移文件,然后一次性打开该文件吗?textmate也可以这样吗? 最佳答案 你可以使用rails.vim然后做类似的事情::Rgeneratemigratonadd_foo_to_bar插件将打开迁移生成的文件,这正是您想要的。我不能代表textmate。 关于ruby-使用VimRails,您可以创建一个新的迁移文件并一次性打开它吗?,我们在StackOverflow上找到一个类似的问题: https://sta
我需要从一个View访问多个模型。以前,我的links_controller仅用于提供以不同方式排序的链接资源。现在我想包括一个部分(我假设)显示按分数排序的顶级用户(@users=User.all.sort_by(&:score))我知道我可以将此代码插入每个链接操作并从View访问它,但这似乎不是“ruby方式”,我将需要在不久的将来访问更多模型。这可能会变得很脏,是否有针对这种情况的任何技术?注意事项:我认为我的应用程序正朝着单一格式和动态页面内容的方向发展,本质上是一个典型的网络应用程序。我知道before_filter但考虑到我希望应用程序进入的方向,这似乎很麻烦。最终从任何
我想要做的是有2个不同的Controller,client和test_client。客户端Controller已经构建,我想创建一个test_clientController,我可以使用它来玩弄客户端的UI并根据需要进行调整。我主要是想绕过我在客户端中内置的验证及其对加载数据的管理Controller的依赖。所以我希望test_clientController加载示例数据集,然后呈现客户端Controller的索引View,以便我可以调整客户端UI。就是这样。我在test_clients索引方法中试过这个:classTestClientdefindexrender:template=>
在我的应用程序中,我需要能够找到所有数字子字符串,然后扫描每个子字符串,找到第一个匹配范围(例如5到15之间)的子字符串,并将该实例替换为另一个字符串“X”。我的测试字符串s="1foo100bar10gee1"我的初始模式是1个或多个数字的任何字符串,例如,re=Regexp.new(/\d+/)matches=s.scan(re)给出["1","100","10","1"]如果我想用“X”替换第N个匹配项,并且只替换第N个匹配项,我该怎么做?例如,如果我想替换第三个匹配项“10”(匹配项[2]),我不能只说s[matches[2]]="X"因为它做了两次替换“1fooX0barXg
如果您尝试在Ruby中的nil对象上调用方法,则会出现NoMethodError异常并显示消息:"undefinedmethod‘...’fornil:NilClass"然而,有一个tryRails中的方法,如果它被发送到一个nil对象,它只返回nil:require'rubygems'require'active_support/all'nil.try(:nonexisting_method)#noNoMethodErrorexceptionanymore那么try如何在内部工作以防止该异常? 最佳答案 像Ruby中的所有其他对象
关闭。这个问题需要detailsorclarity.它目前不接受答案。想改进这个问题吗?通过editingthispost添加细节并澄清问题.关闭8年前。Improvethisquestion为什么SecureRandom.uuid创建一个唯一的字符串?SecureRandom.uuid#=>"35cb4e30-54e1-49f9-b5ce-4134799eb2c0"SecureRandom.uuid方法创建的字符串从不重复?
我有一个正在构建的应用程序,我需要一个模型来创建另一个模型的实例。我希望每辆车都有4个轮胎。汽车模型classCar轮胎模型classTire但是,在make_tires内部有一个错误,如果我为Tire尝试它,则没有用于创建或新建的activerecord方法。当我检查轮胎时,它没有这些方法。我该如何补救?错误是这样的:未定义的方法'create'forActiveRecord::AttributeMethods::Serialization::Tire::Module我测试了两个环境:测试和开发,它们都因相同的错误而失败。 最佳答案
如何在ruby中调用C#dll? 最佳答案 我能想到几种可能性:为您的DLL编写(或找人编写)一个COM包装器,如果它还没有,则使用Ruby的WIN32OLE库来调用它;看看RubyCLR,其中一位作者是JohnLam,他继续在Microsoft从事IronRuby方面的工作。(估计不会再维护了,可能不支持.Net2.0以上的版本);正如其他地方已经提到的,看看使用IronRuby,如果这是您的技术选择。有一个主题是here.请注意,最后一篇文章实际上来自JohnLam(看起来像是2009年3月),他似乎很自在地断言RubyCL
我想在Ruby中创建一个用于开发目的的极其简单的Web服务器(不,不想使用现成的解决方案)。代码如下:#!/usr/bin/rubyrequire'socket'server=TCPServer.new('127.0.0.1',8080)whileconnection=server.acceptheaders=[]length=0whileline=connection.getsheaders想法是从命令行运行这个脚本,提供另一个脚本,它将在其标准输入上获取请求,并在其标准输出上返回完整的响应。到目前为止一切顺利,但事实证明这真的很脆弱,因为它在第二个请求上中断并出现错误:/usr/b
我想让一个yaml对象引用另一个,如下所示:intro:"Hello,dearuser."registration:$introThanksforregistering!new_message:$introYouhaveanewmessage!上面的语法只是它如何工作的一个例子(这也是它在thiscpanmodule中的工作方式。)我正在使用标准的rubyyaml解析器。这可能吗? 最佳答案 一些yaml对象确实引用了其他对象:irb>require'yaml'#=>trueirb>str="hello"#=>"hello"ir