草庐IT

distributed

全部标签

c# - Amazon S3 中的并发

我目前正在构建一个系统,其中S3将被Internet上的许多计算机用作持久哈希集(S3URL从数据中推断出来)。如果两个节点存储相同的数据,那么它将使用相同的key存储,因此不会存储两次。当一个对象被删除时,我需要知道其他一些节点是否也在使用该数据。在那种情况下,我不会删除它。现在我已经通过添加存储节点列表作为写入S3的数据的一部分来实现它。因此,当节点存储数据时,会发生以下情况:从S3读取对象。反序列化对象。将新节点的id添加到存储节点列表中。序列化新对象(要存储的数据和节点列表)。将序列化数据写入S3。这创建了一种幂等引用计数形式。由于Internet上的请求可能非常不可靠,我不想

c# - MSMQ - 队列能否在队列进程重启/服务器重启后继续存在

MSMQ排队消息能否在服务/服务器重启后继续存在?我的意思是,如果队列有消息并且服务器要经历硬重启,那么消息在重启后是否仍然在队列中可用? 最佳答案 为此,您必须将消息标记为可恢复。默认情况下,MSMQ消息仅保存在内存中,但可恢复消息会备份到磁盘以启用可靠的MSMQ消息传递。usingSystem.Messaging;MessagerecoverableMessage=newMessage();recoverableMessage.Body="SampleRecoverableMessage";recoverableMessage.

c# - 如何确定分布式架构?

在设计大型应用程序时,我正在努力了解思考过程。假设我有一个客户需要一个新的客户网站,他估计每天有40,000个订单,而用户群已经有25,000个。在设计应用程序时,您如何确定是否需要分布式架构?我应该使用网络农场吗?等我过去主要构建2层(物理)应用程序,我真的想提高我的理解。任何见解都会很棒! 最佳答案 从一开始就对您的新应用进行负载测试。由于预先进行大型设计永远不会给您带来预期的结果(15年以上的经验),所以最好的办法是针对变化进行设计,让正确的架构从您的需求中浮现出来。根据您的描述,对该项目采用敏捷方法,并使用其实践来指导您的项

JavaScript分布式计算项目

关闭。这个问题需要更多focused.它目前不接受答案。想改进这个问题吗?更新问题,使其只关注一个问题editingthispost.关闭7年前。Improvethisquestion我做了一个websitethatdoesabsolutelynothing,并且我向自己证明了人们喜欢呆在那里-我已经在页面上记录了11多个小时的累积时间。我的问题是将网站用作分布式计算站点是否可能(或实用)。我的第一react是想知道是否有任何JavaScript分布式计算项目已经在进行中,这样我就可以在页面上放一段代码就可以完成。不幸的是,我只能找到一大堆认为这可能是个好主意的网站。我想我可能想从整数

PHP SoapClient : Problems with Distributed WSDL File

我在使用分布式WSDL文件(方案/其他定义在实际WSDL之外声明)和PHP的SoapClient时遇到问题。这是我得到的故障信息:SOAP-ERROR:ParsingWSDL:'getSomeInfo'alreadydefined.经过一番谷歌搜索,这似乎是PHP内部的一个错误,因为其他人也发现了完全相同的问题:http://bugs.php.net/bug.php?id=45282是否有任何错误修复?有解决此错误的解决方案吗?我认为发布代码片段毫无意义,因为仅使用WSDL调用SoapClientctor是唯一失败的。 最佳答案 我

php - PHP 无状态 Web 应用程序中的持久多节点事件

我正在构建一个将跨多个节点运行的OOPHP应用程序,并且本质上是相对无状态的,我需要实现适当的发布者-订阅者(http://en.wikipedia.org/wiki/Observer_pattern/http://sourcemaking.com/design_patterns/Observer/php)样式事件。我的问题是,我该如何处理事件?在我的应用程序中,我们使用了Cassandra、Redis、Mongo和RabbitMQ等技术。我知道PHP有一个可用的事件扩展,但据我所知,它停留在状态内-或者如果利用了诸如memcached之类的东西,它可能会在该节点内使用......但是

java - 使用 Apache ZooKeeper 实现死锁检测

我在一家小型软件公司工作,我的任务是研究一个分布式锁管理器供我们使用。它必须与Java和C++接口(interface)。我已经使用ZooKeeper几个星期了,并且haveimplementedsharedlocks(readandwritelocks)accordingtothedocumentation.我现在需要实现死锁检测。如果每个客户端都可以维护一个锁图,那将是快速和容易的。然而,youcannotreliablyseeeverychangethathappenstoanodeinZooKeeper,因此不可能保持准确的图表。这意味着每次检查死锁时,我都需要下载很多锁,这似

java - 使用 RAM 和磁盘的类似 memcached 的键/值缓存

很难说出这里问的是什么。这个问题模棱两可、含糊不清、不完整、过于宽泛或言辞激烈,无法以目前的形式合理回答。如需帮助澄清此问题以便可以重新打开,visitthehelpcenter.8年前关闭。我有一个JavaWeb应用程序,它在后端使用第三方Web服务。调用Web服务会产生延迟,这很重要,应尽可能避免。此外,我的应用程序每天只允许进行一定数量的Web服务调用,因此除非绝对需要,否则最好不要进行Web服务调用。我目前的解决方案是在Memcached中缓存Web服务结果,这很有效。基本上,我们使用RAM来缓存Web服务结果。但是,我们希望将其提升到一个新的水平。我们还有磁盘空间,我们希望将

java - 使用 Zookeeper 存储用户权限有意义吗

我正在编写一个涉及多个前端节点的分布式应用程序,这些节点需要拒绝对用户执行操作,除非它们是列表的一部分。现在我们有超过4个节点,但只有一个运行DB2的数据库服务器经常停机维护。现在我们正在轮询数据库以更新内存列表,以便如果从列表中删除用户,更改将反射(reflect)到所有4个节点。但是如果其中一个节点在数据库关闭时重新启动,我们最终会得到一个空列表,它将拒绝所有我们不想要的用户请求。我们可以接受来自用户的请求,即使数据库已关闭,因为我们将它们缓冲在消息队列中,但如果需要拒绝,我们希望立即拒绝它们!在我们的4个节点中的每个节点上运行一个Zookeeper实例并将用户权限存储在Zooke

java - 创建用于测试分布式系统的网络错误

我正在开发一个用于通过HTTP进行通信的Java库,我想测试它在出现丢包、高延迟、低带宽和拥塞等网络问题时的可靠性和性能。我正在使用Apache'shttpclientlibrary用于从客户端进行连接,Java自己的com.sun.net.httpserver.HttpServer用于启动HTTP服务器。是否有可用的库来执行此类操作,或者我应该自己动手做?我想我可以尝试将我自己的org.apache.http.conn.scheme.SchemeSocketFactory插入客户端,并模拟上面提到的几个问题,但我更愿意使用已经有效的东西:-)这类似于问题CreatingTCPnetw