草庐IT

分布式

全部标签

Zookeeper简单使用

Zookeeper一、zookeeper简述大型分布式计算开源的分布式配置服务,同步服务和命令注册。架构通过冗余实现高可用。目标:将那些负载且容易出错的分布式一致性服务封装其拉力,构成一个高效可靠的原语集,以一系列简单易用的接口提供给用户使用。一个典型的分布式数据一致性的解决方案,分布式应用程序可以基于它实现诸如数据发布/订阅、负载均衡、命令服务、分布式协调/通知,集群管理、master选举、分布式锁和分布式队列等。1.1zookeeper数据结构它提供的名称空间类似标准文件系统,k-v的形式存储。名称key由斜线/分割的一系列路径元素,zookeeper名称空间中的每个节点都是由一个路径标识

javascript - 生成具有对数分布和自定义斜率的随机数

我正在尝试生成具有对数分布的随机整数。我使用以下公式:idx=Math.floor(Math.log((Math.random()*Math.pow(2.0,max))+1.0)/Math.log(2.0));这很好用,并在1000次迭代中生成这样的序列(每个数字代表生成该索引的次数):[525,261,119,45,29,13,5,1,1,1]Fiddle我现在正在尝试调整此分布的斜率,使其不会下降得那么快并产生如下内容:[150,120,100,80,60,...]盲目地玩弄系数并没有给我想要的东西。有什么想法可以实现吗? 最佳答案

【二项分布,泊松分布,高斯分布之间的转化关系】

概率密度(质量)函数:高斯分布:高斯分布是连续性的分布。其中u是均值,^2是方差。二项分布:其中,k是一系列的离散值,因为二项分布是一个离散分布,代表某时间成功(发生)的概率为p,则在n次的抽样过程中,成功(或发生)了k次,不成功(不发生)的次数为n-k次,此时按照上式计算出严格叫概率质量函数(因为其离散),其均值为n*p,方差为n*p*(1-p)。泊松分布:同样的,泊松分布也是一个离散的分布,其中为某事件在单位时间内发生的次数,k为变量。泊松分布的物理意义为在一段时间内,时间X发生了k次的概率质量,泊松分布的均值和方差全部为。三种分布之间的转换关系具体如下:    二项分布泊松分布:当样本数

javascript - 是否有一个库可以根据 JavaScript 的 beta 分布生成随机数?

我需要在Betaprobabilitydistribution中从JavaScript生成随机数.我用Google搜索过,但找不到任何支持此功能的库。谁能建议我在哪里可以找到可以执行此操作的库或代码片段? 最佳答案 jStatlibrary具有从beta分布中采样的功能,以及许多otherdistributions.varrandom_num=jStat.beta.sample(alpha,beta); 关于javascript-是否有一个库可以根据JavaScript的beta分布生成

es的配置文件(elasticsearch.yml)

config目录下有2个配置文件:es的配置文件(elasticsearch.yml)和日志配置文件(logging.yml)cluster.name:elasticsearch配置es的集群名称,默认是elasticsearch,es会自动发现在同一网段下的es,如果在同一网段下有多个集群,就可以用这个属性来区分不同的集群。node.name:“FranzKafka”节点名,默认随机指定一个name列表中名字,该列表在es的jar包中config文件夹里name.txt文件中,其中有很多作者添加的有趣名字。node.master:true指定该节点是否有资格被选举成为node,默认是true

go - 非对等服务器上的分布式计算

我有一组任务,每个任务都需要满足某些特定条件。例如,任务需要100Mb的RAM才能执行。我还有多个放置worker的服务器。每个worker都有一些配置来描述它拥有多少资源。例如,一些工作人员可以使用1Gb的RAM来执行任务。是否有在worker之间分配任务的系统,以便每个worker满足传递给它的任务的要求?或者也许我可以通过消息代理(例如RabbitMQ)以某种方式做到这一点?我知道为此编写自己的应用程序,因为我不想重新发明轮子。Worker是用Go编写的。 最佳答案 RabbitMQ并没有明确地知道关于它的客户端的这些事情。它

algorithm - 将平面列表加权为正态分布

我有任意长度的字符串项目列表,我需要“规范化”这个列表,以便每个项目都是正态分布的一部分,将权重附加到字符串。除了我下面的方法之外,还有什么更有效的数学/统计方法可以解决这个问题?funcnormalizeAppend(in[]string,shufflebool)[]string{varret[]stringifshuffle{shuffleStrings(in)}l:=len(in)switch{caseremain(l,3)==0:l3:=(l/3)varlow,mid,high[]stringfori,v:=rangein{o:=i+1switch{caseol3&&o=l3*

高维高斯分布基础

高维高斯分布基础多位高斯分布的几何理解多维高斯分布表达式为:p(x∣μ,Σ)=1(2π)p/2∣Σ∣1/2e−12(x−μ)TΣ−1(x−μ)p(x|\mu,\Sigma)=\frac{1}{(2\pi)^{p/2}|\Sigma|^{1/2}}e^{-\frac{1}{2}(x-\mu)^{T}\Sigma^{-1}(x-\mu)}p(x∣μ,Σ)=(2π)p/2∣Σ∣1/21​e−21​(x−μ)TΣ−1(x−μ)其中x,μ∈Rp,Σ∈Rp×px,\mu\in\mathbb{R}^{p},\Sigma\in\mathbb{R}^{p\timesp}x,μ∈Rp,Σ∈Rp×p,Σ\Sigma

go - 分布式出站 http 速率限制器

我有一个微服务架构应用程序,其中有多个服务轮询外部API。外部API的速率限制为每分钟600个请求。我如何才能让我的所有实例一起保持低于共享的600速率限制?Google只给我提供了3个解决方案,最有希望的是:myntra/golimit三者中最有前途的,但我确实不知道如何设置它。wallstreetcn/rate这似乎只在达到限制时拒绝(我的应用程序需要等到它可以发出请求)并且rate.NewLimiter函数中的Every函数似乎是一个不同的导入/依赖项,我无法弄清楚它是什么manavo/go-rate-limiter有一个“软”限制,显然可以让我超过限制。有些端点如果我不能访问它

go - 使用 Jaeger 在分布式应用程序中跟踪 Kafka 总线

我分发了包含多个Go服务的应用程序。其中一些使用Kafka作为数据总线。我能够使用Jaeger的opentracing追踪服务之间的调用。我在图表上绘制Kafka跨度时遇到问题,它们显示为间隙。这是我能做的。初始跨度由gRPC中间件创建。生产方:...kafkaMsg:=kafka.Message{Key:[]byte(key),Value:msgBytes}headers:=make(map[string]string)ifspan:=opentracing.SpanFromContext(ctx);span!=nil{opentracing.GlobalTracer().Injec