草庐IT

企业级实践

全部标签

美团外卖搜索基于Elasticsearch的优化实践

美团外卖搜索工程团队在Elasticsearch的优化实践中,基于Location-BasedService(LBS)业务场景对Elasticsearch的查询性能进行优化。该优化基于Run-LengthEncoding(RLE)设计了一款高效的倒排索引结构,使检索耗时(TP99)降低了84%。本文从问题分析、技术选型、优化方案等方面进行阐述,并给出最终灰度验证的结论。1.前言最近十年,Elasticsearch已经成为了最受欢迎的开源检索引擎,其作为离线数仓、近线检索、B端检索的经典基建,已沉淀了大量的实践案例及优化总结。然而在高并发、高可用、大数据量的C端场景,目前可参考的资料并不多。因此

转转测试环境docker化实践

    测试环境对于任何一个软件公司来讲,都是核心基础组件之一。转转的测试环境伴随着转转的发展也从单一的几套环境发展成现在的任意的docker动态环境+docker稳定环境环境体系。期间环境系统不断的演进,去适应转转集群扩张、新业务的扩展,走了一些弯路,但最终我们将系统升级到了我们认为的终极方案。下面我们介绍一下转转环境的演进和最终的解决方案。1测试环境演进1.1单体环境    转转在2017年成立之初,5台64G内存的机器,搭建5个完整的测试环境。就满足了转转的日常所需。一台分给开发,几台分给测试。通过沟通协调就能解决多分支并行开发下冲突问题。1.2动态环境+稳定环境    随着微服务化的进

企业大数据发展面临问题之存算分离技术思考

文章目录概述背景为何要存算分离优势**应用场景**存算分离产品技术流派华为JuiceFSHashDataXSKY概述背景Hadoop一出生就是奔存算一体设计,当时设计思想就是存储不动而计算(code也即是代码程序)动,负责调度Yarn会把计算任务尽量发到要处理数据所在的实例上,这也是与传统集中式存储最大的不同。为何当时Hadoop设计存算一体的耦合?要知道2006年服务器带宽只有100Mb/s~1Gb/s,但是HDD也即是磁盘吞吐量有50MB/s,这样带宽远远不够传输数据,网络瓶颈尤为明显,无奈之举只好把计算任务发到数据所在的位置。众观历史常言道天下分久必合合久必分,随着云计算技术的发展,数据

ruby-on-rails - 处理 nil 对象和属性的最佳实践是什么?

假设我有一个User对象,它有一个email属性,我需要他们的email的最后一个大写字母:u=User.find(1)letter=u.email.upcase.last如果u或email在这个链中是nil,那么我得到一个NoMethodError:undefinedmethod'blah'fornil:无类。在大多数情况下,我应该能够解决它,但有时,nil会到达它不应该或难以包含的地方。一种方法会很冗长:u=User.find(1)letter=nilifu&&u.emailletter=u.email.upcase.lastend但这在View中或在a.bunch.of.prop

ruby - Ruby for 循环的最佳实践

我遇到了三种编写循环的方法。the_count=[1,2,3,4,5]for循环1fornumberinthe_countputs"Thisiscount#{number}"endfor循环2the_count.eachdo|count|puts"Thecounterisat:#{count}"endfor循环3the_count.each{|i|puts"Igot#{i}"}是否存在一种方法比其他两种方法更好的做法或更好的解决方案?第一个与其他语言的最相似,对我来说,第三个看起来很乱。 最佳答案 通常不鼓励第一种选择。ruby可能

ruby - RSpec 规范伪造类常量的最佳实践或解决方法

假设我有Car和Mechanic类(class)。汽车有“运行”方法。Mechanic出于某种原因需要Car。然后我编写RSpec规范。在mechanic中,我定义了一个这样的假类:classCar;end然后将mechanic在其上使用的方法stub。如果我单独运行测试,一切正常。但是当我一起运行两个测试时(rspecspec/directory/),我的Mechanicspecs使用真实的Car类。所以。我想这是因为ruby​​类是“开放的”,我已经为汽车规范加载了一次类。但是有更好的方法吗?这种情况的最佳做法是什么?这是否意味着我的代码需要一些改进,因为它可能是紧密耦合的?我在g

ruby - 不同 Ruby 项目之间代码重用的最佳实践是什么?

伙计们!我是一名具有Java背景的软件开发人员,我正在使用Ruby网络框架(Padrino/Sinatra)开始一些项目。在我的java项目中,我通常有一些“公共(public)”项目,其类在多个项目中使用。例如,我有一个中央身份验证服务和一个存储用户配置文件的共享数据库。我所有使用此服务的项目都共享一些映射到用户配置文件数据库的模型。那么,尽管有框架、orm库等,跨多个Ruby项目共享代码的最佳方式是什么? 最佳答案 除此之外,ruby'sgems是重用代码公共(public)部分的最佳方式之一。Gem具有名称、版本号和描述,因此

ruby - 从企业防火墙后面安装 gem

我怀疑公司防火墙阻止安装gem。我定义了HTTP_PROXY,我可以通过以下命令查看远程gem:jruby-Sgemlist-r但是当我去安装gem时,我得到一个404:jruby-Sgeminstallrails除了维护内部gem存储库之外,是否有解决此问题的良好解决方法? 最佳答案 对于ruby​​gems,将它放在我的gem.bat中这对我有用@"%~dp0ruby.exe""%~dpn0"%*--http-proxyhttp://domainname.ccc.com:8080对于jrubygems这有效@"%~dp0jrub

ruby-on-rails - 如何为 Rails 编写 cucumber (最佳实践)。特征和步骤

我目前正在尝试学习cucumber以及如何正确利用它。在搜索最佳实践时,大多数旧方法都被描述了,但我还没有真正找到一个好的指南。我阅读了有关执行此操作的新方法,但我对最佳实践有一些疑问。以下是我一直在研究的一些基本cucumber场景。Scenario:UnsuccessfulloginGivenauserhasanaccountWhentheusertriestologinwithinvalidinformationThentheusershouldseeanloginerrormessageScenario:SuccessfulloginGivenauserhasanaccount

51单片机——74HC595的应用(SPI实践)

目录SPI总线SPI总线概述 SPI总线分类SPI优点及缺点SPI接口硬件原理SPI四种工作模式 74HC595应用74HC595芯片概述74HC595封装及管脚功能74HC595工作原理 ​编辑 74HC595串行转并行点亮LED灯 程序实现  Proteus运行结构示意图SPI总线SPI总线概述 SPI(SerialPeripheralinterface):串行外围设备接口 用途:用来在微控制器与外围设备芯片之间实现数据交换 特点:高速、全双工、同步 SPI总线分类四线制全双工SPI(同时收发)MISO    主机输入/从机输出MOSI    主机输出/从机输入SCLK   串行时钟CS或