草庐IT

并行处理

全部标签

http - 为什么 go http 客户端在处理 POST 时放入 transfer-encoding=chunked header

我像这样发出POST请求://...packnon-zerobufreq,_:=http.NewRequest("POST",url,bufio.NewReader(buf))req.Header.Add("X-Uid","12345")req.Header.Add("Content-Length",strconv.Itoa(buf.Len()))client:=http.Client{}resp,err:=client.Do(req)我预计不会传递“Transfer-Encoding”header,但我在服务器日志中看到传递了“Transfer-Encoding:chunked”he

regex - Go:处理多行命令输出并解析

我正在尝试从命令行实用程序中提取信息,在本例中是linuxntpq-crv命令。输出:associd=0status=0638leap_none,sync_ntp,3events,no_sys_peer,version="ntpd4.2.6p5@1.2349-oFriJul2217:30:51UTC2016(1)",processor="x86_64",system="Linux/3.16.0-4-amd64",leap=00,stratum=2,precision=-22,rootdelay=25.435,rootdisp=49.398,refid=8.8.8.8,reftime=d

Golang Gin 处理 AJAX 请求

从前端部分ajax请求发送到golang服务器ajax请求示例:varsendAjax=function(method,url,body){varxmlhttp=newXMLHttpRequest();xmlhttp.onreadystatechange=function(){if(xmlhttp.readyState===XMLHttpRequest.DONE){if(xmlhttp.status===200){console.log('success');}elseif(xmlhttp.status===400){alert('Therewasanerror400');}else{

amazon-web-services - 突发数据处理的最佳 EC2 实例

我需要一些关于将哪种类型的EC2实例用于我的数据处理应用程序的建议。这是一个利用goroutines和channel的Golang应用程序。它计划每10秒检查一次数据源,每小时可以处理大约一百万个数据库条目。感谢您的帮助。 最佳答案 您可以使用T2类型的实例。适用于BurstablePerformance。您可以阅读更多相关信息here另请查看howtochooserighttypeofinstancesavailableinEC2 关于amazon-web-services-突发数据处

sql - 如何使用 Golang 在 Postgres 中批处理 SQL 语句

使用Golang向Postgres数据库发送批量请求的最快方法是什么?每个请求包含500-200000行。我知道的方法是-1.使用database/sql包的事务Begin,Prepare,Commit.2.一条语句发送所有数据。3.使用sql.Exec()方法发送语句列表。有没有其他方法可以在不在每个语句中建立连接的情况下发送批量请求?如果不是,哪种方法最好?这个问题类似于-GolanghowdoIbatchsqlstatementswithpackagedatabase.sql的问题 最佳答案 depesz有点老blogpost

go - 尝试提取 API 请求 token 并包装我的处理程序

我想使用新的上下文来包装我的处理程序,这样我就可以在我的所有处理程序中使用一个用户结构(或者当前请求需要的任何其他内容来告诉我谁在发出请求)。我收到一个错误:funcmain(){router:=mux.NewRouter()router.HandleFunc("/api/v1/user/{id}",userService.GetUsers).Methods("GET")log.Fatal(http.ListenAndServe(":3001",router))}funcWithAuth(usUserService,nexthttp.Handler)http.Handler{retur

multithreading - 在 go 中一次处理许多 GET 请求

我正在编写这个API,它是将被许多用户使用的slack机器人应用程序的后端。在我的api的一个API端点中,我正在调用一个外部API来获取一些数据,这样我就可以在我的API中处理它以将其发送给BOT/用户。但是我正在进行的外部API调用非常昂贵(~5/~10秒)。我注意到,当我同时两次或多次访问我的API端点时,有时我得不到任何数据。只有一个调用成功。有什么办法可以解决这个问题吗?我一直在研究工作队列,但不确定它是否为此过度杀伤。我正在使用mux进行路由。 最佳答案 如果您想比外部API更快地处理请求,您需要将出站调用与传入请求分开

go - 哈希字符串的有限并行性

这个问题在这里已经有了答案:Howwouldyoudefineapoolofgoroutinestobeexecutedatonce?(5个答案)关闭4年前。尝试解决从文件中读取电话号码(逐行)并同时对它们进行哈希处理(md5)的问题,最多100个并发进程,创建固定数量的goroutine。尝试使用gopipeline和boundedparallelism但没有用。有什么指导吗?这是我试过的,https://play.golang.org/p/vp7s512l8w4

go - 在方法或构造函数级别进行 Nil 处理?

我应该在构造函数中检查nil值然后设置一个未导出的结构字段,还是通过在方法级别检查nil使默认结构值有用?typeFoostruct{}func(f*Foo)Baz(){}varDefaultFoo=new(Foo)typeBarstruct{Foo*Foo}func(b*Bar)Baz(){ifb.Foo==nil{DefaultFoo.Baz()}else{b.Foo.Baz()}}或typeFoostruct{}func(f*Foo)Baz(){}varDefaultFoo=new(Foo)typeBarstruct{foo*Foo}funcNewBar(foo*Foo)*Bar

go - 处理模型特定操作与数据库操作

我在模型设计方面遇到了一些问题,特别是处理模型特定操作与数据库操作。我的用户模型就是一个很好的例子。在我的数据库中创建用户时,我想:验证密码是否符合标准(模型操作)创建摘要(模型操作)设置时间戳(模型操作)将电子邮件、摘要和时间戳保存到数据库(数据库操作)在测试时,我显然希望对所有4个进行一组单元测试,但是#4调用了其他3个,我不想重新测试,否则如果其中任何一个测试失败,#4可能会失败3做。我想出了为ModelActions和StoreActions创建一个单独的接口(interface),并在需要时将UserAction接口(interface)发送到存储操作,但是当我写出来时,我已