草庐IT

amazon-elasticsearch

全部标签

elasticsearch - DeleteByQuery ElasticSearch Golang 错误 elastic : Error 404 (Not Found)

我正在尝试从我的索引中删除具有特定产品ID的文档。示例代码如下:packagemainimport("encoding/json""log""time""fmt""gopkg.in/mgo.v2/bson"elastic"gopkg.in/olivere/elastic.v3")funcmain(){client,err:=elastic.NewClient(elastic.SetSniff(false),elastic.SetURL("http://localhost:9200"))iferr!=nil{log.Fatal("CannotcreateESclient:",err)}b

amazon-web-services - 获取 s3 存储桶上的资源 URI

目前,我使用字符串插值手动构造URI:fmt.Sprintf("https://%s.%s.amazonaws.com/%s/%s",serviceId,region,namespace,filename)恕我直言,当我通过环境变量的参数传递它们时,哪个不好。我可以访问使用我们的s3存储桶正确初始化的aws.Session对象。是否有一种语义上正确的方式(可能使用awssdkAPI)来生成与dummystringbuilder相同的资源URI? 最佳答案 从一个例子...虽然aws-sdk-go确实在svc.GetObjectReq

amazon-web-services - 通过 Go SDK (Amazon S3) 从 Bucket 生成 Torrent

我正在尝试找出一种使用适用于Go的AWS开发工具包从存储桶生成torrent文件的方法。我使用的是预签名的url(因为它是私有(private)存储桶):svc:=s3.New(session.New(config))req,_:=svc.GetObjectRequest(&s3.GetObjectInput{Bucket:aws.String("bucketName"),Key:"key",})//signtheurlurl,err:=req.Presign(120*time.Minute)从文档中,生成一个torrent,语法:GET/ObjectName?torrentHTTP/

amazon-web-services - 使用 Go 在 AWS SES 中自定义电子邮件 header

我想添加一个References-header到我通过AWSSES发送的外发电子邮件。我在gorepo中找不到任何引用此内容的内容,也不是文档。我发现了这个:_,err:=svc.SendEmailWithContext(aws.BackgroundContext(),params,func(req*request.Request){req.HTTPRequest.Header.Add("References",referencesID)})但是据我所知,这只是调整了对SES的传出请求,而不是消息本身。 最佳答案 这就是我最终使用g

elasticsearch - 并发文件解析并插入到 Elastic Search 中

我最近在玩Go,想出了一个小脚本来解析日志文件并将它们插入到Elasticsearch中。对于每个文件,我都生成了一个这样的goroutine:varwg:=sync.WaitGroup{}wg.Add(len(files))for_,file:=rangefiles{gofunc(fos.FileInfo){deferwg.Done()ProcessFile(f.Name(),config.OriginFilePath,config.WorkingFilePath,config.ArchiveFilePath,fmt.Sprintf("http://%v:%v",config.Ela

amazon-web-services - 突发数据处理的最佳 EC2 实例

我需要一些关于将哪种类型的EC2实例用于我的数据处理应用程序的建议。这是一个利用goroutines和channel的Golang应用程序。它计划每10秒检查一次数据源,每小时可以处理大约一百万个数据库条目。感谢您的帮助。 最佳答案 您可以使用T2类型的实例。适用于BurstablePerformance。您可以阅读更多相关信息here另请查看howtochooserighttypeofinstancesavailableinEC2 关于amazon-web-services-突发数据处

elasticsearch - 无法连接到我的代理 elasticsearch 节点

我在从我的Go客户端连接到我的es节点时遇到问题。我在设置基本身份验证的nginx代理后面有elasticsearch。除了内存,所有设置在ES中都是默认的。通过浏览器可以很好地工作,但不能通过这个客户端:https://github.com/olivere/elastic我阅读了文档,它说它使用/_nodes/httpapi进行连接。现在这可能是我做错的地方,因为来自该api的响应如下所示:{"_nodes":{"total":1,"successful":1,"failed":0},"cluster_name":"elasticsearch","nodes":{"u6TqFjAvR

amazon-web-services - Golang SIGTEM SIGKILL 回调未在停止 EC2 时执行

我在EC2中有一个golang程序。要求是对EC2终止执行清理。我试图通过下面的代码来实现这一点,我在其中创建了一个监听操作系统信号的channel:funcInitTermination(){signal.Notify(c,os.Interrupt,syscall.SIGTERM,syscall.SIGKILL)//listentoterminationsignals(ctrl+c)gofunc(){在实例终止或停止时,我希望执行uploadCompletedLogs()方法,该方法执行一些清理,但我无法实现所需的行为。有人可以指导我如何实现这一目标吗?

amazon-web-services - 用于全局索引的 DynamoDB ConsistentRead

我有下一个表结构:IDstring`dynamodbav:"id,omitempty"`Typestring`dynamodbav:"type,omitempty"`Valuestring`dynamodbav:"value,omitempty"`Tokenstring`dynamodbav:"token,omitempty"`Statusint`dynamodbav:"status,omitempty"`ActionIDstring`dynamodbav:"action_id,omitempty"`CreatedAttime.Time`dynamodbav:"created_at,o

amazon-web-services - 使用 s3 上传多个文件

我想通过awsgolangsdk将文件上传到我的s3存储桶。我有一个监听POST请求的网络服务器,我希望接收任何类型的多个文件。使用sdk,s3结构PutObjectInput期望Body为io.ReadSeeker类型,我不确定如何提取上传文件的内容,进而满足io.ReadSeeker接口(interface)。images:=r.MultipartForm.Filefor_,files:=rangeimages{for_,f:=rangefiles{#Inmyhandler,Icanloopoverthefiles#andseethecontentfmt.Println(f.Hea