草庐IT

elastic-mapreduce-cli

全部标签

amazon-web-services - 使用 ecs-cli 在 AWS 上部署 docker 时遇到问题

我在ECS上有一个repo,已经使用ecs-cli创建了一个集群ecs-cliconfigure--region=us-west-2--profile=--cluster=cluster-1ecs-cliup--capability-iam--keypair=但是接下来执行撰写文件的步骤是当它失败时ecs-clicompose--filedocker-compose.yml--project-namedrafter-projectserviceup这是我的docker-compose.yml文件:version:'2'services:rabbit:image:rabbitmqhost

ruby-on-rails - 如何在 Amazon Elastic Beanstalk 单容器 Docker 环境中运行 Rails 迁移和播种

我正在使用docker将Rails应用程序部署到ElasticBeanstalk,到目前为止一切顺利。我正处于应用程序需要运行数据库的迁移和播种的地步,但我无法确切地弄清楚我需要如何进行。/.ebextensions文件夹中的任何命令似乎都在主机上下文中运行,而不是在docker容器中运行。对吗?我可以在启动后运行命令在docker容器内执行迁移,但是如何确保迁移仅在单个实例上运行?是否有环境变量或其他方式可以告诉我docker容器中的领导者是哪台机器?更新:我发布了aquestionintheAmazonElasticBeanstalkforumsaskinghowtorun"com

docker - 如何使用 Docker 将环境变量动态分配给 Angular cli 项目?

我有运行两个单独的docker容器的angularcli项目和节点项目。这是我的Dockerfile###STAGE1:Build####Welabelourstageas'builder'FROMnode:carbonasbuilderCOPYpackage.jsonpackage-lock.json./RUNnpmsetprogress=false&&npmconfigsetdepth0&&npmcacheclean--force##Storingnodemodulesonaseparatelayerwillpreventunnecessarynpminstallsateachbu

docker - Elastic Beanstalk docker 错误

我在尝试更新单容器Docker应用程序的配置时遇到一个神秘错误。任何人都知道可能导致这种情况的原因,或者如何进行调试?ERROR[3009]:Commandexecutionfailed:[CMD-ConfigDeploy/ConfigDeployStage0/ConfigDeployPreHook/00run.sh]commandfailedwitherrorcode1:/opt/elasticbeanstalk/hooks/configdeploy/pre/00run.shdocker:"tag"requires2arguments.See'dockertag--help'.(El

docker - 如何使用 gcloud 或其他 CLI 在 Google Container Registry 中列出已发布的容器镜像

是否有gcloudAPI或其他命令行界面(CLI)来访问私有(private)Google容器注册表中的已发布容器镜像列表?(即GoogleCloudPlatform项目中的容器注册表)gcloudcontainer似乎没有帮助:$gcloudcontainerUsage:gcloudcontainer[optionalflags]groupmaybeclusters|operationscommandmaybeget-server-configDeployandmanageclustersofmachinesforrunningcontainers.flags:--zoneZONE,

nginx - Elastic Beanstalk 上的 WebSockets 与 Docker

目前正在尝试在单个实例上运行的AWSElasticBeanstalk中部署Docker镜像。除了我通过Socket.IO使用的WebSockets之外,这一切都很好。Anotherpost建议删除nginx,但这要么不再可能,要么不再是使用Docker部署的选项。我有一个python脚本可以更改nginx配置以允许WebSocket连接。当我ssh进入实例并运行该脚本时,它可以工作。但是,运行ebextensions时,那部分nginx配置还不存在,所以我无法自动运行此脚本。如果你想自己尝试,我正在尝试部署databench_examples.当您使用ebinit和ebstart部署它

python - 使用 python (django) 进行 AWS Elastic Beanstalk 日志记录

您如何在AWSelasticbeanstalk中管理您的应用程序日志?您将应用程序日志写入哪个文件?我在我的开发环境中使用以下日志记录配置,但是当我在AWS中部署时这不起作用。DEBUG_LOG_DIR=BASE_DIR+"/django_debug.log"LOGGING={'version':1,'disable_existing_loggers':True,#Howtoformattheoutput'formatters':{'standard':{'format':"[%(asctime)s]%(levelname)s[%(name)s:%(lineno)s]%(message

python - AWS Elastic Beanstalk 错误 - ImportError : No module named flask. ext.sqlalchemy

我将我的flask应用程序部署到awsbeanstalk中并遇到导入错误:ImportError:Nomodulenamedflask.ext.sqlalchemy在我的application.py文件中,我有这个语句fromflask.ext.sqlalchemyimportSQLAlchemy它在我的机器上运行良好,但在awselasticbeanstalk中不起作用。有人遇到过类似的问题吗? 最佳答案 确保您在项目的根目录中包含了一个requirements.txt文件。该文件应包含任何需要安装的pip包Flask-SQLAl

MapReduce介绍及执行过程

文章目录MapReduce介绍MapReduce特点MapReduce缺点及局限性MapReduce实例进程MapReduce阶段组成MapReduce执行流程Map阶段执行流程Reduce阶段执行过程Shuffle机制Shuffle介绍Map端的shuffle操作Reduce端的shuffle操作Shuffle操作的缺点MapReduce官方示例WordcountWordcount思路具体操作MapReduce介绍HadoopMapReduce是一个分布式计算框架,用于轻松编写分布式应用程序,这些应用程序以可靠,容错的方式并行处理大型硬件集群(数千个节点)上的大量数据(多TB数据集)。Map

python - Amazon Elastic Beanstalk 上的 Psycopg2

我正在尝试上传我的项目(在python中),该项目将Psycopg2用于AmazonElasticBeanstalk。我正在使用包含我的项目和requirements.txt文件的zip文件来执行此操作。但我收到此错误:Downloading/unpackingpsycopg2>=2.4.6(from-r/opt/python/ondeck/app/requirements.txt(line3))Runningsetup.pyegg_infoforpackagepsycopg2Error:pg_configexecutablenotfound.Pleaseaddthedirectory