草庐IT

hadoop - 使用 WebHCat 访问/templeton/v1/jobs 时出现错误 500

我的WebHCat服务器正在运行,我可以使用hadoop(使用hadoop-example-mapreduce-examples-2.2.0.jar)提交作业。当我去http://localhost:8080/templeton/v1/status它正在运行,所以服务器已启动。当我去http://localhost:8080/templeton/v1/jobs它给出了缺少的user.name参数,所以我用GET给它user.name参数,但是这个URL,http://localhost:8080/templeton/v1/jobs?user.name=出现以下错误:HTTPERROR:

c++ - 匈牙利算法 : I'm having trouble with assigning as many jobs to workers as possible

我已经在C++中创建了匈牙利算法的实现。这种实现在很多情况下都非常有效。但是,在某些情况下,我的算法根本不起作用,因为我相信(并且确实如此)我对算法的一个步骤的实现是错误的。我的实现将数组X作为输入,运行算法的步骤并产生最终分配。该算法的步骤可以在维基上找到:HungarianAlgorithm在步骤3中,它具有以下成本数组(worker由行表示,作业由列表示)然后它说Initiallyassignasmanytasksaspossiblethendothefollowing但是我不明白什么是正确的实现。如何分配尽可能多的任务?选择会是随机的吗?然后如果选择是随机的,我可以选择第一个w

java - 杰斯克(Resque): Get all open delayed jobs in redis db

Jesque是我想使用的好工具。JesqueisanimplementationofResqueinJava.Itisfully-interoperablewiththeRubyandNode.js(Coffee-Resque)implementations.JesqueisaMavenprojectanddependsonJedistoconnecttoRedis,Jacksontomapto/fromJSONandSLF4Jforlogging.但在此之前,我需要更多信息。是否也可以在Jesque中检索所有空缺职位?此信息可能对我的监控和脏重启很有用。在异常关闭之后,如果任何其他应

laravel - php-resque : Retry failed jobs

我已经在Laravel上设置了php-resque。除了失败的工作,一切都很好。我看不到任何重新排队(重试)标记为失败的作业的选项。我看到在redis数据库中有一个名为“failed”的队列,但我如何才能将每个failed_job重新推送回父队列?我到处搜索(php-resque文档、google等)但没有找到php-resque。仅适用于ruby​​版本的现成解决方案...提前致谢! 最佳答案 有用于php-resque的插件:https://github.com/JaapRood/php-resque-retry

java - Pentaho水壶: how to set up tests for transformations/jobs?

我使用PentahoKettle已经有一段时间了,之前我所做的转换和工作(使用勺子)非常简单,从数据库加载,重命名等,输入到另一个数据库。但现在我一直在做一些更复杂的计算的转换,我现在想以某种方式进行测试。所以我想做的是:设置一些测试数据运行转换验证结果数据一个选择可能是制作一个Kettle测试作业来测试转换。但由于我的转换与Java项目相关,我更愿意从jUnit运行测试。所以我考虑过做一个jUnit测试:设置测试数据(使用dbunit)运行转换(从命令行使用kitchen.sh)验证结果数据(使用dbunit)然而,这种方法需要测试数据库,这些数据库并不总是可用(oracle等昂贵/

python - 如何通过他们的唯一 ID 获取 Gearman Jobs 的状态?

我需要通过这些un​​iqid获取Gearman作业的状态,而不是通过开放的处理程序,正如我在每个地方看到的那样这可能吗?在python-gearmanv.2中使用...感谢您的帮助! 最佳答案 必须深入挖掘才能解决这个问题,因为它没有以友好的方式暴露在python-gearman-API中。但是,您可以通过自己创建GearmanJob和GearmanJobRequest的适当实例来解决它。这是一个如何执行此操作的小示例:importgearmanclient=gearman.GearmanClient(['localhost'])

mysql - 是否可以在没有 redis 的情况下使用 resque/Sidekiq/rails-jobs(使用 MySql)

我的服务器非常有限,需要后台工作人员的RoR项目。速度不是那么重要,我猜这是使用Redis的主要原因,但最主要的是,服务器不能有Redis数据库,所以有可能吗(即使是monkey-patch也可以),它允许使用任何Rails后台作业方法来使用MySql运行,无论是Resque(首选)、Sidekiq还是Rails内置? 最佳答案 Delayed::Job(orDJ)encapsulatesthecommonpatternofasynchronouslyexecutinglongertasksinthebackground....Ac

ruby-on-rails - delayed_jobs vs resque vs beanstalkd?

这是我的需求:Enqueue_in(10.hours,...)(DJ语法非常完美。)同时增加worker。(Resque或beanstalkd对此有好处,但不是DJ)必须每秒处理100个作业的推送和弹出。(我需要进行测试才能确定,但​​我认为DJ无法处理这么多工作)Resque和beanstalkd不执行enqueue_in。有一个插件(resque_scheduler)可以做到这一点,但我不确定它有多稳定。我们的环境在亚马逊上,他们为拥有亚马逊实例的人免费推出了beanstalkd,这对我们来说是一个优势,但我仍然不确定这里的最佳选择是什么。我们运行rails2.3,但我们很快就会将

go - 后台打印程序概念/API 和 channel : issue passing jobs to a queue from serveHTTP

在这里已经得到了一些帮助,这让我在我正在尝试的这个概念上取得了进展,但它仍然不太奏效,我遇到了一个我似乎无法解决的冲突。我在这里尝试在流程图中说明我想要的内容-请注意,客户端可以是许多将发送printjobs的客户端,因此我们无法回复工作人员当时正在处理我们的工作,但对于大多数会的(高峰期不会,因为打印处理工作需要时间)。typeQueueElementstruct{jobidstringrwhttp.ResponseWriterdoneChanchanstruct{}}typeGlobalVarsstruct{db*sql.DBwgsync.WaitGroupjobschanQueu

linux - 定时任务 : Monitor time it takes for jobs to finish

我正在做一个研究项目,需要我在UbuntuLinux系统上监控cron作业。我已经收集了有关作业任务的数据以及它们何时开始,我只是不知道有什么方法可以监控它们完成运行需要多长时间。我可以计算完成任务减去开始任务的时间withsomethinglikethis但这需要在每个cron作业的Shell脚本上执行此操作。无论如何这都不一定很困难,但cron不会以某种方式记录它似乎有点愚蠢,所以我试图找到一种更简单的方法:Ptl;dr计算出cron作业从开始到结束所花费的时间 最佳答案 您可以将time放在您的crontab前面,如果您收到有