草庐IT

temporal-workflow

全部标签

hadoop - 我需要在oozie的workflow.xml和job.properties中提供配置吗?

我正在尝试运行这样的作业(workflow.xml)hadoop1:50300hdfs://hadoop1:8020lib/FirstScript.pigActionfailed,errormessage[${wf:errorMessage(wf:lastErrorNode())}]第一个脚本:dual=LOAD'default.dual'USINGorg.apache.hcatalog.pig.HCatLoader();storedualinto'/user/oozie/dummy_file.txt'usingPigStorage();工作属性:nameNode=hdfs://had

hadoop - 传递 JVM 选项以指向 Oozie Workflow 中 Pig Action 中的 log4j.properties 文件

在我的Oozie工作流程中,有一个pigAction。运行时,它正在CDH中寻找log4j.properties文件,因为我没有在我的jars中提供该文件。现在,我有了log4j.properties文件,我只需要将它作为Pig操作中的JVM选项传递即可。有什么办法吗? 最佳答案 无法将自定义log4j属性文件传递给Oozie工作流中的Pig操作。PigMain.java文件不允许将以下参数作为参数传递。static{DISALLOWED_PIG_OPTIONS.add("-4");DISALLOWED_PIG_OPTIONS.ad

hadoop - Oozie 和 Hue : why am I getting "permission denied" error while playing oozie workflow?

我是Hue和Oozie的新手。我安装了一个带有Hue的Cloudera5集群。我以Thomas的身份登录Hue,并创建了一个仅运行Hive脚本的Oozie仪表板。但是,当我启动仪表板时,出现以下错误,声称无法在inode/tmp/hadoop-yarn上写入:2015-06-1213:36:01,014WARNActionStartXCommand:523-SERVER[cdh-master]USER[thomas]GROUP[-]TOKEN[]APP[My_Workflow]JOB[0000000-150612132534763-oozie-oozi-W]ACTION[0000000

hadoop - Sqoop Export Oozie Workflow 因未找到文件而失败,从控制台运行时有效

我有一个包含6个节点的hadoop集群。我正在通过Sqoop从MSSQL中提取数据并返回到MSSQL中。Sqoop导入命令运行良好,我可以从控制台(在其中一个hadoop节点上)运行sqoop导出命令。这是我运行的shell脚本:SQLHOST=sqlservermaster.localSQLDBNAME=db1HIVEDBNAME=db1BATCHID=USERNAME="sqlusername"PASSWORD="password"sqoopexport--connect'jdbc:sqlserver://'$SQLHOST';username='$USERNAME';passwo

hadoop - 奥齐 : How to use oozie coodinator properties in corresponding workflow?

我有一个oozie作业作为调用worflow的协调器运行,在协调器中有一些使用协调器EL函数的配置属性,就像这样-${oozieAppDir}/copyLogs.wf.xmlfilename3${coord:formatTime(coord:dateOffset(coord:nominalTime(),-3,'HOUR'),'MM')}-${coord:formatTime(coord:dateOffset(coord:nominalTime(),-3,'HOUR'),'dd')}-${coord:formatTime(coord:dateOffset(coord:nominalTim

hadoop - 一个目录下可以有两个oozie workflow.xml文件吗?

一个目录下可以有两个oozieworkflow.xml文件吗?如果是这样,我如何指示oozierunner运行哪一个? 最佳答案 您可以有两个工作流文件(只需给它们唯一的名称),然后您可以通过在配置文件中设置oozie.wf.application.path值来选择要调用的文件:oozie.wf.application.path=hdfs://namenode:9000/path/to/job/wf-1.xml#oozie.wf.application.path=hdfs://namenode:9000/path/to/job/wf

hadoop - IO异常 : Filesystem closed exception when running oozie workflow

我们在oozie中运行一个工作流。它包含两个操作:第一个是在hdfs中生成文件的mapreduce作业,第二个是将文件中的数据复制到数据库的作业。两个部分都成功完成,但oozie在最后抛出一个异常,将其标记为失败的过程。这是异常(exception)情况:2014-05-2017:29:32,242ERRORorg.apache.hadoop.security.UserGroupInformation:PriviledgedActionExceptionas:lpinsight(auth:SIMPLE)cause:java.io.IOException:Filesystemclosed

php - Symfony workflow::can 通过 workflow guard 事件监听器

如果你们中的很多人已经测试过symfonyworkflow组件,我现在不知道,但我希望你们中的一些人已经测试过:)所以,我在两个对象上使用这个组件,我希望第一个对象更新第二个strong>取决于它应用的transition。为此,我在我的第一个对象上使用了workflowguardlistener,并尝试在我的对象上执行一个workflow::apply第二个对象(使用第二个工作流程...)。问题是,当我创建一个workflow::can时,事件被调度并尝试应用一个新的状态在我的第二个对象上...这很不正常,因为我只是在问我是否可以应用一些过渡并且不要求实际应用我的第一个对象。配置fr

android - 黑客 : What is your Android Workflow?

关闭。这个问题是opinion-based.它目前不接受答案。想要改进这个问题?更新问题,以便editingthispost可以用事实和引用来回答它.关闭9年前。Improvethisquestion我是Android开发的新手,我非常感谢有关如何开发android的建议。我目前在我的Macbookpro上使用安装了AndroidSDK的Eclipse。我使用的是最新的API3.1。但是我注意到android模拟器不是很稳定(它有时会崩溃)并且模拟器疯狂滞后(我的Macbookpro有icore5和4Gbram,AVDram设置为1Gb,而且我正在使用快照).我尝试了3.0,但它仍然很

windows - Windows Workflow Foundation 在哪里使用?

WF是用在用户界面还是业务层?如果在UI层,那么在业务层编码的人还需要使用或学习吗? 最佳答案 克里斯提供了一个很好的答案,所以我会采取不同的策略。工作流真的和逻辑不一样。工作流通常是逻辑的组合,这使它们成为整体的补充贡献者。业务组件很好地封装了单个业务规则或行为,而工作流则由多个业务组件、规则和行为组成,以满足更大、运行时间更长的业务流程的需要。工作流可以适用于任何地方,满足UI、业务甚至数据层的流程需求。如果您最终使用WF,我强烈建议您培训您的一般开发人员,以便有广泛的知识和理解。尽管具有视觉效果,WF仍然需要一些低级编码来构建