草庐IT

init_env

全部标签

linux - yarn -env.sh : command not found

我在Ubuntu16.04上安装了Hadoop2.7.2。当我运行命令时:start-yarn.sh它给出了以下输出:startingyarndaemons/usr/local/hadoop-2.7.2/etc/hadoop/yarn-env.sh:line122:rt:commandnotfoundstartingresourcemanager,loggingto/usr/local/hadoop-2.7.2/logs/yarn-hduser-resourcemanager-brij-Compaq-15-Notebook-PC.out/usr/local/hadoop-2.7.2/e

spring - Spring中的BeanPostProcessor和init/destroy方法有什么区别?

实现BeanPostProcessor接口(interface)和在Spring的XML配置文件中使用init/destroy方法属性有什么区别或者实现InitializingBean/DisposableBean接口(interface)? 最佳答案 这在Spring文档中关于ContainerExtensionPoints的解释非常清楚。.TheBeanPostProcessorinterfacedefinescallbackmethodsthatyoucanimplementtoprovideyourown(oroverrid

spring - Spring中的BeanPostProcessor和init/destroy方法有什么区别?

实现BeanPostProcessor接口(interface)和在Spring的XML配置文件中使用init/destroy方法属性有什么区别或者实现InitializingBean/DisposableBean接口(interface)? 最佳答案 这在Spring文档中关于ContainerExtensionPoints的解释非常清楚。.TheBeanPostProcessorinterfacedefinescallbackmethodsthatyoucanimplementtoprovideyourown(oroverrid

hadoop - 使用 sed 将 JAVA_HOME 环境变量添加到 hadoop-env,sh 文件

当我运行命令时:sed-i"\$aexportJAVA_HOME=c:\ProgramFiles(x86)\Java\jre1.8.0_151\bin"$HADOOP_HOME/etc/hadoop/hadoop-env.sh我得到错误:sed:can'tread/usr/share/hadoop/etc/hadoop/hadoop-env.shnosuchfileordirectory我验证了目录和文件存在。$HADOOP_HOME=/usr/share/hadoop你知道问题是什么吗?我已经搜索了StackOverflow和谷歌,但没有找到解决方案。 最

hadoop - CDH 5.2 启动 NodeManager-Service 时出错 NodeManager 在 INITED 状态下失败;原因 : java. lang.NullPointerException

2014-11-2119:05:37,532INFOorg.apache.hadoop.yarn.server.nodemanager.containermanager.localizer.LocalizedResource:Resourcehdfs://hadoop-master.nycloudlab.internal:8020/user/admin/.staging/job_1415362431963_0311/libjars/hbase-hadoop-compat.jar(->/yarn/nm/usercache/admin/filecache/1513/hbase-hadoop

hadoop - Oozie Hive 操作使用 -i init 脚本

如何使用初始化脚本运行OozieHive或Hive2操作?在CLI中,这通常可以通过-iinit.hive来完成。争论;但是当通过-iinit.hive在OozieAction中使用它时工作流程因错误而停止。我将init.hive文件链接到init.hive#init.hive属性,它在本地appcache目录中可用。$llappcache/application_1480609892100_0274/container_e55_1480609892100_0274_01_000001/|grepinit>lrwxrwxrwx1rootroot42Jan1212:24init.hive

由 Ambari 覆盖的 Hadoop 自定义 - hadoop-env.sh

这似乎是一项简单的任务:更改/etc/hadoop/conf/hadoop-env.sh中的JAVA_HOME以使用不同版本的Java。但是,Ambari似乎会使用它的模板方案覆盖您在hadoop-env.sh中所做的任何更改。模板似乎包含以下行:exportJAVA_HOME={{java_home}}那么,现在如果这用于生成和替换每个节点上的环境,我该如何定义{{java_home}}? 最佳答案 从Ambari1.7.0开始,您可以从AmbariWebUI修改hadoop-env。您可以通过此页面上的链接了解Ambari1.7

r - RHadoop 中的 hdfs.init() 错误

"C:/ProgramFiles/Java/jdk1.8.0_181")library(rJava)library(rhdfs)library(rmr2)hdfs.init()AftersettingupHadoopsinglenodeclusteronmymachine,ItriedtoexecutecommandsusingR-Studioinwindows.However,Iamgettinganerrormessagewithfollowingcode:Sys.setenv(HADOOP_HOME="C:/hadoop-2.7.3")Sys.setenv(HADOOP_CMD=

hadoop - 在分布式 Hadoop 集群中使用 ENV 变量

我的目标是在我们的Hadoop集群上运行应用程序,而无需将显式配置放入每个应用程序。因此,我试图将集群的配置放入ENV变量中,并将它们传播到集群中的每个节点。例如我定义:exportHIVE2_JDBC_URL=jdbc:hive2://localhost:10000以后像这样使用它:beeline-u$HIVE2_JDBC_URL/-e"SELECT*FROM;"虽然这适用于这个特定的用例(在cli中),但它有两个很大的缺点:我必须根据更改手动更新每个节点上的ENV变量Oozie工作流无法读取ENV变量有没有一种方法可以使用Ambari检索此设置,我可以定义我自己的自定义设置,然后在

java - Hadoop MapReduce 新手,在 mapred.Reducer.<init>() 上获取 NoSuchMethodException

解决方案:使用更好的教程-http://hadoop.apache.org/mapreduce/docs/r0.22.0/mapred_tutorial.html我刚开始使用MapReduce,遇到了一个我无法通过Google解决的奇怪错误。我正在制作一个基本的WordCount程序,但是当我运行它时,在Reduce期间出现以下错误:java.lang.RuntimeException:java.lang.NoSuchMethodException:org.apache.hadoop.mapred.Reducer.()atorg.apache.hadoop.util.Reflectio