草庐IT

java - 无法找到或加载主类 org.apache.giraph.yarn.GiraphApplicationMaster

我正在尝试让Giraph在YARN集群上运行,(Hadoop2.5.2)但我是否陷入了这个错误:Couldnotfindorloadmainclassorg.apache.giraph.yarn.GiraphApplicationMaster我已经尝试了我在之前关于此主题的消息中可以找到的所有方法,但无济于事。我的命令行是这样的:hadoopjar/home/prhodes/giraph/giraph-examples/target/giraph-examples-1.2.0-SNAPSHOT-for-hadoop-2.5.2-jar-with-dependencies.jarorg.

java - 使用 Hadoop 构建 Giraph

我正在尝试使用Hadoop2.7.1设置Giraph尽我所能,它似乎不起作用。我试过以下链接,http://giraph.apache.org/build.htmlhttps://blog.cloudera.com/blog/2014/02/how-to-write-and-run-giraph-jobs-on-hadoop/http://lab.hypotheses.org/1207当我尝试使用mvn-Phadoop_yarn-Dhadoop.version=2.7.1-DskipTestspackage构建时会发生什么hadoopuser:/usr/local/giraph$mvn

hadoop - Giraph 最短路径示例 ClassNotFoundException

我正在尝试从giraph孵化器(https://cwiki.apache.org/confluence/display/GIRAPH/Shortest+Paths+Example)运行最短路径示例。但是,我没有执行giraph-*-dependencies.jar中的示例,而是创建了自己的作业jar。当我创建示例中显示的单个作业文件时,我得到了java.lang.RuntimeException:java.lang.RuntimeException:java.lang.ClassNotFoundException:org.test.giraph.Test$SimpleShortestP

python - 我可以将 python 与 giraph 一起使用吗?

Giraph是否支持python?如果支持,它是否像Hadoop上的python一样得到很好的支持,或者它会导致比使用原始Java更差的性能? 最佳答案 Giraph现在在主干版本中通过jython支持python脚本。这是相关的问题:https://issues.apache.org/jira/browse/GIRAPH-683 关于python-我可以将python与giraph一起使用吗?,我们在StackOverflow上找到一个类似的问题: http

java - 运行 Giraph 作业显示以下错误

信息zookeeper.ClientCnxn:打开与服务器debashis-Pseudo-Hadoop/127.0.1.1:22181的套接字连接。不会尝试使用SASL进行身份验证(未知错误)14/06/1713:07:28警告zookeeper.ClientCnxn:服务器空session0x0,意外错误,关闭套接字连接并尝试重新连接java.net.ConnectException:连接被拒绝在sun.nio.ch.SocketChannelImpl.checkConnect(native方法)在sun.nio.ch.SocketChannelImpl.finishConnect(

java - Giraph 的 workers 在顶点接收消息时采用什么机制?

我很好奇,在Giraph的workerAPI文档中,我看到了关于这个方法的解释:publicvoidstoreCheckpoint()//Boththeverticesandthemessagesneedtobecheckpointedinorderforthemtobeused.//Thisisdoneafterallmessageshavebeendelivered,butpriortoasuperstepstarting.我知道他们在compute()方法中使用他们接受的消息,但他们什么时候收到消息?如果是在检查点过程之前,文档/代码中是否有任何部分我可以看到以理解它?另外,Gi

java - 运行 giraph 作业时遇到问题(classnotfoundexception)

我正在尝试构建Giraph附带的SimpleShortestPathsComputation示例,并在我的主目录中运行它。基本上,我只是想调整SimpleShortestPaths示例并毫不费力地运行它(不太确定最好的方法是什么)。我的方法如下:SimpleShortestPathsComputaiton.java:importorg.apache.giraph.graph.BasicComputation;......importorg.apache.log4j.Logger;importjava.io.IOException;publicclassSimpleShortestPat

Apache Giraph 无法在 CDH4.4.0 上运行

我尝试运行最新版本的apachegiraph示例,在快速启动页面(http://giraph.apache.org/quick_start.html)中进行了描述。我使用CDH4.4.0(Hadoop的Cloudera发行版)我已经构建了Giraph,其依赖项已更新到CDH4.4.0。一切顺利当我运行示例时,我得到以下输出-bash-4.1$hadoopjar/usr/local/giraph/giraph-examples/target/giraph-examples-1.1.0-SNAPSHOT-for-hadoop-2.0.0-cdh4.4.0-jar-with-dependen

giraph 作业完成后,内存不会被释放

我在Hadoop版本0.20.203上使用ApacheGiraph版本1.0。它执行ConnectedComponentsVertex和SimpleShortetPathsVertex,apachegiraph的例子,作业成功,但存在问题。作业完成后不会释放内存。如系统监视器所示,为该作业创建的java进程仍然有效。我不明白为什么会出现这个问题。是Giraph的错误还是我做错了什么???我正在使用Ubuntu11.10和java1.6。任何帮助将不胜感激。谢谢 最佳答案 是的,我认为这是一个错误(请参阅我在用户列表上的问题:http

hadoop - Giraph、Hadoop、Spark 和 Cassandra

如果我有Spark集群和Cassandra但没有Hadoop集群,我可以使用Giraph吗?目前,我正在使用GraphX,并想改用Giraph。考虑到我有Spark集群并且正在使用Cassandra,这是否可能? 最佳答案 几年前我对Giraph的使用经验有限,而且我从未尝试过在Hadoop集群之外使用它。但看起来你想要的东西即使不一定容易,至少在技术上是可行的。这code是使用ApacheGiraph进行实用图形分析的姊妹篇。如您所见,例如,它在DoubleWritable和Text的类路径中需要Hadoop,但它对Hadoop集