草庐IT

lemon-graph-library

全部标签

graph - 以hadoop为数据源创建图的常用工具有哪些

我想知道人们在需要从大数据源(如hadoop)生成图表时使用什么工具?我听说过Graphite,但它似乎更像是一种实时图形工具,而这并不是我真正想要的。现在,我主要关心的是使用大文件创建图形,其中数据来自pig脚本。顺便说一句,我试过使用excel,但除了对测试结果不完全满意外,我担心如果我有一个真的大数据源,一个excel表可能还不够。提前致谢! 最佳答案 如果您不介意命令行,Gnuplot会很棒。 关于graph-以hadoop为数据源创建图的常用工具有哪些,我们在StackOver

Maven 依赖项 : non existing library 'hadoop-common-2.6.0-cdh5.9.0.jar'

我正在尝试实现一个Spark应用程序WordCount,但是当我添加hadoop-common依赖项时出现错误:'MavenDependencies'referencesnonexistinglibrary'/root/.m2/repository/org/apache/hadoop/hadoop-common/2.6.0-cdh5.9.0/hadoop-common-2.6.0-cdh5.9.0.jar'这是我的pom.xml:org.scala-langscala-library2.10.6org.apache.hadoophadoop-common2.6.0-cdh5.9.0ju

java - Hadoop 2.7.3 WARN util.NativeCodeLoader : Unable to load native-hadoop library for your platform. .. 在适用的情况下使用内置 java 类

我在debianjessie上安装hadoop时遇到问题,运行脚本start-dfs.sh时收到警告hadoop@debian1:~$/usr/local/hadoop/sbin/start-dfs.sh24年3月17日10:40:00警告util.NativeCodeLoader:无法为您的平台加载nativehadoop库...在适用的情况下使用内置java类在[localhost]上启动名称节点localhost:启动namenode,记录到/usr/local/hadoop/logs/hadoop-hadoop-namenode-debian1.outlocalhost:启动d

graph - 关于来自 Graphlabs : community detection example 的 Graphchi

如果有人知道Graphchi并试图理解communitydetection.cpp代码,我需要帮助来逐步理解这段代码的作用:for(inti=0;iget_data();vid_tnblabel=neighbor_label(edgelabel,vertex.id(),vertex.edge(i)->vertex_id());std::map::iteratorexisting=counts.find(nblabel);intnewcount=0;if(existing==counts.end()){counts.insert(std::pair(nblabel,1));newcoun

hadoop - 基于 Apache Atlas 和 Hive,元数据存储在哪里?在 Titan Graph Repository 中还是在 RDBMS with Hive 中?

我已经安装了Atlas、Hive和Hadoop并正确配置了它们。但是我想知道导入元数据后元数据存储在哪里?根据Atlas的一些文档,它说元数据将存储在Titan图形存储库中。然而,根据Hive的一些文档,它表明元数据将存储在RDBMS中,例如MySql。如果我同时安装Atlas和Hive,元数据将具体存储在哪里? 最佳答案 虽然现有答案并没有错,但我认为最好指出提问者似乎混淆了两种元数据。Hive元数据:这确实存储在关系数据库中,默认使用MySQLAtlas元数据:这存储在HBase中(旧版本的Titan由Hbase支持?)Hive

java - Hadoop 2.6.x 和 Amazon AWS SDK Library 冲突 http-core 冲突

我的工作是将每条记录写入Hadoop映射中的DynamoDB。我无法使用具有httpclient-4.2.5.jar和httpcore-4.2.5.jar的Hadoop2.6运行它。我使用的AWS是使用httpclient-4.5.2.jar和httpcore-4.4.4.jar构建的。当我使用类路径来包含新的jar文件时,出现以下异常。java.lang.Exception:java.lang.NoSuchFieldError:INSTANCEatorg.apache.hadoop.mapred.LocalJobRunner$Job.runTasks(LocalJobRunner.j

hadoop - 为什么 ./bin/spark-shell 给出 WARN NativeCodeLoader : Unable to load native-hadoop library for your platform?

在MacOSX上,我使用以下命令从源代码编译了Spark:jacek:~/oss/spark$SPARK_HADOOP_VERSION=2.4.0SPARK_YARN=trueSPARK_HIVE=trueSPARK_GANGLIA_LGPL=truexsbt...[info]Setcurrentprojecttoroot(inbuildfile:/Users/jacek/oss/spark/)>;clean;assembly...[info]Packaging/Users/jacek/oss/spark/examples/target/scala-2.10/spark-example

opencv - java.library.path hadoop 中没有 libopencv_core.so

我在hadoop中工作,当我为我的图像处理程序创建可运行的jar时,突然发生了这个错误,它与opencvnative库路径有关在使用eclipse时我可以设置路径://System.loadLibrary(Core.NATIVE_LIBRARY_NAME);但是在使用hadoop执行可运行的jar时它会出错。谁能指正一下?hduser@master:/home/mnh/Desktop$hadoopjaropencv19.jar/usr/local/hadoop/input/cars.mp4/usr/local/hadoop/cars8917/06/0716:15:37WARNutil.

java - Hadoop Library导入但无法在File System中设置 "get"方法

我正在尝试设置对HDFS的调用以使用文件系统从中获取文件:FileSystemfs=newFileSystem.get(newURI.create(uri),conf);但我还是遇到了这两个错误,所以我调用了所有的库Error:(46,39)java:cannotfindsymbolsymbol:classgetlocation:classorg.apache.hadoop.fs.FileSystemError:(46,47)java:cannotfindsymbolsymbol:methodcreate(java.lang.String)location:classorg.apach

hadoop - 在 hadoop-gremlin 中使用 OneTimeBulkLoader 的 janusgraph 引发 "Graph does not support adding vertices"

我的目标:使用SparkGraphComputer将本地数据bulkLoader到janusgraph,然后在hbase和ES上构建混合索引我的问题:Causedby:java.lang.UnsupportedOperationException:Graphdoesnotsupportaddingverticesatorg.apache.tinkerpop.gremlin.structure.Graph$Exceptions.vertexAdditionsNotSupported(Graph.java:1133)atorg.apache.tinkerpop.gremlin.hadoop