草庐IT

instance_exec

全部标签

java - 尝试在 Apache Kylin 中为示例数据构建多维数据集时出现 java.io.FileNotFoundException : File does not exist: hive-exec-2. 1.0.jar 错误

我使用以下技术的以下版本安装了Apachekylin:-ApacheHadoop:-2.7.3ApacheHive:-2.1.0ApacheHbase:-1.2.4ApacheKylin:-1.6我可以使用随设置提供的sample.sh文件在ApacheKylin中加载数据。但是,当我尝试为某个时间范围构建多维数据集时,在“构建多维数据集”过程的第3步中出现以下错误Filedoesnotexist:hdfs://localhost:54310/app/hadoop/tmp/mapred/staging/hduser341814501/.staging/job_local34181450

java - "cannot execute binary file: Exec format error"hdfs 命令

当我尝试运行命令时hdfsnodename-format我收到此错误消息:/usr/local/hadoop/bin/hdfs:line304:/usr/local/Java/jdk1.7.0_79/bin/java:cannotexecutebinaryfile:Execformaterror/usr/local/hadoop/bin/hdfs:line304:/usr/local/Java/jdk1.7.0_79/bin/java:Success现在,我打开了hdfs文件,这是第304行:exec"$JAVA"-Dproc_$COMMAND$JAVA_HEAP_MAX$HADOOP

java - 包 org.apache.hadoop.hive.ql.exec.vector 不存在

我正在尝试使用HiveUDF和UDAF,到目前为止,我在VM上使用命令行中的maven已经很好地做到了这一点,该VM基本上是由知识渊博的人设置得很好。我是Java的新手(项目,与其说是语言),但我至少可以看到我当前的问题是什么。我不知道它为什么会发生以及如何解决它。所以...我的问题是无论出于何种原因,在运行时mvninstall编译器找不到任何过去的类/org/apache/hadoop/hive/ql/exec它可以找到“exec”文件夹中的所有类,但在“exec”中嵌套的任何子文件夹中找不到任何类。我不明白为什么会这样。这是我的POM文件。org.apache.maven.plu

windows - hadoop windows org.codehaus.mojo :exec-maven-plugin

我正在尝试在我的Windows机器上安装hadoop。我正在遵循本指南:https://wiki.apache.org/hadoop/Hadoop2OnWindows但是当我必须执行这一行时:mvnpackage-Pdist,native-win-DskipTests-Dtar我有这个错误:[ERROR]Failedtoexecutegoalorg.codehaus.mojo:exec-maven-plugin:1.2:exec(compile-ms-winutils)onprojecthadoop-common:Commandexecutionfailed.Processexited

java - 在 reducer 的 for 循环中获取编译错误 "Can only iterate over an array or an instance of java.lang.Iterable"

在reducer的for循环中出现编译错误“Canonlyiterateoveranarrayoraninstanceofjava.lang.Iterable”。publicvoidreduce(Textkey,Iteratorvalues,OutputCollectorOutput,Reporterarg3)throwsIOException{//TODOAuto-generatedmethodstubintsum=0;for(IntWritableval:values){sum+=val.get();在上面的代码中,在“for(IntWritableval:values)”处出现编

hadoop - 亚马逊电子病历 : Set unique number of mappers and reducers per EMR instance

我正在运行一个具有M个核心实例和N个任务实例的AmazonEMR集群。我的作业每天运行多次并且对时间敏感,因此我保持M核心实例24/7全天候运行,这样我就没有与S3之间的数据传输开销。N个任务节点正在根据需要动态启动和终止。M个核心节点为c1.mediums,N个任务节点为m2.xlarge。有没有办法为每个实例配置mapred.tasktracker.map.tasks.maximum和mapred.tasktracker.reduce.tasks.maximum?对于我想要的核心节点:mapred.tasktracker.map.tasks.maximum=2mapred.task

hadoop - 执行错误,从 org.apache.hadoop.hive.ql.exec.MapRedTask 返回代码 2

我在S3存储桶中写入数据时遇到奇怪的错误。我不会经常收到此错误。所以,无法弄清楚到底是什么问题。仅供引用,我每次都保持EMR的配置不变。此外,s3存储桶中的文件夹NOT写保护。insertoverwritedirectory's3://logs/apr'selectf.cookie,sum(f.pgvw)aspageview,count(distinct(f.cookie))asvisitsfrom(SELECTa.cookie,a.session,count(distinct(a.date_time))aspgvwfrom(SELECTextcookie(cs_Cookie)asco

hadoop - 配置单元执行失败错误从 org.apache.hadoop.hive.ql.exec.mapredtask 返回代码 2

我有一个问题。它在HiveCLI上执行良好并返回结果。但是当我在HiveJDBC的帮助下执行它时,出现以下错误:java.sql.SQLException:Queryreturnednon-zerocode:9,cause:FAILED:ExecutionError,returncode2fromorg.apache.hadoop.hive.ql.exec.MapRedTaskatorg.apache.hadoop.hive.jdbc.HiveStatement.executeQuery(HiveStatement.java:192)问题是什么?我还通过Shell脚本启动HiveThr

sql - Hive 中的错误 : Underlying error: org. apache.hadoop.hive.ql.exec.UDFArgumentTypeException:需要一个或多个参数

我正在尝试在配置单元中翻译一些PL/SQL脚本,但我遇到了一个HiveQL脚本错误。错误是这个:FAILED:SemanticExceptionFailedtobreakupWindowinginvocationsintoGroups.Atleast1groupmustonlydependoninputcolumns.Alsocheckforcirculardependencies.Underlyingerror:org.apache.hadoop.hive.ql.exec.UDFArgumentTypeException:Oneormoreargumentsareexpected.我

【论文笔记】视频实例分割 CVPR2021 Oral——VisTR:End-to-End Video Instance Segmentation with Transformers

视频实例分割videoinstancesegmentation,在vos的基础上,对每个实例打标签。实例分割是目标检测+语义分割,在图像中将目标检测出来,然后对目标的每个像素分配类别标签,能够对前景语义类别相同的不同实例进行区分数据集:Youtube-VIS前身:Videoinstancesegmentation论文地址:VIS代码地址:MaskTrackRCNNVisTR:End-to-EndVideoInstanceSegmentationwithTransformers论文地址:VisTRCVPR2021代码地址:https://git.io/VisTR参考链接:CVPR2021Oral