草庐IT

rsv修复

全部标签

hadoop - HBase:表test在meta中不存在但有znode。运行 hbck 修复不一致(失败)

我最近在开始使用HBase时添加了一个表test。由于一些问题,我决定重新安装HBase。重新安装并运行HBaseshell后,我尝试了:hbase(main):004:0>listTABLE0row(s)in0.0070seconds=>[]所以没有表格。现在我尝试添加表testhbase(main):005:0>create'test','testfamily'ERROR:Tablealreadyexists:test!我查看了日志文件并找到了以下条目2018-06-2107:53:30,646WARN[ProcedureExecutor-2]procedure.CreateTab

python - 如何使用 Group_Map 使用 Python 3 修复 Spark.SQL 中的 "Cannot use null as map key!"错误

我正在使用Spark.SQL并尝试使用MAP语句创建一个数据透视表,以便将一列的值作为不同的列。我用这个查询准备了第一个表:spark.sql("""CREATETABLETABLE_01STOREDASPARQUETASselectROWS,COLUMNS,count(*)asNUM_ROWSfromTABLE_00groupbyROWS,COLUMNSorderbyROWS,COLUMNS""")想法是将其转换为:ROWSCOLUMNSNUM_ROWSVALUE1COL22VALUE1COL350VALUE2COL120VALUE2COL21VALUE2COL330进入这个:COL

hadoop - 有人知道如何修复 hadoop-functions.sh "syntax error near unexpected token ` <'"吗?

我在运行OSX10.14.2的MacPro上配置了Hadoop3.1.1,当我运行start-all.sh时出现以下错误$sudo/usr/local/Cellar/hadoop/3.1.1/sbin/start-all.shStartingnamenodeson[localhost]/usr/local/Cellar/hadoop/3.1.1/libexec/bin/../libexec/hadoop-functions.sh:line398:syntaxerrornearunexpectedtoken`启动数据节点、辅助名称节点、资源管理器和节点管理器的问题相同。我在网上找到了类似

ubuntu - 安装hadoop时如何修复 "Error: Could not find or load main class ” -Djava.library.path=.usr.local.hadoop.lib”

我正在尝试在Ubuntu上安装Hadoop2.9.2。我在~/.bashrc和env.sh文件中设置了相同的JAVA_HOME路径。在hadoop_store下使用正确的路径为数据节点和名称节点创建了两个单独的目录。Java版本是“java-11-openjdk-amd64”。在hadoop文件系统中格式化namenode时,我仍然面临错误。请帮助我解决它。指向我一直遵循其说明的页面的链接。https://www.digitalvidya.com/blog/install-hadoop-on-ubuntu-and-run-your-first-mapreduce-program/这是错

java - 用于修复不平衡的实时 hbase 集群的工具?

是否有任何工具/项目可用于手动修复不平衡的实时hbase集群,这些集群可以在区域服务器之间移动区域? 最佳答案 HBase平衡是基于区域数量而不是区域大小,我们可以看到#region交叉每个实时RS几乎相等。Hbase从0,94开始支持pertablebalance,你可以设置“hbase.master.loadbalance.bytable”为true,master会为每张表平衡region。您可能还需要关注参数“hbase.regions.slop”,默认值为0.2此参数允许实际区域计数偏离(理想)平均区域计数此百分比。根据我的

apache-spark - 如何修复 oozie spark yarn 提交中的 '' java.lang.NoSuchMethodError"?

我已经启动并运行了裸机hadoop3.1.2集群,我还安装了Oozie5.1.0并成功运行了shell示例。但是当我运行Spark示例(FileCopy)时,它在oozie中指示“成功”,而文件并未真正复制,并且YARNstderr包含:Exceptioninthread"main"java.lang.NoSuchMethodError:org.apache.hadoop.yarn.api.protocolrecords.RegisterApplicationMasterResponse.getResourceProfiles()Ljava/util/Map;atorg.apache.

mysql - 无法修复表时如何修复 MySQL "Incorrect key file"错误?

我正在尝试运行一个相当大的查询,该查询应该每晚运行以填充表。我收到一条错误消息,提示Incorrectkeyfilefortable'/var/tmp/#sql_201e_0.MYI';尝试修复它但我正在使用的存储引擎(我猜是什么默认值?)不支持修复表。如何解决这个问题以便运行查询? 最佳答案 您必须将MySQL的临时文件夹(大多数情况下为“/tmp”)的位置更改为具有更大磁盘空间的位置。在MySQL的配置文件中更改它。基本上你的服务器用完了/tmp所在的磁盘空间。 关于mysql-无法

mysql - 无法修复表时如何修复 MySQL "Incorrect key file"错误?

我正在尝试运行一个相当大的查询,该查询应该每晚运行以填充表。我收到一条错误消息,提示Incorrectkeyfilefortable'/var/tmp/#sql_201e_0.MYI';尝试修复它但我正在使用的存储引擎(我猜是什么默认值?)不支持修复表。如何解决这个问题以便运行查询? 最佳答案 您必须将MySQL的临时文件夹(大多数情况下为“/tmp”)的位置更改为具有更大磁盘空间的位置。在MySQL的配置文件中更改它。基本上你的服务器用完了/tmp所在的磁盘空间。 关于mysql-无法

hadoop - 手动修复Hbase表重叠(多区域具有相同的启动键)

我是通过Java客户端将数据插入到Hbase中的。但是,区域服务器突然崩溃了。所以我重新启动了hbase,之后hmaster就不运行了。当我运行修复工具-hbaseorg.apache.hadoop.hbase.util.hbck.OfflineMetaRepair时,我得到了以下原因:ERROR:(regionTABLE_NAME,rowkey_value,region_name_1)Multipleregionshavethesamestartkey:rowkey_valueERROR:(regionTABLE_NAME,rowkey_value,region_name_2)Mul

java - 如何修复 java.net.ConnectException : Connection refused in Storm

我正在尝试连接到远程服务器中的动物园管理员。Zookeeper在沙箱中运行。当我开始Storm时,它会在UI中显示此消息。我的机器和服务器都有linux。org.apache.thrift7.transport.TTransportException:java.net.ConnectException:Connectionrefusedatorg.apache.thrift7.transport.TSocket.open(TSocket.java:183)atorg.apache.thrift7.transport.TFramedTransport.open(TFramedTransp