我想在Hive中使用ALTERTABLE...CONCATENATE功能，但似乎我必须提供准确的分区名称。例如，我有一个包含两个分区列、日期和组的表。我希望能够做这样的事情:altertablemytablepartition(insert_date='2017-04-11',group='%')CONCATENATE;但是我找不到这样做的方法。 最佳答案 Concatenate不支持这个。 关于hadoop-用户ALTERTABLE...CONCATENATE与Hive中的部分匹配分区
我正在寻找一个命令来为我的由Avro架构支持的Hive外部表添加列和更新架构。这是我到目前为止尝试过的方法。我有一个Hive外部表，其中包含使用此命令创建的Avro支持的架构-CREATEEXTERNALTABLE`person_hourly`('personid'stringCOMMENT'','name'stringCOMMENT'')PARTITIONEDBY('partitiontime'string)ROWFORMATSERDE'org.apache.hadoop.hive.serde2.avro.AvroSerDe'STOREDASINPUTFORMAT'org.apach
我想将数组转换为数组字符串，这样["2016-06-02","2016-06-02"]变成2016-06-02|2016-06-02 最佳答案 使用concat_ws(stringdelimiter,array)连接数组的函数:selectconcat_ws(',',collect_set(date))fromtable;如果日期字段不是字符串，则将其转换为字符串:concat_ws(',',collect_set(cast(dateasstring))) 关于hadoop-如何在Hiv
我有时间2017-05-04T23:25:23.234Z我想使用HIVE获取2017-05-0423:25:23.234。如何实现这一目标？实际数据-2017-05-04T23:25:23.234Z预期-2017-05-0423:25:23.234实际数据-2016-05-04T02:29:23.231234Z预期-2016-05-0402:29:23.231234请帮帮我 最佳答案 selecttranslate('2017-05-04T23:25:23.234Z','TZ','')2017-05-0423:25:23.234
我正在尝试配置apachehiveserver2我的配置文件在hive-site.xmlhive.server2.thrift.min.worker.threads5Minimumnumberofworkerthreadshive.server2.thrift.max.worker.threads500Maximumnumberofworkerthreadshive.server2.thrift.port10000TCPportnumbertolistenonhiver.server2.thrift.bind.host10.89.20.22TCPinterfacetobindtohiv
我的数据库中有很多表，其中一些是External_Tables，每次我删除External_Table时，我需要找到External_Table的位置，我需要-rm-r数据。所以，有没有hive中的任何方式，同时删除包含元数据和数据的External_Table，如果我们删除managed_table，数据和元数据都将被删除。 最佳答案 在删除之前将外部表转换为托管表altertablemytablesettblproperties('EXTERNAL'='FALSE'); 关于sql-
我是Spark的新手。这是我想做的事情。我创建了两个数据流；第一个从文本文件中读取数据并使用hivecontext将其注册为temptable。另一个不断从Kafka获取RDD，对于每个RDD，它创建数据流并将内容注册为temptable。最后，我将这两个临时表连接到一个键上以获得最终结果集。我想将该结果集插入配置单元表中。但我没有想法。试图遵循一些示例，但只在配置单元中创建一个包含一列的表，而且该表也不可读。你能告诉我如何在特定的数据库和配置单元表中插入结果吗？请注意，我可以使用show函数看到连接的结果，因此真正的挑战在于插入配置单元表。下面是我使用的代码。imports.....
我无法在虚拟框中配置多数据节点集群不考虑复制因子取1。假设我有一个10GB的文件和一个具有2个不同值的列城市，并且我有2个数据节点。想按城市划分数据。我还将在每个分区的2个桶中存储邮政编码。我的问题是每个分区是否会出现在每个数据节点中，或者每个节点将只有不同的分区。我的理解是每个节点都有所有分区，但在某些节点中，由于数据文件中的值不足，分区可能不存在。每个数据节点中的每个分区都将按邮政编码分桶，并且某些分桶可能没有值。 最佳答案 分区是使用目录实现的。目录包含文件。可能是一个，也可能是很多。桶是使用文件实现的。一个桶可能与一个文件相
使用hive进行字数统计时出现问题。我的配置单元命令是这样的selectword,count(1)ascountfrom(selectexplode(split(word,''))aswordfromnote)wgroupbywordorderbycountdesclimit5;结果:the20583of103889479and7611in52269479是行数。我该如何摆脱它？ 最佳答案 将split函数改成-split(word,'\\s+')(而不是单个空格，一个严肃的白色字符[\t\n\x0B\f\r])
我已经开始在工作中使用hive，但我遇到了从中提取数据的woo制表符分隔数据库的问题。将数据导入Excel(适用于Mac)后，我注意到有些列在它们应该分开的时候合并了。我在没有某些列的情况下运行了查询，它似乎与包含长数据的单元格有关。有时数字会被其他单元格的字母吞噬。有什么办法可以避免这种情况吗？ 最佳答案 我会推荐使用下面的方法insertoverwritelocaldirectory'/...path.../my_directory'rowformatdelimitedfieldsterminatedby'\t'storedas
