我正在使用sqoop将表从AmazonRDS导入到Hive。该进程正在运行，数据存储在配置单元默认的hdfs目录中:/user/hive/warehouse。我需要将存储位置从hdfs更改为emrfss3。据我了解，我需要将属性hive.metastore.warehouse.dir的值(在主节点上的hive-site.xml中)更改为s3//bucket/warehouse-location。看来我没有修改文件hive-site.xml的权限。我正在寻找一些关于如何最好地做到这一点的建议。苏堤 最佳答案 您需要sudo权限才能修改

从理论上讲，使用HDFSCLI运行hdfs命令，hdfsdfs-touchzs3://bucketname/folder/file它通过EMRFS并在创建S3条目时更新dynamodb中MANIFESTS中的key。emrfsdiff-在S3和MANIFESTS(Dynamodb)中说。到目前为止一切都很好。当我尝试对s3文件运行以下ooziefs操作时，我注意到该操作不是通过EMRFS发生的，因为我没有在MANIFESTS(dynamodb)中看到键。emrfsdiff-表示文件在S3中但不在MANIFESTS(Dynamodb)中。${nameNode}只是想知道ooziefs操作

如果我在HFDS或本地文件系统中有一个文件，是否可以在启用EMRFS的情况下将其复制到S3，立即关闭集群，并确保该文件可供外部读者列出和读取此复制操作完成后？还是EMRFS仅在为其启用的特定EMR集群内保持一致？通过EMRFS从HDFS将文件复制到S3会是什么样子？来自本地文件系统？ 最佳答案 我在AWS开发人员论坛上问过同样的问题--https://forums.aws.amazon.com/thread.jspa?threadID=257220&tstart=25--这包含很多有值(value)的细节，它提供了比所有EMRFS文