在学习seata的时候，很突然的就遇到这个问题。在seata官网解释说是事务分组和集群对应的关系，需要在client端配置。我使用nacos来做配置中心在红框标注的内容里，第三行的无序列表就说明了会用service.vgroupMapping.事务分组名去配置中心找TC的集群名称。所以只需要在nacos的配置中心中加上Data-Id为service.vgroupMapping.事务分组名，值设置为default有一个深坑，别看文档上写在applicaiton.properties上配置了service.vgroupMapping，其实是无效的。只有config.type=file才有效贴上上面
一、分区的定义分区表实际上就是对应一个HDFS文件系统上的独立的文件夹，Hive中的分区就是分目录，把一个大的数据集根据业务需要分割成小的数据集。在查询时通过where子句中的表达式选择查询所需要的指定的分区，这样的查询效率会提高很多，所以我们需要把常常用在where语句中的字段指定为表的分区字段。而分区又分为静态分区、动态分区两种。二、静态分区、动态分区对比静态分区与动态分区的主要区别在于静态分区是手动指定，是编译时进行分区。支持load和insert两种插入方式。适合于分区数少、分区名可以明确的数据而动态分区是通过数据来进行判断，是在SQL执行时进行分区。只支持inset这一种插入方式。需
亲测2022/08/16BJ文章目录异常原因解决异常Causedby:org.elasticsearch.ElasticsearchStatusException:Elasticsearchexception[type=cluster_block_exception,reason=blockedby:[FORBIDDEN/12/indexread-only/allowdelete(api)];]atorg.elasticsearch.rest.BytesRestResponse.errorFromXContent(BytesRestResponse.java:177)原因集群存储资源高水位异常
Elasticsearch系列文章1、介绍lucene的功能以及建立索引、搜索单词、搜索词语和搜索句子四个示例实现2、Elasticsearch7.6.1基本介绍、2种部署方式及验证、head插件安装、分词器安装及验证3、Elasticsearch7.6.1信息搜索示例（索引操作、数据操作-添加、删除、导入等、数据搜索及分页）4、Elasticsearch7.6.1Javaapi操作ES（CRUD、两种分页方式、高亮显示）和ElasticsearchSQL详细示例5、Elasticsearch7.6.1filebeat介绍及收集kafka日志到es示例6、Elasticsearch7.6.1、
一.完全基于pipline实现完整的代码部署流水线流程：开发提交代码到gitlab->clone代码->sonarqube执行代码扫描->代码打包（制品）->制作镜像（run执行编译，add/copy宿主机上文件，expose端口，cmd启动服务）->镜像上传到harbor->拉取镜像部署到生产环境->sendemail。pipline脚本说明，注意设置全局变量时，需要放在env模块里面，才可以被下面不同的模块来引用。每个模块的代码放在相应的stage里面，在sh里面执行shell命令。pipeline{agentany//全局必须带有agent,表明此pipeline执行节点//agent{
2.5HDFS环境搭建下载jdk和hadoop放到~/software目录下然后解压到~/app目录下tar-zxvf压缩包名字-C~/app/配置环境变量vi~/.bash_profileexportJAVA_HOME=/home/hadoop/app/jdk1.8.0_91exportPATH=$JAVA_HOME/bin:$PATHexportHADOOP_HOME=/home/hadoop/app/hadoop......exportPATH=$HADOOP_HOME/bin:$PATH#保存退出后source~/.bash_profile进入到解压后的hadoop目录修改配置文件配置
问题：最近出现的一次HDFS报错问题，查看一个文件是报错Couldn'tpreviewthefile.造成原因配置文件hdfs-site.xml配置有误windows下的C:\Windows\System32\drivers\etc\hosts与linux下的etc/hosts下的hadoop映射地址不一致解决方法在hdfs-site.xml配置如下依赖dfs.webhdfs.enabledtrue修改windows下的C:\Windows\System32\drivers\etc\hosts文件与linux下的etc/hosts下的hadoop映射地址保持一致我的是C:\Windows\Sy
以下是基于HadoopAPI和Java实现更改HDFS文件权限的示例代码：//第一种方法importorg.apache.hadoop.conf.Configuration;importorg.apache.hadoop.fs.FileSystem;importorg.apache.hadoop.fs.Path;importorg.apache.hadoop.fs.permission.FsAction;importorg.apache.hadoop.fs.permission.FsPermission;importjava.io.IOException;publicclassChangeHd
以下是基于HadoopAPI和Java实现更改HDFS文件权限的示例代码：//第一种方法importorg.apache.hadoop.conf.Configuration;importorg.apache.hadoop.fs.FileSystem;importorg.apache.hadoop.fs.Path;importorg.apache.hadoop.fs.permission.FsAction;importorg.apache.hadoop.fs.permission.FsPermission;importjava.io.IOException;publicclassChangeHd
Hadoop系列文章目录1、hadoop3.1.4简单介绍及部署、简单验证2、HDFS操作-shell客户端3、HDFS的使用（读写、上传、下载、遍历、查找文件、整个目录拷贝、只拷贝文件、列出文件夹下文件、删除文件及目录、获取文件及文件夹属性等）-java4、HDFS-java操作类HDFSUtil及junit测试（HDFS的常见操作以及HA环境的配置）5、HDFSAPI的RESTful风格–WebHDFS6、HDFS的HttpFS-代理服务7、大数据中常见的文件存储格式以及hadoop中支持的压缩算法8、HDFS内存存储策略支持和“冷热温”存储9、hadoop高可用HA集群部署及三种方式验证
