草庐IT

【博学谷学习记录】超强总结,用心分享|大数据之flinkCDC

FlinkCDC、Flink、CDC各有啥关系Flink:流式计算框架,不包含FlinkCDC,和FlinkCDC没关系CDC:是一种思想,理念,不涉及某一门具体的技术FlinkCDC:是CDC的一种实现而已,不属于Flink子版块FlinkCDC这个技术是阿里开发的。目的是为了丰富Flink的生态。FlinkCDC历史2020年7月,FlinkCDC发布1.0版本。2021年中旬,FlinkCDC发布2.0版本。目前最新版是FlinkCDC2.3.0版本。概述FlinkCDC基于数据库日志的ChangeDataCaputre技术,实现了全量和增量的一体化读取能力,并借助Flink优秀的管道能

【博学谷学习记录】超强总结,用心分享 | 软件测试 性能测试工具

性能测试工具1.工具选择1.LoadRunner2.JMeter2.JMeter环境搭建1.配置环境2.文件目录介绍3.JMeter元件1.基本元件2.作用域1.工具选择1.LoadRunnerLoadrunner:工业级的性能测试工具,可以模拟大量用户,并监控性能指标提供报表。优势:支持的用户量大详细的分析报表支持IP欺骗缺点:收费体积大无法定制功能2.JMeterJmeter:性能测试工具,Jmeter软件的功能与Loadrunner基本一致。优点:免费开源体积小可扩展的组件缺点:不支持IP欺骗分析和报表能力比lr弱2.JMeter环境搭建1.配置环境2.文件目录介绍bin目录目录:pri

【9种】ElasticSearch分词器详解,一文get!!!| 博学谷狂野架构师

ElasticSearch分词器作者:博学谷狂野架构师GitHub:GitHub地址(有我精心准备的130本电子书PDF)只分享干货、不吹水,让我们一起加油!😄概述分词器的主要作用将用户输入的一段文本,按照一定逻辑,分析成多个词语的一种工具什么是分词器顾名思义,文本分析就是把全文本转换成一系列单词(term/token)的过程,也叫分词。在ES中,Analysis是通过分词器(Analyzer)来实现的,可使用ES内置的分析器或者按需定制化分析器。举一个分词简单的例子:比如你输入MasteringElasticsearch,会自动帮你分成两个单词,一个是mastering,另一个是elasti

【博学谷学习记录】超强总结,用心分享|HBase常用的Shell命令

【博学谷学习记录】超强总结,用心分享|HBase常用的Shell命令一、HBase的基本Shell操作(1)进入HBase的操作命令的控制台(2)查看HBase的命令帮助文档(3)查看集群状态:status(4)查看HBase有哪些表:list(5)创建一张表(6)向表中添加数据:put(7)读取某一个rowkey的数据:get(8)修改表中数据(9)删除数据:delete和deleteAll(10)查看表结构(11)清空表(12)查询多条数据:scan(13)查看表共计有多少条数据2HBase的高级shell操作(1)HBase的过滤器查询(2)显示HBase当前登录使用用户:whoami(

【9种】ElasticSearch分词器详解,一文get!!!| 博学谷狂野架构师

ElasticSearch分词器作者:博学谷狂野架构师GitHub:GitHub地址(有我精心准备的130本电子书PDF)只分享干货、不吹水,让我们一起加油!😄概述分词器的主要作用将用户输入的一段文本,按照一定逻辑,分析成多个词语的一种工具什么是分词器顾名思义,文本分析就是把全文本转换成一系列单词(term/token)的过程,也叫分词。在ES中,Analysis是通过分词器(Analyzer)来实现的,可使用ES内置的分析器或者按需定制化分析器。举一个分词简单的例子:比如你输入MasteringElasticsearch,会自动帮你分成两个单词,一个是mastering,另一个是elasti

[博学谷学习记录]超强总结,用心分享|kafka如何保证数据不丢失

1.kafka如何保证数据不丢失1.1生产者如何保证数据不丢失ACK机制:当生产者将数据生产到Broker后,Broker应该给予一个ack确认响应,在kafka中,主要提供了三种ack的方案:   ack=0:生产者只管发送数据,不关心不接收Broker给予的响应   ack=1:生产者将数据发送到Broker端,需要等待Broker端对应的Topic上对应分片上的主副本接收到消息后,才认为发送成功了   ack=-1|ALL:生产者将数据发送到Broker端,需要等待Broker端对应的Topic上对应分片上的所有的副本都接收到消息后,才认为发送成功了      效率角度:  0  >1>

【博学谷学习记录】超强总结,用心分享 | 产品经理项目竞品分析

【博学谷学习记录】超强总结,用心分享|产品经理项目竞品分析前言对coingecko的竞品分析一、coinbase基本信息Coinbase成立于2012年,美国比特币和其他数字货币交易平台。2015年1月21日上午,据美国《财富》报道,比特币公司CoinbaseC轮融资7500万美元,这是比特币公司截止2015年1月21日获得的最大一笔融资。2021年4月14日,Coinbase在纳斯达克成功上市优点与许多加密货币交易所相比,Coinbase可以在更多地方进行交易。该平台可在全球100多个国家/地区使用。它甚至可以在纽约使用,这并不是所有加密交易所都能说的。在2017年,他们成为仅第二家获得纽约

【9种】ElasticSearch分词器详解,一文get!!!| 博学谷狂野架构师

ElasticSearch分词器作者:博学谷狂野架构师GitHub:GitHub地址(有我精心准备的130本电子书PDF)只分享干货、不吹水,让我们一起加油!?概述分词器的主要作用将用户输入的一段文本,按照一定逻辑,分析成多个词语的一种工具什么是分词器顾名思义,文本分析就是把全文本转换成一系列单词(term/token)的过程,也叫分词。在ES中,Analysis是通过分词器(Analyzer)来实现的,可使用ES内置的分析器或者按需定制化分析器。举一个分词简单的例子:比如你输入MasteringElasticsearch,会自动帮你分成两个单词,一个是mastering,另一个是elasti

小心,丢失的消息!RocketMQ投递策略帮你解决问题!博学谷狂野架构师

RocketMQ消息投递策略作者:博学谷狂野架构师GitHub:GitHub地址(有我精心准备的130本电子书PDF)只分享干货、不吹水,让我们一起加油!?前言RocketMQ的消息投递分分为两种:一种是生产者往MQBroker中投递;另外一种则是MQbroker往消费者投递(这种投递的说法是从消息传递的角度阐述的,实际上底层是消费者从MQbroker中Pull拉取的)。本文将从模型的角度来阐述这两种机制。RocketMQ的消息模型RocketMQ的消息模型整体并不复杂,如下图所示:一个Topic(消息主题)可能对应多个实际的消息队列(MessgeQueue)在底层实现上,为了提高MQ的可用性

小心,丢失的消息!RocketMQ投递策略帮你解决问题!博学谷狂野架构师

RocketMQ消息投递策略作者:博学谷狂野架构师GitHub:GitHub地址(有我精心准备的130本电子书PDF)只分享干货、不吹水,让我们一起加油!?前言RocketMQ的消息投递分分为两种:一种是生产者往MQBroker中投递;另外一种则是MQbroker往消费者投递(这种投递的说法是从消息传递的角度阐述的,实际上底层是消费者从MQbroker中Pull拉取的)。本文将从模型的角度来阐述这两种机制。RocketMQ的消息模型RocketMQ的消息模型整体并不复杂,如下图所示:一个Topic(消息主题)可能对应多个实际的消息队列(MessgeQueue)在底层实现上,为了提高MQ的可用性