草庐IT

mydumper

全部标签

MySQL数据库的备份、恢复、导出、导入(bin log和mydump)

目录一、使用binlog来恢复数据一、binlog的三种格式1、statement:基于SQL语句的复制(statement-basedreplication,SBR)2、row:基于行的复制(row-basedreplication,RBR)3、mixed:混合模式复制(mixed-basedreplication,MBR)4、查看模式和更改模式二、配置binlog策略三、获取binlog文件列表四、生成新的binlog文件五、查看日志中的内容1、在mysql中使用showbinlogevents查看2、在shell中使用mysqlbinlog来查看六、利用binlog来恢复数据1、通过po

MySQL之多线程迁移工具MyDumper使用指南

操作环境:CentOS7MySQL版本:5.7.42注意:在执行任何数据库操作之前,请确保您拥有必要的权限和备份数据的合法性!一、数据迁移工具mydumper的原理及特性1.1大型数据库备份mydumper被设计用来备份大型的MySQL数据库,特别是当传统的mysqldump因为性能或时间限制而不适用时。它可以更快速地备份大量数据。1.2并行备份mydumper采用多线程并行备份数据,这意味着可以同时备份多个表,提高了备份效率。1.3逻辑备份与物理备份工具不同,mydumper执行逻辑备份,它导出数据库中的数据和结构(表、视图、存储过程等)而不是直接复制数据库文件。这使得备份文件能够跨不同版本

MySQL多线程备份工具mydumper

目录一、mydumper简介二、mydumper安装1、yum安装mydumper2、源码安装mydumper三、mydumper参数介绍四、myloader参数介绍五、使用例子一、mydumper简介mydumper是一款社区开源的逻辑备份工具。该工具主要由C语言编写,目前由MySQL、Facebook等公司人员开发维护。参考官方介绍,mydumper主要有以下几点特性:支持多线程导出数据,速度更快。支持一致性备份。支持将导出文件压缩,节约空间。支持多线程恢复。支持以守护进程模式工作,定时快照和连续二进制日志。支持按照指定大小将备份文件切割。数据与建表语句分离。mydumper官网:http

MySQL 官方出品,比 mydumper 更快的多线程逻辑备份工具-MySQL Shell Dump & Load

mysqldump和mydumper是我们常用的两个逻辑备份工具。无论是mysqldump还是mydumper都是将备份数据通过INSERT的方式写入到备份文件中。恢复时,myloader(mydumper中的恢复工具)是多线程导入,且一个INSERT语句中包含多条记录,多个INSERT操作批量提交。基本上,凡是我们能想到的,有助于提升导入速度的,myloader都会使用或有选项提供。单就恢复速度而言,可以说,myloader就是逻辑恢复工具的天花板。既然如此,还有办法能继续提升逻辑恢复工具的恢复速度么?毕竟,备份的恢复速度直接影响着灾难发生时数据库服务的RTO。答案,有!这个就是官方在MyS

MySQL 官方出品,比 mydumper 更快的多线程逻辑备份工具-MySQL Shell Dump & Load

mysqldump和mydumper是我们常用的两个逻辑备份工具。无论是mysqldump还是mydumper都是将备份数据通过INSERT的方式写入到备份文件中。恢复时,myloader(mydumper中的恢复工具)是多线程导入,且一个INSERT语句中包含多条记录,多个INSERT操作批量提交。基本上,凡是我们能想到的,有助于提升导入速度的,myloader都会使用或有选项提供。单就恢复速度而言,可以说,myloader就是逻辑恢复工具的天花板。既然如此,还有办法能继续提升逻辑恢复工具的恢复速度么?毕竟,备份的恢复速度直接影响着灾难发生时数据库服务的RTO。答案,有!这个就是官方在MyS

mydumper备份mysql8.0 sql thread被kill掉

这个问题是好久以前的问题了,今天看自己的笔记,发现了这个问题,当时没有进行细看,想着现在复现一下。 1、半夜收到测试数据库备份告警:报警内容就是8002端口,备份失败,因为有慢查询导致的。白天想着手动跑一下备份命令:mydumper-uroot-S/tmp/mysql_8002.sock--kill-long-queries--regex'^(?!(test|information_schema|performance_schema|sys))'-o/data0/backup/sqldump/2021-06-11--triggers--events--routines-c报错:**(mydum

mydumper备份mysql8.0 sql thread被kill掉

这个问题是好久以前的问题了,今天看自己的笔记,发现了这个问题,当时没有进行细看,想着现在复现一下。 1、半夜收到测试数据库备份告警:报警内容就是8002端口,备份失败,因为有慢查询导致的。白天想着手动跑一下备份命令:mydumper-uroot-S/tmp/mysql_8002.sock--kill-long-queries--regex'^(?!(test|information_schema|performance_schema|sys))'-o/data0/backup/sqldump/2021-06-11--triggers--events--routines-c报错:**(mydum

MySQL备份迁移之mydumper

本文笔者示例中的mydumper版本为 mydumper0.9.1。简介mydumper是一款开源的MySQL逻辑备份工具,主要由C语言编写。与MySQL自带的mysqldump类似,但是mydumper更快更高效。mydumper的一些优点特性:轻量级C语言开发支持多线程备份数据,备份后按表生成多个备份文件支持事务性和非事务性表一致性备份支持将导出的文件压缩,节约空间支持多线程恢复支持已守护进程模式工作,定时快照和连续二进制日志支持按指定大小将备份文件切割数据与建表语句分离下载安装安装方式非常多,以下介绍几种常见的方式。Ubuntu中自带了myloadersudoapt-getinstall

MySQL备份迁移之mydumper

本文笔者示例中的mydumper版本为 mydumper0.9.1。简介mydumper是一款开源的MySQL逻辑备份工具,主要由C语言编写。与MySQL自带的mysqldump类似,但是mydumper更快更高效。mydumper的一些优点特性:轻量级C语言开发支持多线程备份数据,备份后按表生成多个备份文件支持事务性和非事务性表一致性备份支持将导出的文件压缩,节约空间支持多线程恢复支持已守护进程模式工作,定时快照和连续二进制日志支持按指定大小将备份文件切割数据与建表语句分离下载安装安装方式非常多,以下介绍几种常见的方式。Ubuntu中自带了myloadersudoapt-getinstall
12