1. mysqldump export sql file
1. Intranet export sql file is fast, and intranet export is recommended. It is easy to disconnect when exporting from the external network. Use nohup to run in the background when exporting to the external network, and generally it will not be disconnected. However, some invalid alarm information will enter the first line of the sql file, causing the sql file to be unusable, and such invalid alarm information needs to be removed.
#不加密码(交互式输入密码)：
mysqldump --skip-lock-tables --set-gtid-purged=OFF -h 10.x.x.x -P 3306 -utest_user test_db test_table >testfile_20230525.sql -p
(sql文件无无效的警告信息)
#加密码时，密码要带引号：
mysqldump --skip-lock-tables --set-gtid-purged=OFF -h 10.x.x.x -P 3306 -utest_user test_db test_table >testfile_20230525.sql -p'test_password'
(sql文件无无效的警告信息)
#ctl+c后仍在运行，但关闭ssh会话后不可以运行：
mysqldump --skip-lock-tables --set-gtid-purged=OFF -h 10.x.x.x -P 3306 -utest_user test_db test_table >testfile_20230525.sql -p'test_password' &
(sql文件无无效的警告信息)
#关闭ssh会话后仍可以运行：
nohup mysqldump --skip-lock-tables --set-gtid-purged=OFF -h 10.x.x.x -P 3306 -utest_user test_db test_table >testfile_20230525.sql -p'test_password' &
(但sql文件首行可能有无效的警告信息，需要用sed剔除一下)
#使用screen后台运行
#优点：单独开一个会话放到后台，无效的报警信息会被打印到该后台终端，而不会被写入sql文件，而且可以满足交互式场景下后台运行。（总体来说比nohup更优秀）
#安装screen
yum -y install screen
#创建有名字的screen任务(执行该命令后，其实就进入了screen的shell环境,此时执行的操作 都是放在screen里的)
screen -S task_name
#查看到系统中所有的screen任务的pid
screen -ls
#或者ps -ef来查找screen的任务
ps -ef | grep task_name
#进入screen任务以后，就可以运行相要后台跑的任务了
mysqldump --skip-lock-tables --set-gtid-purged=OFF -h 10.x.x.x -P 3306 -utest_user test_db test_table >testfile_20230525.sql -p'test_password' &
#然后把该screen放后台
方法1：快捷键 ctrl+a+d
方法2：再开一个终端
screen -d task_name
#进入screen任务
screen -r pid
或者
screen -r task_name
#删除screen任务
screen -r task_name
exit
mysqldump参数简介：(其中-u和-p参数后要紧接用户名或密码，不能加空格)
-h:mysql主机的IP。
-P:mysql服务对应的端口。
-u:mysql用户名。
-p（密码两端需要加单引号）:mysql密码。
skip-lock-tables:--skip-lock-tables参数指示mysqldump实用程序在获取将在每个表上获取READ锁的转储之前，不要发出LOCK TABLES命令。 数据库中的所有表都应被锁定，以提高备份过程的一致性。 即使使用了skip-lock-tables，在转储表时，它也不会收到任何INSERT或UPDATE，因为由于需要SELECT才能从表中获取所有记录，因此它将被锁定。
set-gtid-purged=OFF：加了--set-gtid-purged=OFF时，在会记录binlog日志，如果不加，不记录binlog日志，所以在我们做主从用了gtid时，用mysqldump备份时就要加--set-gtid-purged=OFF，否则你在主上导入恢复了数据，主没有了binlog日志，同步则不会被同步。
2. When using the nohup background to export the sql file, some invalid alarm information may be written into the first few lines of the sql file.
At this time, these information need to be removed, otherwise the sql file cannot be imported into mysql normally.
#报警信息示例：
#密码写入命令行报警
#Warning: Using a password on the command line interface can be insecure.
#没加--set-gtid-purged=OFF的报警信息
#Warning: A partial dump from a server that has GTIDs will by default include the GTIDs of all transactions, even those that changed suppressed parts of the database. If you don't want to restore GTIDs, pass --set-gtid-purged=OFF. To make a complete dump, pass --all-databases --triggers --routines --events.
#sql文件一般很大，所以不要直接vim打开。用head和tail查看，用sed修改。
#定位sql文件前几行有报警信息
#默认head查看文件前10行，tail查看文件后10行
head xxx.sql
tail xxx.sql
#查看sql文件前三行信息(以此类推即可)
head -n 3 xxx.sql
#查看sql文件后三行信息(以此类推即可)
tail -n 3 xxx.sql
#删除sql文件里无效的报警信息。
#删除文件 1到n行
sed -i '1,nd' 文件名
#列如，前3行是无效的报警信息，则
sed -i '1,3d' xxx.sql
3. Write a shell script to export multiple data tables in a loop.
#!/bin/bash
# 需要导出的表名列表
TABLE_LIST=( "table_1" "table_2" "table_3" "table_4" )
# 循环导出每个表
for i in "${TABLE_LIST[@]}"
do
# 构造导出文件名
FILE_NAME="${i}_20230525.sql"
echo ${FILE_NAME}
# 使用 mysqldump 命令导出表数据
mysqldump --skip-lock-tables --set-gtid-purged=OFF -h 10.x.x.x -P 3306 -utest_user -p'test_password' test_db ${i} > ${FILE_NAME}
done
4. Verify that the export is successful:
# 查看sql文件最后一行。
tail -n 1 xxx.sql
If there is a dump completed on date.
It means that the dump is successful. Sometimes the dump fails due to reasons such as session interruption, and there is no such line.
2. Backup the sql file from the cloud server to the local Linux server:
1. All files under the compressed file
tar -zcvf mysql_dump_20230525.tar.gz ./mysql_dump/
2.1 Use scp to transfer to the local server: (but scp transfers large files easily broken stalled)
本地服务器运行：
scp username@remote:/path/to/file /path/to/destination
即
scp 用户名@云服务器ip:云服务器文件路径 本地文件夹路径
如果要将整个目录传输到本地Linux服务器中，可以使用-r参数，命令如下：
scp -r 用户名@云服务器ip:云服务器文件夹路径 本地文件夹路径
输入命令后按下回车键，然后输入云服务器的密码，就可以将文件从云服务器传输到本地Linux服务器了。
如果云服务器使用密钥登录时，需要添加一个-i的参数，并输入对应密钥的路径即可。
scp -i 对应密钥地址 用户名@云服务器ip:云服务器文件路径 本地文件夹路径
如果报权限错误，那么需要 chmod 400 修改一下密钥文件的权限。
即：
chmod 400 密钥文件
2.2. You can also use rsync to transfer files: (you can continue to transfer from a breakpoint, after the break, just run the command again)
rsync -P -e "ssh -i 密钥路径" 用户名@云服务器ip:云服务器文件路径 本地文件夹路径
常用参数：
--progress： 显示拷贝进度
--partial：保留不完整文件，实现断点续传
--partial-dir=DIR：指定不完整文件的存储目录，而不是默认存储到目的地目录。
-P：包含--progress和--partial
--rsh=ssh：使用ssh方式传输文件，注意：如果之前设置过ssh免密码登录，那么此时也就不需要密码了，非常方便
-v：显示详细信息
-a：归档模式。也就是以递归方式传输文件，并保持所有文件属性。
-r：递归方式传输文件
3. Unzip the file:
tar -xzvf mysql_dump_20230525.tar.gz -C /home/mysql_dump # -C 指定解压路径
3. Import sql file:
1. Mysql import sql file under linux Method 1:
Enter the linux command line
mysql -uroot -p 回车 输入密码
source fileName.sql
Note that fileName.sql must have a path name, for example: source /home/user/data/fileName.sql
2. Mysql imports sql files under linux Method 2:
Enter the linux command line:
mysql -uroot -p database < fileName.sql
Note that fileName.sql must have a path name
3. An error is reported when importing the database: Variable 'time_zone' can't be set to the value of 'NULL'. The
reason for this problem is that there are comments in the data sql file, which can be removed (you can also leave it alone) without affecting the data. import.
Reference article:
About mysql: skip-lock-tables and mysqldump https://www.codenong.com/7415698/
The use of mysqldump on –set-gtid-purged=OFF https://www.cnblogs.com/–smile/p/11464687.html
mysqldump --set-gtid-purged=OFF parameter analysis https://www.cnblogs.com/ybyqjzl/p/12428039.html
How does the SCP command use key transmission https://zhuanlan.zhihu.com/p/358987274