MySQL 命令行辅助 mycli

Install

Mycli is tested on macOS and Linux. It runs on Python 2.7 and 3.4+.

NOTE: Python 2.6 support was dropped in mycli 1.9.0. If you’re running Python 2.6, you’ll want to install mycli 1.8.1.

######Python Package:

If you already know how to install python packages, then you can do:

  • You might need sudo.
1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
20
21
22
23
24
25
26
27
$ pip install mycli
or
$ easy_install mycli

# Windows:
# Follow the instructions on this blogpost to install mycli on Windows: https://www.codewall.co.uk/installing-using-mycli-on-windows/

# macOS:
#The easiest way install mycli on a Mac is to use Homebrew.
$ brew install mycli


# Linux:
# Debian/Ubuntu Package:
# https://packages.debian.org/search?keywords=mycli
$ sudo apt-get update
$ sudo apt-get install mycli

# Fedora
$ sudo dnf install mycli


# RHEL, Centos:
# We don't have packages for RHEL or Centos, yet. Instead, use pip to install mycli. You can install pip on your system using:
$ sudo yum install python-pip python-devel
# Once that is installed, you can install mycli:
$ sudo pip install mycli
Install Error QA.
1
Cannot uninstall 'configobj'. It is a distutils installed project and thus we cannot accurately determine which files belong to it which would lead to only a partial uninstall.
Fix code
1
pip install --ignore-installed mycli

How to install MariaDB 10.1 on CentOS 7.x

CentOS 7.x 默认的MariaDB版本是5.5,但是在有些情况我们需要用到10版本,注意MariaDB与MySQL版本是不一样的,下面简单降下如何快速安装MariaDB10.1 到CentOS 7.x.

创建MariaDB 10.1的Yum源

1
2
3
4
5
6
7
8
9
cat <<EOF | sudo tee -a /etc/yum.repos.d/MariaDB.repo
# MariaDB 10.1 CentOS repository list
# http://downloads.mariadb.org/mariadb/repositories/
[mariadb]
name = MariaDB
baseurl = http://yum.mariadb.org/10.1/centos7-amd64
gpgkey=https://yum.mariadb.org/RPM-GPG-KEY-MariaDB
gpgcheck=1
EOF

注意MariaDB会随着时间的推移版本不断更新,你可以到repo仓库获取对应版本链接

使用Yum安装MariaDB 10.1 即可

1
sudo yum install MariaDB-server MariaDB-client -y

启动MariaDB并设置为开机自启动

1
2
sudo systemctl start mariadb.service
sudo systemctl enable mariadb.service

初始化MariaDB设置

1
2
3
4
5
6
7
8
9
10
11
12
sudo /usr/bin/mysql_secure_installation

# 回答以下问题,请记住你的数据库root用户密码:

Enter current password for root (enter for none): 回车
Set root password? [Y/n]: Y
New password: 你要设置的数据库root密码
Re-enter new password: 你要设置的数据库root密码
Remove anonymous users? [Y/n]: Y
Disallow root login remotely? [Y/n]: Y
Remove test database and access to it? [Y/n]: Y
Reload privilege tables now? [Y/n]: Y

HowTo-Automatic-EasyBackup-MysqlDB

mysql是一个免费、开源中一款非常优秀关系型数据库,在现在的互联网中使用的非常广泛,无论是大型IT项目还是个人开发者的小项目,mysql都能很好的协助人们处理数据库相关的工作,同时数据库对于我们来说是非常重要,所以经常备份数据库是一个基本的操作,这会为你或者你的团队,减少非常多不必要的麻烦。

mysqldump是一个简单而且非常流行的mysql全量备份方式,配合crontab添加自动备份任务,很好的完成了我们针对数据库备份的需求,下面我会通过一个例子来说明如何完成这项操作。

mysqldump是mysql自带的备份工具,所以只要你安装mysql应用包,就无需单独安装mysqldump

测试环境

我搭建了一个Ghost博客环境,数据库采用是的Mysql,接下来我想在每天00:00执行数据库备份操作,并在备份完成之后,告诉我是否备份成功。

所以我们的步骤应该:

  1. 测试备份命令是否可以正常执行
  2. 安装测试命令行邮件工具mailx
  3. 安装计划任务工具Crontab
  4. 编写备份脚本
  5. 添加计划任务

测试备份命令

首先你要获得你要备份的数据库对应的select权限,仅需要select权限即可,mysql在管理方面,应该坚持只赋予必须权限的原则。

1
2
mysql> grant select on ghost.* to 'ghost_backuser'@'localhost' identified by 'backupPass';
Query OK, 0 rows affected (0.00 sec)

因为我只在本地执行备份操作,所以我只赋予了localhost的权限,你的权限应该要是执行备份工作的服务器主机信息。

1
2
3
4
5
6
7
8
9
10
# 创建仅授权本地访问的用户
mysql> create user dbackuser@'localhost';
# 创建授权所有来源地址的用户
mysql> create user dbackuser@'%';
# 创建仅授权从特定IP的用户
mysql> create user dbackuser@'192.168.0.230';
# 创建仅授权从特定IP段访问的用户
mysql> create user dbackuser@'192.168.0.0/23';
# 创建仅授权从特定域名来访问的用户
mysql> create user dbackuser@'samzong.me';

好了,接下来我们测试对应用户是否有权限。

1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
20
21
22
23
24
25
26
27
28
29
30
31
32
33
34
35
36
➜  ~ mysql -u ghost_backuser -pbackupPass
Warning: Using a password on the command line interface can be insecure.
Welcome to the MySQL monitor. Commands end with ; or \g.
Your MySQL connection id is 7
Server version: 5.6.35 MySQL Community Server (GPL)

Copyright (c) 2000, 2016, Oracle and/or its affiliates. All rights reserved.

Oracle is a registered trademark of Oracle Corporation and/or its
affiliates. Other names may be trademarks of their respective
owners.

Type 'help;' or '\h' for help. Type '\c' to clear the current input statement.

mysql> show databases;
+--------------------+
| Database |
+--------------------+
| information_schema |
| ghost |
+--------------------+
2 rows in set (0.00 sec)

mysql> use ghost;
Reading table information for completion of table and column names
You can turn off this feature to get a quicker startup with -A

Database changed

mysql> select name from users;
+------+
| name |
+------+
| ALEX |
+------+
1 row in set (0.00 sec)

测试mysqldump备份命令,注意mysqldump备份会锁表,但对于正在工作的数据库,锁表会影响到正常业务,所以我们可以使用–single-transaction参数,不锁表备份。

1
2
3
4
5
6
7
8
9
➜  ~ mysqldump -u ghost_backuser -pbackupPass ghost > ghost.bak.sql
Warning: Using a password on the command line interface can be insecure.
mysqldump: Got error: 1044: Access denied for user 'ghost_backuser'@'localhost' to database 'ghost' when using LOCK TABLES
➜ ~ mysqldump -u ghost_backuser -pbackupPass --single-transaction ghost > ghost.bak.sql
Warning: Using a password on the command line interface can be insecure.
➜ ~ ls -lh
total 780K
-rw-r--r-- 1 root root 780K May 17 16:24 ghost.bak.sql
➜ ~

安装命令行邮件工具mailx

安装mailx 在CentOS/RehHat:

1
➜  ~ yum install -y mailx

测试发送邮件:

1
➜  ~ echo "test" | mail -s "this a test email" samzong.lu@gmail.com

安装计划任务工具Crontab

crontab命令常见于Unix和类Unix的操作系统之中,用于设置周期性被执行的指令。该命令从标准输入设备读取指令,并将其存放于“crontab”文件中。通常,crontab储存的指令被守护进程激活, crond常常在后台运行,每一分钟检查是否有预定的作业需要执行。这类作业一般称为cron jobs。

1
2
➜  ~ yum install vixie-cron
➜ ~ yum install crontabs

vixie-cron软件包是cron的主程序;

crontabs软件包是用来安装、卸装、或列举用来驱动 cron 守护进程的表格的程序。

启动crond并设置为开机自启动:

1
2
3
➜  ~ service crond start
Starting crond: [ OK ]
➜ ~ chkconfig crond on

crontab 基础命令:

1
2
3
4
5
6
7
8
9
10
11
语  法:crontab [-u <用户名称>][配置文件] 或 crontab [-u <用户名称>][-elr]

补充说明:cron是一个常驻服务,它提供计时器的功能,让用户在特定的时间得以执行预设的指令或程序。只要用户会编辑计时器的配置文件,就可以使用计时器的功能。

配置文件格式:Minute Hour Day Month DayOFWeek Command

参  数:
-e  编辑该用户的计时器设置。
-l  列出该用户的计时器设置。
-r  删除该用户的计时器设置。
-u<用户名称>  指定要设定计时器的用户名称。

crontab 配置的基本格式:

1
2
3
4
5
6
7
8
9
*     *   *   *   *  command
分  时  日  月  周  命令

第1列表示分钟1~59 每分钟用*或者 */1表示
第2列表示小时1~23(0表示0点)
第3列表示日期1~31
第4列表示月份1~12
第5列标识号星期0~6(0表示星期天)
第6列要运行的命令

crontab 的一些例子:

1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
20
21
22
23
24
25
26
27
28
29
#每晚的21:30 重启apache
30 21 * * * /usr/local/etc/rc.d/lighttpd restart

#每月1、10、22日的4 : 45重启apache
45 4 1,10,22 * * /usr/local/etc/rc.d/lighttpd restart

#每周六、周日的1 : 10重启apache
10 1 * * 6,0 /usr/local/etc/rc.d/lighttpd restart

#每天18 : 00至23 : 00之间每隔30分钟重启apache
0,30 18-23 * * * /usr/local/etc/rc.d/lighttpd restart

#每星期六的11 : 00 pm重启apache
0 23 * * 6 /usr/local/etc/rc.d/lighttpd restart

#晚上11点到早上7点之间,每隔一小时重启apache
* 23-7/1 * * * /usr/local/etc/rc.d/lighttpd restart

#每一小时重启apache
* */1 * * * /usr/local/etc/rc.d/lighttpd restart

#每月的4号与每周一到周三的11点重启apache
0 11 4 * mon-wed /usr/local/etc/rc.d/lighttpd restart

#一月一号的4点重启apache
0 4 1 jan * /usr/local/etc/rc.d/lighttpd restart

#每半小时同步一下时间
*/30 * * * * /usr/sbin/ntpdate 210.72.145.44

编写备份脚本

好了,以上我们测试需要用到的各个模块,下面我们要编写备份脚本:

1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
20
21
22
23
24
#!/bin/bash
# mysqldump scripts.
# filepath: /usr/local/bin/ghost_sqldump.sh
# Author: samzong

# set TIME variable
TIME=`date "+%Y%m%d%H%M%S"`

# backup db ghost to /mysqlbak/
mysqldump --single-transaction -h localhost -u ghost_backuser -pbackupPass ghost > /mysqlbak/ghost_$TIME.sql

# tar sql files.
tar czvf /mysqlbak/ghost_$TIME.sql.tgz /mysqlbak/ghost_$TIME.sql --remove-files

# remove over 7 days sql files.
find /mysqlbak/ -mtime +7 -exec rm -f {} \;

# send mial to admin'mial
if [ $? -eq 0 ]
then
echo "ghost SQL dump is successfully. At time: `date` " | mail -s ghost-dump-successfully samzong.lu@gmail.com
else
echo " Error Error ghost SQL dump is Error. At time: `date` " | mail -s ghost-dump-error samzong.lu@gmail.com
fi

注意脚本中的以下内容要根据你的实际情况修改:

  • -h “ “ 这是数据库所在的主机
  • -u “ “ 这是数据库可备份的用户名
  • -p” “ 备份用户的密码

添加计划任务

经过以上测试,已经很好的完成备份脚本,接下来将脚本添加到crontab内,并设置自动执行的时间:

1
2
➜  ~ crontab -e
00 00 * * * sh /usr/local/bin/ghost_sqldump.sh

重启crontab服务,并确认crontab已经设置为开机自启动

1
2
3
4
5
➜  ~ service crond restart
Stopping crond: [ OK ]
Starting crond: [ OK ]
➜ ~ chkconfig --list | grep crond
crond 0:off 1:off 2:on 3:on 4:on 5:on 6:off
Your browser is out-of-date!

Update your browser to view this website correctly. Update my browser now

×