Linux环境下Shell调用MySQL并实现定时任务
对于一些周期性事务,我们可以在Linux下,使用shell脚本调用mysql数据库存储过程,并设置定时任务。本来是要mysql数据库中创建事件任务来,定时执行存储过程,做数据传输的。。。使用crontab来定时执行,调用存储过程。
- 实现这个数据传输分为两步:
一、编写shell脚本
- 调用mysql数据库存储过程,如下:
#!/bin/bash
# 50 8 * * * sh /home/bgop/hao/detector_task.sh > /dev/null 2>&1 &
host1=127.0.0.1
user=root
passwd=HaoChuangMysql\@2018
port=23306
mysql -h${host1} -u${user} -p${passwd} -P${port} -e "use bg-biz;call test_insert;" ;
这样就可以,调用执行库data的过程pro了。
注意,不同主机有可能需要写出mysql的绝对路径,如/usr/bin/mysql,否则不执行库过程。。。
这里有几个要点,我加上详细的备注说明:
!/bin/bash
#数据库信息,也可以写 HOSTNAME="localhost",端口号 PORT可以不设定
HOSTNAME="192.168.0.100"
# 端口
PORT="3306"
# 用户名
USERNAME="root"
# 密码,注意如果有特殊字符的话,记得使用\转义
PASSWORD="haochuangMySQL\@2018"
#数据库名称
DBNAME="test_db_test"
#数据库中表的名称
TABLENAME="test_table_test"
# 带上上面参数,调用存储过程
mysql -h${host1} -u${user} -p${passwd} -P${port} -e "call 库名data.过程名pro" ;
二、创建crontab定时任务
- 设置在凌晨1点执行脚本/home/bgop/hao/detector_task.sh
# vim /var/spool/cron/root
添加语句 0 1 * * * sh /home/bgop/hao/detector_task.sh
0 1 * * * sh /home/bgop/hao/detector_task.sh > /dev/null 2>&1 &
设置完成之后保存,重启一下crontab,并查看crontab的状态是否正常
[root@VM_0_16_centos hao]# service crond restart
Redirecting to /bin/systemctl restart crond.service
[root@VM_0_16_centos hao]# service crond status
Redirecting to /bin/systemctl status crond.service
● crond.service - Command Scheduler
Loaded: loaded (/usr/lib/systemd/system/crond.service; enabled; vendor preset: enabled)
Active: active (running) since Wed 2018-12-05 09:39:25 CST; 2s ago
Main PID: 25636 (crond)
CGroup: /system.slice/crond.service
└─25636 /usr/sbin/crond -n
Dec 05 09:39:25 VM_0_16_centos systemd[1]: Started Command Scheduler.
Dec 05 09:39:25 VM_0_16_centos crond[25636]: (CRON) INFO (RANDOM_DELAY will be scaled with factor 20% if used.)
Dec 05 09:39:25 VM_0_16_centos systemd[1]: Starting Command Scheduler...
Dec 05 09:39:25 VM_0_16_centos crond[25636]: (CRON) bad minute (/etc/cron.d/cron.allow)
Dec 05 09:39:25 VM_0_16_centos crond[25636]: (CRON) bad minute (/etc/cron.d/cron.allow)
Dec 05 09:39:25 VM_0_16_centos crond[25636]: (CRON) INFO (running with inotify support)
Dec 05 09:39:25 VM_0_16_centos crond[25636]: (CRON) INFO (@reboot jobs will be run at computer's startup.)
- 经过这两个步骤,就可以实现使用shell脚本调用mysql数据库存储过程,并设置定时任务。
三、 常用命令
-----另外,补充几条常用的Linux与MySQL等操作命令,如下:
# 导入数据
mysql -uroot -h192.168.0.100 -P23306 -pHaoMySQL\@2018 < /hao/software/localCon.sql
#创建数据库
create_db_sql="create database IF NOT EXISTS ${DBNAME}"
mysql -h${HOSTNAME} -P${PORT} -u${USERNAME} -p${PASSWORD} -e "${create_db_sql}"
注意:-p${PASSWORD}中间不能有空格
#创建表
create_table_sql="create table IF NOT EXISTS ${TABLENAME} ( name varchar(20), id int(11) default 0 )"
mysql -h${HOSTNAME} -P${PORT} -u${USERNAME} -p${PASSWORD} -D ${DBNAME} -e "${create_db_sql}"
#插入数据
insert_sql="insert into ${TABLENAME} values('billchen',2)"
mysql -h${HOSTNAME} -P${PORT} -u${USERNAME} -p${PASSWORD} ${DBNAME} -e "${insert_sql}"
#查询
select_sql="select * from ${TABLENAME}"
mysql -h${HOSTNAME} -P${PORT} -u${USERNAME} -p${PASSWORD} ${DBNAME} -e "${select_sql}"
#更新数据
update_sql="update ${TABLENAME} set id=3"
mysql -h${HOSTNAME} -P${PORT} -u${USERNAME} -p${PASSWORD} ${DBNAME} -e "${update_sql}"
mysql -h${HOSTNAME} -P${PORT} -u${USERNAME} -p${PASSWORD} ${DBNAME} -e "${select_sql}"
#删除数据
delete_sql="delete from ${TABLENAME}"
mysql -h${HOSTNAME} -P${PORT} -u${USERNAME} -p${PASSWORD} ${DBNAME} -e "${delete_sql}"
mysql -h${HOSTNAME} -P${PORT} -u${USERNAME} -p${PASSWORD} ${DBNAME} -e "${select_sql}"
四、Crontab用法
----补充一些crontab相关的命令
crontab文件的含义:
用户所建立的crontab文件中,每一行都代表一项任务,每行的每个字段代表一项设置,它的格式共分为六个字段,前五段是时间设定段,第六段是要执行的命令段,格式如下:
minute hour day month week command
其中:
minute: 表示分钟,可以是从0到59之间的任何整数。
hour:表示小时,可以是从0到23之间的任何整数。
day:表示日期,可以是从1到31之间的任何整数。
month:表示月份,可以是从1到12之间的任何整数。
week:表示星期几,可以是从0到7之间的任何整数,这里的0或7代表星期日。
command:要执行的命令,可以是系统命令,也可以是自己编写的脚本文件。
[
在以上各个字段中,还可以使用以下特殊字符:
星号(*):代表所有可能的值,例如month字段如果是星号,则表示在满足其它字段的制约条件后每月都执行该命令操作。
逗号(,):可以用逗号隔开的值指定一个列表范围,例如,“1,2,5,7,8,9”
中杠(-):可以用整数之间的中杠表示一个整数范围,例如“2-6”表示“2,3,4,5,6”
正斜线(/):可以用正斜线指定时间的间隔频率,例如“0-23/2”表示每两小时执行一次。同时正斜线可以和星号一起使用,例如*/10,如果用在minute字段,表示每十分钟执行一次。
五、crond服务
安装crontab:
yum install crontabs
服务操作说明:
/sbin/service crond start //启动服务
/sbin/service crond stop //关闭服务
/sbin/service crond restart //重启服务
/sbin/service crond reload //重新载入配置
查看crontab服务状态:
service crond status
手动启动crontab服务:
service crond start
加入开机自动启动:
chkconfig –level 35 crond on
使用实例
实例1:每1分钟执行一次command
命令:
* * * * * command
实例2:每小时的第3和第15分钟执行
命令:
3,15 * * * * command
实例3:在上午8点到11点的第3和第15分钟执行
命令:
3,15 8-11 * * * command
实例4:每隔两天的上午8点到11点的第3和第15分钟执行
命令:
3,15 8-11 */2 * * command
实例5:每个星期一的上午8点到11点的第3和第15分钟执行
命令:
3,15 8-11 * * 1 command
实例6:每晚的21:30重启smb
命令:
30 21 * * * /etc/init.d/smb restart
实例7:每月1、10、22日的4 : 45重启smb
命令:
45 4 1,10,22 * * /etc/init.d/smb restart
实例8:每周六、周日的1 : 10重启smb
命令:
10 1 * * 6,0 /etc/init.d/smb restart
实例9:每天18 : 00至23 : 00之间每隔30分钟重启smb
命令:
0,30 18-23 * * * /etc/init.d/smb restart
实例10:每星期六的晚上11 : 00 pm重启smb
命令:
0 23 * * 6 /etc/init.d/smb restart
实例11:每一小时重启smb
命令:
* */1 * * * /etc/init.d/smb restart
实例12:晚上11点到早上7点之间,每隔一小时重启smb
命令:
* 23-7/1 * * * /etc/init.d/smb restart
实例13:每月的4号与每周一到周三的11点重启smb
命令:
0 11 4 * mon-wed /etc/init.d/smb restart
实例14:一月一号的4点重启smb
命令:
0 4 1 jan * /etc/init.d/smb restart
实例15:每小时执行/etc/cron.hourly目录内的脚本
命令:
01 * * * * root run-parts /etc/cron.hourly
待完善。
删除指定天之前的日志记录
delete from log
where id <= (
select id from (
select max(id) as id from log
where date(create_time) <= date(date_sub(now(), interval 7 day))
) as a
);
---
delete from 表名 where DATE(字 段 名) <= DATE(date_sub(now(), interval 60 day));
delete from log where DATE(create_time) <= DATE(date_sub(now(), interval 60 day));
---
Delete From tableNmae WHERE DATE(create_time) <= DATE(DATE_SUB(NOW(),INTERVAL 60 day)) ;
tableNmae->表名
XX -> 你需要删除多少天之前的数据
datetime->时间(datetime/varchar都支持)
天数传入1时会删除当天数据
---
21-Server
# 删除30天之前的日志记录
select count(*) from log 68094
Delete From log WHERE DATE(create_time) <= DATE(DATE_SUB(NOW(),INTERVAL 30 day)) ;
# 删除180天之前的记录
Delete From attendance_record WHERE DATE(work_date) <= DATE(DATE_SUB(NOW(),INTERVAL 180 day)) ;
---
mysqldump -hrm-2ze4sz.mysql.rds.aliyuncs.com -P3306 -uadmin -pYourPassword --default-character-set=utf8mb4 --hex-blob --master-data=2 --single-transaction --opt --set-gtid-purged=OFF --skip-tz-utc --events --triggers --routines database_name > /root/RDS_Backup/$(date +%Y%m%d%H%M%S)_database_name.sql
mysql -hrm-2ze4sz.mysql.rds.aliyuncs.com -P3306 -uadmin -pYourPassword -e "show databases;use mysql;show tables;select Host,User from user;desc user" ;
/usr/local/mysql/bin/mysql -hrm-2ze4sz.mysql.rds.aliyuncs.com -P3306 -uadmin -pYourPassword -e "
use faygo
source faygo.sql
select * from dev
quit
"
mysql -hrm-2ze4sz.mysql.rds.aliyuncs.com -P3306 -uadmin -pYourPassword -e "show databases
use mysql
" ;
评论区