侧边栏壁纸
博主头像
WinJay博主等级

博观而约取 厚积而薄发

  • 累计撰写 333 篇文章
  • 累计创建 168 个标签
  • 累计收到 2 条评论

目 录CONTENT

文章目录

Linux环境下Shell调用MySQL并实现定时任务

WinJay
2022-11-18 / 0 评论 / 0 点赞 / 5 阅读 / 2,308 字 / 正在检测是否收录...
温馨提示:
本文最后更新于 2022-11-18,若内容或图片失效,请留言反馈。部分素材来自网络,若不小心影响到您的利益,请联系我们删除。

Linux环境下Shell调用MySQL并实现定时任务

image-20221118172802856

对于一些周期性事务,我们可以在Linux下,使用shell脚本调用mysql数据库存储过程,并设置定时任务。本来是要mysql数据库中创建事件任务来,定时执行存储过程,做数据传输的。。。使用crontab来定时执行,调用存储过程。

  • 实现这个数据传输分为两步:

一、编写shell脚本

  • 调用mysql数据库存储过程,如下:
#!/bin/bash
# 50 8 * * * sh /home/bgop/hao/detector_task.sh > /dev/null 2>&1 &

host1=127.0.0.1
user=root
passwd=HaoChuangMysql\@2018
port=23306
mysql -h${host1} -u${user} -p${passwd} -P${port} -e "use bg-biz;call test_insert;" ;

这样就可以,调用执行库data的过程pro了。

注意,不同主机有可能需要写出mysql的绝对路径,如/usr/bin/mysql,否则不执行库过程。。。

这里有几个要点,我加上详细的备注说明:

!/bin/bash
#数据库信息,也可以写 HOSTNAME="localhost",端口号 PORT可以不设定
HOSTNAME="192.168.0.100"
# 端口
PORT="3306"
# 用户名
USERNAME="root"
# 密码,注意如果有特殊字符的话,记得使用\转义
PASSWORD="haochuangMySQL\@2018"
#数据库名称
DBNAME="test_db_test"
#数据库中表的名称
TABLENAME="test_table_test"

# 带上上面参数,调用存储过程
mysql -h${host1} -u${user} -p${passwd} -P${port} -e "call  库名data.过程名pro" ;

二、创建crontab定时任务

  • 设置在凌晨1点执行脚本/home/bgop/hao/detector_task.sh
# vim /var/spool/cron/root

添加语句 0 1 * * * sh /home/bgop/hao/detector_task.sh

0 1 * * * sh /home/bgop/hao/detector_task.sh > /dev/null 2>&1 &

设置完成之后保存,重启一下crontab,并查看crontab的状态是否正常

[root@VM_0_16_centos hao]# service crond restart
Redirecting to /bin/systemctl restart  crond.service
[root@VM_0_16_centos hao]# service crond status 
Redirecting to /bin/systemctl status  crond.service
● crond.service - Command Scheduler
   Loaded: loaded (/usr/lib/systemd/system/crond.service; enabled; vendor preset: enabled)
   Active: active (running) since Wed 2018-12-05 09:39:25 CST; 2s ago
 Main PID: 25636 (crond)
   CGroup: /system.slice/crond.service
           └─25636 /usr/sbin/crond -n

Dec 05 09:39:25 VM_0_16_centos systemd[1]: Started Command Scheduler.
Dec 05 09:39:25 VM_0_16_centos crond[25636]: (CRON) INFO (RANDOM_DELAY will be scaled with factor 20% if used.)
Dec 05 09:39:25 VM_0_16_centos systemd[1]: Starting Command Scheduler...
Dec 05 09:39:25 VM_0_16_centos crond[25636]: (CRON) bad minute (/etc/cron.d/cron.allow)
Dec 05 09:39:25 VM_0_16_centos crond[25636]: (CRON) bad minute (/etc/cron.d/cron.allow)
Dec 05 09:39:25 VM_0_16_centos crond[25636]: (CRON) INFO (running with inotify support)
Dec 05 09:39:25 VM_0_16_centos crond[25636]: (CRON) INFO (@reboot jobs will be run at computer's startup.)
  • 经过这两个步骤,就可以实现使用shell脚本调用mysql数据库存储过程,并设置定时任务。

三、 常用命令

-----另外,补充几条常用的Linux与MySQL等操作命令,如下:

# 导入数据
mysql -uroot  -h192.168.0.100  -P23306 -pHaoMySQL\@2018 < /hao/software/localCon.sql
#创建数据库
create_db_sql="create database IF NOT EXISTS ${DBNAME}"
mysql -h${HOSTNAME} -P${PORT} -u${USERNAME} -p${PASSWORD} -e "${create_db_sql}"

注意:-p${PASSWORD}中间不能有空格

#创建表
create_table_sql="create table IF NOT EXISTS ${TABLENAME} ( name varchar(20), id int(11) default 0 )"
mysql -h${HOSTNAME} -P${PORT} -u${USERNAME} -p${PASSWORD}  -D ${DBNAME} -e "${create_db_sql}"

#插入数据
insert_sql="insert into ${TABLENAME} values('billchen',2)"
mysql -h${HOSTNAME} -P${PORT} -u${USERNAME} -p${PASSWORD} ${DBNAME} -e  "${insert_sql}"

#查询
select_sql="select * from ${TABLENAME}"
mysql -h${HOSTNAME} -P${PORT} -u${USERNAME} -p${PASSWORD} ${DBNAME} -e "${select_sql}"

#更新数据
update_sql="update ${TABLENAME} set id=3"
mysql -h${HOSTNAME} -P${PORT} -u${USERNAME} -p${PASSWORD} ${DBNAME} -e "${update_sql}"
mysql -h${HOSTNAME} -P${PORT} -u${USERNAME} -p${PASSWORD} ${DBNAME} -e  "${select_sql}"

#删除数据
delete_sql="delete from ${TABLENAME}"
mysql -h${HOSTNAME} -P${PORT} -u${USERNAME} -p${PASSWORD} ${DBNAME} -e "${delete_sql}"
mysql -h${HOSTNAME} -P${PORT} -u${USERNAME} -p${PASSWORD} ${DBNAME} -e "${select_sql}"


四、Crontab用法

----补充一些crontab相关的命令

crontab文件的含义:

用户所建立的crontab文件中,每一行都代表一项任务,每行的每个字段代表一项设置,它的格式共分为六个字段,前五段是时间设定段,第六段是要执行的命令段,格式如下:

minute hour day month week command

其中:

minute: 表示分钟,可以是从0到59之间的任何整数。

hour:表示小时,可以是从0到23之间的任何整数。

day:表示日期,可以是从1到31之间的任何整数。

month:表示月份,可以是从1到12之间的任何整数。

week:表示星期几,可以是从0到7之间的任何整数,这里的0或7代表星期日。

command:要执行的命令,可以是系统命令,也可以是自己编写的脚本文件。

[afasfadsf

在以上各个字段中,还可以使用以下特殊字符:

星号(*):代表所有可能的值,例如month字段如果是星号,则表示在满足其它字段的制约条件后每月都执行该命令操作。

逗号(,):可以用逗号隔开的值指定一个列表范围,例如,“1,2,5,7,8,9”

中杠(-):可以用整数之间的中杠表示一个整数范围,例如“2-6”表示“2,3,4,5,6”

正斜线(/):可以用正斜线指定时间的间隔频率,例如“0-23/2”表示每两小时执行一次。同时正斜线可以和星号一起使用,例如*/10,如果用在minute字段,表示每十分钟执行一次。

五、crond服务

安装crontab:

yum install crontabs

服务操作说明:

/sbin/service crond start //启动服务

/sbin/service crond stop //关闭服务

/sbin/service crond restart //重启服务

/sbin/service crond reload //重新载入配置

查看crontab服务状态:

service crond status

手动启动crontab服务:

service crond start

加入开机自动启动:

chkconfig –level 35 crond on

使用实例

实例1:每1分钟执行一次command

命令:

* * * * * command

实例2:每小时的第3和第15分钟执行

命令:

3,15 * * * * command

实例3:在上午8点到11点的第3和第15分钟执行

命令:

3,15 8-11 * * * command

实例4:每隔两天的上午8点到11点的第3和第15分钟执行

命令:

3,15 8-11 */2 * * command

实例5:每个星期一的上午8点到11点的第3和第15分钟执行

命令:

3,15 8-11 * * 1 command

实例6:每晚的21:30重启smb

命令:

30 21 * * * /etc/init.d/smb restart

实例7:每月1、10、22日的4 : 45重启smb

命令:

45 4 1,10,22 * * /etc/init.d/smb restart

实例8:每周六、周日的1 : 10重启smb

命令:

10 1 * * 6,0 /etc/init.d/smb restart

实例9:每天18 : 00至23 : 00之间每隔30分钟重启smb

命令:

0,30 18-23 * * * /etc/init.d/smb restart

实例10:每星期六的晚上11 : 00 pm重启smb

命令:

0 23 * * 6 /etc/init.d/smb restart

实例11:每一小时重启smb

命令:

* */1 * * * /etc/init.d/smb restart

实例12:晚上11点到早上7点之间,每隔一小时重启smb

命令:

* 23-7/1 * * * /etc/init.d/smb restart

实例13:每月的4号与每周一到周三的11点重启smb

命令:

0 11 4 * mon-wed /etc/init.d/smb restart

实例14:一月一号的4点重启smb

命令:

0 4 1 jan * /etc/init.d/smb restart

实例15:每小时执行/etc/cron.hourly目录内的脚本

命令:

01 * * * * root run-parts /etc/cron.hourly

待完善。

删除指定天之前的日志记录

delete from log
where id <= (

select id from (

select max(id) as id from log

where date(create_time) <= date(date_sub(now(), interval 7 day))

) as a

);
---

delete from 表名 where DATE(字   段  名) <= DATE(date_sub(now(), interval 60 day));

delete from log where DATE(create_time) <= DATE(date_sub(now(), interval 60 day));

---
Delete From tableNmae WHERE DATE(create_time) <= DATE(DATE_SUB(NOW(),INTERVAL 60 day)) ;

tableNmae->表名
XX -> 你需要删除多少天之前的数据
datetime->时间(datetime/varchar都支持)

天数传入1时会删除当天数据


---
21-Server
# 删除30天之前的日志记录
select count(*) from log		68094

Delete From log WHERE DATE(create_time) <= DATE(DATE_SUB(NOW(),INTERVAL 30 day)) ;

# 删除180天之前的记录
Delete From attendance_record WHERE DATE(work_date) <= DATE(DATE_SUB(NOW(),INTERVAL 180 day)) ;



---
mysqldump -hrm-2ze4sz.mysql.rds.aliyuncs.com -P3306 -uadmin -pYourPassword --default-character-set=utf8mb4 --hex-blob --master-data=2 --single-transaction --opt --set-gtid-purged=OFF --skip-tz-utc --events --triggers --routines database_name  > /root/RDS_Backup/$(date +%Y%m%d%H%M%S)_database_name.sql



mysql -hrm-2ze4sz.mysql.rds.aliyuncs.com -P3306 -uadmin -pYourPassword -e "show databases;use mysql;show tables;select Host,User from user;desc user" ;

/usr/local/mysql/bin/mysql -hrm-2ze4sz.mysql.rds.aliyuncs.com -P3306 -uadmin -pYourPassword -e "
use faygo
source faygo.sql
select * from dev
quit
"


mysql -hrm-2ze4sz.mysql.rds.aliyuncs.com -P3306 -uadmin -pYourPassword -e "show databases
use mysql
" ;

0

评论区