在线时间:8:00-16:00
迪恩网络APP
随时随地掌握行业动态
扫描二维码
关注迪恩网络微信公众号
1.背景 当多个进程可能会对同样的数据执行操作时,这些进程需要保证其它进程没有在操作,以免损坏数据。通常,这样的进程会使用一个“锁文件”,也就是建立一个文件来告诉别的进程自己在运行,如果检测到那个文件存在则认为有操作同样数据的进程在工作。这样的问题是,进程不小心意外死亡了,没有清理掉那个锁文件,那么只能由用户手动来清理了。 2.关于flock flock 是对于整个文件的建议性锁。也就是说,如果一个进程在一个文件(inode)上放了锁,那么其它进程是可以知道的。(建议性锁不强求进程遵守。)最棒的一点是,它的第一个参数是文件描述符,在此文件描述符关闭时,锁会自动释放。而当进程终止时,所有的文件描述符均会被关闭。 3. shell中实现flock系统调用的命令是flock,其使用格式有以下两种(man flock)
复制代码 代码如下: flock [-sxon] [-w timeout] lockfile [-c] command... flock [-sxun] [-w timeout] fd
4. shell中实现排它锁避免脚本重复执行 Linux中的例行性工作排程crontab会定时执行一些脚本,但脚本的执行时间往往无法控制,当脚本执行时间过长时,可能会导致上一次任务的脚本还没执行完,下一次任务的脚本又开始执行了。这种情况下可能会出现一些并发问题,严重时会导致出现脏数据/性能瓶颈的恶性循环。 4.1 创建执行脚本 复制代码 代码如下: #cat /scripts/shell/file_lock.sh #!/bin/bash # Description: test for file flock PATH=/bin:/sbin:/usr/bin:/usr/sbin:/usr/local/bin:/usr/local/sbin:~/bin export PATH echo "" echo "start at `date '+%Y-%m-%d %H:%M:%S'` ..." sleep 140s echo "finished at `date '+%Y-%m-%d %H:%M:%S'` ..."
复制代码 代码如下: #crontab -e * * * * * flock -xn /dev/shm/test.lock -c "sh /scripts/shell/file_lock.sh > /root/stdout.log" 每分钟执行一次该脚本,并将输出信息写入到stdout.log 查看输出日志如下: 复制代码 代码如下: ---------------------------------- start at 2014-04-10 10:23:01 ... #获取锁 finish at 2014-04-10 10:25:21 ... #释放锁 ---------------------------------- start at 2014-04-10 10:26:01 ... #10:27:00及10:28:00启动的定时任务由于无法获取锁,以失败而退出执行,直到10:26:00才获取到锁 finish at 2014-04-10 10:28:21 ...
复制代码 代码如下: * * * * * flock -x -w 20 /dev/shm/test.lock -c "sh /scripts/shell/file_lock.sh > /root/stdout.log" 查看日志输出信息: 复制代码 代码如下: ---------------------------------- start at 2014-04-10 10:29:01 ... finish at 2014-04-10 10:31:21 ... ---------------------------------- start at 2014-04-10 10:31:21 ... #10:31:00启动的定时任务等待了20秒后,上一个任务释放了锁,所以此任务可以马上拿到锁,并继续执行 finish at 2014-04-10 10:33:41 ... |
请发表评论