我正在编写并行运行的脚本,并从同一个文件中获得他们的输入数据。这些脚本将打开输入文件,读取第一行,存储进行进一步处理,最后从输入文件中删除该读取行。
原文链接:https://www.f2er.com/bash/387967.html现在的问题是访问文件的多个脚本可能导致两个脚本同时访问输入文件并读取同一行的情况,这会导致正在被处理的行的不可接受的结果两次。
现在一个解决方案是在访问输入文件之前编写一个锁定文件(.lock_input),然后在释放输入文件时擦除它,但这种解决方案在我的情况下并不吸引人,因为有时NFS随机地减慢了网络通信,可能没有可靠的锁定。
另一个解决方案是放置一个进程锁而不是写一个文件,这意味着第一个脚本访问输入文件将启动一个名为lock_input的进程,其他的脚本将ps -elf | grep lock_input。如果它存在于进程列表中,它们将等待。这可能比写入NFS更快,但仍然不完美的解决方案…
所以我的问题是:有没有任何bash命令(或其他脚本解释器)或一个可以使用的服务,它将在线程编程中用于同步的信号量或互斥锁的行为?
谢谢。
小粗略的例子:
假设我们有input_file如下:
Monday Tuesday Wednesday Thursday Friday Saturday Sunday
治疗脚本:TrScript.sh
#!/bin/bash NbLines=$(cat input_file | wc -l) while [ ! $NbLines = 0 ] do FirstLine=$(head -1 input_file) echo "Hello World today is $FirstLine" RemainingLines=$(expr $NbLines - 1 ) tail -n $RemainingLines input_file > tmp mv tmp input_file NbLines=$(cat input_file | wc -l) done
主要脚本:
#! /bin/bash ./TrScript.sh & ./TrScript.sh & ./TrScript.sh & wait
结果应该是:
Hello World today is Monday Hello World today is Tuesday Hello World today is Wednesday Hello World today is Thursday Hello World today is Friday Hello World today is Saturday Hello World today is Sunday