2015-09-03 52 views
0

對不起,如果這是一個基本問題,但我剛剛開始,我有點失落。我有一組約3000個文件,我想運行一個命令。不幸的是,命令來自(morphadorner)的程序一次只能運行8個文件。這些文件被連續編號。如何讓程序在每個第8個文件上迭代,以便處理文件夾中的所有文件?以增量對一組文件實施bash腳本

回答

0

說你的文件被稱爲file01file02 ... file64,那麼你可以使用GNU Parallel來處理它們像這樣:

parallel -j 1 -n 8 echo {1} {2} {3} {4} {5} {6} {7} {8} ::: file* 

和輸出會是這樣:

file001 file002 file003 file004 file005 file006 file007 file008 
file009 file010 file011 file012 file013 file014 file015 file016 
file017 file018 file019 file020 file021 file022 file023 file024 
file025 file026 file027 file028 file029 file030 file031 file032 
file033 file034 file035 file036 file037 file038 file039 file040 
file041 file042 file043 file044 file045 file046 file047 file048 
file049 file050 file051 file052 file053 file054 file055 file056 
file057 file058 file059 file060 file061 file062 file063 file064 

中當然,我只迴應參數,你可能會打電話給morphadorner

-j 1說只運行一次一個morphadorner - 你可能要忽略這一點,並讓說8 morphadorners在同一時刻運行,如果你有8個CPU內核。

-n 8說到消耗 8個參數/文件在時間。

{1}爲第一個參數的佔位符,並且{2}是第二個參數等

:::該佔位符是一個分離器,它告訴GNU Parallel,所述參數是關於跟隨。

0

看一看這段代碼:

files=(*) 
    count=${#files[@]} 
    limit=8 
    echo "Processing $count files: ${files[@]}" 

    while [ $count -gt 0 ] ; do 
      count=$((count-8)) 
      [ $count -lt 0 ] && limit=$((limit+count)) && count=0 
      part=("${files[@]:$count:$limit}") 
      echo $count-$((count+limit)): "${part[@]}" 
    done