青空文庫の文書リストcsvから全作品をダウンロードして、難易度を計算する

calc_difficulty.sh

#!/bin/bash

while read -r line
do
    url=`echo $line | awk -F ',' '{print $46 }' | sed -e 's/\"//g'`
    curl -LOk $url > /dev/null 2>&1
    if [ $? -ne 0 ]
    then
        continue
    fi
    file_name=`echo $url | awk -F '/' '{print $7}' | sed -e 's/\"//g'`
    new_file_name=`echo $file_name | sed -e 's/zip/txt/g'`
    unzip -c $file_name | nkf -w > $new_file_name
done < $1