get_scanningtheearth.sh

# download http://scanningtheearth.org/data/[0-9]+
wget -q -O - http://scanningtheearth.org/data | grep "href=\"[0-9]\+\"" | sed "s/^.*href=\"//g" | sed "s/\".*$//g" | xargs -I {} wget -O {}.csv http://scanningtheearth.org/data/{}

## 対象のhtmlをダウンロードして、stdoutからpipeする
#wget -q -O - http://scanningtheearth.org/data |
#
## 数字のみを含むhrefがある行をまず抽出して、その前後をトリムする
#grep "href=\"[0-9]\+\"" | sed "s/^.*href=\"//g" | sed "s/\".*$//g" |
#
## できた数字の列からurlとファイル名をして出力
#xargs -I {} wget -O {}.csv http://scanningtheearth.org/data/{}