Script de récupération des URL collectés à l'aide de scoop.it

descoopit.sh

# Script de récupération des URL des contenus collecté dans scoop.it
#
# Usage:   sh descoopit.sh url_scoopit nb_pages
#
# Exemple: sh descoopit.sh https://www.scoop.it/u/open-data-france/ 3 > odf.txt
#
# Dépendances: curl, jq, grep, sed

for p in `seq 1 $2`
do
  curl "$1/ajaxGetLastPublishedPosts?showPaginator=true&page=$p&view=json&listId=curatedPostsTab" -s \
  | jq .js_inner_replace.html -r \
  | grep postTitleView \
  | sed 's!.*href="!!;s!".*$!!'
done