Skip to content

Instantly share code, notes, and snippets.

@lightondust

lightondust/scraping.ipynb

Last active September 9, 2018 13:27
Show Gist options
  • Star 0 You must be signed in to star a gist
  • Fork 0 You must be signed in to fork a gist
  • Save lightondust/5a1e2f8b684f100cb17dc0c951fb6679 to your computer and use it in GitHub Desktop.
Save lightondust/5a1e2f8b684f100cb17dc0c951fb6679 to your computer and use it in GitHub Desktop.
Download ZIP
src/scraping.ipynb
Display the source blob
Display the rendered blob
Raw
scraping.ipynb
{
"cells": [
{
"metadata": {},
"cell_type": "markdown",
"source": "https://gist.github.com/lightondust/5a1e2f8b684f100cb17dc0c951fb6679"
},
{
"metadata": {
"trusted": true
},
"cell_type": "code",
"source": "import requests\nfrom requests.compat import urljoin\nfrom lxml import html\nimport os, time",
"execution_count": 1,
"outputs": []
},
{
"metadata": {
"trusted": true
},
"cell_type": "code",
"source": "from zslib.util.scraping_util import get_html_obj, download_file",
"execution_count": 2,
"outputs": []
},
{
"metadata": {
"trusted": true
},
"cell_type": "code",
"source": "TIME_SLEEP = 1",
"execution_count": 3,
"outputs": []
},
{
"metadata": {},
"cell_type": "markdown",
"source": "# スクレイピング"
},
{
"metadata": {},
"cell_type": "markdown",
"source": "## 国会議事録"
},
{
"metadata": {
"trusted": true
},
"cell_type": "code",
"source": "url_syugin_base = 'http://kokkai.ndl.go.jp/SENTAKU/syugiin/'\nuri_syugin_session_menu = 'mainb.html'",
"execution_count": 4,
"outputs": []
},
{
"metadata": {
"trusted": true
},
"cell_type": "code",
"source": "url_base = 'http://kokkai.ndl.go.jp/SENTAKU/syugiin/mainb.html'\nurl_meeting_list = 'http://kokkai.ndl.go.jp/SENTAKU/{house}/{session}/mainb.html'\nurl_proceding_list = 'http://kokkai.ndl.go.jp/SENTAKU/{house}/{session}/{meeting_type}/mainb.html'\nurl_proceding = 'http://kokkai.ndl.go.jp/SENTAKU/{house}/{session}/{meeting_type}/{uri}'",
"execution_count": 5,
"outputs": []
},
{
"metadata": {
"trusted": true
},
"cell_type": "code",
"source": "houses = ['sangiin', 'syugiin']\n# sessions = range(1,196)\nsessions = [161, 195]\ndir_to_save = '../data/proceeding/'",
"execution_count": 9,
"outputs": []
},
{
"metadata": {
"trusted": true
},
"cell_type": "code",
"source": "xpath_session_link = '//td[@class=\"large\"]/a'\nxpath_meeting_link = '//td[@class=\"small\"]/a'\nxpath_proceeding_link = '//td[@class=\"small-bold\"]/a'",
"execution_count": 10,
"outputs": []
},
{
"metadata": {
"trusted": true
},
"cell_type": "code",
"source": "res = requests.get(url_base)\nenc = res.apparent_encoding",
"execution_count": 11,
"outputs": []
},
{
"metadata": {
"trusted": true
},
"cell_type": "code",
"source": "with open('./scraping_log', 'w') as f:\n for house in houses:\n for session in sessions:\n # get meeting types at each session\n url_ = url_meeting_list.format(house=house, session=session)\n html_obj = get_html_obj(url_, encoding=enc)\n href_list = html_obj.xpath(xpath_meeting_link+'/@href')\n meeting_types = [uri.split('/')[-2] for uri in href_list]\n\n # get proceeding links at each meeting types\n for meeting_type in meeting_types:\n params = {\n 'house': house,\n 'session': session,\n 'meeting_type': meeting_type\n }\n url_ = url_proceding_list.format(**params)\n\n html_obj = get_html_obj(url_, encoding=enc)\n proceeding_links = html_obj.xpath(xpath_proceeding_link + '/@href')\n\n for link in proceeding_links:\n params_proceeding = params\n params_proceeding['uri'] = link.split('/')[-1]\n url_ = url_proceding.format(**params_proceeding).replace('a.html', 'c.html')\n print(url_, file=f)\n download_file(url_, os.path.join(dir_to_save, url_.split('/')[-1]))",
"execution_count": 12,
"outputs": []
},
{
"metadata": {},
"cell_type": "markdown",
"source": "### 重複検証"
},
{
"metadata": {},
"cell_type": "markdown",
"source": "### 読み出し"
},
{
"metadata": {
"trusted": true
},
"cell_type": "code",
"source": "# os.listdir('../data/proceeding/')\nwith open('../data/proceeding/19512080001007c.html', 'rb') as f:\n text = f.read()",
"execution_count": 101,
"outputs": []
},
{
"metadata": {
"trusted": true
},
"cell_type": "code",
"source": "# text.decode(encoding=enc)\ncontent = text.decode(encoding='Shift_JISx0213')",
"execution_count": 108,
"outputs": []
},
{
"metadata": {
"trusted": true
},
"cell_type": "code",
"source": "html_obj = html.fromstring(content)",
"execution_count": 110,
"outputs": []
},
{
"metadata": {
"trusted": true
},
"cell_type": "code",
"source": "print(html_obj.xpath('//title/text()')[0])",
"execution_count": 118,
"outputs": [
{
"output_type": "stream",
"text": "参議院会議録情報　第１９５回国会　本会議　第７号\n",
"name": "stdout"
}
]
},
{
"metadata": {
"trusted": true
},
"cell_type": "code",
"source": "content",
"execution_count": 115,
"outputs": [
{
"output_type": "execute_result",
"execution_count": 115,
"data": {
"text/plain": "'<HTML>\\n<HEAD>\\n<TITLE>参議院会議録情報\\u3000第１９５回国会\\u3000本会議\\u3000第７号</TITLE>\\n<META HTTP-EQUIV=\"Content-Type\" CONTENT=\"text/html;CHARSET=x-sjis\">\\n<META HTTP-EQUIV=\"Pragma\" CONTENT=\"no-cache\">\\n<link rel=\"stylesheet\" href=\"/SENTAKU/text.css\" type=\"text/css\">\\n</HEAD>\\n<BODY BGCOLOR=\"#FFFFFF\" class=\"small\">\\n<B> 第１９５回国会\\u3000本会議\\u3000第７号</B><BR>\\n平成二十九年十二月八日（金曜日）<BR>\\n\\u3000\\u3000\\u3000午前十一時三十一分開議<BR>\\n\\u3000\\u3000\\u3000\\u3000━━━━━━━━━━━━━<BR>\\n<B>○議事日程</B>\\u3000第六号<BR>\\n\\u3000\\u3000平成二十九年十二月八日<BR>\\n\\u3000\\u3000\\u3000午前十一時三十分開議<BR>\\n\\u3000第一\\u3000競馬法の一部を改正する法律案（内閣提<BR>\\n\\u3000\\u3000出、衆議院送付）<BR>\\n\\u3000第二\\u3000一般職の職員の給与に関する法律等の一<BR>\\n\\u3000\\u3000部を改正する法律案（内閣提出、衆議院送付<BR>\\n\\u3000\\u3000）<BR>\\n\\u3000第三\\u3000特別職の職員の給与に関する法律の一部<BR>\\n\\u3000\\u3000を改正する法律案（内閣提出、衆議院送付）<BR>\\n\\u3000第四\\u3000国家公務員退職手当法等の一部を改正す<BR>\\n\\u3000\\u3000る法律案（内閣提出、衆議院送付）<BR>\\n\\u3000第五\\u3000裁判官の報酬等に関する法律の一部を改<BR>\\n\\u3000\\u3000正する法律案（内閣提出、衆議院送付）<BR>\\n\\u3000第六\\u3000検察官の俸給等に関する法律の一部を改<BR>\\n\\u3000\\u3000正する法律案（内閣提出、衆議院送付）<BR>\\n\\u3000第七\\u3000防衛省の職員の給与等に関する法律の一<BR>\\n\\u3000\\u3000部を改正する法律案（内閣提出、衆議院送付<BR>\\n\\u3000\\u3000）<BR>\\n\\u3000第八\\u3000旅館業法の一部を改正する法律案（内閣<BR>\\n\\u3000\\u3000提出、衆議院送付）<BR>\\n\\u3000第九\\u3000特定フィブリノゲン製剤及び特定血液凝<BR>\\n\\u3000\\u3000固第Ⅸ因子製剤によるＣ型肝炎感染被害者を<BR>\\n\\u3000\\u3000救済するための給付金の支給に関する特別措<BR>\\n\\u3000\\u3000置法の一部を改正する法律案（衆議院提出）<BR>\\n\\u3000\\u3000\\u3000\\u3000━━━━━━━━━━━━━<BR>\\n○本日の会議に付した案件<BR>\\n\\u3000一、裁判官弾劾裁判所裁判員、同予備員、裁判<BR>\\n\\u3000\\u3000官訴追委員及び同予備員辞任の件<BR>\\n\\u3000一、裁判官弾劾裁判所裁判員等各種委員の選挙<BR>\\n\\u3000一、国家公務員等の任命に関する件<BR>\\n\\u3000一、日程第一より第九まで<BR>\\n\\u3000一、国会議員の秘書の給与等に関する法律の一<BR>\\n\\u3000\\u3000部を改正する法律案（衆議院提出）<BR>\\n\\u3000一、難病・長期慢性疾病・小児慢性特定疾病対<BR>\\n\\u3000\\u3000策の総合的な推進に関する請願<BR>\\n\\u3000一、委員会及び調査会の審査及び調査を閉会中<BR>\\n\\u3000\\u3000も継続するの件<BR>\\n\\u3000\\u3000\\u3000\\u3000\\u3000─────・─────<BR>\\n<B>○議長（伊達忠一君）</B>\\u3000これより会議を開きます。<BR>\\n\\u3000この際、お諮りいたします。<BR>\\n\\u3000関口昌一君、二之湯智君及び浜田昌良君から裁判官弾劾裁判所裁判員を、山田俊男君から同予備員を、武見敬三君から裁判官訴追委員を、佐藤正久君及び平木大作君から同予備員を、それぞれ辞任いたしたいとの申出がございました。<BR>\\n\\u3000いずれも許可することに御異議ございませんか。<BR>\\n\\u3000\\u3000\\u3000〔「異議なし」と呼ぶ者あり〕<BR>\\n<B>○議長（伊達忠一君）</B>\\u3000御異議ないと認めます。<BR>\\n\\u3000よって、いずれも許可することに決しました。<BR>\\n\\u3000\\u3000\\u3000\\u3000\\u3000─────・─────<BR>\\n<B>○議長（伊達忠一君）</B>\\u3000この際、欠員となりました<BR>\\n\\u3000裁判官弾劾裁判所裁判員三名、同予備員一名、<BR>\\n\\u3000裁判官訴追委員一名、同予備員二名、またあわせて<BR>\\n\\u3000国土審議会委員三名、<BR>\\n\\u3000国土開発幹線自動車道建設会議委員二名の選挙<BR>\\nを行います。<BR>\\n\\u3000つきましては、これらの各種委員の選挙は、いずれもその手続を省略し、議長において指名することとし、また、裁判官弾劾裁判所裁判員予備員、裁判官訴追委員予備員の職務を行う順序は、これを議長に御一任願いたいと存じますが、御異議ございませんか。<BR>\\n\\u3000\\u3000\\u3000〔「異議なし」と呼ぶ者あり〕<BR>\\n<B>○議長（伊達忠一君）</B>\\u3000御異議ないと認めます。<BR>\\n\\u3000よって、議長は、裁判官弾劾裁判所裁判員その他の各種委員を議席に配付いたしました氏名表のとおり指名し、職務を行う順序を決定いたします。<BR>\\n\\u3000\\u3000\\u3000\\u3000─────────────<BR>\\n<BR>\\n\\u3000\\u3000\\u3000\\u3000\\u3000─────・─────<BR>\\n<B>○議長（伊達忠一君）</B>\\u3000この際、国家公務員等の任命に関する件についてお諮りいたします。<BR>\\n\\u3000内閣から、原子力委員会委員長及び同委員の任命について、本院の同意を求めてまいりました。<BR>\\n\\u3000これより採決をいたします。<BR>\\n\\u3000まず、原子力委員会委員長に岡芳明君を任命することについて採決をいたします。<BR>\\n\\u3000内閣申出のとおり同意することの賛否について、投票ボタンをお押し願います。<BR>\\n\\u3000\\u3000\\u3000〔投票開始〕<BR>\\n<B>○議長（伊達忠一君）</B>\\u3000間もなく投票を終了いたします。──これにて投票を終了いたします。<BR>\\n\\u3000\\u3000\\u3000〔投票終了〕<BR>\\n<B>○議長（伊達忠一君）</B>\\u3000投票の結果を報告いたします。<BR>\\n\\u3000\\u3000投票総数\\u3000\\u3000\\u3000\\u3000\\u3000\\u3000\\u3000\\u3000\\u3000二百三十七\\u3000\\u3000<BR>\\n\\u3000\\u3000賛成\\u3000\\u3000\\u3000\\u3000\\u3000\\u3000\\u3000\\u3000\\u3000\\u3000\\u3000\\u3000二百十五\\u3000\\u3000<BR>\\n\\u3000\\u3000反対\\u3000\\u3000\\u3000\\u3000\\u3000\\u3000\\u3000\\u3000\\u3000\\u3000\\u3000\\u3000\\u3000二十二\\u3000\\u3000<BR>\\n\\u3000よって、同意することに決しました。（拍手）<BR>\\n\\u3000\\u3000\\u3000\\u3000─────────────<BR>\\n\\u3000\\u3000\\u3000〔投票者氏名は本号末尾に掲載〕<BR>\\n\\u3000\\u3000\\u3000\\u3000─────────────<BR>\\n<B>○議長（伊達忠一君）</B>\\u3000次に、原子力委員会委員に佐野利男君を任命することについて採決をいたします。<BR>\\n\\u3000内閣申出のとおり同意することの賛否について、投票ボタンをお押し願います。<BR>\\n\\u3000\\u3000\\u3000〔投票開始〕<BR>\\n<B>○議長（伊達忠一君）</B>\\u3000間もなく投票を終了いたします。──これにて投票を終了いたします。<BR>\\n\\u3000\\u3000\\u3000〔投票終了〕<BR>\\n<B>○議長（伊達忠一君）</B>\\u3000投票の結果を報告いたします。<BR>\\n\\u3000\\u3000投票総数\\u3000\\u3000\\u3000\\u3000\\u3000\\u3000\\u3000\\u3000\\u3000二百三十七\\u3000\\u3000<BR>\\n\\u3000\\u3000賛成\\u3000\\u3000\\u3000\\u3000\\u3000\\u3000\\u3000\\u3000\\u3000\\u3000\\u3000\\u3000百六十四\\u3000\\u3000<BR>\\n\\u3000\\u3000反対\\u3000\\u3000\\u3000\\u3000\\u3000\\u3000\\u3000\\u3000\\u3000\\u3000\\u3000\\u3000\\u3000七十三\\u3000\\u3000<BR>\\n\\u3000よって、同意することに決しました。（拍手）<BR>\\n\\u3000\\u3000\\u3000\\u3000─────────────<BR>\\n\\u3000\\u3000\\u3000〔投票者氏名は本号末尾に掲載〕<BR>\\n\\u3000\\u3000\\u3000\\u3000\\u3000─────・─────<BR>\\n<B>○議長（伊達忠一君）</B>\\u3000日程第一\\u3000競馬法の一部を改正する法律案（内閣提出、衆議院送付）を議題といたします。<BR>\\n\\u3000まず、委員長の報告を求めます。農林水産委員長岩井茂樹君。<BR>\\n\\u3000\\u3000\\u3000\\u3000─────────────<BR>\\n\\u3000\\u3000\\u3000〔審査報告書及び議案は本号末尾に掲載〕<BR>\\n\\u3000\\u3000\\u3000\\u3000─────────────<BR>\\n\\u3000\\u3000\\u3000〔岩井茂樹君登壇、拍手〕<BR>\\n<B>○岩井茂樹君</B>\\u3000ただいま議題となりました法律案につきまして、農林水産委員会における審査の経過と結果を御報告申し上げます。<BR>\\n\\u3000本法律案は、近年における地方競馬主催者の厳しい事業収支の状況に鑑み、地方競馬の振興等を図るため、地方競馬全国協会の行う業務に必要な資金の確保措置の期限延長を行おうとするものであります。<BR>\\n\\u3000委員会におきましては、資金確保措置の期限延長の必要性、競馬場の入場者を増やすための方策、馬産地支援の取組等について質疑が行われましたが、その詳細は会議録によって御承知願います。<BR>\\n\\u3000質疑を終局し、採決の結果、本法律案は全会一致をもって原案どおり可決すべきものと決定いたしました。<BR>\\n\\u3000なお、本法律案に対して附帯決議を行いました。<BR>\\n\\u3000以上、御報告申し上げます。（拍手）<BR>\\n\\u3000\\u3000\\u3000\\u3000─────────────<BR>\\n<B>○議長（伊達忠一君）</B>\\u3000これより採決をいたします。<BR>\\n\\u3000本案の賛否について、投票ボタンをお押し願います。<BR>\\n\\u3000\\u3000\\u3000〔投票開始〕<BR>\\n<B>○議長（伊達忠一君）</B>\\u3000間もなく投票を終了いたします。──これにて投票を終了いたします。<BR>\\n\\u3000\\u3000\\u3000〔投票終了〕<BR>\\n<B>○議長（伊達忠一君）</B>\\u3000投票の結果を報告いたします。<BR>\\n\\u3000\\u3000投票総数\\u3000\\u3000\\u3000\\u3000\\u3000\\u3000\\u3000\\u3000\\u3000二百三十七\\u3000\\u3000<BR>\\n\\u3000\\u3000賛成\\u3000\\u3000\\u3000\\u3000\\u3000\\u3000\\u3000\\u3000\\u3000\\u3000\\u3000二百三十七\\u3000\\u3000<BR>\\n\\u3000\\u3000反対\\u3000\\u3000\\u3000\\u3000\\u3000\\u3000\\u3000\\u3000\\u3000\\u3000\\u3000\\u3000\\u3000\\u3000\\u3000〇\\u3000\\u3000<BR>\\n\\u3000よって、本案は全会一致をもって可決されました。（拍手）<BR>\\n\\u3000\\u3000\\u3000\\u3000─────────────<BR>\\n\\u3000\\u3000\\u3000〔投票者氏名は本号末尾に掲載〕<BR>\\n\\u3000\\u3000\\u3000\\u3000\\u3000─────・─────<BR>\\n<B>○議長（伊達忠一君）</B>\\u3000日程第二\\u3000一般職の職員の給与に関する法律等の一部を改正する法律案<BR>\\n\\u3000日程第三\\u3000特別職の職員の給与に関する法律の一部を改正する法律案<BR>\\n\\u3000日程第四\\u3000国家公務員退職手当法等の一部を改正する法律案<BR>\\n\\u3000\\u3000（いずれも内閣提出、衆議院送付）<BR>\\n\\u3000以上三案を一括して議題といたします。<BR>\\n\\u3000まず、委員長の報告を求めます。内閣委員長榛葉賀津也君。<BR>\\n\\u3000\\u3000\\u3000\\u3000─────────────<BR>\\n\\u3000\\u3000\\u3000〔審査報告書及び議案は本号末尾に掲載〕<BR>\\n\\u3000\\u3000\\u3000\\u3000─────────────<BR>\\n\\u3000\\u3000\\u3000〔榛葉賀津也君登壇、拍手〕<BR>\\n<B>○榛葉賀津也君</B>\\u3000ただいま議題となりました三法律案につきまして、内閣委員会における審査の経過と結果を御報告申し上げます。<BR>\\n\\u3000まず、一般職の職員の給与に関する法律等の一部を改正する法律案は、人事院の国会及び内閣に対する平成二十九年八月八日付けの職員の給与の改定に関する勧告に鑑み、一般職の国家公務員の俸給月額、初任給調整手当及び勤勉手当の額の改定を行う等の措置を講じようとするものであります。<BR>\\n\\u3000次に、特別職の職員の給与に関する法律の一部を改正する法律案は、一般職の国家公務員の給与改定に伴い、特別職の職員の給与の額を改定しようとするものであります。<BR>\\n\\u3000次に、国家公務員退職手当法等の一部を改正する法律案は、民間における退職給付の支給の実情に鑑み、国家公務員の退職手当の額を引き下げる等の措置を講じようとするものであります。<BR>\\n\\u3000委員会におきましては、三法律案を一括して議題とし、国家公務員の退職手当の支給水準を引き下げる理由、国の非常勤職員等の実効性ある処遇改善、国家公務員の働き方改革を推進する必要性等について質疑が行われましたが、その詳細は会議録によって御承知願います。<BR>\\n\\u3000質疑を終了し、討論に入りましたところ、日本共産党の田村委員より、一般職給与法等改正案に賛成、他の二法律案に反対、日本維新の会の清水委員より三法律案に反対の旨の意見がそれぞれ述べられました。<BR>\\n\\u3000次いで、順次採決の結果、三法律案はいずれも多数をもって原案どおり可決すべきものと決定いたしました。<BR>\\n\\u3000以上、御報告申し上げます。（拍手）<BR>\\n\\u3000\\u3000\\u3000\\u3000─────────────<BR>\\n<B>○議長（伊達忠一君）</B>\\u3000これより採決をいたします。<BR>\\n\\u3000まず、一般職の職員の給与に関する法律等の一部を改正する法律案の採決をいたします。<BR>\\n\\u3000本案の賛否について、投票ボタンをお押し願います。<BR>\\n\\u3000\\u3000\\u3000〔投票開始〕<BR>\\n<B>○議長（伊達忠一君）</B>\\u3000間もなく投票を終了いたします。──これにて投票を終了いたします。<BR>\\n\\u3000\\u3000\\u3000〔投票終了〕<BR>\\n<B>○議長（伊達忠一君）</B>\\u3000投票の結果を報告いたします。<BR>\\n\\u3000\\u3000投票総数\\u3000\\u3000\\u3000\\u3000\\u3000\\u3000\\u3000\\u3000\\u3000二百三十七\\u3000\\u3000<BR>\\n\\u3000\\u3000賛成\\u3000\\u3000\\u3000\\u3000\\u3000\\u3000\\u3000\\u3000\\u3000\\u3000\\u3000二百二十六\\u3000\\u3000<BR>\\n\\u3000\\u3000反対\\u3000\\u3000\\u3000\\u3000\\u3000\\u3000\\u3000\\u3000\\u3000\\u3000\\u3000\\u3000\\u3000\\u3000十一\\u3000\\u3000<BR>\\n\\u3000よって、本案は可決されました。（拍手）<BR>\\n\\u3000\\u3000\\u3000\\u3000─────────────<BR>\\n\\u3000\\u3000\\u3000〔投票者氏名は本号末尾に掲載〕<BR>\\n\\u3000\\u3000\\u3000\\u3000─────────────<BR>\\n<B>○議長（伊達忠一君）</B>\\u3000次に、特別職の職員の給与に関する法律の一部を改正する法律案及び国家公務員退職手当法等の一部を改正する法律案を一括して採決いたします。<BR>\\n\\u3000両案の賛否について、投票ボタンをお押し願います。<BR>\\n\\u3000\\u3000\\u3000〔投票開始〕<BR>\\n<B>○議長（伊達忠一君）</B>\\u3000間もなく投票を終了いたします。──これにて投票を終了いたします。<BR>\\n\\u3000\\u3000\\u3000〔投票終了〕<BR>\\n<B>○議長（伊達忠一君）</B>\\u3000投票の結果を報告いたします。<BR>\\n\\u3000\\u3000投票総数\\u3000\\u3000\\u3000\\u3000\\u3000\\u3000\\u3000\\u3000\\u3000二百三十三\\u3000\\u3000<BR>\\n\\u3000\\u3000賛成\\u3000\\u3000\\u3000\\u3000\\u3000\\u3000\\u3000\\u3000\\u3000\\u3000\\u3000\\u3000\\u3000二百四\\u3000\\u3000<BR>\\n\\u3000\\u3000反対\\u3000\\u3000\\u3000\\u3000\\u3000\\u3000\\u3000\\u3000\\u3000\\u3000\\u3000\\u3000\\u3000二十九\\u3000\\u3000<BR>\\n\\u3000よって、両案は可決されました。（拍手）<BR>\\n\\u3000\\u3000\\u3000\\u3000─────────────<BR>\\n\\u3000\\u3000\\u3000〔投票者氏名は本号末尾に掲載〕<BR>\\n\\u3000\\u3000\\u3000\\u3000\\u3000─────・─────<BR>\\n<B>○議長（伊達忠一君）</B>\\u3000日程第五\\u3000裁判官の報酬等に関する法律の一部を改正する法律案<BR>\\n\\u3000日程第六\\u3000検察官の俸給等に関する法律の一部を改正する法律案<BR>\\n\\u3000\\u3000（いずれも内閣提出、衆議院送付）<BR>\\n\\u3000以上両案を一括して議題といたします。<BR>\\n\\u3000まず、委員長の報告を求めます。法務委員長石川博崇君。<BR>\\n\\u3000\\u3000\\u3000\\u3000─────────────<BR>\\n\\u3000\\u3000\\u3000〔審査報告書及び議案は本号末尾に掲載〕<BR>\\n\\u3000\\u3000\\u3000\\u3000─────────────<BR>\\n\\u3000\\u3000\\u3000〔石川博崇君登壇、拍手〕<BR>\\n<B>○石川博崇君</B>\\u3000ただいま議題となりました両法律案につきまして、法務委員会における審査の経過と結果を御報告申し上げます。<BR>\\n\\u3000両法律案は、一般の政府職員の給与改定に伴い、裁判官の報酬月額及び検察官の俸給月額の改定を行おうとするものであります。<BR>\\n\\u3000委員会におきましては、両法律案を一括して議題とし、裁判官の報酬及び検察官の俸給に係る予算額、一般の政府職員と裁判官、検察官の給与の比較、裁判所職員の夜間業務における負担、家庭裁判所を充実する必要性等について質疑が行われましたが、その詳細は会議録によって御承知願います。<BR>\\n\\u3000質疑を終局し、討論に入りましたところ、日本維新の会を代表して東委員より両法律案に反対する旨の意見が述べられました。<BR>\\n\\u3000討論を終局し、順次採決の結果、両法律案はいずれも多数をもって原案どおり可決すべきものと決定いたしました。<BR>\\n\\u3000以上、御報告申し上げます。（拍手）<BR>\\n\\u3000\\u3000\\u3000\\u3000─────────────<BR>\\n<B>○議長（伊達忠一君）</B>\\u3000これより両案を一括して採決いたします。<BR>\\n\\u3000両案の賛否について、投票ボタンをお押し願います。<BR>\\n\\u3000\\u3000\\u3000〔投票開始〕<BR>\\n<B>○議長（伊達忠一君）</B>\\u3000間もなく投票を終了いたします。──これにて投票を終了いたします。<BR>\\n\\u3000\\u3000\\u3000〔投票終了〕<BR>\\n<B>○議長（伊達忠一君）</B>\\u3000投票の結果を報告いたします。<BR>\\n\\u3000\\u3000投票総数\\u3000\\u3000\\u3000\\u3000\\u3000\\u3000\\u3000\\u3000\\u3000二百三十七\\u3000\\u3000<BR>\\n\\u3000\\u3000賛成\\u3000\\u3000\\u3000\\u3000\\u3000\\u3000\\u3000\\u3000\\u3000\\u3000\\u3000二百二十六\\u3000\\u3000<BR>\\n\\u3000\\u3000反対\\u3000\\u3000\\u3000\\u3000\\u3000\\u3000\\u3000\\u3000\\u3000\\u3000\\u3000\\u3000\\u3000\\u3000十一\\u3000\\u3000<BR>\\n\\u3000よって、両案は可決されました。（拍手）<BR>\\n\\u3000\\u3000\\u3000\\u3000─────────────<BR>\\n\\u3000\\u3000\\u3000〔投票者氏名は本号末尾に掲載〕<BR>\\n\\u3000\\u3000\\u3000\\u3000\\u3000─────・─────<BR>\\n<B>○議長（伊達忠一君）</B>\\u3000日程第七\\u3000防衛省の職員の給与等に関する法律の一部を改正する法律案（内閣提出、衆議院送付）を議題といたします。<BR>\\n\\u3000まず、委員長の報告を求めます。外交防衛委員長三宅伸吾君。<BR>\\n\\u3000\\u3000\\u3000\\u3000─────────────<BR>\\n\\u3000\\u3000\\u3000〔審査報告書及び議案は本号末尾に掲載〕<BR>\\n\\u3000\\u3000\\u3000\\u3000─────────────<BR>\\n\\u3000\\u3000\\u3000〔三宅伸吾君登壇、拍手〕<BR>\\n<B>○三宅伸吾君</B>\\u3000ただいま議題となりました防衛省の職員の給与等に関する法律の一部を改正する法律案につきまして、外交防衛委員会における審査の経過と結果を御報告申し上げます。<BR>\\n\\u3000本法律案は、一般職の国家公務員の例に準じて、防衛省職員の俸給月額等を改定する措置を講じようとするものであります。<BR>\\n\\u3000委員会におきましては、今回の法改正による給与改定の意義、自衛官の確保のための給与を含めた待遇改善、女性自衛官の活躍推進のための環境整備、自衛官の充足率向上に向けた取組等について質疑が行われましたが、詳細は会議録によって御承知願います。<BR>\\n\\u3000質疑を終え、採決の結果、本法律案は多数をもって原案どおり可決すべきものと決定いたしました。<BR>\\n\\u3000以上、御報告申し上げます。（拍手）<BR>\\n\\u3000\\u3000\\u3000\\u3000─────────────<BR>\\n<B>○議長（伊達忠一君）</B>\\u3000これより採決をいたします。<BR>\\n\\u3000本案の賛否について、投票ボタンをお押し願います。<BR>\\n\\u3000\\u3000\\u3000〔投票開始〕<BR>\\n<B>○議長（伊達忠一君）</B>\\u3000間もなく投票を終了いたします。──これにて投票を終了いたします。<BR>\\n\\u3000\\u3000\\u3000〔投票終了〕<BR>\\n<B>○議長（伊達忠一君）</B>\\u3000投票の結果を報告いたします。<BR>\\n\\u3000\\u3000投票総数\\u3000\\u3000\\u3000\\u3000\\u3000\\u3000\\u3000\\u3000\\u3000二百三十七\\u3000\\u3000<BR>\\n\\u3000\\u3000賛成\\u3000\\u3000\\u3000\\u3000\\u3000\\u3000\\u3000\\u3000\\u3000\\u3000\\u3000二百二十六\\u3000\\u3000<BR>\\n\\u3000\\u3000反対\\u3000\\u3000\\u3000\\u3000\\u3000\\u3000\\u3000\\u3000\\u3000\\u3000\\u3000\\u3000\\u3000\\u3000十一\\u3000\\u3000<BR>\\n\\u3000よって、本案は可決されました。（拍手）<BR>\\n\\u3000\\u3000\\u3000\\u3000─────────────<BR>\\n\\u3000\\u3000\\u3000〔投票者氏名は本号末尾に掲載〕<BR>\\n\\u3000\\u3000\\u3000\\u3000\\u3000─────・─────<BR>\\n<B>○議長（伊達忠一君）</B>\\u3000日程第八\\u3000旅館業法の一部を改正する法律案（内閣提出、衆議院送付）<BR>\\n\\u3000日程第九\\u3000特定フィブリノゲン製剤及び特定血液凝固第Ⅸ因子製剤によるＣ型肝炎感染被害者を救済するための給付金の支給に関する特別措置法の一部を改正する法律案（衆議院提出）<BR>\\n\\u3000以上両案を一括して議題といたします。<BR>\\n\\u3000まず、委員長の報告を求めます。厚生労働委員長島村大君。<BR>\\n\\u3000\\u3000\\u3000\\u3000─────────────<BR>\\n\\u3000\\u3000\\u3000〔審査報告書及び議案は本号末尾に掲載〕<BR>\\n\\u3000\\u3000\\u3000\\u3000─────────────<BR>\\n\\u3000\\u3000\\u3000〔島村大君登壇、拍手〕<BR>\\n<B>○島村大君</B>\\u3000ただいま議題となりました両法律案につきまして、厚生労働委員会における審査の経過と結果を御報告申し上げます。<BR>\\n\\u3000まず、旅館業法の一部を改正する法律案は、旅館業の業務の適正な運営を確保すること等により、旅館業の健全な発達を図り、公衆衛生及び国民生活の向上に寄与するため、ホテル営業及び旅館営業の営業種別の統合、都道府県知事等による旅館業を営む者に対する緊急命令の創設、無許可営業者など旅館業法に違反した者に対する罰金の上限額の引上げ等の措置を講じようとするものであります。<BR>\\n\\u3000委員会におきましては、本法律案の趣旨及び早期成立の必要性、旅館業に係る規制の在り方、違法民泊の現状及び対策等について質疑を行いましたが、その詳細は会議録によって御承知願います。<BR>\\n\\u3000質疑を終局し、採決の結果、本法律案は全会一致をもって原案どおり可決すべきものと決定いたしました。<BR>\\n\\u3000次に、特定フィブリノゲン製剤及び特定血液凝固第Ⅸ因子製剤によるＣ型肝炎感染被害者を救済するための給付金の支給に関する特別措置法の一部を改正する法律案は、Ｃ型肝炎感染被害者を救済するための特別措置法に基づく給付金の支給の請求の状況に鑑み、給付金の請求期限を法施行後十年から十五年に延長しようとするものであります。<BR>\\n\\u3000委員会におきましては、提出者である衆議院厚生労働委員長高鳥修一君より趣旨説明を聴取した後、採決の結果、本法律案は全会一致をもって原案どおり可決すべきものと決定いたしました。<BR>\\n\\u3000なお、両法律案に対しそれぞれ附帯決議が付されております。<BR>\\n\\u3000以上、御報告申し上げます。（拍手）<BR>\\n\\u3000\\u3000\\u3000\\u3000─────────────<BR>\\n<B>○議長（伊達忠一君）</B>\\u3000これより両案を一括して採決いたします。<BR>\\n\\u3000両案の賛否について、投票ボタンをお押し願います。<BR>\\n\\u3000\\u3000\\u3000〔投票開始〕<BR>\\n<B>○議長（伊達忠一君）</B>\\u3000間もなく投票を終了いたします。──これにて投票を終了いたします。<BR>\\n\\u3000\\u3000\\u3000〔投票終了〕<BR>\\n<B>○議長（伊達忠一君）</B>\\u3000投票の結果を報告いたします。<BR>\\n\\u3000\\u3000投票総数\\u3000\\u3000\\u3000\\u3000\\u3000\\u3000\\u3000\\u3000\\u3000二百三十四\\u3000\\u3000<BR>\\n\\u3000\\u3000賛成\\u3000\\u3000\\u3000\\u3000\\u3000\\u3000\\u3000\\u3000\\u3000\\u3000\\u3000二百三十四\\u3000\\u3000<BR>\\n\\u3000\\u3000反対\\u3000\\u3000\\u3000\\u3000\\u3000\\u3000\\u3000\\u3000\\u3000\\u3000\\u3000\\u3000\\u3000\\u3000\\u3000〇\\u3000\\u3000<BR>\\n\\u3000よって、両案は全会一致をもって可決されました。（拍手）<BR>\\n\\u3000\\u3000\\u3000\\u3000─────────────<BR>\\n\\u3000\\u3000\\u3000〔投票者氏名は本号末尾に掲載〕<BR>\\n\\u3000\\u3000\\u3000\\u3000\\u3000─────・─────<BR>\\n<B>○議長（伊達忠一君）</B>\\u3000この際、日程に追加して、<BR>\\n\\u3000国会議員の秘書の給与等に関する法律の一部を改正する法律案（衆議院提出）を議題とすることに御異議ございませんか。<BR>\\n\\u3000\\u3000\\u3000〔「異議なし」と呼ぶ者あり〕<BR>\\n<B>○議長（伊達忠一君）</B>\\u3000御異議ないと認めます。<BR>\\n\\u3000まず、委員長の報告を求めます。議院運営委員長山本順三君。<BR>\\n\\u3000\\u3000\\u3000\\u3000─────────────<BR>\\n\\u3000\\u3000\\u3000〔審査報告書及び議案は本号末尾に掲載〕<BR>\\n\\u3000\\u3000\\u3000\\u3000─────────────<BR>\\n\\u3000\\u3000\\u3000〔山本順三君登壇、拍手〕<BR>\\n<B>○山本順三君</B>\\u3000ただいま議題となりました法律案につきまして、委員会における審査の経過と結果を御報告申し上げます。<BR>\\n\\u3000国会議員の秘書の給与等に関する法律の一部を改正する法律案は、政府職員の給与改定に伴い、議員秘書の給料月額及び勤勉手当の支給割合をそれぞれ改定しようとするものであります。<BR>\\n\\u3000委員会におきましては、日本維新の会の東理事より本法律案に反対する旨の意見が述べられました。<BR>\\n\\u3000次いで、採決の結果、本法律案は多数をもって原案どおり可決すべきものと決定いたしました。<BR>\\n\\u3000以上、御報告申し上げます。（拍手）<BR>\\n\\u3000\\u3000\\u3000\\u3000─────────────<BR>\\n<B>○議長（伊達忠一君）</B>\\u3000これより採決をいたします。<BR>\\n\\u3000本案の賛否について、投票ボタンをお押し願います。<BR>\\n\\u3000\\u3000\\u3000〔投票開始〕<BR>\\n<B>○議長（伊達忠一君）</B>\\u3000間もなく投票を終了いたします。──これにて投票を終了いたします。<BR>\\n\\u3000\\u3000\\u3000〔投票終了〕<BR>\\n<B>○議長（伊達忠一君）</B>\\u3000投票の結果を報告いたします。<BR>\\n\\u3000\\u3000投票総数\\u3000\\u3000\\u3000\\u3000\\u3000\\u3000\\u3000\\u3000\\u3000二百三十七\\u3000\\u3000<BR>\\n\\u3000\\u3000賛成\\u3000\\u3000\\u3000\\u3000\\u3000\\u3000\\u3000\\u3000\\u3000\\u3000\\u3000二百二十六\\u3000\\u3000<BR>\\n\\u3000\\u3000反対\\u3000\\u3000\\u3000\\u3000\\u3000\\u3000\\u3000\\u3000\\u3000\\u3000\\u3000\\u3000\\u3000\\u3000十一\\u3000\\u3000<BR>\\n\\u3000よって、本案は可決されました。（拍手）<BR>\\n\\u3000\\u3000\\u3000\\u3000─────────────<BR>\\n\\u3000\\u3000\\u3000〔投票者氏名は本号末尾に掲載〕<BR>\\n\\u3000\\u3000\\u3000\\u3000\\u3000─────・─────<BR>\\n<B>○議長（伊達忠一君）</B>\\u3000この際、日程に追加して、<BR>\\n\\u3000本日厚生労働委員長から報告書が提出されました難病・長期慢性疾病・小児慢性特定疾病対策の総合的な推進に関する請願を議題とすることに御異議ございませんか。<BR>\\n\\u3000\\u3000\\u3000〔「異議なし」と呼ぶ者あり〕<BR>\\n<B>○議長（伊達忠一君）</B>\\u3000御異議ないと認めます。<BR>\\n\\u3000\\u3000\\u3000\\u3000─────────────<BR>\\n\\u3000\\u3000\\u3000〔審査報告書は本号末尾に掲載〕<BR>\\n\\u3000\\u3000\\u3000\\u3000─────────────<BR>\\n<B>○議長（伊達忠一君）</B>\\u3000本請願は、委員長の報告を省略して、委員会決定のとおり採択することに御異議ございませんか。<BR>\\n\\u3000\\u3000\\u3000〔「異議なし」と呼ぶ者あり〕<BR>\\n<B>○議長（伊達忠一君）</B>\\u3000御異議ないと認めます。<BR>\\n\\u3000よって、本請願は委員会決定のとおり採択することに決しました。<BR>\\n\\u3000\\u3000\\u3000\\u3000\\u3000─────・─────<BR>\\n<B>○議長（伊達忠一君）</B>\\u3000この際、委員会及び調査会の審査及び調査を閉会中も継続するの件についてお諮りいたします。<BR>\\n\\u3000\\u3000\\u3000\\u3000─────────────<BR>\\n<BR>\\n\\u3000\\u3000\\u3000\\u3000─────────────<BR>\\n<B>○議長（伊達忠一君）</B>\\u3000本件は各委員長及び各調査会長要求のとおり決することに御異議ございませんか。<BR>\\n\\u3000\\u3000\\u3000〔「異議なし」と呼ぶ者あり〕<BR>\\n<B>○議長（伊達忠一君）</B>\\u3000御異議ないと認めます。<BR>\\n\\u3000よって、本件は各委員長及び各調査会長要求のとおり決しました。<BR>\\n\\u3000\\u3000\\u3000\\u3000\\u3000─────・─────<BR>\\n<B>○議長（伊達忠一君）</B>\\u3000議事を終了するに当たり、一言御挨拶を申し上げます。<BR>\\n\\u3000十月に実施された総選挙後、初の本格的な論戦の舞台となりました今期国会では、内閣総理大臣の指名を行ったほか、国の内外に係る喫緊の諸課題について熱心な審議が行われました。<BR>\\n\\u3000また、参議院改革協議会におきましては、現在、行政監察機能の強化等について鋭意御協議いただいており、選挙制度につきましても、専門委員会において、各会派協力の下、精力的に御議論をいただいております。<BR>\\n\\u3000ここに、議員各位の御尽力に対し、心から敬意と謝意を表する次第であります。<BR>\\n\\u3000内外の時局ますます多端な折、議員各位におかれましては、御自愛の上、一層御活躍くださいますようお祈り申し上げて、御挨拶といたします。（拍手）<BR>\\n\\u3000これにて散会いたします。<BR>\\n\\u3000\\u3000\\u3000午前十一時五十六分散会<BR>\\n</BODY>\\n</HTML>\\n'"
},
"metadata": {}
}
]
},
{
"metadata": {},
"cell_type": "markdown",
"source": "## 絵画、パブリックドメイン\nhttp://www.bestweb-link.net/PD-Museum-of-Art/"
},
{
"metadata": {
"trusted": true
},
"cell_type": "code",
"source": "def get_img_url(url):\n html_ob = get_html_obj(url)\n# img_links_parsed = html_ob.xpath(\"//*[@class='btn']//a/@href\")\n img_links_parsed = html_ob.xpath(\"//*[@class='box3']/a/@href\")\n return img_links_parsed",
"execution_count": 21,
"outputs": []
},
{
"metadata": {
"trusted": true
},
"cell_type": "code",
"source": "def get_authors_url(base_url):\n html_ob = get_html_obj(base_url)\n a_tags = html_ob.xpath('//*[@class=\"side_inbox\"]//a')\n #不要なエレメントを除去\n author_links = []\n for a_tag in a_tags:\n link = a_tag.xpath('./@href')[0]\n if link.startswith('html'):\n text = a_tag.xpath('./text()')[0]\n author_links.append([link, text])\n return author_links",
"execution_count": 17,
"outputs": []
},
{
"metadata": {
"trusted": true
},
"cell_type": "code",
"source": "BASE_URL = \"http://www.bestweb-link.net/PD-Museum-of-Art/\"\nIMG_DIR = '../data/painting/img/'",
"execution_count": 18,
"outputs": []
},
{
"metadata": {
"trusted": true
},
"cell_type": "code",
"source": "authors_info = get_authors_url(BASE_URL)",
"execution_count": 19,
"outputs": []
},
{
"metadata": {
"trusted": true,
"scrolled": false
},
"cell_type": "code",
"source": "#作家ページから作品URLを取得\nfor author_info in authors_info:\n author_url = urljoin(BASE_URL, author_info[0])\n img_urls = get_img_url(author_url)\n print(author_info)\n \n #画像保存\n for img_url in img_urls:\n img_url = urljoin(author_url, img_url)\n file_dir = os.path.join(IMG_DIR, img_url.split('/')[-2])\n if not os.path.exists(file_dir):\n os.makedirs(file_dir)\n download_file(img_url, os.path.join(file_dir, img_url.split('/')[-1]))",
"execution_count": 20,
"outputs": [
{
"output_type": "stream",
"text": "['html/960_Rembrandt-Bible.html', 'レンブラント：Bible story - etc']\n['html/960_Rembrandt-Portrait.html', 'レンブラント：Portrait']\n['html/960_Vermeer.html', 'ヨハネス・フェルメール']\n['html/960_Goya.html', 'フランシスコ・デ・ゴヤ']\n['html/960_Turner.html', 'ウィリアム・ターナー']\n['html/960_Corot.html', 'カミーユ・コロー']\n['html/960_Delacroix.html', 'ウジェーヌ・ドラクロワ']\n['html/960_Millet.html', 'フランソワ・ミレー']\n['html/960_Aivazovsky.html', 'イヴァン・アイヴァゾフスキー']\n['html/960_Gerome.html', 'ジャン=レオン・ジェローム']\n['html/960_Bouguereau.html', 'ウィリアム・ブグロー']\n['html/960_Bierstadt-1.html', 'アルバート・ビアスタット：No.1']\n['html/960_Bierstadt-2.html', 'アルバート・ビアスタット：No.2']\n['html/960_Pissarro.html', 'カミーユ・ピサロ']\n['html/960_Manet.html', 'エドゥアール・マネ']\n['html/960_Degas.html', 'エドガー・ドガ']\n['html/960_Homer-1.html', 'ウィンスロー・ホーマー：No.1']\n['html/960_Homer-2.html', 'ウィンスロー・ホーマー：No.2']\n['html/960_Tadema.html', 'ローレンス・アルマ=タデマ']\n['html/960_Sisley.html', 'アルフレッド・シスレー']\n['html/960_Cezanne-Landscape.html', 'セザンヌ：Landscape']\n['html/960_Cezanne-Still Life.html', 'セザンヌ：Still Life']\n['html/960_Cezanne-Portrait.html', 'セザンヌ：Portrait']\n['html/960_Cezanne-Bathers.html', 'セザンヌ：Bathers - etc']\ncode:404, url:http://www.bestweb-link.net/PD-Museum-of-Art/html/Cezanne-Portrait/No.104.jpg\n['html/960_Redon.html', 'オディロン・ルドン']\n['html/960_Monet-Water Lilies.html', 'クロード・モネ：Water Lilies']\n['html/960_Monet-Landscape-1.html', 'クロード・モネ：Landscape-1']\n['html/960_Monet-Landscape-2.html', 'クロード・モネ：Landscape-2']\n['html/960_Monet-Landscape-3.html', 'クロード・モネ：Landscape-3']\n['html/960_Morisot.html', 'ベルト・モリゾ']\n['html/960_Renoir-Girl and Child.html', 'ルノワール：Girl and Child']\n['html/960_Renoir-Portrait.html', 'ルノワール：Portrait']\n['html/960_Renoir-Landscape.html', 'ルノワール：Landscape']\n['html/960_Renoir-Still life.html', 'ルノワール：Still life']\n['html/960_Renoir-nude.html', 'ルノワール：nude']\n['html/960_Rousseau.html', 'アンリ・ルソー']\n['html/960_Gauguin-Tahiti.html', 'ゴーギャン：Tahiti - Polynesia']\n['html/960_Gauguin-Arles.html', 'ゴーギャン：Arles - Brittany']\n['html/960_Gauguin-Still.html', 'ゴーギャン：Still Life - Portrait']\n['html/960_Gogh-Landscape-1.html', 'ゴッホ：Landscape-1']\n['html/960_Gogh-Landscape-2.html', 'ゴッホ：Landscape-2']\n['html/960_Gogh-Still Lif.html', 'ゴッホ：Still Lif - Flower']\n['html/960_Gogh-Tree.html', 'ゴッホ：Tree paintings']\n['html/960_Gogh-Portrait.html', 'ゴッホ：Portrait']\n['html/960_Gogh-etc.html', 'ゴッホ：Others']\n['html/960_Hodler.html', 'フェルディナント・ホドラー']\n['html/960_Seurat.html', 'ジョルジュ・スーラ']\n['html/960_Klimt.html', 'グスタフ・クリムト']\n['html/960_Signac.html', 'ポール・シニャック']\n['html/960_Lautrec.html', 'トゥールーズ・ロートレック']\n['html/960_Serusier.html', 'ポール・セリュジエ']\n['html/960_Matisse.html', 'アンリ・マティス']\n['html/960_Klee.html', 'パウル・クレー']\n['html/960_Modigliani.html', 'モディリアーニ']\n['html/960_Schiele-A.html', 'エゴン・シーレ：Man & Woman']\n['html/960_Schiele-B.html', 'エゴン・シーレ：Portrait, etc']\n",
"name": "stdout"
}
]
},
{
"metadata": {
"trusted": true
},
"cell_type": "code",
"source": "",
"execution_count": null,
"outputs": []
}
],
"metadata": {
"kernelspec": {
"name": "python3",
"display_name": "Python 3",
"language": "python"
},
"language_info": {
"name": "python",
"version": "3.6.4",
"mimetype": "text/x-python",
"codemirror_mode": {
"name": "ipython",
"version": 3
},
"pygments_lexer": "ipython3",
"nbconvert_exporter": "python",
"file_extension": ".py"
},
"toc": {
"nav_menu": {},
"number_sections": true,
"sideBar": false,
"skip_h1_title": false,
"toc_cell": false,
"toc_position": {
"left": "1425px",
"top": "111px",
"width": "212px",
"height": "380px",
"right": "20px"
},
"toc_section_display": "block",
"toc_window_display": true
},
"gist": {
"id": "5a1e2f8b684f100cb17dc0c951fb6679",
"data": {
"description": "src/scraping.ipynb",
"public": true
}
},
"_draft": {
"nbviewer_url": "https://gist.github.com/5a1e2f8b684f100cb17dc0c951fb6679"
}
},
"nbformat": 4,
"nbformat_minor": 2
}
Sign up for free to join this conversation on GitHub. Already have an account? Sign in to comment