Scraping | Yama's Memorandum

Tag Archeve for the ‘Scraping’ Category

Saturday, September 5th, 2020

Web上に公開されている情報を「自動的に」収集するツールとして、Selenium が有効なのではと考え、いろいろ調べていた。

Seleniumを用いたChromeブラウザのコントロールが、それなりに安定して実行できるようになったので、作業メモを残しておいた。

なお、一連のテストはjupyter lab上で行った。
(続きを読む)

Saturday, January 28th, 2017

JavaScriptを基本から学習することにし,いろいろ試しているところ。習うより慣れろということで具体的にプログラミングすることにした。

手始めに、表題の「node.js によるWebページの読み込みと情報の抽出」を例としてトレーニング、具体的には、日経電子版速報のページを読み込み、これからニュースのタイトルを抽出するプログラムを書いてみた。

個人的なメモとして作成したJavaScriptのソースをmemoしておいた。 (続きを読む)