これまでのスクレイピング（Requests）は、いわば「サイトのデータを裏口からこっそりもらう」手法でした。 今日から学ぶ「Selenium（セレニウム）」は、「Pythonがあなたの代わりにChromeを開き、ボタンをクリックし、文字を入力する」 という、まさに魔法の ...

Webスクレイピングやブラウザ操作の自動化をしたいけど、Seleniumの初期設定で躓いていませんか？ この記事では、Seleniumの環境構築から実際に動くコードまでを、初心者でも理解できるように解説します。 実務では、様々なオプションを設定します。

今回は、 Selenium ServerによるWebブラウザ自動操作環境を、 Ubuntu上にDockerを使って簡単に構築する方法を紹介します。 Webブラウザの自動操作を可能にするSelenium Seleniumは、 Webアプリケーションのテストを、 人が操作することなく自動で行うために開発されている ...

PythonにはデータをWebから取得する命令がいろいろある。最も簡単なのは、Pythonに標準で用意されているurllib.requestだ。これを使うと任意のURLからデータを取得できる。しかし、最近のWebサイトは、セッションという仕組みを利用していたり、JavaScriptでページを ...