この記事では、Ubuntu 22.04上でPythonとSeleniumを使用してウェブスクレイピングを行うための環境構築について説明します。ここで取り扱うブラウザは、Chrome, Microsoft Edge, Firefoxの3つです。
環境構築
以下の環境で構築できることを確認しています。
- OS : Ubuntu 22.04
- Python : 3.10.6
Seleniumのインストール
まずはじめに、Seleniumをインストールします。以下のコマンドを実行してください。
pip3 install selenium webdriver-manager
Google ChromeとChromedriverのインストール
次に、Google ChromeとChromedriverをインストールします。以下のコマンドを実行してください。
sudo apt -y update
sudo apt install -y wget
wget [5](https://dl.google.com/linux/direct/google-chrome-stable_current_amd64.deb)
sudo apt install -y ./google-chrome-stable_current_amd64.deb
sudo apt install -y -f
Microsoft EdgeとMSEdgeDriverのインストール
最後に、Microsoft EdgeとMSEdgeDriverをインストールします。以下のコマンドを実行してください。
sudo apt install -y curl
curl [6](https://packages.microsoft.com/keys/microsoft.asc) | gpg --dearmor > microsoft.gpg
sudo install -o root -g root -m 644 microsoft.gpg /usr/share/keyrings/
sudo sh -c 'echo "deb [arch=amd64 signed-by=/usr/share/keyrings/microsoft.gpg] [7](https://packages.microsoft.com/repos/edge) stable main" > /etc/apt/sources.list.d/microsoft-edge-dev.list'
sudo rm microsoft.gpg
sudo apt update
sudo apt install microsoft-edge-dev
これで、Ubuntu 22.04上でPythonとSeleniumを使用してウェブスクレイピングを行うための環境構築が完了しました。これらの手順を参考にして、自分のプロジェクトに適用してみてください。