【Python】Selenium を使ってスクレイピング

私は結構な頻度でPCを初期化するんですが、その都度前使っていたツールをインストールしなおして使える状態までもっていっています。

でも毎回忘れちゃってて、都度検索しては「あぁじゃない、こうじゃない」ってやってるので、次忘れたときのために備忘録しておきます。

はじめに
Seleniumのインストール
WebDriverのインストール
動作確認
エラーが出る場合は？
1. WebDriverException
2. SessionNotCreatedException

はじめに

Windows 10 Home 21H1
Python 3.8.10
Visual Studio Code 1.58.2
Selenium 3.141.0

Seleniumのインストール

下記コマンドを実行する。

pip install selenium

Successfully と表示されれば成功。ワーニングは気にしない。

WebDriverのインストール

今回はChromeを使ってスクレイピングしたいので、Chrome用のWebDriverをインストールします。

Seleniumを使うにはWebDriverが必須です。

こちらのサイトから最新のWebDriverをダウンロードします。

ダウンロードが出来たら適当なところに展開しておきます。

動作確認

とりあえず簡単なコードで動作確認します。

from selenium import webdriver
driver = webdriver.Chrome(executable_path="D:\Python\chromedriver_win32\chromedriver.exe")

driver.get("https://www.google.com/")

driver.close()
driver.quit()

Pythonで上記コードを実行して、正常に終了すればseleniumの導入は完了です。

エラーが出る場合は？

WebDriverException

Message: 'chromedriver_win32' executable may have wrong permissions. Please see https://sites.google.com/a/chromium.org/chromedriver/home

WebDriverのパスが正しくない可能性があります。よく確認してみて下さい。

Windowsの場合はファイル名まで正しく指定して下さい。

driver = webdriver.Chrome(executable_path="D:\Python\chromedriver_win32\chromedriver.exe")

SessionNotCreatedException

Message: session not created: This version of ChromeDriver only supports Chrome version 93
Current browser version is 92.0.4515.131 with binary path C:\Program Files\Google\Chrome\Application\chrome.exe

ChromeのバージョンとWebDriverのバージョンが一緒じゃない。一緒のバージョンを使いましょう。