Python webdriver-manager のダウンロードにプロキシを設定する
返された driver path を使う前に、WDMDownloadManager 経由で Python webdriver-manager にプロキシ対応の HttpClient を渡します。
Chrome の --proxy-server 引数はブラウザ起動後にしか効きません。webdriver-manager は、互換ドライバを探してそのアーカイブをダウンロードする段階で、より早くプロキシを必要とする場合があります。
import requests
from webdriver_manager.chrome import ChromeDriverManager
from webdriver_manager.core.download_manager import WDMDownloadManager
from webdriver_manager.core.http import HttpClient
class ProxyHttpClient(HttpClient):
def __init__(self, session):
self.session = session
def get(self, url, params=None, **kwargs):
kwargs.setdefault('timeout', 30)
response = self.session.get(url, params=params, **kwargs)
self.validate_response(response)
return response
with requests.Session() as session:
session.trust_env = False
session.proxies.update({
'http': 'http://proxy.example:8080',
'https': 'http://proxy.example:8080',
})
downloader = WDMDownloadManager(ProxyHttpClient(session))
driver_path = ChromeDriverManager(download_manager=downloader).install()
この断片は既存の webdriver-manager と Requests の依存関係を前提としています。選択したプロキシリスナーは、どちらの宛先スキームでも HTTP です。許可された公開ドライバのダウンロードでは、HTTP プロキシ一覧がセッションのプロキシ URL の候補を提供します。マネージャーのインストールまたはキャッシュ検索が完了するまで Session を生かしたままにし、その後 driver_path をアプリケーション通常の Selenium サービス設定に渡してください。
独自の get メソッドはマネージャーの追加 HTTP 引数を受け取り、レスポンス検証を維持します。プロキシの選択はダウンロードクライアント側の責務です。ナビゲーションにもプロキシが必要な場合は Chrome を別途設定してください。
trust_env=False はこの Session の設定を明示し、環境由来の CA バンドル選択も無効にします。ダウンロード経路で組織の CA が必要な場合は、証明書検証を保ったまま、この Session の verify 設定に所定のバンドルを指定してください。