הגדרת פרוקסי עבור הורדות Python webdriver-manager
תנו ל-Python webdriver-manager HttpClient מודע לפרוקסי דרך WDMDownloadManager לפני שימוש ב-driver path המוחזר.
הארגומנט --proxy-server של Chrome חל רק לאחר שהדפדפן מתחיל. ייתכן ש-webdriver-manager זקוק לפרוקסי מוקדם יותר, בזמן שהוא מחפש דרייבר תואם ומוריד את הארכיון שלו.
import requests
from webdriver_manager.chrome import ChromeDriverManager
from webdriver_manager.core.download_manager import WDMDownloadManager
from webdriver_manager.core.http import HttpClient
class ProxyHttpClient(HttpClient):
def __init__(self, session):
self.session = session
def get(self, url, params=None, **kwargs):
kwargs.setdefault('timeout', 30)
response = self.session.get(url, params=params, **kwargs)
self.validate_response(response)
return response
with requests.Session() as session:
session.trust_env = False
session.proxies.update({
'http': 'http://proxy.example:8080',
'https': 'http://proxy.example:8080',
})
downloader = WDMDownloadManager(ProxyHttpClient(session))
driver_path = ChromeDriverManager(download_manager=downloader).install()
הקטע הזה מניח את התלויות הקיימות webdriver-manager ו-Requests. מאזין הפרוקסי שנבחר הוא HTTP עבור שתי סכימות היעד. עבור הורדות דרייבר ציבוריות מותרות, רשימת פרוקסי ה-HTTP מספקת מועמדים לכתובות ה-URL של הפרוקסי בסשן. השאירו את ה-Session פעיל עד שהתקנת המנהל או חיפוש המטמון יסתיימו, ואז העבירו את driver_path להגדרת שירות ה-Selenium הרגילה של היישום.
שיטת ה-get המותאמת מקבלת את ארגומנטי ה-HTTP הנוספים של המנהל ושומרת על אימות התגובה. בחירת הפרוקסי שייכת ללקוח ההורדה; הגדירו את Chrome בנפרד כאשר גם הניווט זקוק לפרוקסי.
trust_env=False הופך את תצורת הסשן הזה למפורשת, כולל השבתת בחירת חבילת CA הנגזרת מהסביבה. אם מסלול ההורדה דורש CA ארגוני, ספקו את החבילה המיועדת בהגדרת ה-verify של סשן זה תוך שמירה על בדיקות התעודות.