ProxyMesh-ийн гарах толгой Scrapy-д яагаад байхгүй байж болох вэ
ProxyMesh нь Scrapy вэбсайтын шифрлэгдсэн хариуг авахаас өмнө CONNECT дээр чиглүүлэлтийн мета өгөгдөл илгээж болно. Түүнийг үнэхээр агуулж буй хариу үе шатыг шалгана уу.
Scrapy-ийн HTTPS callback-д X-ProxyMesh-IP байхгүй нь шууд чиглүүлэлтийг батлахгүй. Туннельт HTTPS-д ProxyMesh чиглүүлэлтийн толгойг CONNECT хариунд тавьдаг; дараа ирэх вэбсайтын хариу TLS дотор байх тул тэр өмнөх мета өгөгдлийг автоматаар агуулахгүй.
Толгой callback-д харагдах газарт нөхцөлтэйгээр уншина уу:
exit_ip = response.headers.get(b'X-ProxyMesh-IP')
if exit_ip is not None:
self.logger.info('Reported exit IP: %s', exit_ip.decode('ascii'))Энэ нь тухайн солилцооны хувьд үйлчилгээ үзүүлэгчийн мэдээлсэн гарах хаяг бөгөөд тохируулсан орох хостны нэр биш.
Хэрэв туннелийн мета өгөгдөл шаардлагатай бол CONNECT толгойг ил гаргадаг нийцтэй handler интеграц ашиглана уу. ProxyMesh яг энэ зорилгоор нэгийг хадгалдаг; түүний дэмжигдсэн Scrapy хувилбар болон татах handler-ийг шалгана уу. Аалзны задлан шинжилгээ нь тээвэр хэзээ ч өгөөгүй толгойг илрүүлж чадахгүй.
Мета өгөгдлийг өөрийн холболттой нь холбоно уу. Туннелийг дахин ашиглах нь хуудас бүрд өөр CONNECT хариу үүсгэхгүй. Очих газраас ажиглагддаг бие даасан эх хаягийн хувьд үйлчилгээ үзүүлэгчийн толгойг бүх нийтийн IP илрүүлэгч гэж үзэхийн оронд тухайн очих газрын ирж буй холболтыг шалгана уу.