Kwa nini kichwa cha kutoka cha ProxyMesh kinaweza kukosekana katika Scrapy

Kutokuwepo kwa X-ProxyMesh-IP katika callback ya HTTPS ya Scrapy hakuthibitishi uelekezaji wa moja kwa moja. Katika HTTPS ya handaki, ProxyMesh huweka vichwa vya uelekezaji kwenye jibu la CONNECT; jibu la tovuti linalofuata liko ndani ya TLS na haliingizi metadata ya awali kiotomatiki.

Mahali kichwa kinapoonekana kwenye callback, soma kwa masharti:

exit_ip = response.headers.get(b'X-ProxyMesh-IP')
if exit_ip is not None:
    self.logger.info('Reported exit IP: %s', exit_ip.decode('ascii'))

Hii ni exit iliyoripotiwa na mtoa huduma kwa kubadilishana huko, si jina la mwenyeji wa kuingia lililowekwa.

Ikiwa metadata ya handaki inahitajika, tumia ushirikiano wa kidhibiti unaoendana na unaofichua vichwa vya CONNECT. ProxyMesh hudumisha kimoja kwa madhumuni haya; angalia toleo la Scrapy linaloauniwa na kidhibiti cha kupakua. Uchanganuzi wa buibui hauwezi kufichua vichwa ambavyo usafirishaji haukuwahi kutoa.

Unganisha metadata na muunganisho wake. Kutumia tena handaki hakuundi jibu lingine la CONNECT kwa kila ukurasa. Kwa anwani huru ya chanzo inayoonekana na lengwa, chunguza muunganisho unaoingia wa lengo hilo badala ya kuchukua kichwa cha mtoa huduma kama kitambua IP cha jumla.