Pam gall pennawd allanfa ProxyMesh fod ar goll yn Scrapy

Nid yw absenoldeb X-ProxyMesh-IP mewn galwad HTTPS Scrapy yn profi llwybro uniongyrchol. Mewn HTTPS twneli, mae ProxyMesh yn gosod penawdau llwybro ar yr ateb CONNECT; mae ymateb diweddarach y wefan y tu mewn i TLS ac nid yw'n cynnwys y metadata cynharach hwnnw yn awtomatig.

Lle mae'r pennawd yn cael ei ddangos mewn galwad, darllenwch ef yn amodol:

exit_ip = response.headers.get(b'X-ProxyMesh-IP')
if exit_ip is not None:
    self.logger.info('Reported exit IP: %s', exit_ip.decode('ascii'))

Dyma'r allanfa a adroddir gan y darparwr ar gyfer y cyfnewidiad hwnnw, nid yr enw gwesteiwr mynediad a ffurfweddwyd.

Os oes angen metadata twneli, defnyddiwch integreiddiad handlydd cydnaws sy'n dangos penawdau CONNECT. Mae ProxyMesh yn cynnal un at y diben hwn; gwiriwch y fersiwn Scrapy a'r handlydd lawrlwytho a gefnogir. Ni all dosrannu pry cop ddatgelu penawdau na ddarparodd y cludiant erioed.

Cysylltwch metadata â'i gysylltiad. Nid yw ailddefnyddio twnel yn creu ateb CONNECT arall ar gyfer pob tudalen. I gael cyfeiriad ffynhonnell annibynnol a welir gan y cyrchfan, archwiliwch gysylltiad sy'n dod i mewn i'r gyrchfan honno yn lle trin pennawd darparwr fel canfodydd IP cyffredinol.