’S le seisean a bhuineas jar bhriosgaidean Scrapy, chan gu fèin-obrachail ri proxy

Chan eil atharrachadh a’ phroxy ag atharrachadh bhriosgaidean an damhan-allaidh gu fèin-obrachail. Faodaidh sin a bhith feumail airson aon seisean a tha a’ leantainn agus na iongnadh nuair a tha grunn sheiseanan neo-eisimeileach a’ co-roinn an aon damhan-allaidh.

Tha middleware bhriosgaidean Scrapy a’ cumail taic ri jaran air leth a thèid a thaghadh le meata-dàta cookiejar na h-iarraidh. Thoir dhan iuchair sin an dearbh-aithne a tha thu dha-rìribh airson a ghleidheadh:

yield scrapy.Request(
    'https://example.com/start',
    meta={'proxy': selected_proxy, 'cookiejar': 'workflow-17'},
)

Tha an t-àite crìochnachaidh agus iuchair an jar nan roghainnean neo-eisimeileach. Faodaidh crawl poblach gun dearbhadh an t-àite crìochnachaidh HTTP taghte aige a ghabhail bhon liosta proxy HTTP far a bheil an t-slighe sin ceadaichte; tha iuchair an jar fhathast aig an t-sruth-obrach. Feumaidh iarraidh leantainneach a bu chòir fuireach san t-seisean seo an aon iuchair jar; chan eil am meata-dàta a’ steigeadh gu fèin-obrachail ri gach iarraidh ùr a chruthaicheas tu. Giùlain na raointean sònraichte a dh’fheumas an sruth-obrach an àite a bhith a’ dèanamh lethbhreac dall de mheata-dàta uile an middleware.

Chan eil ann an seòladh a’ phroxy a chleachdadh mar iuchair an jar ach aon phoileasaidh

Tha an geàrr-chleas sin a’ cruinneachadh staid a rèir àite crìochnachaidh. Chan eil e a’ cruinneachadh gu riatanach a rèir neach, cunntas no fàgail phoblach. Faodaidh aon àite crìochnachaidh solaraiche fàgailean a chuairteachadh, agus faodaidh grunn chunntasan an aon àite crìochnachaidh a chleachdadh.

Airson sruth-obrach ùghdarraichte a dh’fheumas staid sheasmhach, clàraich aithnichear a’ chunntais/seisean, aithnichear an jar agus an t-slighe a thaghadh air leth. Ma cho-dhùnas tu an t-slighe atharrachadh letheach slighe, co-dhùn cudeachd dè bu chòir tachairt do sheisean na h-aplacaid.

Tha jaran air leth a’ cur casg air co-roinneadh bhriosgaidean gun fhiosta eadar na buidhnean a mhìnich thu. Chan eil iad a’ gealltainn nach urrainn do cheann-uidhe dà iarraidh a cheangal tro chunntas no tro dhàta eile na h-aplacaid.

Ma dh’fhanas an duilleag cheàrr an dèidh IPan atharrachadh, rannsaich dè an jar a chuir an iarraidh mus sguab thu gach briosgaid no mus cuir thu an cruinneachadh proxy gu lèir na àite. Faodaidh an staid a chaidh a ghleidheadh an duilleag a mhìneachadh gu math.