Baineann próca fianán Scrapy le seisiún, ní le seachfhreastalaí go huathoibríoch
Roghnaigh féiniúlacht shoiléir próca fianán nuair a roinneann roinnt sreafaí oibre seachfhreastalaí aon damhán alla, agus iompair an fhéiniúlacht sin chuig iarratais leantacha.
Ní athraíonn malartú an tseachfhreastalaí fianáin an damháin alla go huathoibríoch. D’fhéadfadh sé sin a bheith úsáideach do sheisiún amháin atá ag leanúint ar aghaidh agus iontas nuair a roinneann roinnt seisiún neamhspleách an damhán alla céanna.
Tacaíonn meánbogearra fianán Scrapy le prócaí ar leithligh a roghnaítear de réir meiteashonraí cookiejar an iarratais. Tabhair don eochair sin an fhéiniúlacht a bhfuil tú i ndáiríre ag iarraidh a chaomhnú:
yield scrapy.Request(
'https://example.com/start',
meta={'proxy': selected_proxy, 'cookiejar': 'workflow-17'},
)Is roghanna neamhspleácha iad an pointe deiridh agus eochair an phróca. Féadfaidh crawl poiblí neamhfhíordheimhnithe a phointe deiridh HTTP roghnaithe a thógáil ón liosta seachfhreastalaithe HTTP áit a bhfuil an bealach sin ceadaithe; is leis an sreabhadh oibre fós eochair an phróca. Teastaíonn an eochair phróca chéanna ó iarratas leantach ar cheart fanacht sa seisiún seo; ní ghreamaíonn na meiteashonraí go huathoibríoch de gach iarratas nua a chruthaíonn tú. Iompair na réimsí sonracha a éilíonn an sreabhadh oibre in ionad gach meiteashonraí meánbogearra a chóipeáil go dall.
Ní hé ach polasaí amháin seoladh an tseachfhreastalaí a úsáid mar eochair an phróca
Déanann an t-aicearra sin staid a ghrúpáil de réir pointe deiridh. Ní ghrúpálann sé de réir duine, cuntais ná bealach amach poiblí go háirithe. Féadfaidh pointe deiridh amháin de chuid soláthraí bealaí amach a rothlú, agus féadfaidh roinnt cuntas an pointe deiridh céanna a úsáid.
Le haghaidh sreafa oibre údaraithe a dteastaíonn staid chobhsaí uaidh, taifead aitheantóir an chuntais/seisiúin, aitheantóir an phróca agus an bealach roghnaithe ar leithligh. Má shocraíonn tú an bealach a athrú leathbhealaigh, socraigh freisin cad ba cheart a tharlóidh do sheisiún an fheidhmchláir.
Cuireann prócaí ar leithligh cosc ar chomhroinnt fianán de thaisme idir na grúpaí a shocraigh tú. Ní gheallann siad nach féidir le ceann scríbe dhá iarratas a nascadh trí chuntas nó trí shonraí eile feidhmchláir.
Má mhaireann an leathanach mícheart tar éis IPanna a athrú, scrúdaigh cén próca a sheol an t-iarratas sula scriosann tú gach fianán nó sula n-athshocraíonn tú an linn seachfhreastalaithe ar fad. Féadfaidh an staid choinnithe an leathanach a mhíniú go breá.