Comhthreomhaireacht seachfhreastalaí Scrapy thar fhearthainn iolracha
Úsáid uasteorainn chomhthreomhaireachta dhomhanda an íoslódálaí nuair a chaitheann roinnt fearann sprice an cuóta seachfhreastalaí céanna, agus cuir san áireamh na croladóirí eile a roinneann an cuntas sin.
Má úsáideann gach ceann scríbe cuntas seachfhreastalaí amháin, is féidir lamháltas iarratas comhuaineach an chuntais sin a chaitheamh thar na cinn scríbe sin go léir. Ní chuireann teorainn in aghaidh an fhearaigh amháin an buiséad roinnte sin in iúl.
Le haghaidh cuntais hipitéisí a cheadaíonn 20 iarratas comhuaineacha ar a mhéad, fág roinnt spáis agus socraigh uasteorainn dhomhanda íoslódálaí an chroladóra:
CONCURRENT_REQUESTS = 16
Is leithdháileadh léiritheach é seo, ní luach molta do gach soláthraí. Sainmhíníonn Scrapy CONCURRENT_REQUESTS mar uasmhéid iarratas comhuaineach an íoslódálaí. Is féidir le rialuithe in aghaidh an fhearaigh comhthreomhaireacht a laghdú tuilleadh; ní thagann siad in ionad na huasteorainne domhanda.
Cuir croladóirí eile san áireamh. Is féidir le dhá chroladóir neamhspleácha a bhfuil 16 iarratas ceadaithe ag gach ceann acu lamháltas roinnte de 20 a shárú le chéile. Roinn an buiséad go toiliúil nó cuir teorainn roinnte i bhfeidhm san áit a dtagann na cliaint sin le chéile.
Faigh amach freisin cad a chomhaireann an soláthraí. Is cainníochtaí éagsúla iad iarratais HTTP, naisc TCP oscailte, tolláin ghníomhacha agus iarratais in aghaidh an tsoicind. Féadfaidh naisc mharthanacha agus ilphléacsú a gcuid comhairimh a chur ó chéile. Mar sin ní teorannóir iomlán naisc ná ráta é socrú comhthreomhaireachta iarratas.
Coinnigh luas an tsuímh sprice mar shrian ar leith. D'fhéadfadh comhthreomhaireacht níos ísle nó moill íoslódála a bheith oiriúnach fós do cheann scríbe aonair fiú nuair atá cumas gan úsáid ag an gcuntas seachfhreastalaí.