Scrapy AutoThrottle tras in proxy: slots e latenza
Tegna ils slots da descargar dal site destinaziun separads da las rutas dal proxy ed interprete la latenza sco la via da la dumonda observada.
Sco standard surmetta Scrapy ils slots da descargar tenor il domeni da l'URL da la dumonda. Dar in proxy HTTP ad ina dumonda na mida betg quell'URL en il num da host dal proxy. Perquai pon dumondas a sitas differentas mantegnair slots differentas cumbain che ellas partan in intermediari.
AutoThrottle adatta la retardanza da mintga slot sin basa da la latenza da descargar observada. La cunfina da concurrentscha per domeni e la retardanza minima da descargar valan vinavant.
Legi English original per ils detagls.