Postavite Nutch proxy u konfiguraciju fetchera
Postavite Nutch proxy host i port u nutch-site.xml i izaberite protokolni dodatak koji implementira potrebne proxy funkcije.
Postavite osnovnu završnu tačku u nutch-site.xml koji učitava crawl:
<configuration>
<property>
<name>http.proxy.host</name>
<value>proxy.example</value>
</property>
<property>
<name>http.proxy.port</name>
<value>8080</value>
</property>
</configuration>Za HTTP rutu fetchera prema dozvoljenim javnim sajtovima bez proxy autentifikacije, zamenite ime hosta i odvojeni port kandidatom iz liste HTTP proxyja. Zadržite lokalna prepisivanja u datoteci sajta i uporedite distribuirane podrazumevane vrednosti instaliranog izdanja. Samo shell izvoz ne može konfigurisati dodatak koji ga nikada ne čita.
| Proxy svojstvo | Dokumentovani potrošač |
|---|---|
http.proxy.host, http.proxy.port | Osnovna ruta fetchera, prema izabranoj implementaciji |
http.proxy.username, http.proxy.password, http.proxy.realm | protocol-httpclient, koji konfiguriše akreditive na svom HTTP klijentu |
http.proxy.type | Opcija identifikovana za protocol-okhttp |
Uverite se da je traženi dodatak instaliran i uključen u efektivni izbor. Polje koje se pojavljuje u datoteci podrazumevanih vrednosti ne znači da ga svaka HTTP implementacija koristi.
Ispitajte implementaciju i konfiguraciju procesa koji zaista preuzima. Distribuirani radnici i skripte za pokretanje trebaju predviđene ulaze; datoteka uređena u drugoj instalaciji ne menja već konfigurisani fetcher.