spark-shell --driver-java-options "-Dhttp.proxyHost=proxy.example -Dhttp.proxyPort=8080 -Dhttps.proxyHost=proxy.example -Dhttps.proxyPort=8080" --packages group:artifact:version

Ag seoladh spark-shell ar thaobh an chliaint tagann na roghanna JVM seo don tiománaí roimh réiteach na spleáchas. Cuir an deireadhphointe léiritheach agus group:artifact:version in ionad na luachanna beartaithe ag baint úsáide as roghanna a thacaíonn an leagan Spark atá suiteáilte leo. Is airíonna ar leith iad ainm óstaigh agus port Java. Le haghaidh íoslódálacha poiblí spleáchas a cheadaítear, tairgeann liosta seachfhreastalaithe HTTP iarrthóirí do na réimsí sin.

Úsáid an suíomh seo nuair a theipeann ar --packages sula mbíonn an sliogán ar fáil. Ní féidir le cód feidhmchláir a iontráiltear ina dhiaidh sin an íoslódáil roimhe sin a dheisiú. Déanann Spark idirdhealú idir roghanna seolta agus socruithe cláir; i mód cliaint tá JVM an tiománaí ann cheana nuair a ritheann cód an fheidhmchláir.

Tá tábhacht ag baint le mód imlonnaithe freisin do spark.driver.extraJavaOptions: féadann an tiománaí rith ar mheaisín eile, a bhfuil a chonair féin chuig an seachfhreastalaí uaidh. Is próiseas agus suíomh líonra eile é iarratas API níos déanaí ó fheidhmeoir; ní gá go ndéanfadh cumrú feidhmeoirí réiteach an tseolta a chumrú.

Nuair a bhíonn roghanna seolta ann ach go dteipeann ar an íoslódáil

Lean ainm óstaigh an stór, cineál an iarratais agus an chéad earráid. Féadfaidh meiteashonraí agus déantáin teacht ó roinnt óstaigh. Ní chruthaíonn URL stóir atá comhoiriúnach le Maven go léann Spark an settings.xml a úsáideann ordú Maven rathúil.

Caithfidh íoslódálaí Java tacú le meicníocht an seachfhreastalaí agus leis an bhfíordheimhniú riachtanach. Ní sholáthraíonn airíonna óstaigh/poirt gach scéim, agus ní thagann airí maidir le http.proxyUsername a chumtar chun críche díreach toisc go nglacann Java leis an ainm. Coinnigh cumraíocht roimh sheoladh agus an íoslódáil mhainnitheach ar leith le chéile agus tú ag déanamh diagnóis ar an gcéim seo.

Ailt ghaolmhara