/ / použitie servera úloh jiskra - scala, apache-spark, ooyala

použitie servera úloh jiskra - scala, apache-spark, ooyala

Som nováčiková. Chcem vedieť, že použitie spark job server ako Ooyala a Livy. je kód iskra nemôže priamo komunikovať s HDFS. Potrebujeme na odosielanie a prijímanie údajov také médium, ako je webová služba.

Ďakujem a s pozdravom,

odpovede:

0 pre odpoveď č. 1

ooyala a Livy

Trvalý kontext spark alebo nepomôže spustiťje to iskra ako služba http, ktorú môžete požiadať o vytvorenie alebo spustenie úlohy iskrenia priamo z http hovoru namiesto volania z príkazu ako spustiť alebo cronjob napríklad.

je kód iskra nemôže priamo komunikovať s HDFS

Nie. Môže komunikovať priamo s HDFS.

Potrebujeme na odosielanie a prijímanie údajov také médium, ako je webová služba.

Vlastne ooyala a Livy vrátia výsledok json, ako vy voláte v API. Závisí to od toho, či si vytvoríte médium alebo nie.