/ / Wie man Daten von Mongodb nach Hadoop streamen kann - mongodb, hadoop

So streamen Sie Daten von Mongodb nach Hadoop - mongodb, hadoop

Ich bin neu bei Hadoop und begann mit der Planung einer Anwendung zur Analyse der Daten, die ich über drei Sammlungen auf Mongodb gesammelt habe. Ich habe versucht, etwas wie das zu suchen Mongodb river for elasticsearch Aber ich habe keine Möglichkeit gefunden, die Daten nach Hbase oder HDFS zu streamen. Ich habe Sqoop und Flume gefunden, aber ich weiß nicht, ob dies genau das ist, wonach ich gesucht habe So wie ich es sehe, wird es so sein http api -> something here -> Hadoop storage. Gibt es etwas, was das für mich tun kann?

Antworten:

0 für die Antwort № 1

Versuchen Sie es mit Streaming Assembly,

Mit der Streaming-Assembly können Sie MapReduce schreibenJobs in Sprachen wie Python, Ruby und JavaScript anstelle von Java erleichtern es Entwicklern, die mit MongoDB vertraut sind, und beliebten dynamischen Programmiersprachen, um die Leistungsfähigkeit von Hadoop zu nutzen.

Für mehr Information Besuch.