HadoopHDFSMapReduceの出力をMongoDbに

«Hadoop用MongoDBコネクタ» が必要です 。 例 。

副作用として、データベースにデータを挿入するコードをレデューサーに追加するだけの魅力があります。この誘惑を避けてください。レデューサークラスの副作用としてデータを挿入するだけでなく、コネクターを使用する理由の1つは、投機的実行です。Hadoopは、まったく同じ2つのリデュースタスクを並行して実行することがあり、余分な挿入や重複データが発生する可能性があります。