sql >> Databáze >  >> NoSQL >> MongoDB

Hadoop HDFS MapReduce výstup do MongoDb

Chcete «Konektor MongoDB pro Hadoop» . příklady .

Je lákavé přidat do Reduceru kód, který jako vedlejší efekt vloží data do vaší databáze. Vyhněte se tomuto pokušení. Jedním z důvodů, proč používat konektor namísto pouhého vkládání dat jako vedlejšího efektu vaší redukční třídy, je spekulativní provádění:Hadoop může někdy paralelně spouštět dvě přesně stejné úlohy redukce, což může vést k nadbytečným vkládáním a duplicitním datům.



  1. Proč mi express říká, že můj výchozí zobrazovací modul není definován?

  2. Velké datové pracovní toky pomocí pand

  3. Synchronizace dat serveru MongoDB do místního úložiště IndexedDB

  4. Jak nastavit primární klíč v MongoDB?