sql >> Databáze >  >> NoSQL >> Redis

Dynamické vyhledávání Spark Structured Streaming s Redis

Jednou z možností je nepoužívat spark-redis, ale hledat přímo v Redis. Toho lze dosáhnout pomocí df.mapPartitions funkce. Některé příklady pro Spark DStreams najdete zde https://blog.codecentric.de/en/2017/07/lookup-additional-data-in-spark-streaming/. Myšlenka pro strukturální streamování je podobná. Buďte opatrní, abyste správně zacházeli s připojením Redis.



  1. 2 způsoby, jak získat velikost dokumentu v MongoDB

  2. Dostávám duplicitní zprávy v mé seskupené aplikaci node.js/socket.io/redis pub/sub

  3. Microservices Architecture pro velmi častý přístup k datům; v paměťových řešeních?

  4. Porovnání dat v mongodb