sql >> Databáze >  >> NoSQL >> MongoDB

Jak používat Elasticsearch s MongoDB?

Tato odpověď by vám měla stačit k tomu, abyste se nastavili pro sledování tohoto výukového programu o vytváření funkční vyhledávací komponenty pomocí MongoDB, Elasticsearch a AngularJS.

Pokud chcete používat fasetované vyhledávání s daty z API, pak byste se mohli chtít podívat na Matthiasn's BirdWatch Repo.

Zde je návod, jak můžete nastavit jeden uzel Elasticsearch „shluk“ k indexování MongoDB pro použití v aplikaci NodeJS, Express na čerstvé instanci EC2 Ubuntu 14.04.

Ujistěte se, že je vše aktuální.

sudo apt-get update

Nainstalujte NodeJS.

sudo apt-get install nodejs
sudo apt-get install npm

Nainstalujte MongoDB – Tyto kroky jsou přímo z dokumentů MongoDB. Vyberte si jakoukoli verzi, která vám vyhovuje. Zůstávám u verze 2.4.9, protože se zdá být nejnovější verzí, kterou MongoDB-River bez problémů podporuje.

Importujte veřejný klíč GPG MongoDB.

sudo apt-key adv --keyserver hkp://keyserver.ubuntu.com:80 --recv 7F0CEB10

Aktualizujte svůj seznam zdrojů.

echo 'deb http://downloads-distro.mongodb.org/repo/ubuntu-upstart dist 10gen' | sudo tee /etc/apt/sources.list.d/mongodb.list

Získejte balíček 10gen.

sudo apt-get install mongodb-10gen

Pak vyberte svou verzi, pokud nechcete nejnovější. Pokud své prostředí nastavujete na počítači s Windows 7 nebo 8, držte se dál od verze 2.6, dokud neodstraní nějaké chyby při jejím spuštění jako služby.

apt-get install mongodb-10gen=2.4.9

Zabraňte tomu, aby se verze vaší instalace MongoDB při aktualizaci zvýšila.

echo "mongodb-10gen hold" | sudo dpkg --set-selections

Spusťte službu MongoDB.

sudo service mongodb start

Vaše databázové soubory jsou ve výchozím nastavení /var/lib/mongo a soubory protokolů /var/log/mongo.

Vytvořte databázi pomocí mongo shellu a vložte do ní nějaká falešná data.

mongo YOUR_DATABASE_NAME
db.createCollection(YOUR_COLLECTION_NAME)
for (var i = 1; i <= 25; i++) db.YOUR_COLLECTION_NAME.insert( { x : i } )

Nyní převeďte samostatný MongoDB na sadu replik.

Nejprve vypněte proces.

mongo YOUR_DATABASE_NAME
use admin
db.shutdownServer()

Nyní spouštíme MongoDB jako službu, takže při restartování procesu mongod nepředáváme možnost "--replSet rs0" v argumentu příkazového řádku. Místo toho jsme jej vložili do souboru mongod.conf.

vi /etc/mongod.conf

Přidejte tyto řádky, subbing pro vaše db a cesty protokolu.

replSet=rs0
dbpath=YOUR_PATH_TO_DATA/DB
logpath=YOUR_PATH_TO_LOG/MONGO.LOG

Nyní znovu otevřete mongo shell pro inicializaci sady replik.

mongo DATABASE_NAME
config = { "_id" : "rs0", "members" : [ { "_id" : 0, "host" : "127.0.0.1:27017" } ] }
rs.initiate(config)
rs.slaveOk() // allows read operations to run on secondary members.

Nyní nainstalujte Elasticsearch. Právě sleduji tuto užitečnou podstatu.

Ujistěte se, že je nainstalována Java.

sudo apt-get install openjdk-7-jre-headless -y

Zůstaňte zatím u verze 1.1.x, dokud nebude ve verzi 1.2.1 opravena chyba pluginu Mongo-River.

wget https://download.elasticsearch.org/elasticsearch/elasticsearch/elasticsearch-1.1.1.deb
sudo dpkg -i elasticsearch-1.1.1.deb

curl -L http://github.com/elasticsearch/elasticsearch-servicewrapper/tarball/master | tar -xz
sudo mv *servicewrapper*/service /usr/local/share/elasticsearch/bin/
sudo rm -Rf *servicewrapper*
sudo /usr/local/share/elasticsearch/bin/service/elasticsearch install
sudo ln -s `readlink -f /usr/local/share/elasticsearch/bin/service/elasticsearch` /usr/local/bin/rcelasticsearch

Ujistěte se, že /etc/elasticsearch/elasticsearch.yml má povolené následující možnosti konfigurace, pokud zatím vyvíjíte pouze jeden uzel:

cluster.name: "MY_CLUSTER_NAME"
node.local: true

Spusťte službu Elasticsearch.

sudo service elasticsearch start

Ověřte, že to funguje.

curl http://localhost:9200

Pokud něco takového uvidíte, pak jste v pořádku.

{
  "status" : 200,
  "name" : "Chi Demon",
  "version" : {
    "number" : "1.1.2",
    "build_hash" : "e511f7b28b77c4d99175905fac65bffbf4c80cf7",
    "build_timestamp" : "2014-05-22T12:27:39Z",
    "build_snapshot" : false,
    "lucene_version" : "4.7"
  },
  "tagline" : "You Know, for Search"
}

Nyní nainstalujte zásuvné moduly Elasticsearch, aby bylo možné hrát s MongoDB.

bin/plugin --install com.github.richardwilly98.elasticsearch/elasticsearch-river-mongodb/1.6.0
bin/plugin --install elasticsearch/elasticsearch-mapper-attachments/1.6.0

Tyto dva pluginy nejsou nutné, ale jsou dobré pro testování dotazů a vizualizaci změn ve vašich indexech.

bin/plugin --install mobz/elasticsearch-head
bin/plugin --install lukas-vlcek/bigdesk

Restartujte Elasticsearch.

sudo service elasticsearch restart

Nakonec indexujte kolekci z MongoDB.

curl -XPUT localhost:9200/_river/DATABASE_NAME/_meta -d '{
  "type": "mongodb",
  "mongodb": {
    "servers": [
      { "host": "127.0.0.1", "port": 27017 }
    ],
    "db": "DATABASE_NAME",
    "collection": "ACTUAL_COLLECTION_NAME",
    "options": { "secondary_read_preference": true },
    "gridfs": false
  },
  "index": {
    "name": "ARBITRARY INDEX NAME",
    "type": "ARBITRARY TYPE NAME"
  }
}'

Zkontrolujte, zda je váš index v Elasticsearch

curl -XGET http://localhost:9200/_aliases

Zkontrolujte stav clusteru.

curl -XGET 'http://localhost:9200/_cluster/health?pretty=true'

Je to pravděpodobně žluté s nějakými nepřiřazenými střepy. Musíme Elasticsearch říci, s čím chceme pracovat.

curl -XPUT 'localhost:9200/_settings' -d '{ "index" : { "number_of_replicas" : 0 } }'

Znovu zkontrolujte stav clusteru. Nyní by měla být zelená.

curl -XGET 'http://localhost:9200/_cluster/health?pretty=true'

Jdi hrát.



  1. Nejlepší způsob, jak modelovat hlasovací systém v MongoDB

  2. Jak zruším databázi MongoDB z příkazového řádku?

  3. Chyba 99 při připojování k localhost:6379. Nelze přiřadit požadovanou adresu

  4. Existuje nějaký způsob, jak obnovit nedávno smazané dokumenty v MongoDB?