sql >> Databáze >  >> RDS >> Mysql

Dotazujte se na metadata z HIVE pomocí MySQL jako metaúložiště

Aktuálně to můžete udělat pomocí Hive JDBC StorageHandler:https://github.com/qubole /Hive-JDBC-Storage-Handler

Příklad vytvoření tabulky z jejich stránky:

DROP TABLE HiveTable;
CREATE EXTERNAL TABLE HiveTable(
  id INT,
  id_double DOUBLE,
  names STRING,
  test INT
)
STORED BY 'org.apache.hadoop.hive.jdbc.storagehandler.JdbcStorageHandler'
TBLPROPERTIES (
  "mapred.jdbc.driver.class"="com.mysql.jdbc.Driver",
  "mapred.jdbc.url"="jdbc:mysql://localhost:3306/rstore",
  "mapred.jdbc.username"="root",
  "mapred.jdbc.input.table.name"="JDBCTable",
  "mapred.jdbc.output.table.name"="JDBCTable",
  "mapred.jdbc.password"="",
  "mapred.jdbc.hive.lazy.split"= "false"
);

Testoval jsem, funguje to dobře s MySQL. A funguje také FilterPushDown.




  1. Hibernate odesílání nadbytečných dotazů do databáze

  2. Závislosti Oracle.DataAccess.Client

  3. Je možné mít indexovaný pohled v MySQL?

  4. Zvětšení velikosti importu mysql