Què és un hive Metastore?
Què és un hive Metastore?

Vídeo: Què és un hive Metastore?

Vídeo: Què és un hive Metastore?
Vídeo: 10 Role of Spark Metastore or Hive Metastore 2024, Maig
Anonim

Metamagatzem és el repositori central d'Apache Metadades del rusc . S'emmagatzema metadades per Rusc taules (com el seu esquema i ubicació) i particions en una base de dades relacional. Proporciona accés al client a aquesta informació mitjançant l'ús metamagatzem API de servei. Un servei que ofereix metamagatzem accés a altres Apache Rusc serveis.

Posteriorment, també es pot preguntar, quin és el Metastore predeterminat per al rusc?

La base de dades Derby és la metamagatzem predeterminat per a Hive que només admet un usuari, de manera que només podeu obrir un shell.

De la mateixa manera, quina diferència hi ha entre Metastore local i remot? En comparació amb el Local mode, hi ha un avantatge d'utilitzar Remot manera, és a dir Remot El mode no necessita que l'administrador comparteixi la informació d'inici de sessió JDBC per al metamagatzem base de dades juntament amb cada usuari de Hive, però locals el mode ho fa.

Al costat de dalt, on és el Rusc Metastore?

Per defecte, la ubicació del magatzem és file:///usuari/ rusc /warehouse i també podem utilitzar el rusc -lloc. xml per al local o remot metamagatzem . Quan utilitzem el controlador JDBC de MySQL, descarreguem Jconnector (controlador JDBC de MySQL) i el col·loquem a $HIVE_HOME/lib i col·loquem rusc -lloc.

Per què Metastore no s'emmagatzema a HDFS?

Doncs el metamagatzem utilitza una base de dades relacional tradicional (com MySQL, Oracle) o un sistema de fitxers (com local, NFS, AFS) i no HDFS . Com a resultat, les declaracions HiveQL només accedeixen metadades els objectes s'executen amb una latència molt baixa. Tanmateix, Hive ha de mantenir explícitament la coherència entre metadades i dades.

Recomanat: