hive

Hive ist ein Data Warehouse-System für Hadoop, das eine einfache Datenzusammenfassung, Ad-hoc-Abfragen und die Analyse großer Datasets ermöglicht, die in Hadoop-kompatiblen Dateisystemen gespeichert sind. Hive bietet einen Mechanismus zum Projizieren der Struktur auf diese Daten und Abfragen der Daten mithilfe einer SQL-ähnlichen Sprache namens HiveQL.
1
Antwort

Zugriff auf den Hive-Metastore mithilfe von jdbc mit Kerberos-Keytab

Ich versuche, mich mit einem Hive-Metasor zu verbinden, der für die Verwendung von Kerberos zur Authentifizierung konfiguriert wurde. Dies funktioniert für mich, wenn ich nicht versuche, eine Keytab-Datei zu verwenden, d. H. Wenn das Programm mi...
27.01.2014, 07:42
3
Antworten

Hive RegexSerDe Multiline Log-Abgleich

Ich suche nach einer Regex, die zu einer "create external table" -Anweisung von Hive QL in Form von gespeist werden kann %Vor% Die Bedingung ist, dass die Protokolle in den Dateien, die RegexSerDe lesen muss, die folgende Form haben: %Vor%...
29.07.2013, 22:20
1
Antwort

HIVE-Insert überschreibt das Verzeichnis mit dem JSON-Format

Wie kann ich überschreiben Verzeichnis mit JSON-Schema einfügen? Es gibt rohen Bienenstock avro Tisch; (Das hat eigentlich viele Felder) %Vor% dann möchte ich Abfrage Ergebnis in ein Verzeichnis in hdfs von jsonserde speichern. Ich hab...
22.04.2016, 13:31
1
Antwort

Fehler beim Verbinden von Hortonworks Hive ODBC in Excel 2013

Ich versuche, Hortonworks Hive über ODBC-Treiber in Excel 2013 abzufragen. Ich habe den Treiber hier heruntergeladen (32-Bit): Ссылка Hortonworks 2.5 Hive 2.5.0.0-1245 Dann füge ich die Konfiguration in ODBC Data Source Administrat...
06.02.2017, 20:57
1
Antwort

Spark: Welche Optionen können mit DataFrame.saveAsTable oder DataFrameWriter.options übergeben werden?

Weder die Entwickler- noch die API-Dokumentation enthält einen Hinweis darauf, welche Optionen in DataFrame.saveAsTable oder DataFrameWriter.options übergeben werden können, und sie würden sich auf das Speichern einer Hive-Tabelle auswirke...
18.07.2015, 02:43
3
Antworten

Ermitteln der ersten Zeile in einer Gruppe mithilfe von Hive

Für eine Schülerdatenbank im folgenden Format %Vor% Wie finde ich heraus, wer in welcher Klasse am höchsten war? Die folgende Abfrage gibt die gesamte Gruppe zurück, aber ich bin daran interessiert, die erste Zeile in der Gruppe zu finden....
24.09.2014, 05:15
4
Antworten

Wie konvertiert man die Zeitmarke eines Unix-Epochens zu einem Datum in der Struktur

Ich habe eine Protokolldatei, die eine Zeitstempelspalte enthält. Der Zeitstempel ist im Unix-Epochen-Zeitformat. Ich möchte eine Partition basierend auf einem Zeitstempel mit den Partitionen Jahr, Monat und Tag erstellen. Bisher habe ich...
26.08.2011, 22:40
4
Antworten

Daten von einer Hive-Tabelle in eine andere mit Partition laden

Ich habe Daten in einer Hive-Tabelle und möchte Daten in eine andere Hive-Tabelle laden. Die Quellentabelle ist reg_logs mit 2 Partitionen, Datum und Stunde. Die Daten werden stündlich in diese Tabelle geladen. Das Schema ist: %Vor% Die Z...
13.06.2014, 18:05
3
Antworten

Hive Query Execution Error, Rückgabecode 3 von MapredLocalTask

Ich erhalte diesen Fehler beim Ausführen einer einfachen Verbindung zwischen zwei Tabellen. Ich führe diese Abfrage in der Hive-Befehlszeile aus. Ich benenne Tabelle als & amp; b. Tabelle a ist eine interne Hive-Tabelle und b ist eine externe Ta...
10.04.2014, 02:52
5
Antworten

Umgang mit NULL-Werten in Hive

Ich versuche, eine Tabelle (Tabelle 2) in Hive aus einer anderen Tabelle (Tabelle 1) zu erstellen. Ich versuche, bestimmte Zeilen mit NULL-Werten auszuschließen und habe die folgende Bedingung versucht. %Vor% Wenn ich jedoch diese folgende A...
25.08.2013, 19:38