hadoop

Hadoop ist ein Apache-Open-Source-Projekt, das Software für zuverlässiges und skalierbares verteiltes Computing bereitstellt. Das Projekt selbst enthält eine Vielzahl anderer ergänzender Ergänzungen.
3
Antworten

Hadoop: Keine solche Methodenausnahme

Ich habe ein MapReduce-Programm geschrieben, Code ist unten: %Vor% Ich führe die .jar dieses Programms mit dem folgenden Befehl aus: %Vor% Und ich erhalte den folgenden Fehler: %Vor% Was bedeutet dieser Fehler? Und was mache ich fals...
13.06.2012, 20:28
3
Antworten

Wie wird eine programmgesteuerte Verbindung zu einem Hive-Metastore in SparkSQL hergestellt?

Ich benutze HiveContext mit SparkSQL und versuche, mich mit einem entfernten Hive-Metastor zu verbinden. Die einzige Möglichkeit, den Hive-Metastore zu setzen, besteht darin, die hive-site.xml in den Klassenpfad einzubinden (oder in / etc zu kop...
13.08.2015, 06:04
2
Antworten

Wählen Sie die obersten 2 Zeilen in Hive aus

Ich bin ein Noobie hier. Ich versuche, Top 2 Tabellen aus meiner Mitarbeiterliste basierend auf Gehalt in Bienenstock (Version 0.11) abrufen. Da es die TOP-Funktion nicht unterstützt, gibt es Alternativen? Oder haben wir eine UDF definiert?    ...
25.05.2015, 15:41
5
Antworten

hadoop java.io.IOException: beim Ausführen von namynode -format

Ich habe nameode-format ausgeführt. Das ist meine Ausgabe. Ich habe versucht, die Dateiberechtigungen chmod 777 hadoop zu ändern. Ich glaube, dass diese Zeile der Fehler ist  ERROR nomenode.NameNode: java.io.IOException: Verzeichnis / Ihr / P...
03.07.2012, 16:24
11
Antworten

http: // localhost: 50070 funktioniert nicht HADOOP

Ich habe bereits Hadoop auf meinem Rechner installiert "Ubuntu 13.05" und jetzt habe ich einen Fehler beim Durchsuchen von localhost: 50070 der Browser sagt, dass die Seite nicht existiert.     
28.10.2013, 17:33
7
Antworten

hdfs - ls: Bei lokaler Ausnahme fehlgeschlagen: com.google.protobuf.InvalidProtocolBufferException:

Ich versuche das unten zu verwenden, um meine Wege in hdfs aufzulisten ... %Vor% Hier ist meine / etc / hosts Datei %Vor% Hallo, verwende ich hdfs: //, um meine Verzeichnisse aufzulisten? Ich benutze Couldera 4.3 auf ubuntu 12.04    ...
04.05.2013, 09:57
4
Antworten

Mapreduce Combiner

Ich habe einen einfachen mapreduce Code mit Mapper, Reducer und Combiner. Die Ausgabe vom Mapper wird an den Kombinierer übergeben. Aber zum Reduzierer wird, anstatt vom Kombinierer ausgegeben zu werden, die Ausgabe vom Abbilder übergeben. Bi...
26.11.2013, 09:22
1
Antwort

mit PIG, um eine Datei zu laden

Ich bin sehr neu bei PIG und ich habe etwas, was sich wie ein sehr grundlegendes Problem anfühlt. Ich habe eine Codezeile, die lautet: %Vor% wobei jede Datei im Grunde eine Zeile von 4 kommagetrennten Wörtern ist. PIG teilt dies jedoch nicht...
11.11.2011, 19:36
1
Antwort

Garn achtet nicht auf Garn.nodemanager.resource.cpu-vcores

Ich verwende Hadoop-2.4.0 und meine Systemkonfigurationen sind 24 Kerne, 96 GB RAM. Ich verwende folgende Konfigs %Vor% Capacity Scheduler konfiguriert %Vor% Mit obigen Konfigurationen erwarte ich, dass Garn nicht mehr als 10 Mappe...
29.08.2014, 07:42
5
Antworten

Kleine Dateien und HDFS-Blöcke

Speichert ein Block in Hadoop Distributed File System mehrere kleine Dateien oder speichert ein Block nur eine Datei?     
19.12.2011, 14:42