hadoop

Hadoop ist ein Apache-Open-Source-Projekt, das Software für zuverlässiges und skalierbares verteiltes Computing bereitstellt. Das Projekt selbst enthält eine Vielzahl anderer ergänzender Ergänzungen.
3
Antworten

Programmgesteuertes Lesen der Ausgabe von Hadoop Mapreduce Program

Dies mag eine grundlegende Frage sein, aber ich konnte keine Antwort auf Google finden. Ich habe einen Map-Reduce-Job, der mehrere Ausgabedateien in seinem Ausgabeverzeichnis erstellt. Meine Java-Anwendung führt diesen Job auf einem Remote-Hado...
12.04.2011, 11:01
5
Antworten

Differenz fehlgeschlagene Aufgaben vs. getötete Aufgaben

Im Jobtracker-Web-UI sehe ich diese Spalte "Failed / Killed" Aufgabe versucht ". Ich würde gerne den Unterschied zwischen ihnen wissen. Ich schätze "Fehlgeschlagene" bedeuten Aufgaben, die nach einigen Wiederholungen wirklich fehlgeschlagen s...
22.06.2012, 23:40
1
Antwort

Wie man eine fehlgeschlagene Aufgabe in Airflow neu startet

Ich verwende einen LocalExecutor und mein dag hat 3 Aufgaben , wobei Aufgabe (C) von Aufgabe (A) abhängig ist. Aufgabe (B) und Aufgabe (A) können parallel wie folgt ausgeführt werden: A - & gt; C B So war Aufgabe (A) fehlgeschlagen...
07.04.2017, 06:08
3
Antworten

Wie schaffe ich eine Gruppe in einem einzigen Tupel in Pig?

Von diesem: %Vor% ... Wie können wir das erzeugen? %Vor% ... Und wie könnten wir das erzeugen? %Vor% Für eine einzelne Zeile weiß ich wie es geht. Das Problem ist, wenn ich über viele Zeilen Iterieren und gleichzeitig interne Gruppen...
31.08.2013, 04:48
4
Antworten

Was sind die Nachteile von mapreduce?

Was sind die Nachteile von mapreduce? Mapreduce bietet viele Vorteile. Aber ich würde gerne auch die Nachteile von mapreduce kennen.     
03.09.2013, 06:47
4
Antworten

Wie kann ich dieses einfache Mahout-Programm erstellen / ausführen, ohne Ausnahmen zu erhalten?

Ich möchte diesen Code ausführen, den ich in Mahout In Action gefunden habe: %Vor% Ich kompiliere es mit: %Vor% Ich jar es: %Vor% Jetzt möchte ich es auf meinem lokalen Hadoop-Knoten ausführen. Ich habe es versucht: %Vor% Aber ic...
13.07.2012, 23:28
4
Antworten

Was ist der Unterschied zwischen -hivevar und -hiveconf?

Von Bienenstock-h: %Vor%     
23.06.2016, 16:23
5
Antworten

Hadoop-Cluster. 2 schnelle, 4 mittlere, 8 langsamere Maschinen?

Wir werden eine neue Hardware kaufen, die nur für einen Hadoop-Cluster verwendet wird, und wir hängen fest, was wir kaufen sollten. Nehmen wir an, wir haben ein Budget von 5 Tsd. $, Sollten wir zwei super nette Maschinen für 2500 $ / Stück kaufe...
10.06.2009, 15:14
5
Antworten

Was der Befehl "hadoop namenode -format" tun wird

Ich versuche, Hadoop zu lernen, indem ich einem Tutorial folge und versuche, einen pseudo-verteilten Modus auf meinem Rechner durchzuführen. Mein core-site.xml ist: %Vor% Meine hdfs-site.xml -Datei ist: %Vor% Meine mapred-site....
26.11.2014, 07:26
2
Antworten

kopiert das Verzeichnis vom lokalen System in den hdfs Java Code

Ich habe ein Problem mit dem Versuch, ein Verzeichnis von meinem lokalen System in HDFS mit Java-Code zu kopieren. Ich bin in der Lage, einzelne Dateien zu verschieben, kann aber keine Möglichkeit finden, ein ganzes Verzeichnis mit Unterordnern...
08.10.2012, 14:38