hadoop, Seitenzahl 11

Hadoop ist ein Apache-Open-Source-Projekt, das Software für zuverlässiges und skalierbares verteiltes Computing bereitstellt. Das Projekt selbst enthält eine Vielzahl anderer ergänzender Ergänzungen.

Antworten

Unterschied zwischen 3 Speicherparametern in Hadoop 2?

Ich verwende Hadoop 2.0.5 (Alpha), um relativ große Jobs auszuführen, und habe folgende Fehler festgestellt: Behälter [pid = 15023, containerID = container_1378641992707_0002_01_000029] ist über die Grenzen des virtuellen Speichers hin...

09.09.2013, 06:33

Antworten

Ausnahme im Thread "main" java.lang.ClassNotFoundException: WordCount

Ich möchte derzeit einen einzelnen Instanzknoten von Hadoop erstellen. Also folge ich diesem Tutorial . Ich habe den folgenden Befehl im Terminal ausgeführt: %Vor% Die Dinge liefen gut, bis ich auf diesen Fehler stieß: %Vor% Ich versuch...

13.09.2013, 22:55

Antwort

Wo werden meine Dateien (dir) gespeichert, wenn ich den hadoop fs -mkdir benutzt habe?

Ich bin völlig neu bei hadoop und habe gerade die Installation beendet, die mich zwei Tage gekostet hat ... Ich versuche jetzt mit dem hadoop dfs Befehl, aber ich konnte es einfach nicht verstehen, obwohl ich seit Tagen surfe, konnte ich nicht d...

30.07.2012, 03:03

Antworten

Effiziente Möglichkeit, mehrere Zeilen in HBase zu löschen

Gibt es eine effiziente Möglichkeit, mehrere Zeilen in HBase zu löschen, oder riecht mein Anwendungsfall nicht nach HBase? Es gibt eine Tabelle, die "Diagramm" sagt, die Elemente enthält, die sich in Diagrammen befinden. Zeilenschlüssel haben...

06.01.2011, 19:33

Antworten

Was ist der Zweck der Funktion org.apache.hadoop.mapreduce.Mapper.run () in Hadoop?

Was ist der Zweck der Funktion org.apache.hadoop.mapreduce.Mapper.run() in Hadoop? Der setup() wird vor dem Aufruf von map() aufgerufen und der clean() wird nach dem map() aufgerufen. Die Dokumentation für run() sagt Expe...

18.09.2011, 06:00

Antworten

Warum YARN Java Heap Speicherplatzfehler?

Ich möchte versuchen, Speicher in YARN zu setzen, also werde ich versuchen, einige Parameter auf yarn-site.xml und mapred-site.xml zu konfigurieren. Übrigens benutze ich hadoop 2.6.0. Aber ich erhalte einen Fehler, wenn ich einen mapreduce Job m...

12.03.2015, 04:07

Antworten

wie kann ich mit vielen kleinen Dateien in hadoop arbeiten?

Ich bin neu in hadoop und ich arbeite mit einer großen Anzahl von kleinen Dateien in Wordcount Beispiel. Es benötigt eine Menge Map-Aufgaben und führt zu einer Verlangsamung meiner Ausführung. Wie kann ich die Anzahl der Kartenaufgaben reduzi...

26.01.2013, 21:28

Antwort

BindException in Hadoop auf EC2

Ich versuche, einen Hadoop-Cluster (CDH4) auf EC2-Instanzen einzurichten. Der namenode stürzt immer ab, wenn ich versuche, ihn zu formatieren. Das ist der Fehler, den ich bekomme. %Vor% Die Hosts-Datei sieht so aus %Vor% Kann mir jemand...

12.04.2013, 06:40

Antworten

Kann Druide Hadoop ersetzen?

Druid wird sowohl für die Echtzeit- als auch für die Stapelverarbeitung verwendet. Aber kann es Hadoop völlig ersetzen? Wenn nicht warum? Was ist der Vorteil von Hadoop gegenüber Druiden? Ich habe gelesen, dass Druide zusammen mit Hadoop verwend...

09.06.2014, 14:03

Antworten

Hadoop als Dokumentspeicher-Datenbank

Wir haben einen großen Dokumentenspeicher, der derzeit bei 3 TB im Weltraum läuft und alle sechs Monate um 1 TB erhöht. Sie sind derzeit in einem Windows-Dateisystem gespeichert, das zuweilen Probleme beim Zugriff und beim Abrufen verursacht hat...

22.02.2012, 05:03