distributed-computing

Fragen
Verwendung von mehr als einem Computer, die über eine Kommunikationsverbindung miteinander verbunden sind, um eine gemeinsame Aufgabe zu erfüllen.
1
Antwort

Elastische Sturmtopologie / Storm-Hadoop koexistierend

Wir evaluieren Storm für einen Einsatz, aber ich bin etwas besorgt. Wir führen derzeit Hadoop MapReduce aus und möchten einige unserer Prozesse von MapReduce auf Storm-Prozesse umstellen. Beachten Sie, dass dies einige, aber nicht alle sind. Wir...
03.01.2013, 04:01
6
Antworten

Verteilte Jobplanung, Verwaltung und Berichterstellung

Ich habe kürzlich mit Hadoop gespielt und war beeindruckt von der Planung, Verwaltung und Berichterstellung von MapReduce-Jobs. Es scheint, dass die Verteilung und Ausführung neuer Jobs ziemlich nahtlos verläuft und der Entwickler sich auf die...
16.12.2009, 14:12
1
Antwort

Wie kann ich meine Daten über die Partitionen verteilen?

Bearbeiten : Die Antwort hilft, aber ich habe meine Lösung beschrieben in: MemoryOverhead-Problem in Spark . Ich habe eine RDD mit 202092 Partitionen, die einen Datensatz liest, der von anderen erstellt wurde. Ich kann manuell sehen, dass...
06.08.2016, 01:31
1
Antwort

Verteilter Algorithmusentwurf

Ich habe "Einführung in Algorithmen" gelesen und begann ein paar Ideen und Fragen in meinem Kopf zu bekommen. Derjenige, der mich am meisten verblüfft, ist, wie Sie einen Algorithmus entwerfen würden, um Elemente / Nachrichten in einer Warteschl...
05.10.2011, 19:50
1
Antwort

JavaScript verteiltes Computerprojekt [geschlossen]

Ich habe eine Website erstellt, die absolut nichts tut , und ich habe mir selbst bewiesen, dass die Leute gerne dort bleiben - ich habe bereits mehr als 11 Stunden kumulative Zeit auf der Seite geloggt. Meine Frage ist, ob es möglich (oder p...
09.06.2010, 15:37
1
Antwort

Warum nimmt TCP / IP unter Windows7 500 Sends zum Aufwärmen? (w10, w8 erwies sich nicht zu leiden)

Wir sehen ein bizarres und unerklärliches Phänomen mit ZeroMQ auf Windows 7 , Senden von Nachrichten über TCP. (oder über inproc , wie ZeroMQ verwendet TCP intern zur Signalisierung, unter Windows). Das Phänomen ist, dass die ersten...
29.10.2015, 08:58
2
Antworten

Schlechte Version oder Endian-Schlüssel in MATLAB parfor?

Ich mache parallele Berechnungen mit MATALB parfor . Die Code-Struktur sieht fast wie aus %Vor% Ich habe den folgenden seltsamen Fehler festgestellt. %Vor% Wie soll ich es beheben? Eine schnelle Google-Suche gibt keine Lösung zurück....
06.07.2014, 04:03
1
Antwort

Hadoop: Bindung mehrerer IP-Adressen an einen Cluster-NameNode

Ich habe einen Hadoop-Cluster mit vier Knoten auf Softlayer. Der Master (NameNode) hat eine öffentliche IP-Adresse für den externen Zugriff und eine private IP-Adresse für den Clusterzugriff. Die Slave-Knoten (Datenknoten) haben eine private IP-...
05.08.2014, 09:17
4
Antworten

Cache-Konsistenz bei der Verwendung von memcached und einem rdbms wie MySQL

Ich habe in diesem Semester einen Datenbankkurs belegt und wir untersuchen, wie die Cache-Konsistenz zwischen dem RDBMS und einem Cache-Server wie memcached aufrechterhalten werden kann. Die Konsistenzprobleme treten auf, wenn es Rennbedingungen...
18.10.2011, 05:26
2
Antworten

C ++ Winsock P2P

Szenario Hat jemand gute Beispiele für Peer-to-Peer-Netzwerke (P2P) in C ++ mit Winsock? Es ist eine Anforderung, die ich für einen Kunden habe, der diese Technologie speziell nutzen muss (weiß Gott warum). Ich muss feststellen, ob dies machb...
16.05.2010, 10:00