Hadoop-Parameter mit Boto einstellen?

8

Ich versuche, fehlerhafte Eingaben für meine Amazon Elastic MapReduce-Jobs zu überspringen. Ich folge dem wunderbaren Rezept, das hier beschrieben wird:

Ссылка

Der obige Link besagt, dass ich die folgenden Konfigurationsparameter für einen EMR-Job irgendwie festlegen muss:

%Vor%

Wie stelle ich diese (und andere) mapred.XXX Parameter in einem JobFlow mit Boto?

ein     
slavi 22.08.2012, 10:48
quelle

1 Antwort

14

Nach vielen Stunden des Ringens, des Lesens von Code und des Experimentierens, hier ist die Antwort:

Sie müssen eine neue BootstrapAction wie folgt hinzufügen:

%Vor%

Wenn Sie mehr als eine Bootstrap-Aktion haben, sollten Sie sie natürlich nur dem bootstrap_actions-Array hinzufügen.

    
slavi 22.08.2012, 10:48
quelle

Tags und Links