Spark SQL - Wie schreibe ich DataFrame in eine Textdatei?

8

Ich verwende Spark SQL für das Lesen von Parkett und das Schreiben von Parkettfeilen.

Aber in einigen Fällen muss ich die DataFrame als Textdatei anstelle von Json oder Parquet schreiben.

Werden irgendwelche Standardmethoden unterstützt oder muss ich diesen Datenrahmen in RDD konvertieren und dann saveAsTextFile() Methode?

verwenden?     
Shankar 15.03.2016, 12:10
quelle

1 Antwort

11

Mit Databricks Spark-CSV können Sie direkt in eine CSV-Datei speichern und danach von einer CSV-Datei laden

%Vor%
    
Radu Ionescu 15.03.2016, 12:45
quelle

Tags und Links