Wie importiert man mehrere CSV-Dateien in einer einzigen Ladung?

Überlegen, ich habe einen definierten schema für die be-10 csv-Dateien in einem Ordner. Gibt es eine Möglichkeit, automatisch zu laden, Tabellen mit Spark SQL. Ich weiß, dies kann durchgeführt werden durch Verwendung eines einzelnen dataframe für jede Datei [unten gegeben], aber es kann automatisiert werden mit einem einzigen Befehl anstatt darauf eine Datei kann ich einen Ordner?

df = sqlContext.read
       .format("com.databricks.spark.csv")
       .option("header", "true")
       .load("../Downloads/2008.csv")

InformationsquelleAutor der Frage Chendur | 2016-06-05

Schreibe einen Kommentar