Download .RData und .csv-Dateien von FTP mit RCurl (oder jede andere Methode)

Habe ich hochgeladen .RData-Datei (erstellt mit save()) auf einen ftp-server, und ich versuche, die Verwendung von getURL() zum download der gleichen Datei. Für alle Beispiele und Beiträge, die ich gelesen habe, ich kann nicht scheinen, um diese zu arbeiten.

Den .RData-Datei gespeichert wurde:

save(results, file=RDataFilePath, compress="xz") #save object "results" w/compression
#RDataFilePath is the location of the results.RData file on my harddrive

Diese Daten wurden hochgeladen mit:

uploadURL <-"ftp://name:password@host/folder/results.RData" #name the url
ftpUpload(RDataFilePath, to=uploadURL, connecttimeout=120) #upload

Dies ist, wie ich versuche, download-Ergebnisse.RData mit getURL:

downloadURL <- "host/folder/results.RData"
load(getURL(downloadURL, userpwd="name:password", connecttimeout=120))

welche gibt die folgende Fehlermeldung:

Error in curlPerform(curl = curl, .opts = opts, .encoding = .encoding) : 
  embedded nul in string: 'ý7zXZ'

Wenn ich fügen Sie den downloadURL string in meinem browser, die .RData Datei-downloads sofort, damit ich weiß, es ist kein Tippfehler. Die Fehlermeldung deutet darauf hin, dass die url nicht bekommen können, Lesen Sie b/c für die Komprimierung, Formatierung, allerdings bekomme ich eine ähnliche Fehlermeldung, wenn ich save() w/o-Kompression.

Bekomme ich auch eine Fehlermeldung, wenn Sie versuchen herunterzuladen .csv vom FTP:

read.csv(getURL(downloadURL1)) #downloadURL1 is similar to downloadURL, but points to the .csv file
Error in file(file, "rt") : cannot open the connection

dann eine Warnung, die besagt In addition: Warning message:
In file(file, "rt") : cannot open file und dann beginnt die Auflistung der Inhalte der .csv.

Ich habe versucht, dies herauszufinden, für den besseren Teil von den Morgenstunden, und ich fühle mich wie ich muss fehlt etwas wirklich grundlegendes. Ich vermute, dass ich ändern müssen, einige curl-option, so dass es weiß, welche Art von Datei es geht zu Lesen. Meine syntax ist wohl ein bisschen off, und ich bin nicht mit getURL richtig, aber ich bin mir nicht sicher, was ich tun sollte.

Irgendwelche Tipps würde sehr geschätzt werden.

p.s. Mein Aktueller Ansatz basiert auf diesem Post

InformationsquelleAutor rbatt | 2013-09-16
  1. 9

    Können Sie versuchen, brechen Sie in zwei Schritten vor: zuerst laden Sie die Datei, dann laden Sie es.

    download.file(downloadURL, "temp.rData")
load("temp.rData")

    oder kleben mit rCurl die Sie ausprobieren können:

    bin = getBinaryURL(downloadURL, ...yourOtherParams...) 
writeBin(bin, "temp.rData")  
load("temp.rData")
    • Diese Methode funktioniert für die .csv-Datei (ich habe test=getURL( ) und read.csv(text=test) Dank! Aber ich bekomme immer noch eine Fehlermeldung, wenn Sie versuchen zu Lesen .RData-Datei "Fehler in curlPerform(curl = curl .opts = opts, .Codierung = .Codierung) : embedded nul in string: 'ý7zXZ'". Wenn ich versuche, download.Datei, es sagt, dass es nicht öffnen, die URL.
    • Sind Sie auf einem unix-system? Wenn Sie curl-setup für die Befehlszeile verwenden, können Sie versuchen, sowas wie system("curl xxxx - temp.rData") aus R. Wenn curl nicht funktioniert, vielleicht "wget" funktioniert?
    • Ich bin auf OSX, meine Kollegen werden sich auf Windows. Ich bekomme nicht sehr weit mit download.Datei, es wird nicht mit dem server verbinden. Ich habe mit dem RCurl Paket. Mit getBinaryURL() ich kann die Datei in binärer form, aber es ist alles nur Unsinn und ich kann nicht herausfinden, wie es zu konvertieren. Es ist Klasse, ist "raw", und speichern() laden() wieder nicht konvertieren es zurück zu der ursprünglichen R-Objekt (oder nichts sinnvolles).
    • Ich bearbeitete die Antwort auf stick mit RCurl. Hoffe, das hilft.
    • Diese funktionierte wie ein Charme! Ich hatte nur etwa aufgegeben... danke Euch so sehr! Ich suchte nach einer Lösung, um diese für 6.5 Stunden, und das ist was mir dort. Ich hoffe, dass andere Menschen, die versuchen, dieses problem zu lösen, finden Sie Ihre Antwort 🙂 Es sollte auch darauf hingewiesen werden, dass ich nicht haben, um eine andere spezielle Parameter, die getBinaryURL, die Standardeinstellungen gearbeitet (außer ich musste mein name:pass auf `userpwd=').
    InformationsquelleAutor kith
  2. 4

    Verbrachte ich ein wenig Zeit auf diesem als auch - in der Hoffnung, diese in ein Glänzendes app so will ich nicht auf die Platte schreiben. 

    library(RCurl)
url <- "ftp://[email protected]/ALLF1Data.Rda"
userpwd <- "name:password"
bin = getBinaryURL(url, userpwd = userpwd, verbose = TRUE,
                   ftp.use.epsv = TRUE)

load(rawConnection(bin))

    Mithilfe rawConnection() ich war in der Lage zu vermeiden, die auf die Platte schreiben Schritt, wie es verarbeitet die RAW-Daten Typ perfekt und vermeiden Sie den Fehler.
    FYI - Dies ist mein Erster Beitrag also ich hoffe, es ist hilfreich

    InformationsquelleAutor Wes Sauder
Schreibe einen Kommentar