Herunterladen von mehreren Dateien-WebClient

Ich versuche mehrere Dateien herunterladen, aber es funktioniert nicht so, wie ich erhofft hatte.
Kann mir jemand sagen, was falsch mit diesem script, da habe ich versucht, eine Menge Dinge, und weiß wirklich nicht mehr was tun. 

public static void DownloadFile(string url)
        {
            WebClient client = new WebClient();
            var name = url.Substring(url.LastIndexOf('/')).Remove(0, 1);
            foreach (var item in urls)
            {
                client.DownloadFile(item, "C:\\" + name);
            }
        }

        private void btnGo_Click(object sender, EventArgs e)
        {
            urls.Add("url1");
            urls.Add("url2");
            urls.Add("url3");
            Parallel.ForEach(urls,
               new ParallelOptions { MaxDegreeOfParallelism = 10 }, 
               DownloadFile);
        }
using (var sr = new StreamReader(HttpWebRequest.Create(url).GetResponse().GetResponseStream()))
            {
                using (var sw = new StreamWriter(url.Substring(url.LastIndexOf('/'))))
                {
                    sw.Write(sr.ReadToEnd());
                }
            }
  • Die Antwort ist hier stackoverflow.com/questions/6992553/...
  • Ich habe versucht, aber konnte nicht bekommen es überhaupt zu arbeiten :(.
  • wo kommt dein code break genau ? Hast du Debuggen ?
  • Gut, es lädt alle Dateien zur gleichen Zeit und überschreibt jedes andere, so erhalten Sie 3 beschädigte Dateien.
InformationsquelleAutor Yuki Kutsuya | 2012-07-11
  1. 5

    Ich mit einem System.Net.HttpWebRequest statt.

    Dies ist, was der code würde wie folgt Aussehen:

    private List<string> urls = new List<string>();

private void btnGo_Click(object sender, EventArgs e)
{
    urls.Add("http://199.91.152.106/ua0p3fbc5nlg/gg2w2fq4ljc1nnd/MicroCraft_Beta.zip");
    Parallel.ForEach(urls, new ParallelOptions { MaxDegreeOfParallelism = 10 }, DownloadFile);
}

public static void DownloadFile(string url)
{
    var req = (HttpWebRequest)WebRequest.Create(url);
    var name = url.Substring(url.LastIndexOf('/') + 1);
    using (var res = (HttpWebResponse)req.GetResponse())
    using (var resStream = res.GetResponseStream())
    using (var fs = new FileStream("C:\\" + name, FileMode.Create, FileAccess.Write, FileShare.None))
    {
        //Save to file
        var buffer = new byte[8 * 1024]; //8 KB buffer
        int len; //Read count
        while ((len = resStream.Read(buffer, 0, buffer.Length)) > 0)
            fs.Write(buffer, 0, buffer.Length);
    }
}

    Weil die URL, die Sie erzählte mir, dass der Kommentar nicht mit einer richtigen Implementierung des HTTP-Protokolls. Müssen Sie fügen Sie diese an Ihre config-Datei, um für Sie zu arbeiten (entweder App.config oder Web.config, je nachdem, ob es ein ASP.Net Website oder offline-Anwendung):

    <system.net>
    <settings>
        <httpWebRequest useUnsafeHeaderParsing="true" />
    </settings>
</system.net>

    Als zu deinem problem mit Namen kollidieren, die Sie sagten in Ihrem Kommentar, dies sollte behoben werden, indem Sie Ihre var name = url.Substring(url.LastIndexOf('/')).Remove(0, 1); in etwas anderes.

    Wenn Sie wollen, um eine inkrementelle mit dem Namen, den Sie verwenden konnten, dies:

    //Inside your class:
private static int counter = 0;

//In your method:
var name = "file" + System.Threading.Interlocked.Increment(ref counter) + ".html";
    • Ich habe ein Skript, das dies tut, werde ich ihn zu meinem post, aber das hat nicht funktioniert :(.
    • hum ... Nein ... WebClient ist, was sollte verwendet werden, hier msdn.microsoft.com/en-us/library/... werfen Sie einen Blick auf das DownloadFile Funktion
    • verwendet werden für diese, aber im Grunde WebClient ist nichts aber ein schickes wrapper um den IE. HttpWebRequest auf der anderen Seite ist die grundlegende Voraussetzung für diese.
    • Wenn das script lädt die Dateien, Sie sind alle kaputt :(. Irgendeine Idee warum?
    • Wahrscheinlich, weil die Namen kollidieren, können Sie mir einige Beispiel-URL ' s und die Art und Weise, die Sie möchten, dass Sie abgebildet werden (so zum Beispiel ich will: testurl.com/testfile.html zugeordnet werden C:\testfile.html) ich gebe dir dann den code. Jetzt habe ich den code Hinzugefügt für einen inkrementellen Dateinamen.
    • Hier ist ein link, den ich herunterladen möchten, zum Beispiel: 199.91.152.106/ua0p3fbc5nlg/gg2w2fq4ljc1nnd/MicroCraft_Beta.zip
    • Und was wollen Sie den daraus resultierenden Dateinamen zu werden?
    • Die Dateinamen nach dem letzten /
    • Dann sollte dies genau das, was Sie wollen 🙂
    • Okay ich werde es versuchen, danke!
    • Der Grund, warum das nicht funktionieren, weil die URL, die Sie haben, sendet eine Umleitung an den client. Was bedeutet, dass statt dem herunterladen der Datei, Sie herunterladen: mediafire.com/?gg2w2fq4ljc1nnd. Dies ist MediaFire anti-bot Schutz, und es wäre wahrscheinlich schwer zu umgehen.
    • Sehe ich, aber warum kann Chrome, FireFox, IE etc die Datei herunterladen?
    • Es ist nicht sofort gesperrt, es ist nur verschleiert. Es nutzt einige raffinierte Techniken, die in der HTTP-Protokoll, um zu verhindern, dass Menschen schreiben bots für Sie. Aus Ihren AGB: You agree while using MediaFire Services, that you may not: Use any robot, spider, offline readers, site search and/or retrieval application, or other device to retrieve or index any portion of the Services, with the exception of public search engines;. Da, wie dies gegen Ihre Nutzungsbedingungen, kann ich dir nicht helfen, noch ermutigen Sie, um fortzufahren.
    • #Aidiakapi Okay, danke, wusste ich nicht einmal wusste, dass es gegen die Regeln :o. Naja wenigstens habe ich gelernt, ein paar Dinge :), danke!
    • Jederzeit 🙂
    • Aidiakap, ich habe versucht mit dem code. Es lädt zuerst die Datei für mich, aber jede andere Datei herunterladen wirft die timeout exception. Bei mir ist der download von Dateien aus dem Browser (Chrome/IE/FireFox) tun Sie alle Dateien. aber mit den C# - code bin ich nicht in der Lage zum download der zweiten Datei.
    • Das könnte durch viele Dinge hervorgerufen werden, ist es ziemlich unmöglich für mich zu sagen. Du bist wahrscheinlich besser dran, auf der Suche bei anderen Fragen, oder Fragen Sie Ihren eigenen, wenn keiner von Ihnen haben Ihre Probleme. Zum Beispiel stackoverflow.com/questions/6992553/...

    InformationsquelleAutor Aidiakapi
  2. 1

    Die Sie herunterladen, alle Dateien auf die gleiche Datei in Ihrer DownloadFile-code, übernimmt die einzigen Aufruf dieser Funktion lädt alle Dateien.

    Fixes:

    Option 1: benutzen Sie nicht Parallel.ForEach und rufen Sie einfach DownloadFile einmal. Geben Sie eindeutige Dateinamen für jeden download. I. e. durch die Einnahme Teil der Url, die Sie herunterladen oder verwenden Sie einfach random/temporäre Dateinamen.

    Etwas wie dies (unter der Annahme von urls ist eine Art von IEnumerable<string>)

    foreach (var item in urls)
{
   var name = item.Substring(item.LastIndexOf('/')).Remove(0, 1);
   client.DownloadFile(item, "C:\\" + name);
}

    Option 2: Parallel.ForEach aber ändern DownloadFile-code für den download nur eine einzige Datei:

    public static void DownloadFile(string url)
{
    WebClient client = new WebClient();
    var name = url.Substring(url.LastIndexOf('/')).Remove(0, 1);
    client.DownloadFile(url, "C:\\" + name);
}
    • Wie Sie Lesen können, in seinen code, er ist mit so etwas zu erstellen, eine andere mit dem Namen.
    • Und der name ist offensichtlich eine variable, basierend auf der url. Er lieferte den code für Sie: var name = url.Substring(url.LastIndexOf('/')).Remove(0, 1);
    • habe es ... war verwirrt durch die code - OP tatsächlich das herunterladen der gleichen Datei mehrfach - aktualisieren-Antwort...
    • danke. Sehen Sie, wenn aktualisierte Antwort spiegelt Ihre Kommentare.
    • Ich glaube schon, aber ich bin mir immer noch nicht ein fan der Verwendung der aufgeblähten WebClient für den einfachen Zweck des Herunterladens einer Datei :P.
    • Was genau ist ein IEnumerable<string>? Ist List<string> urls = new List<string>(); in Ordnung, zu verwenden?
    • Ich würde sagen, ein liner zum download-Datei ist nicht überladen - aber es ist rein persönliche Meinung :). +1 auf deine Antwort, wie es nicht richtig, was mit der Nähe zu den Metall-Ansatz.
    • ist eine generische Schnittstelle für aufzählbaren Typen (Sammlungen), List<T> erbt diese Schnittstelle. Also ja, List<T> ist IEnumerable<T> (T-string in diesem Fall).
    • Ja. List<string> ist IEnumerable<string> die Sie leicht sehen können, wenn Sie klicken Sie auf F12 gehen auf die definition von List<T> Objekt (oder RTFM)
    • Okai, danke! Gut zu wissen.
    • Vielen Dank, und ich habe ein bisschen verwirrt, ich dachte, es war mit dem WebBrowser-Steuerelement, was natürlich nicht stimmt. Ich nehme an WebClient ist nur ein schicker wrapper um mein code :P. (P. S. +1)

    InformationsquelleAutor Alexei Levenkov
Schreibe einen Kommentar