Tag: large-data

angesichts der großen Datenmengen, die nicht in den Speicher passt, gibt es eine Bibliothek oder eine api zum ausführen Sortieren in Java? die Umsetzung wäre möglicherweise ähnlich den linux-Programm Sortieren. InformationsquelleAutor user775187 | 2011-06-11

Habe ich eine Liste von Listen, die sagen, dass E[ ][ ], wobei E hat zehn sub-Listen, die jeweils rund 500 Einträge. Mein Hauptanliegen ist, zu berechnen, maximal alle 5000 Werte, die verteilt in zehn sub-Listen. Nun,

Ich habe einen sehr großen Satz von Daten (~3 Mio Datensätze), welche Bedürfnisse zu sein verschmolzen mit updates und neuen Aufzeichnungen auf einer täglichen Zeitplan. Ich habe eine gespeicherte Prozedur, die tatsächlich zerfällt der Datensatz in 1000

Ich habe CSV-Dateien mit mehreren Spalten sortiert werden. Für Instanz, vielleicht habe ich Zeilen wie diese: 19980102,,PLXS,10032,Q,A,,,15.12500,15.00000,15.12500,2 19980105,,PLXS,10032,Q,A,,,14.93750,14.75000,14.93750,2 19980106,,PLXS,10032,Q,A,,,14.56250,14.56250,14.87500,2 20111222,,PCP,63830,N,A,,,164.07001,164.09000,164.12000,1 20111223,,PCP,63830,N,A,,,164.53000,164.53000,164.55000,1 20111227,,PCP,63830,N,A,,,165.69000,165.61000,165.64000,1 Ich würde gerne teilen bis die Datei auf der Grundlage der 3. Spalte, zB PLXS

Ich habe die Tabelle Foo mit 200 Millionen Schallplatten und Symbolleiste Tabelle mit 1000 Einträgen, mit der Sie verbunden sind viele-zu-eins. Es gibt Indizes für Spalten Foo.irgendwann und Bar.someField. Auch in der Bar 900 Datensätze someField von

Wir sind noch in der Entwicklung und Pflege von ein paar Systemen, die zum exportieren von berichten im Excel-format an den Endverbraucher. Die Berichte sind gesammelt aus einer MySQL-Datenbank mit einigen trivialen Verarbeitung und führen in der

Habe ich eine .NET-Anwendung geschrieben in C# (.NET 4.0). In dieser Anwendung, die wir gelesen haben, ein großes dataset aus einer Datei und zeigt den Inhalt in einem raster-Struktur. So, um dies zu erreichen, legte ich ein

Ich habe eine Datenbank mit über 12000 Datensätze, die ich laden möchte in einem ListView. Ich bin mit BaseAdapter. Wenn ich Last items in der ListView, Es so lange dauert. Gibt es eine Möglichkeit zur Verringerung dieser

Habe ich eine Reihe von großen Dateien (1M Zeilen x 20 Spalten). Aber nur 5 oder so Spalten, dass die Daten für mich von Interesse. Ich denke, ich kann die Dinge einfacher für mich vom erstellen von

Mein Ziel ist eigentlich, um dump alle Daten von einer Datenbank in eine XML-Datei. Die Datenbank ist nicht sehr groß, es sind über 300MB. Das problem ist, dass ich eine Speicher-Beschränkung von 256 MB (JVM). So offensichtlich

Habe ich ein Projekt, in dem ich um schnelle suchen, einfügen und löschen von Operationen auf Daten, angefangen von Megabyte Terabyte. Ich hatte studiert Datenstrukturen spät an und analysieren Sie. Spezifisch möchte ich Euch 3 Fällen und

Ich versuche zu Lesen, eine große csv-Datei in R., obwohl die Datei groß ist, ich will nur mit einigen Zeilen, die Erfüllung einer bestimmten Bedingung (z.B. Variable2 >= 3). Dies ist ein viel kleineres dataset. Ich möchte

Ich die Umsetzung Kosaraju ist Starke zusammenhangskomponente(SCC) graph-search-Algorithmus in Python. Das Programm läuft Super auf kleinen Datenmenge, aber wenn ich es auf eine super-große Graphen (mehr als 800.000 Knoten), es sagt: "Segmentation Fault". Was könnte die Ursache

Ich bin neu mit R. ich versuche, fügen Sie neue Zeilen in eine Datei mit meinen vorhandenen Daten in R. Das problem ist, dass meine Daten von über 30000 Zeilen und 13000 cols. Ich habe bereits versucht,

Habe ich drei große Listen. Zunächst enthält bitarrays (Modul bitarray 0.8.0) und die beiden anderen enthalten arrays von ganzen zahlen. l1=[bitarray 1, bitarray 2, ... ,bitarray n] l2=[array 1, array 2, ... , array n] l3=[array 1,

Ich versuche zu migrieren einer Datenbank, wo die Bilder, wo die in der Datenbank gespeichert, um einen Datensatz in der Datenbank zeigt auf eine Datei auf der Festplatte. Ich versuchte zu verwenden Parallel.ForEach um den Prozess zu