Wie kann ich recycle meine SqliteCommand zu beschleunigen Sqlite bulk insert (iOS)?

Bin ich mit dem code unten, um bulk insert a 30000 Zeilen (1000 Zeilen gleichzeitig). Noch ist es nicht so schnell, wie es sein könnte. In diesem Beispiel Verbesserung der EINSATZ-pro-Sekunde-Leistung von SQLite? ich kann sehen, dass Sie die Erstellung der SqliteCommand nur einmal und dann reycle es sein, rücksetzen und löschen der Bindungen. Aber ich kann nicht finden die entsprechenden Methoden auf iOS/Monotouch. Es gibt keine Reset() oder ClearBindings() oder irgendetwas anderes suchen ähnliche. 

using ( var oConn = new SqliteConnection ( "Data Source=" + DB_NAME ) )
{
    oConn.Open (  );

    //Wrap the whole bulk insertion into one block to make it faster, otherwise one transaction per INSERT would be created.
    //Note that this is differen from "BEGIN TRANSACTION" which would increase memory usage a lot!
    SqliteCommand oCmd = new SqliteCommand ( "BEGIN", oConn );
    oCmd.ExecuteNonQuery (  );
    oCmd.Dispose (  );

    foreach ( MyObj oObj in aMyObjects )
    {
        oCmd = new SqliteCommand ( "INSERT INTO LocalObjects ( intID, intParentID, intObjectType, strName, dtModified VALUES (@intID, @intParentID, @intObjectType, @strName, @dtModified)", oConn );
        oCmd.Parameters.AddWithValue ( "@intID", oMyObj.ID );
        oCmd.Parameters.AddWithValue ( "@intParentID", oMyObj.ParentID );
        oCmd.Parameters.AddWithValue ( "@intObjectType", ( int ) oMyObj.Type );
        oCmd.Parameters.AddWithValue ( "@strName", oMyObj.Name );
        oCmd.Parameters.AddWithValue ( "@dtModified", oMyObj.Modified );
        oCmd.ExecuteNonQuery (  );
        oCmd.Dispose (  );
    }

    oCmd = new SqliteCommand ( "END", oConn );
    oCmd.ExecuteNonQuery (  );
    oCmd.Dispose (  );

    oConn.Close (  );
    oConn.Dispose (  );
}
InformationsquelleAutor Krumelur | 2011-03-15
  1. 11

    Versuchen, ändern Sie Ihren code wie folgt:

    using ( var oConn = new SqliteConnection ( "Data Source=" + DB_NAME ) )
{
    oConn.Open (  );

    //Wrap the whole bulk insertion into one block to make it faster, otherwise one transaction per INSERT would be created.
    //Note that this is differen from "BEGIN TRANSACTION" which would increase memory usage a lot!
    SqliteCommand oCmd = new SqliteCommand ( "BEGIN", oConn );
    oCmd.ExecuteNonQuery (  );
    oCmd.Dispose (  );

    oCmd = new SqliteCommand ( "INSERT INTO LocalObjects ( intID, intParentID, intObjectType, strName, dtModified VALUES (@intID, @intParentID, @intObjectType, @strName, @dtModified)", oConn );

    //<do this for all of your parameters>.
    var id = oCmd.CreateParameter();
    id.ParameterName = "@intID";
    oCmd.Parameters.Add(id);
    //</do this for all of your parameters>.

    foreach ( MyObj oObj in aMyObjects )
    {
        //<do this for all of your parameters>.
        id.Value = oMyObj.ID;
        //</do this for all of your parameters>.

        oCmd.ExecuteNonQuery (  );
    }

    oCmd.Dispose();

    oCmd = new SqliteCommand ( "END", oConn );
    oCmd.ExecuteNonQuery (  );
    oCmd.Dispose (  );

    oConn.Close (  );
    oConn.Dispose (  );
}

    Im Grunde, in jeder Schleife jetzt ändern Sie einfach die Werte der Parameter, statt der Konstruktion eine ganz neue Abfrage. Allerdings bin ich mir nicht sicher, ob Ihre Leistung wirklich davon profitieren. Sie müssen versuchen, die.

    • Guter Ansatz. Es wird auch schneller gehen, wenn Sie wickeln Sie den Befehl in einer Transaktion.
    • Er hat bereits mit seiner "BEGIN" und "END" - Befehle.
    • Hoppla - müde Augäpfel übersprungen und direkt über, die.
    • Habe noch nicht die Zeit gefunden, noch, es zu versuchen. Ich akzeptiere Ihre Antwort, sobald ich es getestet habe!
    • Es getestet. Ihre version verarbeitet meine Daten in 37 Sekunden aus, meine version 73 Sekunden. Danke! Nur, was mich betrifft: memory-Nutzung scheint höher zu sein mit deiner Lösung. Irgendeine Idee warum?
    • Nein, ich habe keine Ahnung, tut mir Leid. Wie kommst du zu dieser Schlussfolgerung?
    • Ich sehe es von Messgeräten. Es ist mit einigen MB mehr.
    • Liebe es! ich war auf der Suche für eine wie auf transaction-Befehl für sqlite.

    InformationsquelleAutor Daniel Hilgarth
  2. -2

    Können Sie auch versuchen, eine gespeicherte Prozedur zum einfügen von Zeilen. Es sollte schneller sein als inline-Anweisungen vor allem für das einfügen so viele Zeilen.

    • sqlite nicht über gespeicherte Prozeduren
    InformationsquelleAutor Scarlaxx
Schreibe einen Kommentar