Deadlocks auf MySQL Zeilen löschen

Haben wir eine (derzeit InnoDB-Tabelle) enthält rund 500.000 Zeilen. Dies stellt eine Warteschlange von Aufgaben ausführen. Es ist in einer MySQL Datenbank abgelegt.

Einer einer kontinuierlichen basis, mindestens einmal pro Sekunde, aber manchmal häufiger, wählen wir die Daten aus und anschließend update einige Zeilen. Einmal pro Tag, wir prune-alte Zeilen aus der Tabelle.

Begannen wir bekommen deadlocks auf dem Tisch und dieser brachte unsere Aufgabe die Verarbeitung zum Stillstand. Diese deadlocks verursacht wurden während der nächtlichen prune ausführen. Die Kombination von DELETE -, SELECT-und UPDATE gemeint, das im wesentlichen nichts Produktives passieren könnte. Leider habe ich die Ausgabe von SHOW ENGINE INNODB STATUS.

Ich würde gerne wissen, die beste option für den Umgang mit dieser. Beachten Sie, dass unser code erkennt deadlocks und stellt erneut die Abfrage. Auch wir längst entdeckt, dass mit dem löschen alle übereinstimmenden Zeilen auf einmal war zu anstrengend für eine Datenbank-Tabelle, die sah eine Menge von Aktivitäten, so BESCHRÄNKEN wir unsere löscht auf 10.000 Zeilen zu einer Zeit und halten Sie auf der Neuauflage der Abfrage, bis alle erforderlichen Zeilen beschnitten werden.

Ich sehe die folgenden Optionen, und würde gerne Meinungen auf, welche sind die besten, oder Vorschläge für andere Optionen:

  1. LÖSCHEN weniger Zeilen in einer Zeit,
  2. Exponentielle backoff auf unserer Löscht, aber ich bin besorgt, dass dies wird nicht helfen, in Anbetracht unserer spezifischen workload
  3. LOCK TABLES als pro MySQL-Dokumentation. Könnten wir wohl akzeptieren, blockiert die SELECT-und UPDATE-Anweisungen für die Dauer der löscht.
  4. Schalter für MyISAM-Tabellentyp. Wir gingen mit InnoDB, da waren wir zunächst über die Transaktionen, die auf dieser Tabelle. Ist dies nicht mehr der Fall. Ich bin nicht ausreichend vertraut mit den Besonderheiten zu wissen, ob dies ist eine praktikable Lösung.
  5. Vielleicht verwenden Sie UPDATE LOW_PRIORITY. Kann sein, dass der Löscht sich nicht auf den Wählt, nur die UPDATEs, und dies kann ausreichend sein.
  • Alle deadlocks, die ich angetroffen habe, war aufgrund von uncommitted Transaktionen. Sicherzustellen, dass Sie ordnungsgemäß ausgeführten Transaktionen (entweder mit autocommit auf oder autocommit off und tatsächlich Umgang mit commit/rollbacks).
  • Definitiv ein guter Punkt; dies wäre der Fall, die meisten der Zeit, aber wir tun gar nicht, Transaktionen auf diesem Tisch. Wir verwendet, um, aber nicht mehr tun.
InformationsquelleAutor ChrisInEdmonton | 2009-08-20
  1. 4

    Bei der Durchführung DML Operationen InnoDB sperrt alle Zeilen gescannt, nicht aufeinander abgestimmt sind.

    Betrachten dieser Tabelle layout:

    DROP TABLE t_tran;

CREATE TABLE t_tran (id INT NOT NULL PRIMARY KEY, data INT NOT NULL, KEY ix_tran_data (data)) Engine=InnoDB;

DROP TABLE t_tran;

CREATE TABLE t_tran (id INT NOT NULL PRIMARY KEY, data INT NOT NULL, KEY ix_tran_data (data)) Engine=InnoDB;

INSERT
INTO    t_tran
VALUES
(1, 1),
(2, 2),
(3, 3),
(4, 4),
(5, 5),
(6, 6),
(7, 7),
(8, 8);

START TRANSACTION;

DELETE
FROM    t_tran
WHERE   data = 2
        AND id <= 5;

    In diesem Fall MySQL wählt RANGE Zugriffspfad auf id, die Sie der Auffassung ist billiger als REF auf data.

    In einer gleichzeitigen Transaktion, werden Sie in der Lage, delete-oder update-Zeilen 6, 7, 8 aber nicht Zeilen 1 zu 5 da Sie gesperrt sind (trotz der Tatsache, dass nur Zeile 2 betroffen war).

    Wenn Sie entfernen id <= 5 von der oben genannten Bedingungen, werden Sie in der Lage, jede Zeile zu löschen, aber Zeile 3.

    Leider können Sie nicht Steuern MySQL Zugriffspfade in DML Operationen.

    Beste Sie tun können, ist zu indizieren Ihre Bedingungen richtig und hoffe, dass MySQL Holen diese Indizes.

    • Danke, wir (mein sysadmin und ich) sind der Meinung, dass dies ist tatsächlich wahrscheinlich die am besten beheben. Wir haben auch reduziert die Menge von löschen und fügte hinzu, exponential-backoff. Wir werden sehen, wenn Sie kümmert sich um das problem.
    InformationsquelleAutor Quassnoi
  2. 2

    Stellen Sie sicher, dass Ihre Transaktion isolation als gelesen markiert wird, verpflichtet und nicht wiederholbare Lesen. Lesen Sie begangen, sollte der Standard sein, aber wir sahen, dass in unsere server die innodb default war repeatable read.

    Können Sie überprüfen, indem Sie Folgendes ausführen:

    SHOW VARIABLES LIKE 'tx%';

    Werden, um diese in Ihrem my.cnf Datei-geben Sie die folloiwing Linie:

    tx_isolation=READ-COMMITTED
    InformationsquelleAutor David Rabinowitz
Schreibe einen Kommentar