Massenlöschung für große Tabelle in MySQL

Ich habe eine Benachrichtigungstabelle, die ungefähr 100 Millionen Zeilen enthält, die in Amazon RDS mit 1000 IOPS gehostet werden, und ich möchte diese Zeilen löschen, die älter als ein Monat sind.

In DELETE FROM NOTIFICATION WHERE CreatedAt < DATE_SUB(CURDATE(), INTERVAL 30 day);diesem Fall werden alle IOPS ausgeführt, der Vorgang dauert Stunden, und viele neue Einträge können nicht eingefügt werden, da "Wartezeit für Sperren überschritten wurde. Versuchen Sie, die Transaktion neu zu starten".

Ich habe versucht, die hier beschriebene Vorgehensweise zu verwenden: http://mysql.rjweb.org/doc.php/deletebig Ich verwende jedoch die UUID anstelle der Inkrement-ID.

Was ist der richtige und effiziente Weg, um diese Zeilen zu löschen, ohne dass das Einfügen / Aktualisieren neuer Daten beeinträchtigt wird?

Erstellen Sie eine temporäre Tabelle, schalten Sie sie ein und aus und kopieren Sie die Daten der letzten 30 Tage hinein.

#
# Make empty temp table
#
CREATE TABLE NOTIFICATION_NEW LIKE NOTIFICATION;
#
# Switch in new empty temp table
#
RENAME TABLE NOTIFICATION TO NOTIFICATION_OLD,NOTIFICATION_NEW TO NOTIFICATION;
#
# Retrieve last 30 days data 
#
INSERT INTO NOTIFICATION SELECT * FROM NOTIFICATION_OLD
WHERE CreatedAt >= DATE_SUB(CURDATE(), INTERVAL 30 DAY);

Lassen Sie in Ihrer Freizeit den alten Tisch fallen

DROP TABLE NOTIFICATION_OLD;

Hier sind die Vorteile solcher DELETEs

1. NOTIFICATION wird durch Umschalten in eine leere Tabelle schnell geleert.
2. NOTIFICATION ist ab sofort für neue INSERTs verfügbar
3. Die verbleibenden 30 Tage werden wieder hinzugefügt, NOTIFICATIONwährend neue INSERTs stattfinden können.
4. Das NOTIFICATIONLöschen der alten Version von beeinträchtigt neue INSERTs nicht
5. HINWEIS: Ich habe empfohlen, Bait-and-Switch für Tabelle DELETEs durchzuführen, bevor: (Siehe meinen Beitrag vom 19. Juli 2012: Optimieren der DELETE-Abfrage in der MySQL MEMORY-Tabelle )

Versuche es !!!

Mein Favorit ist pt-archiver von Percona Toolkit. Es kümmert sich um MySQL-Last, Replikationsverzögerung.

Erstellen Sie die Tabelle notification_temp als select * aus Benachrichtigung, wobei CreatedAt <DATE_SUB (CURDATE (), INTERVAL 30 Tage);

Drop-Table-Benachrichtigung;

RENAME notification_temp TO NOTIFICATION;