Suppression en bloc pour une grande table dans MySQL

J'ai une table de notification contenant environ 100 millions de lignes d'hôte dans Amazon RDS avec 1000 IOPS, et je souhaite supprimer ces lignes de plus d'un mois.

Si je le fais DELETE FROM NOTIFICATION WHERE CreatedAt < DATE_SUB(CURDATE(), INTERVAL 30 day);, tous les IOPS seront pris, le processus prendra des heures et de nombreuses nouvelles entrées ne pourront pas être insérées en raison de "Délai d'attente de verrouillage dépassé; essayez de redémarrer la transaction".

J'essayais de faire la manière décrite ici: http://mysql.rjweb.org/doc.php/deletebig Cependant, j'utilise UUID au lieu d'incrémenter l'ID.

Quelle est la manière correcte et efficace de supprimer ces lignes sans affecter les nouvelles données insérées / mises à jour?

Créez une table temporaire, activez-la, puis copiez-y les données des 30 derniers jours.

#
# Make empty temp table
#
CREATE TABLE NOTIFICATION_NEW LIKE NOTIFICATION;
#
# Switch in new empty temp table
#
RENAME TABLE NOTIFICATION TO NOTIFICATION_OLD,NOTIFICATION_NEW TO NOTIFICATION;
#
# Retrieve last 30 days data 
#
INSERT INTO NOTIFICATION SELECT * FROM NOTIFICATION_OLD
WHERE CreatedAt >= DATE_SUB(CURDATE(), INTERVAL 30 DAY);

Pendant vos heures de repos, laissez tomber l'ancienne table

DROP TABLE NOTIFICATION_OLD;

Voici les avantages de faire DELETE comme ça

1. NOTIFICATION est vidé rapidement en basculant dans une table vide.
2. NOTIFICATION est immédiatement disponible pour les nouveaux INSERT
3. Les 30 jours restants sont ajoutés dans NOTIFICATIONtandis que de nouveaux INSERT peuvent avoir lieu.
4. La suppression de l'ancienne version de NOTIFICATIONn'interfère pas avec les nouveaux INSERT
5. REMARQUE: J'ai recommandé de faire des appâts et des commutateurs pour les suppressions de table avant: (Voir mon article du 19 juillet 2012: Optimisation de la requête DELETE sur la table MEMORY de MySQL )

Essaie !!!

Mon préféré est pt-archiver de Percona Toolkit. Il prend en charge la charge MySQL, le retard de réplication.

créer la table notification_temp comme sélectionnez * à partir de la notification où CreatedAt <DATE_SUB (CURDATE (), INTERVAL 30 jours);

notification de table de dépôt;

RENOMMER notification_temp TO NOTIFICATION;