Excluir em massa para tabela grande no MySQL

Eu tenho uma tabela de notificação que contém cerca de 100 milhões de linhas hospedadas no Amazon RDS com 1000 IOPS e desejo excluir essas linhas com mais de um mês.

Se o fizer DELETE FROM NOTIFICATION WHERE CreatedAt < DATE_SUB(CURDATE(), INTERVAL 30 day);, todas as IOPS serão realizadas, o processo levará horas e muitas entradas novas não poderão ser inseridas devido a "Tempo limite de espera de bloqueio excedido; tente reiniciar a transação".

Eu estava tentando fazer a maneira descrita aqui: http://mysql.rjweb.org/doc.php/deletebig No entanto, estou usando UUID em vez de ID de incremento.

Qual é a maneira correta e eficiente de excluir essas linhas sem afetar a inserção / atualização de novos dados?

Crie uma tabela temporária, ligue e desligue e copie os dados dos últimos 30 dias nela.

#
# Make empty temp table
#
CREATE TABLE NOTIFICATION_NEW LIKE NOTIFICATION;
#
# Switch in new empty temp table
#
RENAME TABLE NOTIFICATION TO NOTIFICATION_OLD,NOTIFICATION_NEW TO NOTIFICATION;
#
# Retrieve last 30 days data 
#
INSERT INTO NOTIFICATION SELECT * FROM NOTIFICATION_OLD
WHERE CreatedAt >= DATE_SUB(CURDATE(), INTERVAL 30 DAY);

Nas horas de folga, largue a mesa antiga

DROP TABLE NOTIFICATION_OLD;

Aqui estão as vantagens de fazer DELETEs como este

1. NOTIFICATION é esvaziado rapidamente, alternando uma tabela vazia.
2. NOTIFICATION está disponível imediatamente para novos INSERTs
3. Os 30 dias restantes são adicionados novamente NOTIFICATIONenquanto novos INSERTs podem ocorrer.
4. A eliminação da versão antiga do NOTIFICATIONnão interfere com os novos INSERTs
5. NOTA: Eu recomendei fazer iscas e alternar para DELETEs de tabela antes: (Veja minha postagem de 19 de julho de 2012: Otimizando a consulta DELETE na tabela de memória do MySQL )

De uma chance !!!

O meu favorito é o pt-archiver do Percona Toolkit. Ele cuida da carga do MySQL, atraso na replicação.

crie a tabela notification_temp como selecione * da notificação em que CreatedAt <DATE_SUB (CURDATE (), INTERVAL 30 dias);

notificação de descartar tabela;

RENAME notification_temp TO NOTIFICATION;