Заметки на полях

Партиционирование большой таблицы: как я это пережил

7 ноября 2025 · базы данных · PostgreSQL

Осенью на работе случилась задача, которую я откладывал полгода: таблица событий перевалила за несколько сотен миллионов строк, и любой запрос без индекса по дате начинал вести себя как непослушный ребёнок. Решение классическое — партиционирование по времени, но таблица живая, и останавливать запись нельзя.

Схема была такая: новая партиционированная таблица, триггер (да, в 2025 году — потому что у нас ещё древняя версия) на запись в старую, который дублирует новые строки, потом бэкфилл старых данных партиями по ночам, и только потом переключение. Всё это заняло около трёх недель, из которых две — это ожидание, когда ночной бэкфилл догонит.

Главный урок, который я вынес: делай партиции заранее, пока таблица маленькая, а не тогда, когда она стала проблемой. Звучит очевидно, но таких компаний в мире больше, чем кажется. Второй урок: тестируй миграцию на копии данных реального размера — на тестовой табличке в тысячу строк всё работает, а на настоящих данных триггер начинает тихо замедлять запись, и это замечаешь только на проде.

После переключения запросы по неделям стали быстрее в разы — планировщик отсекает ненужные партиции, и вместо чтения 300 ГБ он читает 4. Красиво. Теперь у меня таблица на месяцы вперёд, и я почти не думаю о ней. Почти.