2015.02.06 PostgreSQL в Яндексе: история успеха №2
- 2. PostgreSQL в Яндексе: история успеха №2 Владимир Бородин
- 4. Разработчик Нужна небольшая табличка, с транзакциями
- 6. Первые проблемы 〉Много мелких изменяющих запросов 〉Очень медленно 〉GDB показал, что виноват WALWriteLock 〉synchronous_commit = off снимает симптомы 〉commit_delay и commit_siblings не помогают 6
- 7. Первые решения 〉pg_xlog на отдельном массиве, 〉эта ФС смонтирована с nobarrier, 〉wal_sync_method = fsync 7
- 10. Менеджер Нам надо ещё 10 ТБ положить
- 11. Детали 〉Хранить надо 30 дней 〉Чем старше данные, тем реже за ними приходят 〉Во все читающие запросы можно добавить время 11
- 12. Partitioning
- 14. pg_partman 14
- 15. Обновление функции триггера на мастер-таблице 15
- 16. Перекладывание данных с SSD на SATA
- 17. Варианты 〉ALTER TABLE foo SET TABLESPACE sata; 〉http://reorg.github.io/pg_repack/ 17
- 19. Решение 〉Средствами БД победить не удалось 〉На помощь пришли cgroups 〉Ограничение на объём данных для группы процессов 19
- 20. Решение 20
- 22. Autovacuum to prevent wraparound 22
- 23. Autovacuum to prevent wraparound 23
- 24. Autovacuum to prevent wraparound 24
- 25. PostgreSQL ERROR: database is not accepting commands to avoid wraparound data loss in database "xivadb"
- 26. Autovacuum to prevent wraparound 〉Выключили throttling 〉Последовательный VACUUM таблиц на SATA 26
- 27. Бэкапы 27
- 29. Запрос во все партиции 29
- 30. Запрос во все партиции 30
- 31. Решение 31
- 32. 32
- 33. Вопросы?
- 34. 34 Владимир Бородин Системный администратор Контакты @man_brain http://simply.name +7 (495) 739 70 00, доб. 7255 d0uble@yandex-team.ru