Очень большие таблицы в PostgreSQL. Или как превратить 60+ Tb в 10+ Tb
В докладе будет рассказано о том, как мы реализовали хранение таблиц с большим количеством строк (1 млрд + строк в сутки). Проект существует в production 2 год. Это крупный транспортный проект всероссийского масштаба.
Суммарный объем данных 300 Tb на 25 серверах PostgreSQL * 2 Data Center. Будет рассказано об ошибках организации хранения больших таблиц на начальном этапе проекта, и о том как эти ошибки были устранены. Так же расскажу о том, как организована ротация данных и архивирование. Затрону вопросы о том, чего нам не хватало в PostgreSQL 9.4 из того, что появилось в 9.5 и в 9.6. А так же, какие новые возможности, нам хотелось бы увидеть в новых релизах PostgreSQL.
Слайды
Видео
Другие доклады
-
45 мин
Антон Дорошкевич ИнфоСофт Руководитель Отдела-ИТPostgreSQL - реальная альтернатива для высоконагруженных систем на базе 1С
- Почему сейчас самое время задуматься о переходе на PostgreSQL.
- Готовность 1С и PostgreSQL работать друг с другом.
- Почему нужно начать с Windows
- Первый опыт перевода достаточно больших баз 1С на Postgre.
- Масштабные проекты на высоконагруженных системах, примеры в цифрах
- На что обратить внимание в коде 1С? Результаты оптимизации кода в обработке «Печать ценников и этикеток».
-
90 мин
Артур Закиров Postgres Professional Разработчик
Федор Сигаев Postgres Professional технический директор, ведущий разработчик PostgreSQLВозможности полнотекстового поиска в PostgreSQL
Полнотекстовый поиск в PostgreSQL является, вероятно, наиболее совершенным из всех, которые имеются в реляционных СУБД. Мы расскажем о том, как настроить полнотекстовые конфигурации и словари и покажем настройку полнотекстового поиска на примере небольшого научно-популярного сайта, в котором можно выполнять поиск, используя различные функции ранжирования. Также расскажем о новом индексе RUM, который позволяет значительно ускорить некоторые виды полнотекстовых запросов и добавляет новую функцию ранжирования результатов для лучшей сортировки.
-
45 мин
Владимир Бородин Яндекс DBAПул соединений в масштабе
Многие знают, что соединения в PostgreSQL дорогие, а потому их надо экономить. Для решения этой задачи давно есть PgPool-II и PgBouncer. В Яндексе никого не удивить десятками тысяч соединений к одной базе и с незапамятных времён мы используем pgbouncer. В этом докладе я расскажу о проблемах, с которыми мы сталкивались, и способах их решения.
ВИДЕО
-
45 мин
Дорофей Пролесковский Juno GIS EngineerДвижущиеся цели в PostGIS
Для хранения и обработки пространственных данных в Postgres существует расширение PostGIS. В нём обычно рассматривается обычная Евклидова плоскость без времени и неопределённости, но реальный мир зачастую сложнее. Посмотрим, как можно сделать так, чтобы тысячи машинок плавно ездили по карте OpenStreetMap в реальном времени с помощью Postgres.
ВИДЕО