Масштабирование базы данных через шардирование и партиционирование / Денис Иванов (2ГИС)
Вставка
- Опубліковано 28 лип 2017
- Приглашаем на конференцию Saint HighLoad++ 2024, которая пройдет 24 и 25 июня в Санкт-Петербурге!
Программа, подробности и билеты по ссылке: vk.cc/cuyIqx
--------
--------
РИТ++ 2015, HighLoad++ Junior
Презентация и тезисы:
junior.highload.ru/2015/
Разрабатывая какой-либо проект рано или поздно мы можем столкнуться с проблемой нагрузки на БД. Данных может быть очень много, а мы как-то должны выдерживать нагрузки и должны быть готовы к её росту.
В своём докладе я поделюсь опытом масштабирования БД, расскажу всё максимально подробно - с какими проблемами можно столкнуться, какие стратегии и подходы лучше всего заложить в проекте.
...
Прекраснейший доклад! Спасибо!
Хороший доклад. Спасибо
Царь просто. Офигенно рассказал!
Огромное спасибо за лекцию! Очень помогла мне)
@Zagh gohur искал техническое решение для проблемы в тестовом задании, которое мне дали для устройства на работу. Из видео узнал, что такие технологии вообще существуют. Для решения задания мне подошло партицирование. Задание выполнил, работу получил)
@Zagh gohur ты интересный, конечно. Я об этих технологиях вообще не слышал до лекции Дениса. Его обзорная лекция помогла понять в принципе, что это такое. Подробности мне были не нужны. Если такое надо - нужно курить мануалы, разбираться рыть пробовать и набивать собственные шишки. Такие же лекции (как у Дениса) не ставят целью научить тебя решать какие-то частные проблемы. Это лекция про то, что это за технологии вообще и для решения каких задач ребята из 2ГИС из применяют.
13:37 может быть Partition Manager? Partition Magic какая-то хрень для винды.
В докладе не услышал про транзакции - поддерживаются ли они на шардированных по разным серверам таблицах?
Сейчас уже знаешь ответ на этот вопрос?)
@@vladimir_v_it нет, а ты?
А где посмотреть видео предыдущего докладчика? (про репликацию)
На сколько партиций можно разбить таблицу?
Индексов тут не заметил. seq scan только
так и не определились партицирование или партиционирование. Информации по факту в выступлении нет. Рассказанное можно прочитать в оф. документации. Где про ключи, индексы, примеры партиционирования на работающем проекте, как дела с fk на такие таблицы и тд и тп
партиция
Жуть он дерганный. Так и голова может закружится если на него смотреть. Даже боковое зрение устает, когда смотришь только на записи
Чел заблуждается. Вертикальный шардинг отличается от горизонтального тем, что в первом случае разносятся таблицы БД на разные инстансы, а во втором разносятся части одной таблицы как в видео.
разносятся таблицы БД на разные инстансы - то есть если у нас table 1 table 2 - то их по разным инстансам? а если у нас одна большая table 1 - то ее имеет смысл разнести горизонтальным шардингом?