Spring + Kafka навсегда. Смотрим партиции на практике
Вставка
- Опубліковано 29 вер 2024
- В данном видео мы познакомимся с понятием репликации. Это крайне важно понятие. Оно поможет нам двигаться дальше и оценить всю мощь работы с Kafka и Spring.
Чтобы всегда быть в курсе, подписывайтесь на наш телеграмм канал @Jusaf
спасибо за видео, про кластер видос нужен)
в комментах никто и не подумал выполнить домашнее задание))
Пускай поздно, но попробую на него ответить - чтоб Кафка была сильнее похожа на БД, можно добавить язык запросов к ней. В остальном она и так почти БД
да, было бы классно сначала развернуть кластер
Спасибо, мне остался не понятен момент с репликациями партиции, не очевидно, что происходит с репликациями партиции в тот момент, когда сообщение прочитано? Из репликаций оно тоже удаляется?
Спасибо за просмотр! :) С сообщением ничего не происходит, ведь возможно мы или какой-то другой сервис захочет его прочитать. Кафка просто "понимает", что у конкретной партии сдвинулся оффсет для конкретного клиента (groupId). Мы ничего не удаляем при чтении.
@@jusaf но ведь вообщений может быть очень много, сотни тысяч в день, например, должно же это когда-нибудь очищаться?
@@ekaterina997 да, верно. Для этого есть настройки retention. Смысл в том, что мы чистим сообщения не по событию их чтения, а по при истечению их срока давности. Например, по умолчанию наши сообщения удаляются сами из кафки через 7 дней после попадания в нее. Под капотом Кафки есть база данных RocksDB на основе которой и происходит такой процесс. Возможно стоит снять отдельное видео по этой теме. :)
@@jusaf Конечно стоит снять видео что происходит под капотом Кафки! Ждем
Очень интересна тема кластера, так что ждем от тебя видео на эту тему
автор, можно 10ти часовую версию заставки?
Нервишки у тебя шалят, друг. Все норм с заставкой