Spring + Kafka навсегда. Смотрим партиции на практике

Поділитися
Вставка
  • Опубліковано 29 вер 2024
  • В данном видео мы познакомимся с понятием репликации. Это крайне важно понятие. Оно поможет нам двигаться дальше и оценить всю мощь работы с Kafka и Spring.
    Чтобы всегда быть в курсе, подписывайтесь на наш телеграмм канал @Jusaf

КОМЕНТАРІ • 11

  • @it2ishmitov76
    @it2ishmitov76 4 роки тому +7

    спасибо за видео, про кластер видос нужен)

  • @klaussr
    @klaussr 9 місяців тому

    в комментах никто и не подумал выполнить домашнее задание))
    Пускай поздно, но попробую на него ответить - чтоб Кафка была сильнее похожа на БД, можно добавить язык запросов к ней. В остальном она и так почти БД

  • @yessimovaindira8016
    @yessimovaindira8016 4 роки тому +3

    да, было бы классно сначала развернуть кластер

  • @ekaterina997
    @ekaterina997 4 роки тому +1

    Спасибо, мне остался не понятен момент с репликациями партиции, не очевидно, что происходит с репликациями партиции в тот момент, когда сообщение прочитано? Из репликаций оно тоже удаляется?

    • @jusaf
      @jusaf  4 роки тому +1

      Спасибо за просмотр! :) С сообщением ничего не происходит, ведь возможно мы или какой-то другой сервис захочет его прочитать. Кафка просто "понимает", что у конкретной партии сдвинулся оффсет для конкретного клиента (groupId). Мы ничего не удаляем при чтении.

    • @ekaterina997
      @ekaterina997 4 роки тому

      @@jusaf но ведь вообщений может быть очень много, сотни тысяч в день, например, должно же это когда-нибудь очищаться?

    • @jusaf
      @jusaf  4 роки тому +4

      @@ekaterina997 да, верно. Для этого есть настройки retention. Смысл в том, что мы чистим сообщения не по событию их чтения, а по при истечению их срока давности. Например, по умолчанию наши сообщения удаляются сами из кафки через 7 дней после попадания в нее. Под капотом Кафки есть база данных RocksDB на основе которой и происходит такой процесс. Возможно стоит снять отдельное видео по этой теме. :)

    • @ZamalSpace
      @ZamalSpace Рік тому

      @@jusaf Конечно стоит снять видео что происходит под капотом Кафки! Ждем

  • @ZamalSpace
    @ZamalSpace Рік тому

    Очень интересна тема кластера, так что ждем от тебя видео на эту тему

  • @stquad815
    @stquad815 4 роки тому +1

    автор, можно 10ти часовую версию заставки?