Установка Kafka и работа с кластером из одного брокера, третья тема открытого базового курса

Поделиться
HTML-код
  • Опубликовано: 10 июл 2024
  • Пройти полный курс Apache Kafka База - to.slurm.io/yVOq3g
    На курсе расскажем, как настраивать распределенный отказоустойчивый кластер, как отслеживать метрики и многое другое. После прохождения курса станете гуру равномерного распределения нагрузки.
    В этом уроке:
    00:00 - Цели урока.
    00:42 - Запуск Kafka.
    04:14 - Запись и чтение.
    16:19 - Topic Retention Часть 1.
    25:30 - Структура Партиции.
    33:51 - Topic Retention Часть 2.
    39:11 - Log Compaction.
    45:41 - ZooKeeper.
    52:13 - Резюме урока.
    ✅Практические задания и материалы к уроку: github.com/Slurmio/kafka-free
    ❗️Посмотреть программу продвинутого курса: to.slurm.io/yVOq3g
    Все уроки базового курса в плейлисте: • Apache Kafka, открытый...
    Авторы курса:
    Анатолий Солдатов, Lead Engineer в Авито
    Александр Миронов, Infrastructure Engineer в Stripe, ex-Booking
    Полезные ссылки:
    Канал Слёрм в телеграм: t.me/slurmnews

Комментарии • 29

  • @it2341
    @it2341 3 года назад +6

    Супер, в понедельник с работы всему отделу оплачу ) прям то что надо и так как надо, спасибо

  • @freeman_21
    @freeman_21 3 месяца назад

    Спасибо все стало понятно

  • @RaZeR22L
    @RaZeR22L 3 года назад +1

    Спасибо!

  • @gorelin
    @gorelin 2 года назад +2

    Ребят, спасибо большое за уроки! А продолжение будет? или уже есть, но в закрытом доступе?

  • @saraantuayal8389
    @saraantuayal8389 3 года назад +3

    Спасибо! Жаль поздно вышел курс :) Раньше б увидел, кучу времени б сэкономил

    • @manOfPlanetEarth
      @manOfPlanetEarth 3 года назад

      как изучали? книгу читал?

    • @saraantuayal8389
      @saraantuayal8389 3 года назад

      @@manOfPlanetEarth А почему вы спрашиваете?

    • @manOfPlanetEarth
      @manOfPlanetEarth 3 года назад +1

      @@saraantuayal8389
      и ознакомься с понятием диалог.

    • @saraantuayal8389
      @saraantuayal8389 3 года назад

      @@manOfPlanetEarth Тролли и здесь? Вам нечем заняться? И мі с вами на брудершафт не пили.

    • @mrFrenchman
      @mrFrenchman 3 года назад +3

      @@saraantuayal8389 а что разве вопрос "как изучали? книгу читал?" какой-то с подвохом? Думаю, что просто интересовались тем, как еще можно изучить тему и возможно тоже посмотреть в эту сторону...

  • @MaxMalts
    @MaxMalts Год назад

    Супер очень полезно! Но под конец опять начали ругаться незнакомыми словами)

  • @noigry
    @noigry Год назад

    Спасибо за уроки! Подскажите, можно ли читать данные за какой то промежуток времени? Вижу что есть начало откуда читаем, а можно ли задать конец?

  • @predatel_rodini
    @predatel_rodini 3 года назад

    Охуенно объяснили. Напомнило мне принцип топиков в ROS

  • @user-cj6xf5xw3h
    @user-cj6xf5xw3h 3 года назад

    Правильно понимаю, что после закрытия открытого сегмента партиции (на слайде это active (head) segment) он становится closed segment (и для файловой системы это просто отдельный log-файл)?

  • @user-ky4zw4er1c
    @user-ky4zw4er1c 7 месяцев назад +1

    Спасибо за видео
    А почему мы в одном месте задаем время для удаления 1 сек, а в другом 60 сек?

  • @manOfPlanetEarth
    @manOfPlanetEarth 3 года назад

    почему такие паузы при записи и чтении сообщений?? и при изменении настроек хранения сообщений.
    удивительно.

    • @javaguru1265
      @javaguru1265 3 года назад

      он ждал пока пройдет 10 секунд.

  • @g0tem449
    @g0tem449 9 месяцев назад

    на винде сервер с кафка дропается из-за логов

  • @mootal2202
    @mootal2202 2 года назад +1

    Аппендить новые лайны...

  • @saltaization
    @saltaization 3 года назад

    Здравствуйте, можно индивидуально просить обучение? Стоимость?

    • @slurm_io
      @slurm_io  3 года назад

      Здравствуйте! Напишите в телеграм @marsel91

  • @ssheba767
    @ssheba767 2 года назад +2

    Не подходит для виндовс

    • @RomanAlexandrov
      @RomanAlexandrov Год назад

      У меня тоже с виндой локально не стартует, запускаю Zookeeper, он ок, а запуск Kafka падает с ошибками.

    • @RomanAlexandrov
      @RomanAlexandrov Год назад

      Починил скачав другую версию кафки 2.8.2

  • @itarara
    @itarara 2 года назад

    Спасибо за урок в таком доступном формате (как раз для меня, чайника)
    Но столкнулся с проблемой:
    после запуска команды
    ./zookeeper-server-start.sh ../config/zookeeper.properties
    получаю
    Classpath is empty. Please build the project first e.g. by running './gradlew jar -PscalaVersion=2.13.6'
    ... и zookeeper не стартует
    Можете подсказать в чем причина?

    • @itarara
      @itarara 2 года назад +1

      Разобрался, нужно было загружать архив Kafka из раздела "Binary downloads"

    • @oleksiibereznikov4774
      @oleksiibereznikov4774 2 года назад +1

      ./gradlew jar -PscalaVersion=2.13.6 запусти эту команду и все заработает

    • @MrTemperator
      @MrTemperator 12 дней назад

      @@itarara через года спасибо тебе, очень выручил со своими комментариями