Введение в Apache Kafka, первая тема открытого базового курса
HTML-код
- Опубликовано: 30 июл 2024
- Пройти полный курс Apache Kafka База - to.slurm.io/yVOq3g
На курсе расскажем, как настраивать распределенный отказоустойчивый кластер, как отслеживать метрики и многое другое. После прохождения курса станете гуру равномерного распределения нагрузки.
❗️А в этом уроке:
00:00 - Обзор курса и актуальность Apache Kafka.
03:20 - История создания Apache Kafka.
05:21 - Что такое Apache Kafka.
12:12 - Почему Apache Kafka.
15:34 - Примеры использования.
22:23 - Резюме урока.
✅Дополнительные материалы к уроку: github.com/Slurmio/kafka-free
❗️Посмотреть программу продвинутого курса: to.slurm.io/yVOq3g
Все уроки базового курса в плейлисте: • Apache Kafka, открытый...
Авторы:
Анатолий Солдатов, Lead Engineer в Авито
Александр Миронов, Infrastructure Engineer в Stripe, ex-Booking
Канал Слёрм в телеграм: t.me/slurmnews
Пожалуйста, ВыРаВнИвАйТе ГрОмКоСтЬ! Одного еле слышно, от другого дети просыпаются...
Контент зашёл, наглядно и понятно, спасибо!
Очень качественная подача материала все понятно и без лишней воды
Круто! Спасибо
Супер материал и подача, спасибо!
Очень здорово!, молодцы
спасибо за материал
Спасибо!
Вау! Ребят, контент - жаришка! Когда 2 часть курса?
7-го апреля будет закрытая продвинутая часть с практикой доступна, посмотреть программу и подать заявку можно уже сейчас: slurm.club/3fczIZG
Вот так иногда смотришь о чем то что сейчас на слуху модно, причем слышал о технологии с самого его зарождения... а потом бах тебя шарахают а этой технологии уже 10 лет !!)) Так же как и любимые песни слушаешь а потом видишь в ютубе что выложена была 8 лет назад )) .. не хочу быть банальным ... но как летит время.
10 лет назад это был еще сырой опенсорс даже без репликации, которым почти никто бы не рискнул пользоваться в проде :)
Гавеное введение, хотел узнать что такое топик и партиции на примерах, но так и не узнал даже в теории, видео в топку
перед использованием понятия "топик" не дают его определение...
Интересный вводный материал. Можно уточнить чем принципиально отличается идеология топиков Kafka от брокеров сообщений?
Вопрос снят ;) Материал даёт ответ на вопрос, надо было дослушать до конца ;)
тем, что что это стриминговая платформа, а не брокер@@user-cj6xf5xw3h
Хороший материал. Правда Анатолия Солдатова немного тяжело слушать, всё зачитывает с эркана, с большим количсеством пауз невпопад. В итоге информация начинает быстро превращаться в шум.
А что там со скоростью обработки входящей очереди? Какие воркеры это делают? Что если их не хватает, масштабирование в горизонт, имеется в виду как раз для этих воркеров?
Ну мы вот тут видели в нагрузку что у нас nginx закидывала все запросы в uwsgi, и он уже питоньим процессам отдавал на разгребание . Эта очередь была выставлена высокой, а воркеров было не так что бы много. И мы видели тормозящее апи в хайлоад и не понимал где ботлнек. Грешили на базу. А по факту был хайлоад и эта uwsgi очередь медленно разгребалась. Такие вот будни
немного перевода на русский
-лог - журнал
-append-only - работающий только на добавление
-джоба - задание
-сипию - время процессора
-"связаны с даунтаймом нашего приложения" - связаны с временем простоя нашего приложения
-батчинговая обработка данных - пакетная обработка данных
-риал-тайм система - система реального времени
-сохраняем в одном топике - в данный момент человек, который смотрит видео, понятия не имеет что такое topic
-producer и consumer - эти термины никак не были озвучены. Показана лишь одна картинка, после которой идёт блок информации, затем в следующем блоке эти термины употребляются, как будто они уже отлично известны слушателю
-не стали ограничиваться одним кейсом - не стали ограничиваться одним применением
а топик?
@@user-td3br7hc7v Так он же написал что не значет что это)
topic - обьявляем топик/тема например "запросы с сервиса А" в этот топик будут передавать/писать producer-ры, читать/потреблять consumer-ры, да должны на видео обьяснить же что к чему)
"-producer и consumer - эти термины никак не были озвучены. Показана лишь одна картинка, после которой идёт блок информации, затем в следующем блоке эти термины употребляются, как будто они уже отлично известны слушателю"
Отправитель и потребитель
Потому что достаточно просто посмотреть перевод этих слов, хотя в IT-области это общеизвестные термины (как и все остальные, кроме топика мб), а люди не из этой области вряд ли попадут на это видео
Коммент года, спасибо добрый человек!
Джахаров ты что тут потерял?
Чет подача мне показалась так себе
Хороший урок. Но пожалуйста, Толя, избавьтесь от слов-паразитов "тошто". Слух режет
Кафка не просто писатель. Ему присущ так называемый кафкианский бред(абсурд). Как вы яхту назовете, так она и поплывет ))
Нереально сложно и муторно для восприятия
Я бы сказал что Kafka это изначально ЛОГ. А все остальное это производные просто из общей природы этих подсистем.
А я то думаю что всё стало таким медленным в интернете... А тут вон оно что. (Что бы что то случилось, какой то процессор должен это вычислить! ) и авито стал безумным тормозом. И новый сайт ситилнка сделали на чем то новом и модном...
Без картинок не наглядно
бла бла бла, покажите код
Не пойму, почему все так хвалят лекцию? Прослушал, 90% -- вода и зачитывание копирайтерских текстов по бумажке. Без конкретики по применению, зато с лингвистически-корявыми оборотами вроде "администрировать на production-уровне".
Слегка теплится надежда, что это лишь вводно-ознакомительная серия и дальше будет более конкретно.
Это все вода - нет никаких реальных примеров !!! Печально !!
Я думаю это они себе просто как рекламу сделали и рассказали просто о поверхности.
Очередная замануха для того чтобы люди купили платный курс. Мы говорит научим вас рисовать сову типа, а сами рисуют два Круга такие смешные вообще. Так и скажите что замануха на платный курс в чём проблема-то?
Посмотрите лучше известное видео на RUclips про kafka (основы) вот где реально воды нет
Это не курс , это чтение с бумажки. В целом одна вода.
Обьяснение лютая хрень. Какой то "Сферический конь в вакууме". Кейсы, топики.. Может вам толковый словарь подарить?
бесполезное видео