Начало работы с apache airflow - "Школы Больших Данных" г. Москва

Поделиться
HTML-код
  • Опубликовано: 30 сен 2024
  • Вводное видео в apache airflow. В нем можно получить ответы на вопросы: что такое etl (extract, transform, load), зачем нужен airflow, что такое DAG в платформе airflow, а также написан простейший “hello-world” DAG
    Ссылка на код: gist.github.co...
    Более подробно вы можете познакомиться с нашими курсами по Apache AirFlow здесь
    КУРС DATA PIPELINE НА APACHE AIRFLOW И APACHE HADOOP
    www.bigdatasch...
    КУРС DATA PIPELINE НА APACHE AIRFLOW И ARENADATA HADOOP
    www.bigdatasch...
    Следующие видео по Apache Airflow:
    Часть 2: ETL на airflow - • ETL на airflow - Курсы...
    Часть 3: ETL на airflow c postgresql - • ETL на airflow c postg...
    По вопросам обучения на курсах машинного обучения приглашаем в нашу «Школа Больших Данных»
    Обращаться по телефону:
    +7 (495) 41-41-121
    +7 (995) 100-45-63
    Чтобы не пропустить информацию о новых курсах, акциях и других событиях Школы Больших Данных, рекомендуем подписаться на нас в социальных сетях:
    Телеграм-канал: t.me/BigDataSc...
    Facebook: / bigdataschoolru
    Вконтакте: bdschoo...
    LinkedIn: / bigdataschoolru
    Twitter: / bigdataschoolr
    Подписывайтесь и будьте в курсе всех интересных новинок мира Big Data вместе со Школой больших данных - www.bigdatasch...

Комментарии • 34

  • @MrCutmasta
    @MrCutmasta Год назад +4

    docker как поставить?) у меня command not found на команду docker ps

  • @2k_eV
    @2k_eV 2 года назад +5

    7:40 вот тут бы пару слов про то, как создать папку, "которую все уже создали"?

  • @MrCutmasta
    @MrCutmasta Год назад +2

    из-за шума на заднем фоне тяжело смотреть урок

  • @ВладимирМихайлов-к5з

    Чет у меня лог дага пустой и зависает даг на ранинге..

  • @kristinam2480
    @kristinam2480 3 года назад +5

    Спасибо за наглядный пример!

  • @Миша-с1ю2х
    @Миша-с1ю2х Год назад +1

    Добрый день! Подскажите, как сделать чтобы UI открывался с внешнего адреса? нужно nginx подключать?

  • @BoJlnoy
    @BoJlnoy Год назад +2

    Это кряк airflow или ориг

    • @sru3957
      @sru3957 7 месяцев назад

      чиво-чиво?))

    • @atli4nikk160
      @atli4nikk160 6 месяцев назад

      это хряк

  • @1GvOG
    @1GvOG 2 года назад +1

    какие проблемы со звуком.

  • @CrazyHandMaker
    @CrazyHandMaker 3 года назад +2

    Спасибо. Толковый ролик.

  • @АннаЧернышова-я6ш
    @АннаЧернышова-я6ш 2 месяца назад

    как вы определяете интервал по звездочкам ?

  • @namefamily3279
    @namefamily3279 2 года назад +2

    Спасибо!

  • @dmitrylemeshenko9642
    @dmitrylemeshenko9642 Год назад +1

    Спасибо!

  • @UraGagarin1961
    @UraGagarin1961 2 года назад +1

    Ура

  • @gera4798
    @gera4798 3 месяца назад

    Спасибо

  • @ВладИбрагимов-э9х
    @ВладИбрагимов-э9х 3 года назад +2

    жду продолжения

    • @dblmok_
      @dblmok_ 3 года назад

      ruclips.net/video/XFQ0KPaDIT8/видео.html

  • @zzshek
    @zzshek 3 года назад +2

    Спасибо за видео

    • @dblmok_
      @dblmok_ 3 года назад

      Пишите какие темы интересны, постараемся учесть при разработке контента

  • @UraGagarin1961
    @UraGagarin1961 2 года назад +1

    А где учите, в Москве, а где?

  • @vn924
    @vn924 3 года назад

    спасибо, только очень тихо, микрофон вероятно встроенный

    • @michaelkorolev9055
      @michaelkorolev9055 3 года назад

      да, со звуком тиховато получилось, учту на будущее

  • @noone-hi6kq
    @noone-hi6kq 2 года назад

    разных типов? питонячий?

  • @ilsabs
    @ilsabs Год назад

    Ролик хорош, только рунглиш уши режет аж кушать не могу))))

  • @yerkinakbergenov9382
    @yerkinakbergenov9382 Год назад +1

    ШУДУЛЕР, ХТМЛ, ЯВАСКПИРТ - быблоинглиш

    • @atli4nikk160
      @atli4nikk160 6 месяцев назад

      во многих русских компаниях такой и используют) даже те кто знают правильное произношение

  • @АлексейБрыш-л6д
    @АлексейБрыш-л6д 7 месяцев назад +1

    не шедулер, а скеджюлер

    • @qanatik9366
      @qanatik9366 Месяц назад

      Нет все правильно шедулер

  • @НикитаСилуянов-к4л
    @НикитаСилуянов-к4л 3 года назад

    Скажите пожалуйста, если его разворачивать на виртуальной машине, то какими характеристиками, приблизительно она должна обладать ?)

    • @dblmok_
      @dblmok_ 3 года назад

      Все зависит от задач, которые будут выполняться на airflow. Ели говорить про минимальные требования, то будет достаточно 8 Gb RAM и какие нибудь не самые захудалые 2-4 ядрышка CPU (для сборки от puckel).