- Видео 5
- Просмотров 1 078
Корсаков о Data
Добавлен 16 янв 2018
Канал про данные в IT.
По вопросам сотрудничества: korsakov.iyu@gmail.com
По вопросам сотрудничества: korsakov.iyu@gmail.com
Чем можно заняться в IT
В этом видео вы сможете узнать чем можно заниматься в IT помимо программирования.
Менторство/консультации по IT - korsak0v.notion.site/Data-Engineer-185c62fdf79345eb9da9928356884ea0
TG канал - t.me/DataLikeQWERTY
Instagram - i__korsakov
Habr - habr.com/ru/users/k0rsakov/publications/articles/
Менторство/консультации по IT - korsak0v.notion.site/Data-Engineer-185c62fdf79345eb9da9928356884ea0
TG канал - t.me/DataLikeQWERTY
Instagram - i__korsakov
Habr - habr.com/ru/users/k0rsakov/publications/articles/
Просмотров: 98
Видео
Данные - это новая нефть
Просмотров 8714 дней назад
Поговорим о данных и узнаем почему данные - это новая нефть. После этого видео вы пойдете добывать данные, а нефть. Менторство/консультации по IT - korsak0v.notion.site/Data-Engineer-185c62fdf79345eb9da9928356884ea0 TG канал - t.me/DataLikeQWERTY Instagram - i korsakov/ Habr - habr.com/ru/users/k0rsakov/publications/articles/
Что такое Big Data | Биг Дата?
Просмотров 60Месяц назад
Поговорим о данных, как они могут быть полезны и с какого момента начинается Big Data? Менторство/консультации по IT - korsak0v.notion.site/Data-Engineer-185c62fdf79345eb9da9928356884ea0 TG канал - t.me/DataLikeQWERTY Instagram - i korsakov/ Habr - habr.com/ru/users/k0rsakov/publications/articles/
Как растут компании
Просмотров 88Месяц назад
В прошлом видео мы узнали, кто такой дата-инженер, а теперь давайте разберемся на каком этапе жизненного цикла компании он появляется. А также узнаем все этапы, которые проходит компания при своём росте. Менторство/консультации по IT - korsak0v.notion.site/Data-Engineer-185c62fdf79345eb9da9928356884ea0 TG канал - t.me/DataLikeQWERTY Instagram - i korsakov/ Habr - habr.com/ru/users...
Кто такой Data Engineer | Инженер данных
Просмотров 7513 месяца назад
Дата-инженер - это направление в IT, которое сейчас набирает популярность. В данном видео вы узнаете кто такой дата-инженер, зачем он нужен компании и какие бывают дата-инженеры, а также сможете узнать в каком направлении можно развиваться в данных, чтобы стать дата-инженером. Менторство/консультации по IT - korsak0v.notion.site/Data-Engineer-185c62fdf79345eb9da9928356884ea0 TG канал - t.me/Dat...
что такое ядро? может быть row слой? почему его вдруг должна собирать какая то отдельная команда а не airflow airbyte kafka dagster и т. д.?
Добрый день. Вы говорите про мягкое, а я в видео говорю про тёплое. Core - это условное деление команд. Core-команда может использовать разные инструменты: Airflow, AirByte, etc. Это всего лишь инструменты. Выбор технологий зависит от Teach Lead, CDO, Principal Data Engineer. RAW слой - это слой сырых данных, его могут и обычно собирает команда ядра (core). Точно также core-команда может собирать ODS, DDS слои и в редких случая DM, о чём я сказал в видео. И повторюсь немного: выбор инструмента зависит от многих параметров. Поэтому в core-команде может быть всё, что вы перечислили.
@@DataLikeQWERTY я не знаю что у вас за команда, но у нас DE не делится. есть задача от заказчика и есть сотрудник, который ее выполняет. да хоть Peer DB или табличная функция postgresql будет использоваться для ETL/ELT процесса PG->CH. Принцип работы одинаковый без разницы какой слой собирается. Есть заказчик с тз и есть исполнитель.
Спасибо за видео! Как лучше всего начать свой путь в мир data engineering?
korsak0v.notion.site/Data-Engineer-185c62fdf79345eb9da9928356884ea0
Тихо
Спасибо.
Круто
Расскажи пж по подробнее про команды ядра
Круто
привет) будут ещё видосы?
Будут. Монтируется новый выпуск