Что такое ETL и ELT за 10 минут. Разница подходов
HTML-код
- Опубликовано: 27 сен 2024
- Listen IT на Я.Дзене - zen.yandex.ru/...
Тайм-код на момент с отличиями ETL от ELT - 07:43
В этой статье мы узнаем:
- Что такое ETL
- Что такое ELT
- Различия ETL и ELT
- Зачем нужны ETL и ELT
- Примеры инженерии данных ETL и ELT
- 10 плюсов и минусов подходов ETL и ELT
Поддержать канал разово - yoomoney.ru/to...
Поддержать канал подпиской - boosty.to/list...
Телеграм-канал - t.me/listenit_...
Я.Дзен - zen.yandex.ru/...
По вопросам сотрудничества - t.me/ed_akimov
Ссылка на статью - biconsult.ru/s...
Различия SOA и микросервисной архитектуры за 9 минут - • Различия SOA и микросе...
Что такое Big Data за 6 минут - • Что такое Big Data за ...
Что такое NoSQL за 6 минут - • Что такое NoSQL за 6 м...
Что такое SQL и реляционные базы данных - • Что такое SQL и реляци...
Синтаксис SQL запросов: Часть 1 - • Синтаксис SQL запросов...
Что такое ACID за 9 минут - • Что такое ACID за 9 минут
Что такое HTTP и HTTPS за 9 минут - • Что такое HTTP и HTTPS...
Машинное обучение для чайников - • Машинное обучение для ...
Что такое CRUD за 6 минут - • Что такое CRUD за 6 минут
Введение в REST API за 7 минут - • Введение в REST API за...
Различия REST и SOAP за 4 минуты - • Различия REST и SOAP з...
Что такое middleware за 7 минут - • Что такое middleware з...
Сложно со всеми тезисами согласиться. Что значит “устаревшие DWH”? Они более чем актуальны. Откуда берутся «неструктурированные» данные? Более 90% ИС которые использует бизнес данные структурированы в БД! Большинство бизнесов не анализируют неструктурированные данные. Приведите пример, если не согласны.
Почти все источники можно сразу записывать в Staging и далее в DWH.
Озеро данных подходит для хранения видеозаписей и изображений, которые необходимо будет распознавать (например).
Всё, что можно конвертировать в таблицу (Excel, csv) можно сразу обработать и записать в DWH.
Ощущение, что те кто гнёт линию с озёрами - просто не хотят стоить DWH и отлаживать бизнес-процессы.
Буду рад конструктивному диалогу!
Спасибо тебе красавчик
уже 7 лет в ИТ но всегда забываю тонкости, спасибо за повторение
да все по делу 👍я бы хотел увидеть сам процесс данного подхода на живом примере (типо как инстурментом пользоваться, как брать данные и в конечном все это еще визуализировать )
Использовать SQL для трансформации можно только в ELT? А в ETL запрещено и надо городить гомнокод на питоне? Что это за чушь?
Визуал у тебя топ. Не знаю как для сеньоров биг даты, а мне как человеку, которому не приходилось иметь дело с этими подходами, все внятно и понятно разжевано. Спасибо за видео. Лайк. Подписка
ETL
2:21 ELT
3:24
5:31
А вообще один вопрос к ELT по масштабируемости: Вот у тебя такое море данных, где ты лейблы не для всех одинаковых сущностей будут одинаковы.
а мне кажется ELT придкмали машины, чтобы нас завоевать. или производители жестких дисков
Много шума из ничего. Ты сам то понял, что говорил?
Отличное видео - тезисно и ясно !