Николай Матвиенко - Обработка озера данных на Node.js в serverless-архитектуре
HTML-код
- Опубликовано: 7 фев 2025
- Ближайшая конференция - HolyJS 2025 Spring, 7-8 апреля, Москва + online. Подробности и билеты: jrg.su/gxfN4t
- -
Serverless это не только про легковесный код. С этим подходом можно организовать и обработку огромных объемов данных, главное, правильно организовать архитектуру. Технические детали и реальные подходы в решении нетривиальных задач вы можете с таким не столкнуться, но это определенно интересный опыт.
Мы рассмотрим процесс обработки озера данных с помощью облачных функций AWS Lambda на Node.js: от выбора применяемых архитектурных облачных паттернов до углубления в оптимизации лямбда-функций на Node.js. Выявим и используем сильные стороны Node.js для ускорения обработки данных. Исследуем увеличение пропускной способности с помощью масштабирования до 7000 экземпляров лямбда-функций и используемых сервисов (стримов, очередей и баз данных), тюнинга и оптимизаций лямбда-функций на Node.js и выбора оптимальных протоколов передачи данных. Рассмотрим особенности профилирования функций, логирования и мониторинга в облачной инфраструктуре для выхода в продакшн.
Отличный доклад. Познавательно
Лямбды дешевле EC2 на 60%, звучит супер, если не знать во сколько раз дороже обходится EC2 по сравнению с аналогами.