В целом прикольно - под завтрак с радостью посмотрел) . Спарк в кубере можно развернуть - сам k8s может выступать в роли ресурс менеджера заменяя кластер ярн/стандалон, но со своими сыростями - динамик алокейшен год назад еще не поддерживался.
Каждый раз передергивает когда слышу про "паралеллизм в пайтоне", тут можно зависнуть на 30 минут просто разбираясь что есть concurrency и parallel, multithreading. Если мы реально хотим поговорить про parallel в пайтоне то у нас из вариантов только наиотвратительнейший multiprocessing с кучей накладных расходов(обмен данных, поддержка процессов) и минусов (отладка и обмен между процессами), что то хоть реально параллельное идет через библиотеки на других языках или внешние gunicorn/wsgi. Если про конкурентное то так и называйте)
В целом прикольно - под завтрак с радостью посмотрел) . Спарк в кубере можно развернуть - сам k8s может выступать в роли ресурс менеджера заменяя кластер ярн/стандалон, но со своими сыростями - динамик алокейшен год назад еще не поддерживался.
Каждый раз передергивает когда слышу про "паралеллизм в пайтоне", тут можно зависнуть на 30 минут просто разбираясь что есть concurrency и parallel, multithreading. Если мы реально хотим поговорить про parallel в пайтоне то у нас из вариантов только наиотвратительнейший multiprocessing с кучей накладных расходов(обмен данных, поддержка процессов) и минусов (отладка и обмен между процессами), что то хоть реально параллельное идет через библиотеки на других языках или внешние gunicorn/wsgi. Если про конкурентное то так и называйте)
Спасибо за уточнение, тема и правда глубокая
Задание в литкоде не совсем понятно сформулировано, допер только спустя пару минут)
Оно заковыристое, да
Удалось решить?
@@rzv_de Удалось, но не сразу =)