Это где такой excel который не тормозит на 50mln строк, очень хотелось бы узнать? Уже при 50К строк с поиском по строкам дубликатов тормозит безбожно на dell latitude e5450
@@zeniasyriany77 Эксель вообще ограничен 1 лямом строк, но есть надстройки PowerQuery, PowerPivot. Находишь файл типа csv или папку с кучей однотипных файлов на лямы строк, подключаешься к нему из экселя и работаешь. Не без нюансов конечно ) Один из них это железо, еще один надо разобраться с функциональным языком М и языком запросов DAX. Уверяю тебя работает и без тормозов, с сохранением проблемы могут быть.
@@user-dv3nc7fb7o Если ты работаешь на сервере, с супербыстрым ссд, тогда наверное да. Но как активный пользователь PP, скажу что 50 млн строк это ту мач для него
@@user-dv3nc7fb7o я может чего не понимаю, но разве PQ не грузит всё в ОЗУ? На 50кк строк с количеством полей ~20, если подключаться к источнику (та же папка с файлами xlsx) из-под PQ, то всё начинает чихать и кашлять. Результатом будет файл с сохранённой моделью на несколько гигабайт.
А почему мы не можем просто написать nunique, без pd.Series? Ведь метод все равно применяется к Series. Спасибо!
Можем. И так и так можно
а почему excel не тормозит при обработке больше себя( 50 лям строк)? Речь про PP и VertiPaq. DAX местами удобней.
Это где такой excel который не тормозит на 50mln строк, очень хотелось бы узнать? Уже при 50К строк с поиском по строкам дубликатов тормозит безбожно на dell latitude e5450
@@zeniasyriany77 Эксель вообще ограничен 1 лямом строк, но есть надстройки PowerQuery, PowerPivot. Находишь файл типа csv или папку с кучей однотипных файлов на лямы строк, подключаешься к нему из экселя и работаешь. Не без нюансов конечно ) Один из них это железо, еще один надо разобраться с функциональным языком М и языком запросов DAX.
Уверяю тебя работает и без тормозов, с сохранением проблемы могут быть.
@@user-dv3nc7fb7o Если ты работаешь на сервере, с супербыстрым ссд, тогда наверное да. Но как активный пользователь PP, скажу что 50 млн строк это ту мач для него
@@user-dv3nc7fb7o я может чего не понимаю, но разве PQ не грузит всё в ОЗУ? На 50кк строк с количеством полей ~20, если подключаться к источнику (та же папка с файлами xlsx) из-под PQ, то всё начинает чихать и кашлять. Результатом будет файл с сохранённой моделью на несколько гигабайт.
Отличное видео!
Lovely != любимый, lovely это милый, а любимый все-таки favourite