А будет ли парсер работать при выключенном пк ? Т.е по присылать уведомления на телефон в телеграмме, или нужно хотя бы в спящем режиме ? И на телефон ( ios ) установить нельзя?
Попробуйте такие решения: 1) Подождать, первая загрузка может длиться минуту-две, это нормально 2) Архив должен быть распакован! 3) Архив должен быть распакован в путь не содержащий кириллицы и не на рабочий стол (у некоторых он синхронизирован с OneDrive и могут быть проблемы при загрузке) 4) Проверьте не блокирует ли программу антивирус или брандмауэр 5) Всегда можно запустить код напрямую из исходников
Вопрос по поводу мобильных прокси - есть вариант купить например 5 или 10 прокси и не за 2000+ рубликов на месяц? Или только доступ ко всем прокси и по дням только ограничение?
В будущих версиях скорее всего появится возможность использовать и обычные прокси, но у мобильных есть преимущества: - почти неограниченное кол-во ip - гораздо меньше банов - насчет цены, я думаю 2000+ руб - это вполне адекватная цена за месяц беспроблемной работы
Очень крутой парсер, особенно с возможностью развернуть у себя на сервере, спасибо вам за труды!🙏 И экспорт в эксель, да, это было бы отличным решением👍
возник вопрос, обьявления какой давности парсер будет отправлять в телеграм? могу ли я где то настроить этот параметр, допустим я хочу чтобы парсер при включении начал отправлять обьявления, которые были выложены менее суток назад, а далее чтобы он отправлял самые свежие обьявления
При формировании ссылки на самом Авито можно выбрать сортировку \по дате\, таким образом будут показаны самые свежие объявления. В парсере можно выбрать количество страниц для проверки. Парсер помнит объявления, которые уже видел, поэтому повторно их присылать не будет
вот только что парсер проверил 1 страницу и в момент проверки вылезло новое обьявление, но при следующей проверке это обьявление не пришло мне в телеграм
Добавь вот эту штуку: def start_page(): page.add( ft.Column( [all_field], expand=True, alignment=ft.MainAxisAlignment.CENTER, horizontal_alignment=ft.CrossAxisAlignment.CENTER, scroll=True ) ) Потому что экраны у людей разные, у меня, например внизу экрана кнопок не видно)
@@the_parse_hub извиняюсь тогда, заного напишу, лови в коде странице поиска в теге (script[data-mfe-state="true"]') json объект и там куча полезной инфы вплоть до ссылок на фото всех размеров и самое что интересное без вотермарок авитовских))
@@the_parse_hub блин не дает тут написать почему то. ( script [data- mfe- state = "true" ] ) ищи в коде этот тег и в нем json объект с нужной инфой и фотками без вотермарок авито)))
А будет ли парсер работать при выключенном пк ? Т.е по присылать уведомления на телефон в телеграмме, или нужно хотя бы в спящем режиме ? И на телефон ( ios ) установить нельзя?
На выключенном компе работать не будет. Специально для этого есть версия для запуска на сервере (арендуете vps, устанавливаете, запускаете) и всё будет работать. На телефон установить нельзя
А будет ли парсер работать при выключенном пк ? Т.е по присылать уведомления на телефон в телеграмме, или нужно хотя бы в спящем режиме ?
И на телефон ( ios ) установить нельзя?
спасибо большое, очень рад что такое кто то делает бесплатно, а не продаёт
Все доступно и понятно! Спасибо
Спасибо огромное! Ты просто Человечище!!!
Дружище, ты гениален! Огромная благодарность тебе за такие твои начинания и реализацию способностей своих крутых!!! ; ) ❤
при запуске и виндовс 8 и 11 одинаково белый экран и exe не работает что не так? (скачал по ссылке с янддиска)
Попробуйте такие решения:
1) Подождать, первая загрузка может длиться минуту-две, это нормально
2) Архив должен быть распакован!
3) Архив должен быть распакован в путь не содержащий кириллицы и не на рабочий стол (у некоторых он синхронизирован с OneDrive и могут быть проблемы при загрузке)
4) Проверьте не блокирует ли программу антивирус или брандмауэр
5) Всегда можно запустить код напрямую из исходников
Исправленная портативная версия: disk.yandex.by/d/ChuNTMkr3htfGA
Запустите от Администратора
присоединяюсь к благодарностям, ты молодец
Вопрос по поводу мобильных прокси - есть вариант купить например 5 или 10 прокси и не за 2000+ рубликов на месяц? Или только доступ ко всем прокси и по дням только ограничение?
В будущих версиях скорее всего появится возможность использовать и обычные прокси, но у мобильных есть преимущества:
- почти неограниченное кол-во ip
- гораздо меньше банов
- насчет цены, я думаю 2000+ руб - это вполне адекватная цена за месяц беспроблемной работы
@@the_parse_hub в целом да ; )) особенно когда уже активно какой-то темой занимаешься. А когда только начинаешь, тогда кусается
Щедрость какая ❤
Очень крутой парсер, особенно с возможностью развернуть у себя на сервере, спасибо вам за труды!🙏 И экспорт в эксель, да, это было бы отличным решением👍
Воу , спасибо братик 🤝🤝🤝🔥🔥🔥🔥🔥
Спасибо огромное за проделанную работу! 👍👍👍
Круто! А вообще такое возможно для других маркетплесов?
Возможно. Для wb и озона уже есть mp_parser
подскажите
а скрипт как то отслеживает повторки не шлет в тг или ему без разницы и шлет постоянно одни и теже обьявы?
скрипт помнит уже просмотренные объявления и повторы не шлёт.
Хранятся эти объявления во viewed.txt, можете его удалить и память обнулится
возник вопрос, обьявления какой давности парсер будет отправлять в телеграм? могу ли я где то настроить этот параметр, допустим я хочу чтобы парсер при включении начал отправлять обьявления, которые были выложены менее суток назад, а далее чтобы он отправлял самые свежие обьявления
При формировании ссылки на самом Авито можно выбрать сортировку \по дате\, таким образом будут показаны самые свежие объявления.
В парсере можно выбрать количество страниц для проверки.
Парсер помнит объявления, которые уже видел, поэтому повторно их присылать не будет
вот только что парсер проверил 1 страницу и в момент проверки вылезло новое обьявление, но при следующей проверке это обьявление не пришло мне в телеграм
но суть в том, что если я нажму на кнопку тест сообщение, то оно приходит
понятно, может где-то баг
Пока не заглядывали под капот, а можно ли применить на другом сайте, hh например?
Нет, применить на другом сайте просто так не получится.
Но если знаете как, можете изменить локаторы и есть шанс, что заработает
еще актуально? у меня ничего не работает. так же вставляю ссылку и он не находит объявлений
актуально. Проверьте правильность введенных данных, включите \режим отладки\ и посмотрите глазами что там происходит
А можно использовать обычные прокси вместо мобильных?
В данной версии нет. На самом деле в обычных прокси здесь смысла особо нет, можно будет разориться
@@the_parse_hub мобильные не дешевые
токо в визуале работает а чисто на запросах авито вообще не запарсить?
Да как бы можно. Только работать будет далеко не так стабильно.
А т.к. это бесплатный продукт - то чинить его раз в неделю у меня не входит в планы
красавчик👍👍👍
В виде плагина ещё не хватает
Будет 4 версии 🔥
В виде плагина вряд-ли будет
@the_parse_hub если нужна моя помощь свяжитесь, помогу собрать в виде плагина
оудиоджангл))))
Насколько я знаю бот не сможет написать людям которые не отправляли start этому боту
В обычном понимании да, не может. Но здесь мы вручную указываем chat_id
Спасибо🎉
Добавь вот эту штуку:
def start_page():
page.add(
ft.Column(
[all_field],
expand=True,
alignment=ft.MainAxisAlignment.CENTER,
horizontal_alignment=ft.CrossAxisAlignment.CENTER,
scroll=True
)
)
Потому что экраны у людей разные, у меня, например внизу экрана кнопок не видно)
Ок. В следующем апдейте добавлю. Спасибо
Случайно наткнулся. Было бы логичней парсить моб версию сайта и забирать тел еще. Да они подменные но спрос на это есть.
может быть
коменты удаляются?
нет, не удаляются. Бывает только сам ютуб модерирует
@@the_parse_hub извиняюсь тогда)
хоть спасибо за инфу сказал бы бро)))
ты про какую инфу?
@@the_parse_hub извиняюсь тогда, заного напишу, лови в коде странице поиска в теге (script[data-mfe-state="true"]') json объект и там куча полезной инфы вплоть до ссылок на фото всех размеров и самое что интересное без вотермарок авитовских))
@@the_parse_hub ускорится парсинг, он загружается еще до полной загрузки страницы.
@@the_parse_hub блин не дает тут написать почему то. ( script [data- mfe- state = "true" ] ) ищи в коде этот тег и в нем json объект с нужной инфой и фотками без вотермарок авито)))
@@the_parse_hub не дает мне тут написать, как тебе в тг отписать?
А будет ли парсер работать при выключенном пк ? Т.е по присылать уведомления на телефон в телеграмме, или нужно хотя бы в спящем режиме ?
И на телефон ( ios ) установить нельзя?
На выключенном компе работать не будет. Специально для этого есть версия для запуска на сервере (арендуете vps, устанавливаете, запускаете) и всё будет работать.
На телефон установить нельзя