Как создать мультистраничный веб-запрос в Power Query
HTML-код
- Опубликовано: 11 сен 2023
- Как собирать данные сразу с нескольких веб-страниц, перебирая их в цикле и объединяя загруженные результаты в единую таблицу с помощью Power Query.
Скачать пример www.planetaexcel.ru/technique...
Мои книги planetaexcel.ru/books/
Мои онлайн-курсы www.planetaexcel.ru/learning/
Моя надстройка PLEX (+150 новых функций для вашего Excel) planetaexcel.ru/plex/
Подпишитесь на наш канал в Telegram, чтобы оперативно узнавать о всех новых возможностях и лайфхаках при работе в Excel и Power BI - t.me/planetaexcel
Когда появляется новое видео настроение поднимается и желание работать увеличивается!
Спасибо большое!
Николай! Вы реально облегчаете нашу работу! Очень нужный и полезный контент! Огромное Вам спасибо!
Спасибо на добром слове :) Рад, что смог помочь :)
Это Вам огромное спасибо!) Всегда жду от Вас новых контент-уроков! Признаюсь честно, до ваших контент-уроков, всегда "боялся" Power Query) Теперь "дружу" с ним на "Ура"!))) И всё благодаря только Вам!) ✊👍🤝
Как всегда гениально и просто 👍🙂
Думал уже неделю назад сделать запрос в Power BI подключение к задачам в БТ. Но там задачи выдаются по 50 штук и нужно делать пагинацию (если не ошибся в названии). Но все откладывал, так как понятие не имел как их листать. Как же вовремя видео! Спасибо за материал!
Большой Респект и низкий поклон не побоюсь этого слова офигенному Николаю Павлову!
Николай, а новых книг не ожидается по Excel или Гугл-таблицам?
Пока пишу по BI
@@planetaexcelА где её можно будет увидеть?
Большое спасибо. Этот подход - то, что нужно!
Круто супер то что нужно
Николай, огромное спасибо за отличный материал! 🔥
Вставка параметра через Источник - Подробнее с разбивкой адреса на части - новая для меня фишка. Всегда правил в расширенном редакторе. Спасибо.
Мощно и так просто! .. Очень приятно узнавать что-то новое..
Спасибо вам большое
Огромное спасибо! Просто великолепно!
Просто браво! 👏
Великое спасибо.
Как всегда суперский!!!
Классная возможность, просто магия! Чувствую себя агентом из шпионских фильмов.
Бонд, Джеймс Бонд ;)
Я Ваш фанат ))) дуже дякую...не зупиняйтеся з контентом ....Здоров'я і наснаги Вам і близьким !
Спасибо! :) Берегите себя.
Николай, нет слов чтобы выразить благодарность, огромное спасибо за идеальную подачу материала! Есть ли возможность сделать урок по сокращению числа шагов запроса, чтобы ускорить работу запроса?
брависсимо!
супер!!!! браво
Я уж думал, что видео будет о том, как сделать веб страницу с обновляемым запросом. Не смог найти рабочий конекшн стринг для моего офиса, поэтому вопрос откладывается.
Но и это видео, как всегда, полезное, спасибо!
Как всегда красава !
Просто супер
Николай, спасибо большое! Такие запросы очень помогают в работе. Подскажите, пожалуйста, можно ли использовать в таких запросах куки?
Супер❤
И снова Браво! И снова снимаю шляпу!
Разве такой способ не DDOSит сервер? Вы сказали, что данные получаются циклически, но в случае аналогичного способа с использованием в запросе некорректной авторизации на сервере это приводит к временному бану за множество неудачных попыток авторизации. Подскажите пожалуйста.
Тоже так раньше делал. Сейчас не вижу смысла в нескольких запросах и создании параметра. Просто создаем текстом неизменяемую часть адреса, к ней через List.Transform прогнояем список лет. Получаем тоже самое, но в одном запросе в 4-5 строк. Правда для этого надо отказаться от мышкоклаца и начать писать в расширенном редакторе.
Очень круто!
Присоединюсь к тем, кто спрашивал про многостраничные нетабличные данные. Николай, очень прошу, расскажите покажите это на примере парсинга вакансий в Авито (на hh получается, а вот Авито не поддаётся)
Вот, записал для вас видео - см. www.planetaexcel.ru/techniques/13/31646/
Пожалуйста, по возможности поделитесь информацией по извлечению из веб-страниц информации в Excel, когда веб-ссылка одна и таже, но на странице есть элементы типа "переключатель" (когда можно выбрать только один из пунктов), которые отражают данные по какому-то критерию (например по конкретной стране)
Добрый день! А скажите как отсортировать статьи в сводной таблице Excel2019 отчета движения денег в соответствии со структурой статей утвержденной в организации? Или ссылку где можно посмотреть?
Спасибо большое за видео👍 Можно ли проставить интервал по времени между запросами?
Здравствуйте! Спасибо за Ваши замечательные ролики! Если можно, ответьте на вопрос: имеется ли возможножность встраивания функции "АДРЕС" в функцию "СУММЕСЛИМН" вместо ссылки на диапазон суммирования? Заранее благодарю.
Legend
Первый )
вопрос не по теме, Николай а в надстройке плех можно увидеть исходные тексты скриптов функций и команд которые в неё входят?
Нет, к сожалению - уже давно пришлось поставить защиту исходного кода, т.к. пираты одолели.
@@planetaexcel спасибо, писать на два макросы особенно не нужно, но хотелось бы уметь. И естественно исходники попроще , таких функций как "поменять местами два дапазона", хотелось бы посмотреть. Я помню что лет десять назад вы писали, что они были доступны.
доброго времени, подскажите, есть календарь на год (автопроляемый) в excel, как сделать, что бы каждый 4 день закрашивался определённым цветом, хочу сделать график смен, 4 смены сутки через трое
Те собрать идентичные шаги в один шаг с перечислением. И прибавит ли такая оптимизация скорость при обработке запроса?
Thank you for your work! Due to terrible events in our countries (Ukraine, truly sorry) , many have left and are trying to find their places under the sun in the English-speaking world. Nikolay, can you make one or more releases to work with the English version of Excel and Power BI, please.
Мультизлаки👍
Здравствуйте, подскажите как лучше сделать: есть 3 таблицы в разных книгах, с этих таблиц нужно взять дату и сумму платежа в эту дату, причём в одну дату могут быть несколько платежей, и платежи могут не у всех в одни дни, спасибо.
Николай, отличное видео! Спасибо! К сожалению не всегда верстка html документа позволяет так легко выбрать нужную таблицу. Зачастую нужная таблица не распознаётся Power Query на этапе создания веб запроса. И приходится страдать и продираться сквозь дебри DOM дерева до нужных данных.
у меня вот такая же пробелема. Бесконечно проваливаюсь в эти Table, раскрываю и раскрываю их, а нужной таблицы с сайте так и не вижу при том, что там примерно по 450 строк и она на весь экран( что делать не знаю((
Что нужно делать что быть профи как Николай ?
Добрый день, Николай! у меня проблема в том что не могу загрузить гиперссылку из интернета в эксель, потому что отсутствует это функция где кликаешь Данные-Получить и преобразовать данные из интернета отсутствует, есть только из рисунка, в чем проблема подскажите пожалуйста?
А какая у вас версия Excel?
@@planetaexcel Windows 10 Pro, Версия 22H2
Попробуйте обновить Power Query@@rinat1455
А как сделать запрос по нескольким параметрам? Сначала выбрать, например, Категорию товара, а потом отсмотреть 40 страниц с этим товаром и т.д.
Доброго времени суток, Николай!
SOS...!
HELP....!
😊
....есть задача в которой не могу найти оптимального решения.
Мне нужно автоматизировать заполнение разных бланков, в которых, в хависимости от работ и от названия предприятий и должностей меняется число строк в самом бланке.
Более того информация в бланки должна попадать из различных журналов.
Можете полсказать как решить эти задачи методами excel?
Образцы бланков и журналов я могу прислать, если вы готовы это рассмотреть и сделать видеообзор данной темы.
Поясню, сфера использования данного документооборота - строительство, конкретно - формирование испонительной документации. Это полностью "серая" зона рынка, где каждый использует excel, во что горазд))
В этой сфере акцент стоит не на анализе данных на Вводе Данных, которые должны появлятся, одноовременно, в журналах и бланках и возможности коррекции этих данных, потому что блаков может быть несколько тысяч, при этом отличаются они, иногда фамилиями и должностями, иногда датами,, иногда наименованием работ и объёмами.
Вобщем, буду признателен за советы в Области Работы с Данными и области Структурированния Данных по заданным областям.
почти уже полноценный парсинг средствами Эксель
К сожалению, не совсем полноценный, т.к. очень трудно забирать данные, если они не в табличной форме (тогда только Python поможет или что-то аналогичное). Но в общем и целом - да, почти взрослый парсинг :)
А я жду power bi.
Сделаем 👌
Какая-то магия
"...просто..."