Полное сканирование сайта
2021-04-04 16:14:04 Aspirantos

В процессе мониторинга цен и товаров часто возникает необходимость получить полный список товаров, представленных на сайте. Цели могут быть разные: получение полного списка товаров конкурента, проверка своего сайта на повторяющиеся страницы, перенос своих товаров со страниц сайта в текстовой формат и т.д. Для решения данной задачи в системе Aspirantos разработан соответствующий модуль.

Для того, чтобы начать полное сканирование сайта необходимо в левом меню перейти на страницу «Full scan». На открывшейся странице нажмите на кнопку «Новый магазин». Введите URL магазина или сайта, полное сканирование, которого необходимо выполнить, в формате "https://example.com/". Запрос будет обработан и через некоторое время начнется сканирование. Если данный магазин уже известен системе aspirantos.com, то процесс сканирования начнется сразу после сохранения URL. В противном случае потребуется некоторое время для внесения магазина в систему и настройки парсера.

Наш робот будет обходить все страницы магазина и сохранять только целевые. При длительном процессе сканирования раз в 7 дней будет создаваться промежуточный результат, который можно будет скачать в течение 24 часов. Перед сканированием с вашего счета будет единоразово списано 3500 рублей. В дальнейшем повторные скачивания всех промежуточных результатов сканирования не оплачиваются. После завершения полного сканирования магазина вам будет доступно в течения 7 дней скачивание результата сканирования. Если вы уже скачивали промежуточный результат, то оплата за сканирование не взымается. При первом скачивании единоразово взымается плата 3500 рублей. Повторные скачивания в течение 7 дней с момента окончания сканирования не оплачиваются.