# Сервис выгрузки ссылок из Sitemap

# Для чего нужен сервис выгрузки ссылок из Sitemap?

Используется для автоматического получения ссылок из карт сайта, в том числе доступных в robots.txt.

# Как работает сервис?

Алгоритм работы сервиса следующий:

вводится ссылка для начального сбора данных и опции выгрузки
производится предварительный анализ данных для получения общего числа возможных выгрузок
производится парсинг данных с корректировкой полученных результатов и ранее предполагаемых
формируется итоговый отчёт

В работе используются статусы, которые дают понять что происходит в данный момент времени.

# Как пользоваться сервисом?

введите ссылку на конкретный sitemap или укажите ссылку на robots.txt
нажмите “Создать задание” - задание будет создано
для старта задания нажмите кнопку "Выполнить" в строке задания
для приостановки сбора используется кнопка “Пауза”
для продолжения сбора используется кнопка “Продолжить”

# Статусы

“Новое”. Задание только создано и не было выполнено
“Выполняется”. Производится выгрузка ссылок
“Отчёт”. Производится формирование итогового отчёта
“Готово”. Задание полностью выполнено

# Дополнительные возможности

объем получаемых и выгружаемых данных не ограничен
для выгрузок содержащих не более 100 000 ссылок доступен просмотр в режиме онлайн

# Стоит обратить внимание

Во время предварительного анализа данных производится оценка конечных результатов с отображением значений в режиме онлайн.

В некоторых ситуациях оценочные и конечные данные могут иметь различия. К примеру, если сайт постоянно обновляется и на момент сбора данных произошло дополнение или удаление ссылок.

Иногда ссылки могут не быть собраны. В таком случае можно написать в службу поддержки для уточнения ситуации.

При возникновении ошибок в интерфейсе происходят соответствующие уведомления.

Итоговые данные могут иметь дубли, что связано как с ошибками проектирования sitemap вебмастерами, так и с дублированием ими данных в архивах.