вопросы принцип работы сканера

Пример использования:

Если на сайте необходима авторизация, то используйте кнопку «авторизация/cookies» или кнопку «дополнительно» во вкладке «контент».

Очистить список очереди и его невидимый дубликат (в памяти) можно нажатием на кнопку «очистить список очереди».

Важно понять и то, что дубликат списка очереди (который содержится в памяти программы) не «теряет» элементы в процессе работы сканера, а постоянно пополняется. Это исключает возможность появления в нем одинаковых ссылок, что в свою очередь позволяет не обрабатывать дважды одну и ту же ссылку.

ВНИМАНИЕ!!!: Список очереди (также его дубликат в памяти) и список найденных ссылок очищаются только при перезапуске программы или при нажатии кнопок «очистить список очереди», «очистить список найденных ссылок» (соответственно).

Процесс работы сканера можно как приостановить, так и продолжить в любой момент времени (используйте соответствующие кнопки).

Для запуска сканера необходимо ввести стартовый url или добавить ссылки в список очереди. После этого нужно нажать кнопку «начать/продолжить сканирование».

Как использовать:

Сканер сайтов будет продолжать работу, до тех пор, пока не «закончатся» все ссылки в списке очереди.

В список очереди и в список ссылок не могут попасть дубли url-адресов.

Во время работы сканера, cписок очереди постоянно пополняется новыми найденными ссылками, содержащими в себе урл сайта (в данном случае sbfactory.ru, ссылки на другие сайты не попадут в список очереди). В список очереди могут добавляться ссылки с доменными именами третьего уровня (например, http://forum.sbfactory.ru).

Примечание: имеющиеся фильтры очереди работают по такому же принципу, как и !

Сканер берет первую ссылку из окна «список очереди» (при этом ссылка удаляется из списка очереди), загружает по ней web-документ и ищет в нем все url-адреса (ссылки). Ссылки, которые «пройдут» через фильтры очереди попадают в список очереди. Ссылки, которые «пройдут» через , попадают в список найденных ссылок.

Скриншот окна сканера сайтов:

Сканер сайтов вызывется нажатием кнопки «сканер сайтов (сбор ссылок с сайта)» на панели инструментов.

Сканер сайтов предназначен для сбора определенных ссылок со всего сайта или с какой-то его части. Программа «ходит» по всем найденным страницам и собирает ссылки, удовлетворяющие заданным фильтрам.

Сканер сайтов (сбор ссылок)

Напоминаем, что все вопросы задаются на , а для связи с разработчиком программы просим писать на sbfroot@gmail.com

описание функций программы

Сканер сайтов (сбор ссылок) « Система помощи Content Downloader II