Добавление задачи

После авторизации в панели управления поисковой системы вы можете оказаться на вкладке Search, где можно тестировать результаты поиска и настраивать алгоритм ранжирования.
На вкладке Task доступно добавление задач:

• Octopus - сканирование сайта;
• Worder - обработка ранее просканированных сайтов;
• Kavunka - задача обновления (reload);
• Runer - автоматическое добавление задач для crawling.

Задачи можно добавлять по одной, либо добавить сразу несколько задач обхода сайтов. Одновременно можно обходить только три сайта.
Результаты сканирования можно увидеть в таблице Scan statistics. Ниже расположены три окна Oct1, Oct2, Oct 3, которые показывают скорость сканирования сайта.

• nit - количество запросов Octopus к сайту;
• good pages - количество страниц, которые Octopus обработал и признал хорошими (в дальнейшем эти страницы будут участвовать в поиске);
• bad pages - страницы без хорошего контента, с неуникальным контентом или страницы, язык которых не соответствует выбранному языку лицензии.

После сканирования всех сайтов нужно добавить задачу для Worder. Также следует добавить задачу для Kavunka, чтобы обновить результаты поиска (reload).
После этого все просканированные сайты будут участвовать в поиске. Чтобы Octopus использовал proxy, нужно отредактировать файл Proxy.txt в папке TFiles. В этот файл необходимо добавить IP-адреса и порты proxy- серверов.
Каждый IP-адрес должен быть с новой строки. При добавлении задач нужно указать, чтобы Octopus использовал proxy.