Форум программистов
 

Восстановите пароль или Зарегистрируйтесь на форуме, о проблемах и с заказом рекламы пишите сюда - alarforum@yandex.ru, проверяйте папку спам!

Вернуться   Форум программистов > Web программирование > Общие вопросы Web
Регистрация

Восстановить пароль
Повторная активизация e-mail

Купить рекламу на форуме - 42 тыс руб за месяц

Ответ
 
Опции темы Поиск в этой теме
Старый 12.03.2017, 19:24   #1
AnnaPolovnikova
Новичок
Джуниор
 
Регистрация: 12.03.2017
Сообщений: 1
Смущение Какой поисковый робот подойдет для выполнения задачи?

Привет всем!

Есть набор сайтов одной тематики, порядка 10 штук. Из каждого нужно сохранить все исходящие ссылки, чтобы потом их использовать в другом инструменте.

Процесс получается такой: Есть seed site с него нужны все исходящие ссылки на другие сайты. С каждого из этих сайтов - их исходящие ссылки. И так три раза - т. е. все сайты на расстоянии 3 кликов. А потом, все сохраненные страницы нужно классифицировать в другом инструменте, поэтому важно, чтобы была функция экспорта.

Последний раз редактировалось AnnaPolovnikova; 12.03.2017 в 19:27.
AnnaPolovnikova вне форума Ответить с цитированием
Старый 13.03.2017, 09:11   #2
ADSoft
Старожил
 
Регистрация: 25.02.2007
Сообщений: 4,150
По умолчанию

у вас есть поисковый робот? Да вы Гугл, или Яндекс?
ADSoft вне форума Ответить с цитированием
Ответ


Купить рекламу на форуме - 42 тыс руб за месяц

Опции темы Поиск в этой теме
Поиск в этой теме:

Расширенный поиск


Похожие темы
Тема Автор Раздел Ответов Последнее сообщение
Поисковый робот myorient Свободное общение 18 06.09.2013 08:23
Какой язык подойдет для написания программы-каталога? BH36 Общие вопросы по программированию, компьютерный форум 14 08.10.2012 20:25
Какой дистрибутив linux/*bsd подойдет для хостинга? Ivan_32 Операционные системы общие вопросы 3 31.10.2010 05:08
Какой блок питания подойдет! Antonio-Spec Компьютерное железо 6 04.06.2010 17:33
Какой язык подойдет для... Pro100Lammer Софт 9 27.09.2009 21:34