Forum Webscript.Ru

Программирование => PHP => Тема начата: от 13 Марта 2002, 00:50:32

Название: Паук, лазиющий по страницам
Отправлено: от 13 Марта 2002, 00:50:32

Как сделать паука, который бы лазиль по страницам, считывая url например с WebScript.ru считал http://www.webscript.ru и зашёл туда, и так далее, если нашёл на webscript.ru какую нибудь ссылку, то туда зашёл, и ...?

Название: Паук, лазиющий по страницам
Отправлено: Oak от 13 Марта 2002, 04:30:12

Просто сделать .....
Берешь язык программирования, который умеет работать
1) с файлами
2) с TCP или сразу HTTP
3) обрабатывать тексты (вырезать нужное)

и делаешь  ;)

Или берешь готовое в исходниках (wget например).

Название: Паук, лазиющий по страницам
Отправлено: Dm от 13 Марта 2002, 19:17:01

или, так и называется, "паук":
http://www.idata.sk/~ondrej/pavuk/