Какой скрипт поиска по сайту на Перле самый-самый?

[Vitos]

Нужно чтобы он искал и в cgi-директории....

[NeoNox]

Нужно чтобы он искал и в cgi-директории....

А это еще зачем?
Чтобы облегчить работу хакеру?

[Vitos]

Весь сайт - это большой cgi-скрипт...
Чего ж тады делать поисковику, если нету html страниц?

Надо заметить, что в cgi-bin сайты не хранятся. Даже если сайт сделан на cgi-движке, все данные хранятся не в cgi-bin, а в public_html

[Vitos]

Сайты хранятся там, где мне удобно было их разместить
Какие-то данные хранятся в cgi-bin, какие то и в html директории.

[NeoNox]

Чего ж тады делать поисковику, если нету html страниц?

у тебя скрипт информацию откуда берет? из БД? если сам структуру создавал значит сам и пиши.

Надо заметить, что в cgi-bin сайты не хранятся.

Очень даже хранятся . Шаблоны и скрипты и бд - все в cgi-bin !

[NeoNox]

Какие-то данные хранятся в cgi-bin, какие то и в html директории.

То есть, структуры никакой нет?

[Lion]

А может тебе проще яндекс заставить искать по своему сайту ?
http://yandex.ru/info/addyandex.html  тут написано как сделать что бы поставить на свой сайт яндексовскую форму и что б он искал только по твоему сайту...

[NeoNox]

на свой сайт яндексовскую форму и что б он искал только по твоему сайту...

...и отдавал на растерзание всем скрипты и пароли с настройками? Не вариант. Можно RiSearch настроить так, чтобы он искал только в тех каталогах, это это указано.

[NAS]

и отдавал на растерзание всем скрипты и пароли с настройками?

О, это как же ?

[Green Kakadu]

...и отдавал на растерзание всем скрипты и пароли с настройками?

типа прикольно. Если у скрипта права 755 или что-то вроде того, то при вызове яндексом, шмандексом он выдаст лишь то что должен выдать в Content-Type: TEXT/HTML
О каких паролях ты говоришь???

Вопрос иной - что и почему нужно искать? По динамическим страницам, создаваемых скриптом? Тогда нужно использовать скрипт-индексатор который обращается к индексируемым страницам через HTTP, т.е. как к удаленному сайту (модуль LWP)
Если в cgi-bin лежит кучка файлов-страниц, то можно их проиндексировать  как угодно. Глупо конечно индексировать сам код скриптов (через open)
Самое разумное - организовать поиск (с предварительным форматированием данных в соотв. вид) по тем данным, что использует скрипт.

[Vitos]

Вопрос иной - что и почему нужно искать? По динамическим страницам, создаваемых скриптом? Тогда нужно использовать скрипт-индексатор который обращается к индексируемым страницам через HTTP, т.е. как к удаленному сайту (модуль LWP)

Да, вот именно мне такой поисковик и нужен. Можете подсказать, где такой взять?
А насчёт всяких там поисковиков типа Яндекса и т.д. - надо свой.

[Green Kakadu]

http://risearch.org
Тот самый Risearch
там в комплекте есть скрипт spider.pl который и нужен для вашего случая.
Весьма популярный поисковик с нормальной поддержкой русского языка (ведь многие иностранцы и не подозревают, что кроме английских букв существуют и др. не говоря уж о кодировках).

[Vitos]

Да Вы что!!
Risearch может еще искать не только в папках? Может еще и через адреса?
Т.е. индексировать сайт всё равно необходимо?

[Green Kakadu]

Да Вы что!!
Risearch может еще искать не только в папках? Может еще и через адреса?

Да, там как бы отдельный робот прилагается, тот самый spider.pl Правада, почему то автор не рекомендует использовать его для индексации большого кол-ва разных сайтов, а для одного-двух удаленных (в общем, вам же это и нужно).

Т.е. индексировать сайт всё равно необходимо?

Ну конечно. Просто в первом случае, файлы индексируются оч.просто - open(FILE, "use LWP::Simple;
my $page_content=get($url);
А дальше идет по сути одно и тоже.
Др. дело если бы вы организовали поиск по тем данным из которых генерятся ваши страницы - тогда индексация была бы не нужна, (а может и нужна ,но индекс будет более чистый).