>>он сильно грузит сервер, да и времени занимает немало
Это не совсем так. На локальной машине он индексирует со скоростью порядка 20-30 Мб в минуту. Вполне приемлимая скорость. А вот памяти может потребоваться очень много. Тут конечно подразумеваются не маленькие сайты с 1000 страниц, а средние - 10000-20000 страниц. Для более крупных сайтов можно попробовать RiFlex.
PS Чтобы не напрягать сервер, можно индексировать на локальной машине. И паука тоже можно запускать на локальной машине.