Hoy veo navegando en el foro a un usuario llamado Grub Client .. un bot. Le sigo el hilo y me encuentro con: http://swlabs.org/
Ja, es el crawler de wikia:
http://search.wikia.com/wiki/Grub
El código fuente es abierto, se puede estudiar (interesante no?) en http://dev.grub.org/

Habrá que ponerse al tanto..
http://search.wikia.com/wiki/Search_Wikia/es