RODRIGO A.

Boa noite... Tenho alguns scripts em Python que vasculha um determinado dominio e consigo levantar os diretórios, links, e páginas. Queria uma ajuda para saber se existe algum script em Python que varre a web e me da a lista de endereços para uma determinada condição, exemplo do google. Não sei se chamo isso de robot , ou webspyder. Por favor, preciso somente de respostas de quem já fez algo assim.... Valeu