Amigos me encuentro con el siguiente problema que no se como resolver. Necesito poder listar las urls que hay dentro de un servidor solo sabiendo el nombre de la pagina.

Como ejemplo:
Tengo el dominio: dominio.com y quiero que me muestre las urls posibles que tiene dentro de ese dominio, ejemplo:
dominio.com/algo/index.html
dominio.com/otraCosa/asd.jad
dominio.com/mas/otro/asd.php

Es posible saber esto si solo cuento con el nombre del dominio?

Pregunte lo mismo en otros foros (http://www.forosdelweb.com/f91/como-listar-urls-servidor-830976/) y nadie me pudo responder.
Me recomendaron que preguntara en un foro de hackers que de seguro alguien se hace idea de como.

Si no se entiende la idea o tengo que explicar mas cosas avisen. Saludos

Como ya te han contestado, con un Webcrawler en cualquier lenguaje

Saludos

Probé esos tutoriales pero no era a lo que me referia. Preciso listar todas las url posibles del servidor, no solo las que estan vinculadas.

Tal vez te sirva la FOCA.

Acunetix :\