Armazenar todo conteúdo de texto de um site:

Fala pessoal,

recentemente concluí meu buscador mas quero melhorar a técnica de busca dele,

o seguinte código eu extraio todo texto da página inicial de um url:

$content = file_get_contents($siteurl);

$useful = strip_tags($content);

O que eu queria saber é como pegar o nome de todos os arquivos de um url e fazer o mesmo.