Gere meta tags, regras robots.txt e sitemap XML.
Pesquise tipos MIME e inspecione cabeçalhos localmente.
Gere registros sintéticos a partir de um esquema.