Создавайте метатеги, правила robots.txt и XML-карту сайта.
Поиск MIME-типов и локальная проверка заголовков.
Создавайте синтетические записи по схеме полей.