Crea archivos robots.txt para controlar cómo los rastreadores de motores de búsqueda acceden a tu sitio web. Configura reglas de permitir/denegar y referencias de sitemap. Esencial para SEO.