Si utilizas un servicio de alojamiento de sitios, como Wix o Blogger, es posible que no tengas que editar tu archivo robots.txt directamente. En vez de eso, seguramente tu proveedor tenga una página de configuración de búsqueda o algún otro mecanismo con el que indicar a los buscadores si deben o no rastrear tu página.
Si quieres permitir o impedir que los buscadores puedan ver una de tus páginas, busca instrucciones sobre cómo modificar la visibilidad de tus páginas. Por ejemplo, busca "ocultar página de wix de los buscadores".
A continuación, se muestra un archivo robots.txt sencillo con dos reglas:
User-agent: Googlebot Disallow: /nogooglebot/ User-agent: * Allow: / Sitemap: http://www.example.com/sitemap.xml
Para ver todos los ejemplos de robots.txt, vaya al siguiente enlace: https://developers.google.com/search/docs/advanced/robots/create-robots-txt?hl=es#format_location
