> ## Documentation Index
> Fetch the complete documentation index at: https://docs.usecliro.com/llms.txt
> Use this file to discover all available pages before exploring further.

# robots.txt

> Generá y publicá un robots.txt que controla qué crawlers y agentes de IA pueden acceder a tu sitio.

`robots.txt` es un archivo estándar que les indica a los crawlers y bots qué secciones de tu sitio pueden rastrear e indexar, incluidos los crawlers de IA.

## Por qué configurar robots.txt

* Controlá qué páginas pueden indexar los buscadores y los crawlers de IA.
* Protegé secciones privadas o administrativas del rastreo externo.
* Optimizá tu crawl budget para mejorar el SEO de tu sitio.

<Note>
  Para la visibilidad en IA, asegurate de **no estar bloqueando por error** a los crawlers de IA que querés que te alcancen. Un `robots.txt` mal configurado puede dejar a tu marca completamente fuera de las respuestas de IA.
</Note>

## Creá tu robots.txt

<Steps>
  <Step title="Generar con IA">
    Abrí **Acciones → robots.txt** y hacé clic en **Generate with AI** para obtener un archivo sugerido a medida de tu sitio.
  </Step>

  <Step title="Editar">
    Ajustá las reglas en el editor. El archivo queda **Sugerido** hasta confirmarlo.
  </Step>

  <Step title="Confirmar">
    Hacé clic en **Confirm** para fijar el contenido y habilitar la descarga.
  </Step>

  <Step title="Descargar y publicar">
    Subí el archivo a la raíz de tu sitio para que quede accesible en `https://tudominio.com/robots.txt`.
  </Step>

  <Step title="Verificar publicación">
    Usá **Verificar publicación** para confirmar que el archivo en vivo coincide con tu contenido confirmado.
  </Step>
</Steps>

<Card title="Revisá el acceso de crawlers de IA" icon="search-check" href="/es/actions/site-audit">
  El Site Check verifica tu robots.txt y las reglas de rastreo para agentes de IA.
</Card>