# Checklist de acesso de crawlers — Infoagents

Criado em 24/10/2026. Modelo para executar e preencher. Nenhum teste de ambiente de terceiros foi realizado.

- [ ] Identificar domínio, rota pública e responsável técnico.
- [ ] Salvar configuração anterior de robots, CDN e WAF antes de editar.
- [ ] Conferir robots.txt público e grupos específicos que se aplicam ao agente.
- [ ] Documentar separadamente política de busca e política de treinamento.
- [ ] Inspecionar HTTP de robots e página; seguir e registrar redirecionamentos.
- [ ] Conferir corpo da página: artigo real, não desafio ou erro com status 200.
- [ ] Conferir noindex/X-Robots-Tag, canonical e descoberta por links internos.
- [ ] Investigar eventos de bloqueio no WAF/CDN e na origem, com horário e regra.
- [ ] Verificar identidade de visitantes por critérios oficiais, não apenas user-agent.
- [ ] Se necessário, aplicar exceção restrita; manter autenticação de áreas privadas.
- [ ] Repetir inspeção e guardar evidências; reverter se houver regressão.
- [ ] Monitorar logs sem interpretar ausência de visita como bloqueio comprovado.

Comandos de exemplo para Windows, substituindo domínio e rota:

```sh
curl.exe -sS -D - -o NUL https://www.seudominio.com.br/robots.txt
curl.exe -sS https://www.seudominio.com.br/robots.txt
curl.exe -sS -D - -o NUL -A "OAI-SearchBot" https://www.seudominio.com.br/artigo
```

Em macOS/Linux, usar curl e /dev/null no lugar de NUL. Trocar user-agent só testa compatibilidade com a string enviada; não simula IP de crawler oficial. Acesso não garante indexação, citação ou recomendação.

Referência: https://developers.openai.com/api/docs/bots