Gerador robots.txt
Gerar arquivos robots.txt
Não permitir:
/admin//api/Permitir:
/robots.txt Saída
User-agent: * Disallow: /admin/ Disallow: /api/ Allow: /
Gerar arquivos robots.txt
/admin//api//User-agent: * Disallow: /admin/ Disallow: /api/ Allow: /