Ferramenta SEO gratuita
Gerador de Robots.txt - Crie o seu Robots.txt
Gere um ficheiro robots.txt corretamente formatado para o seu site. Escolha os user agents, defina regras allow/disallow, especifique um sitemap e controle a forma como os motores de busca indexam o seu conteúdo.
Como criar um ficheiro robots.txt para um site?
O Gerador de Robots.txt cria um ficheiro corretamente formatado em 4 passos: 1) Introduza o URL do Sitemap (por ex. https://oseudominio.com/sitemap.xml) — ajuda os motores de busca a descobrir todas as páginas mais rapidamente. 2) Configure o User-agent — escolha entre 12 opções: Googlebot, Bingbot, DuckDuckBot, Yandexbot, Baiduspider, bot do Facebook, bot do Twitter, além dos bots de IA GPTBot (OpenAI), Google-Extended, CCBot (Common Crawl), anthropic-ai. 3) Adicione caminhos Disallow (admin, wp-admin, api, login, cart) e exceções Allow. Crawl-delay opcional (o Google ignora, o Bing/Yandex respeitam). 4) A pré-visualização ao vivo mostra o ficheiro gerado, clique em Copiar → cole em public_html/robots.txt. Útil para: otimizar o crawl budget, bloquear o scraping de IA (proteger conteúdo com direitos de autor), evitar indexação duplicada. O Gerador de Robots.txt é 100% gratuito, com um editor visual fácil de utilizar. A BeoHosting também oferece o cPanel File Manager para upload a partir de €4,31/mês.
- Editor visual com 12 user agents + opções de bots de IA
- Regras Allow/Disallow/Crawl-delay + URL do Sitemap
- Pré-visualização ao vivo com cópia num clique
- BeoHosting cPanel File Manager para upload a partir de €4,31/mês
BeoHosting Team
10+ godina iskustva — Stručnjaci za web hosting i infrastrukturu
- Web Hosting
- WordPress Hosting
- VPS
- Dedicated Serveri
- Domeni
- SSL
- cPanel
- LiteSpeed
- Linux administracija
- DNS
Poslednje ažurirano:
Robots.txt Generator
Konfigurisite pravila za pretraživače i generisajte robots.txt za vaš sajt.
Pravilo #1
Google ne postuje crawl-delay. Bing i Yandex ga postuju.
# robots.txt generated by BeoHosting # 2026-06-17 User-agent: * Disallow: /admin/ Disallow: /cgi-bin/
Uputstvo:Kopirajte generisani sadržaj i sačuvajte ga kao robots.txt u root direktorijumu vašeg sajta (public_html/). Fajl mora biti dostupan na vassajt.rs/robots.txt.
Robots.txt - O que precisa de saber
Uma configuração correta do robots.txt é fundamental para o SEO e para controlar a indexação do seu site.
Adicione sempre um Sitemap
Especifique o caminho para o seu ficheiro sitemap.xml no robots.txt. Isto ajuda os motores de busca a descobrir e indexar todas as páginas do seu site de forma mais eficiente.
Não bloqueie CSS/JS
O Google precisa de aceder aos ficheiros CSS e JavaScript para renderizar corretamente a página. Bloquear estes recursos pode afetar negativamente o ranking de SEO.
Utilize Allow para exceções
Se bloquear um diretório, pode permitir o acesso a páginas específicas dentro dele utilizando a diretiva Allow. O Allow tem prioridade sobre o Disallow.
Bloqueie os bots de IA
Se não quiser que as empresas de IA utilizem o seu conteúdo para treinar modelos, bloqueie os user agents GPTBot, Google-Extended, CCBot e anthropic-ai.
Teste antes de publicar
Utilize a ferramenta de teste de robots.txt do Google Search Console antes de publicar. Uma configuração errada pode bloquear a indexação de todo o site.
Não utilize para proteção
O robots.txt é apenas uma recomendação — os bots maliciosos ignoram-no. Não o utilize para esconder páginas sensíveis. Utilize uma palavra-passe, a meta tag noindex ou autenticação HTTP.
Guia de Robots.txt - Como controlar a indexação do site
O robots.txt é um ficheiro padrão utilizado pelos motores de busca (Google, Bing, Yandex) para saber que partes do seu site podem visitar e indexar. Segundo o Robots Exclusion Protocol, todos os bots bem-comportados lerão primeiro o seu robots.txt antes de começarem a rastrear.
Uma configuração correta do robots.txt é importante para o SEO porque ajuda os motores de busca a utilizar eficientemente o seu crawl budget — o número de páginas que o Google visita durante cada rastreio do seu site. Ao bloquear páginas irrelevantes (painéis de administração, resultados de pesquisa, páginas de utilizador), direciona os bots para o conteúdo mais importante.
Robots.txt e a BeoHosting
Em todos os planos de alojamento BeoHosting, pode criar facilmente um ficheiro robots.txt através do cPanel File Manager. Para sites WordPress, o robots.txt também pode ser configurado através de um plugin como o Yoast SEO ou o Rank Math. O nosso guia de SEO para principiantes aborda este tema em detalhe.
É importante notar que o robots.txt não é um mecanismo de segurança. Os bots maliciosos ignoram-no. Para uma proteção real de páginas privadas, utilize autenticação HTTP, a meta tag noindex ou acesso por palavra-passe. O robots.txt deve ser utilizado exclusivamente para otimizar a indexação, não para esconder conteúdo.
Ferramentas e serviços relacionados
Spremni da pokrenete svoj sajt?
Pridružite se 4.000+ zadovoljnih korisnika. Besplatna migracija i 15 dana garancije povrata novca.
Perguntas frequentes - Gerador de Robots.txt
Odgovori na najčešća pitanja o našim uslugama.
Naše garancije za vaš mir
Zaštićeni ste sa svake strane
15 dana garancije
Vraćamo novac bez pitanja u prvih 15 dana.
Besplatna migracija
Mi prebacimo vaš sajt bez prekida — vi ništa ne radite.
24/7 podrška
Naši stručnjaci su tu 24/7 kroz tikete i live chat.