Pessoal,
Dica útil para configurar o robots.txt no Wordpress. Você já sabe como funciona o robots.txt?
https://forum2.webpeak.com.br/t/como-funciona-o-robots-txt/67
Aqui vamos apresentar como gerar e editar arquivo robots.txt para captação de dados da plataforma WordPress.
Vamos lá?!
Em primeiro lugar acesse seu painel administrativo em www.seudominio.com.br/wp-admin
Passos Para instalar o Plugin de análise SEO: Instale o plugin Yoast SEO.
Siga os passos:
No menu lateral Plugins > Adicionar novo
Em seguida, no campo de pesquisa, digite o nome do plugin > Enter
Encontre este plugin, clique em Instalar e o ative:
Automaticamente, o plugin já inicia a coleta e análise de dados.
Em seguida, no menu lateral, acesse o plugin de SEO > Ferramentas
Você será direcionado a uma página onde deverá realizar algumas alterações.
Nas alterações, você deverá então adicionar o seu sitemap.xml no editor do robots.txt além de habilitar e desabilitar as páginas a serem indexadas.
Dúvidas? Comente nesse tópico para ajudar usuários do Wordpress que podem ter as mesmas dúvidas que você! 