Você tem procurado uma resposta para a pergunta “Como remover subdomínios da pesquisa do Google?” Um dos desafios que você provavelmente enfrentará ao ser responsável pela manutenção de um website tem a ver com subdomínios. Às vezes, um blog ou website tem seu domínio raiz e um subdomínio apontando para o mesmo IP. E você precisa remover o subdomínio para evitar conteúdo duplicado.
Mas como eu removo subdomínios da pesquisa do Google?, você pergunta. É sobre isso que este artigo tratará.
Mas, antes de tudo, o que é um subdomínio?
O que é um subdomínio?
Um subdomínio é um segundo site com seu próprio conteúdo, mas sem um novo nome de domínio. Em vez disso, você usa um domínio existente e altera o ‘www’ para outro nome.
O subdomínio se parece com isto: ‘https://www.google.com/search?q=forums.seudominio.com’, ‘https://www.google.com/search?q=ajuda.seudominio.com’, ‘https://www.google.com/search?q=ajuda2.seudominio.com’, etc., assumindo que você hospeda ‘seudominio.com’.
Seu domínio principal – também conhecido como domínio raiz ou domínio primário – é basicamente o nome do seu site. Um subdomínio, portanto, pode ser considerado uma divisão do seu site que você deseja diferenciar com seu próprio conteúdo e identidade únicos.
Subdomínios permitem que você separe partes do seu website que são extensas o suficiente para justificar sua própria hierarquia altamente dedicada. Como resultado, você não precisa passar pelo trabalho de configurar um novo website com um novo domínio ou confundir os visitantes do seu website com um domínio raiz completamente diferente.
Muitas organizações usam subdomínios dessa maneira específica, e até mesmo o Google não fica de fora. Digamos que você precise de ajuda com algum dos aplicativos do Google; você será prontamente direcionado para a seguinte página: https://support.google.com/
Você notou que NÃO é https://google.com/support? Essa ordem é vitalmente importante, pois ajuda a distinguir um subdomínio de uma subpasta (mais sobre isso adiante neste artigo). Mas, ao contrário de um subdomínio, uma subpasta se ramifica do domínio de nível superior na hierarquia do site.
As melhores práticas de hierarquia de sites acentuam a importância da simplicidade e recomendam que as organizações diminuam o número de categorias, bem como subcategorias incluídas em qualquer sitemap de navegação.
Por exemplo, a Kissmetrics sugere limitar o número de categorias a algo entre 2 e 7.
Qual é a diferença entre subdomínios e subpastas?
Subdomínios e subpastas são geralmente semelhantes de várias maneiras. Ambos são locais de arquivos dentro da estrutura de diretórios ‘Home’ de um servidor.
Uma subpasta, no entanto, é uma pasta abaixo de outra pasta – ou seja, um ‘diretório filho’ – que reside diretamente sob um ‘pai’ – ou seja, o diretório Home –, conhecido como subdomínio.
Mas existem diferenças sutis; embora ambos sejam repositórios de conteúdo, os subdomínios também são URLs. Isso significa que você pode acessá-los facilmente, assim como um endereço de site normal. Eles não são caminhos dentro de um domínio, como as subpastas são.
É essa diferença distinta que afeta a capacidade de um site de reunir e também classificar palavras-chave.
Quais são as implicações de SEO dos subdomínios?
Antes de receber a resposta à sua pergunta, ‘Como remover subdomínios da pesquisa do Google?’, você precisa entender as implicações de SEO dos subdomínios e das classificações orgânicas.
Antes de mais nada, não existe organização por causa da organização, especialmente quando se trata de estrutura e hierarquia de sites. Os mecanismos de busca acabarão identificando um website confuso de navegar como resultado de uma estrutura ruim.
Um layout de website ruim fará com que os visitantes passem muito menos tempo do que você gostaria na sua página ou um pouco mais de tempo nessa página se demorarem um tempo incomumente longo para encontrar o que quer que estejam procurando.
Isso, é claro, resulta em uma experiência menos do que satisfatória e pode potencialmente prejudicar seu desempenho de busca. Ao usar subdomínios para melhorar a hierarquia do seu site, você acaba ajudando os usuários a localizar as informações que procuram de forma ainda mais eficiente. Isso, por sua vez, aumenta o desempenho de SEO do seu website.
‘Mas eu pensei que subdomínios eram ruins para SEO?’, você provavelmente está pensando. Houve muitos debates e discussões na blogosfera focada em SEO sobre o potencial impacto negativo que os subdomínios podem ter no desempenho de SEO.
O mais específico deles é a crença de que os mecanismos de busca geralmente os penalizam ou encontram dificuldade ao analisar entre domínios raiz e subdomínios.
Argumenta-se que os algoritmos do Google identificarão rapidamente seus subdomínios como websites separados do seu domínio raiz e, em seguida, os classificarão de acordo e individualmente. Como eu removo subdomínios da pesquisa do Google? Eles basicamente ficarão isolados em pequenas ilhas de SEO, e seu site não se beneficiará de nenhum impacto positivo que seu subdomínio proporcionaria, em diferentes circunstâncias, se fosse um subdiretório.
Embora o acalorado debate sobre os méritos de SEO dos subdomínios – ou mesmo a falta deles – continue, há muitas razões para acreditar que os avisos anteriores sobre o que era chamado de ‘canibalização de busca orgânica’ podem ter sido um pouco exagerados.
Em uma sessão de hangout em agosto de 2016, John Mueller, analista de tendências para webmasters do Google, abordou essa questão diretamente, afirmando que os subdomínios geralmente não prejudicam as classificações do site.
Segundo o analista, o Google reconhece que alguns websites usam subdomínios como diferentes partes desse site específico. E da mesma forma que outros websites podem usar subdiretórios.
Mueller também disse que os algoritmos do Google são muito adeptos em rastrear tanto subdomínios quanto subdiretórios no mesmo grau e até mesmo em entender tudo isso.
No entanto, o analista do Google Webmaster ainda alertou os proprietários de sites contra o uso de subdomínios curinga que são especificamente projetados para redirecionar visitantes que estão tentando acessar subdomínios inexistentes para uma subpasta. Os algoritmos geralmente tiveram dificuldade em rastrear esse tipo específico de subdomínios.
Como eu removo subdomínios da pesquisa do Google?
Infelizmente, não há uma solução fácil para esse problema. O Google sempre considera domínios e subdomínios como websites únicos em vários aspectos. Uma dessas áreas tem a ver com a forma como eles tratam e processam solicitações de remoção de URL diretamente do seu índice.
Para remover cada subdomínio da pesquisa do Google, você pode ter que, primeiro, verificar cada um deles no Google Webmasters Tools. Em seguida, remova cada um individualmente.
Cada subdomínio tem sua raiz de documentos e, portanto, você terá que garantir que o arquivo robots.txt de cada domínio proíba completamente seu subdomínio relacionado.
Se você der uma olhada nas Diretrizes para Webmasters do Google, afirma-se que os proprietários de websites devem fazer o seguinte antes de enviar uma solicitação de remoção em domínios e subdomínios:
“Para remover um diretório ou todo o seu site, você deve garantir que as páginas que deseja remover foram bloqueadas usando um arquivo robots.txt. Retornar um 404 não é suficiente, porque um diretório pode retornar um código de status 404, mas ainda servir arquivos abaixo dele. Usar robots.txt para bloquear um diretório garante que todos os seus filhos também sejam proibidos.”
Portanto, para impedir que os bots rastreiem seu website, certifique-se de adicionar o seguinte ao seu arquivo robots.txt para cada subdomínio de destino:
User-agent: *
Disallow: /
Siga este processo passo a passo para remover seu subdomínio do Google.
Como o subdomínio já está indexado, você precisa seguir alguns passos para removê-lo, conforme mencionado anteriormente. Mas você precisa ir além de apenas impedir que o Google rastreie a página. É essencial que você realmente remova e, em seguida, mantenha o subdomínio fora do índice.
Para fazer isso com sucesso, siga estas 10 etapas descritas abaixo, começando pelo básico. Você pode pular a primeira etapa se já a tiver feito.
Passo 1: Inscreva-se no Google Webmaster Tools, também conhecido como Google Search Console (GSC).
Passo 2: Adicione seu subdomínio ao Search Console selecionando as opções ‘Adicionar propriedade’ e ‘Prefixo do URL’.
Passo 3: Em seguida, insira seu subdomínio usando o protocolo primário – que é HTTP ou HTTPS. Exemplo: ‘http://subdominioURL.seudominio.com.’ Em seguida, selecione a opção ‘Continuar’.
Passo 4: Siga as instruções simples fornecidas para verificar seu domínio.
Passo 5: Navegue até a barra lateral esquerda e selecione a opção ‘Ir para a versão antiga’. Certifique-se de manter esta guia aberta até concluir este processo.
Passo 6: Em seguida, copie o texto abaixo (veja abaixo) para o seu editor de texto – por exemplo, bloco de notas, WordPad, etc. Isso informa ao Google para não rastrear o subdomínio. Você também pode especificar outros ou todos os rastreadores, se preferir ou gostar. Copie isto:
User-agent: Googlebot
Disallow: /
Passo 7: Carregue o arquivo para a pasta raiz do subdomínio. Exemplo: ‘http://subdominioURL.seudominio.com/robots.txt.’
Passo 8: Navegue até aquela guia aberta e clique no menu suspenso ‘Índice do Google’. Em seguida, selecione ‘Remover URLs’.
Passo 9: Em seguida, adicione seu subdomínio e selecione ‘Limpar URL do cache e remover temporariamente da Pesquisa’. Isso lhe dará uma remoção imediata, embora temporária.
Passo 10: A etapa a seguir é o que o manterá fora do índice permanentemente.
Você pode então adicionar a tag abaixo ao seu código <head> em cada página do seu subdomínio. Ou seja: <meta name= “robots” content= “noindex”/>
Você também pode colocar todo o website atrás de um login.
As etapas descritas acima são o aspecto mais vital da remoção de um subdomínio da pesquisa do Google. No entanto, a última etapa é o que impedirá que as páginas voltem para o índice.
O método ‘robots.txt’ não funciona, pois as pessoas já podem criar links para o seu site. E se o fizerem, o Google pode ou ainda colocará no índice.
Outra maneira de remover seu subdomínio da pesquisa do Google é por meio de tags de cabeçalho x do usuário – X-Robots-Tag: noindex. Isso geralmente é muito eficaz para remover cada página em um domínio ou subdomínio.
Alguns webmasters ou programadores gostam desse método, pois ele não altera a maneira como você cria uma página. Isso geralmente é adicionado por meio de um arquivo .htaccess em um servidor Linux ou web.config em servidores IIS. É feito de forma um pouco diferente, dependendo principalmente do software que você está usando.
Cada página terá as tags de cabeçalho x adicionadas pelo servidor. E você não precisa alterar nenhuma página. Em seguida, espere que o Google volte e rastreie seu website. Os bots reconhecerão as tags e desindexarão seu site quase imediatamente.
Benefícios de marketing dos subdomínios
Surpreendentemente – ou não tão surpreendentemente – os subdomínios oferecem muitos benefícios para os profissionais de marketing. Aqui estão eles, sem nenhuma ordem específica:
Classificação nos mecanismos de busca
Os subdomínios têm uma tendência a reunir palavras-chave de forma bastante independente da URL raiz. Isso significa – por exemplo – que https://www.google.com/search?q=contabilidade.seudominio.com tem seu próprio conjunto exclusivo de palavras-chave que não são exatamente as mesmas palavras-chave de ‘seudominio.com’.
Em outras palavras, se você está tentando classificar para uma palavra-chave específica com uma página hospedada em seu subdomínio, seu domínio raiz pode nem mesmo classificar para ela e vice-versa. Por exemplo, a palavra-chave para a qual ‘https://www.google.com/search?q=contabilidade.seudominio.com’ classifica, seu subdomínio pode não classificar necessariamente.
Isso fará – ou não fará – sentido para você, dependendo da sua situação particular. Por exemplo, supondo que você faça negócios na Grécia, seu escritório na Grécia precisará de seu próprio domínio para ganhar autoridade lá.
Mas você desejará outro domínio para poder manter sua marca global sob sua URL principal. Nesse caso específico, algo como ‘https://www.google.com/search?q=grecia.altoimpacto.com’ é uma excelente solução para consolidar seus escritórios sob um guarda-chuva gigante. Suas palavras-chave continuarão a se reunir no banco de dados do Google da Grécia para esse subdomínio.
Clareza
Um subdomínio – quando planejado estrategicamente – também é muito claro e direto, melhorando assim a experiência do usuário. Eles geralmente informam aos usuários precisamente o que esperar ao clicar naquele link.
Isso significa que os subdomínios podem ser muito úteis para franquias. Cada franquia tem seu próprio local ou endereço, número de telefone e até mesmo conteúdo. Da mesma forma, também pode ter seu próprio subdomínio.
Isso pode ser realmente útil para informar aos usuários ou visitantes se o conteúdo que eles estão visualizando atualmente é relevante para eles ou não.
Segmentação de público
Os subdomínios podem ser incrivelmente úteis para a segmentação de público. Vamos supor que você tenha uma loja de comércio eletrônico online que vende bolsas. E você reserva um tempo para hospedar um podcast semanal que ensina as pessoas a iniciar, lançar e administrar um negócio online de bolsas.
Os públicos para cada negócio são vastamente diferentes, independentemente de se relacionarem ou não com o mesmo tema.
Os ouvintes do podcast estão interessados apenas em aprender sobre o negócio de bolsas, enquanto todos os compradores querem apenas procurar sua bolsa Versace ou de couro de lagarto favorita.
Se você colocar o site dos ouvintes do podcast em um subdomínio ‘podcast’, isso manterá as palavras-chave relacionadas aos negócios separadas das frases da loja online para as quais você está tentando classificar.
Os subdomínios podem ser usados para SEO, mas exigem muito trabalho árduo. E, portanto, se você deseja removê-lo da pesquisa do Google, as etapas descritas neste artigo devem guiá-lo.
Agora você tem a resposta para a pergunta “Como remover subdomínios da pesquisa do Google?”, mas se ainda precisar de ajuda, pode procurar a assistência de um técnico para ajudá-lo a implementar as etapas compartilhadas neste artigo.