Enviar sitemaps e ler o estado

Módulo 2: Search Console, Bing e IndexNow · Tempo de leitura: 10 minutos

Objetivo de aprendizagem: No final desta lição, saberá enviar um sitemap no Google Search Console, ler o estado no relatório Sitemaps e saberá o que "descoberto" significa e o que não significa.

Conceitos chave: sitemap, endereço do sitemap, relatório Sitemaps, estado Success, Couldn't fetch, Has errors, páginas descobertas, índice de sitemaps, voltar a enviar, ping (descontinuado), Sitemap: no robots.txt

O que faz um sitemap

Um sitemap é um ficheiro com os endereços das páginas que pretende ter nos motores de pesquisa, normalmente sitemap.xml na pasta principal do seu site. Um motor de pesquisa encontra páginas sobretudo seguindo ligações (lição 1.2). O sitemap é uma lista adicional: "estas páginas existem, e foi a esta hora que foram alteradas pela última vez". O aspeto de um ficheiro destes e os endereços que nele devem constar são explicados na lição 3.4. Esta lição trata do passo seguinte: indicar à Google onde está o sitemap e ler o que a Google fez com ele.

Um sitemap não é uma ordem. A Google escreve na sua própria ajuda que nem todos os endereços de um sitemap têm de ser rastreados; isso depende, entre outros fatores, da dimensão e da atividade do site. E rastreado ainda não significa indexado. Um sitemap ajuda sobretudo em sites novos com poucas ligações externas, em sites grandes e em páginas que se encontram muito no interior do site.

Onde encontra o seu sitemap?

Muitos criadores de sites geram o sitemap automaticamente:

Em caso de dúvida, abra https://www.example.com/robots.txt no seu navegador. Se aí constar uma linha Sitemap: com um endereço, esse é o seu sitemap. O AI Builder acrescenta essa linha automaticamente, e o WordPress também.

Abra o endereço do sitemap no seu navegador. Se vir uma lista de endereços (ou uma lista de outros sitemaps), está a funcionar. Se obtiver uma página de erro, resolva isso primeiro.

Enviar no Search Console

1. Abra a sua propriedade no Search Console e escolha no menu Sitemaps (em Indexing).
2. Em Add a new sitemap, introduza o endereço do sitemap. Se o início do endereço já estiver preenchido, escreva apenas o resto, por exemplo sitemap.xml.
3. Clique em Submit.

Para isso, precisa de direitos de proprietário na propriedade. A Google recomenda testar primeiro o endereço em direto com a inspeção de URL (URL inspection, lição 2.4): assim tem a certeza de que a Google consegue obter o ficheiro.

Um índice de sitemaps é um sitemap que remete para outros sitemaps, por exemplo um para páginas e outro para artigos. O WordPress cria um índice deste tipo. Nesse caso, envia apenas o índice; a Google obtém o resto por si.

Ler o estado

Depois do envio, o sitemap aparece na tabela de sitemaps enviados, com, para cada sitemap, o tipo, a data de envio, a última vez que a Google o leu (Last read), o estado e o número de páginas descobertas (e vídeos).

Num sitemap acabado de enviar, por vezes aparece primeiro "Couldn't fetch", embora o ficheiro funcione perfeitamente: nesse caso, a Google ainda não tentou obtê-lo. Aguarde um dia antes de começar a procurar a causa.

Descoberto não é indexado

O número de páginas descobertas é o número de endereços que a Google leu do sitemap (endereços duplicados contam uma vez). Não indica que essas páginas foram rastreadas ou indexadas. Se quiser saber quantos endereços do seu sitemap estão no índice, abra o sitemap e escolha See page indexing: chega ao relatório Page indexing, filtrado por esse sitemap (lição 2.4). Aí vê quais não foram indexados e porquê.

Voltar a enviar? Normalmente não

Um sitemap que tenha sido processado com êxito é obtido novamente pela Google segundo o seu próprio calendário. Por isso, não precisa de o voltar a enviar após cada nova página. Depois de uma alteração importante (um site novo, uma nova estrutura), pode voltar a enviá-lo como pedido. Se a obtenção falhou, a Google tenta durante alguns dias e depois desiste: corrija o problema e volte então a enviá-lo.

Antigamente era possível avisar a Google através de um endereço de "ping". A Google descontinuou essa possibilidade em 2023; o endereço devolve agora um erro. Plugins ou scripts antigos que ainda fazem ping já não têm qualquer efeito. Restam duas formas: enviar no Search Console e incluir uma linha Sitemap: no seu robots.txt. Faça as duas: a linha no robots.txt também ajuda outros motores de pesquisa, e o envio dá-lhe o relatório.

Atenção: o relatório Sitemaps mostra apenas os sitemaps que enviou através do relatório (ou da API). Um sitemap que a Google conhece apenas pelo robots.txt não aparece no relatório, mesmo que a Google o utilize.

Na prática: o AI Builder e o WordPress

O AI Builder cria em cada publicação um novo sitemap.xml com todas as páginas e, para cada página, a data da última alteração, e coloca a linha Sitemap: no robots.txt. Se um site no AI Builder estiver definido como "não indexar", o robots.txt bloqueia precisamente tudo; nesse caso, o envio não faz sentido. No WordPress, é o núcleo que cria o sitemap; um plugin de SEO substitui-o muitas vezes por um sitemap próprio, e é esse que deve enviar (indicado nas definições do plugin). Noutros criadores de sites funciona de forma semelhante: procure o endereço do sitemap e envie-o.

Resumo

• Um sitemap é uma lista de endereços que pretende ter no índice; a Google usa-o como ajuda, não como ordem.
• Procure o endereço (muitas vezes no robots.txt), abra-o no seu navegador e envie-o através de Sitemaps no Search Console.
• Success, Has errors ou Couldn't fetch: só nos dois últimos casos tem trabalho a fazer.
• Páginas descobertas não é o mesmo que páginas indexadas; isso vê-se no relatório Page indexing.
• Só é preciso voltar a enviar após alterações importantes ou uma tentativa falhada; o ping já não funciona.

Questionário

Exercício

Exercício D2.2: Enviar o sitemap e anotar o resultado. Procure o endereço do sitemap do seu site (no robots.txt ou no seu criador de sites), abra-o no seu navegador e envie-o através de Sitemaps no Search Console. Volte passados alguns dias e anote o estado, o número de páginas descobertas e quantas delas estão indexadas segundo o relatório Page indexing. Explique a diferença.

Para saber mais

Os passos descritos nestes artigos aplicam-se aos painéis da WebOké; noutros fornecedores funciona de forma semelhante.

• Submeter o seu site aos motores de busca (Google e Bing)
• Google, Gerir o relatório Sitemaps: https://support.google.com/webmasters/answer/7451001?hl=nl
• Google Search Central, Criar e enviar um sitemap: https://developers.google.com/search/docs/crawling-indexing/sitemaps/build-sitemap
• Google Search Central Blog, descontinuação do ping de sitemaps (junho de 2023): https://developers.google.com/search/blog/2023/06/sitemaps-lastmod-ping
• Ser encontrado online 2.5: Enviar o seu sitemap