URLs incorretos no Bing IndexNow do CloudFlare

Você está enfrentando erros de site em seu Google Search Console? Esses erros podem incluir páginas com redirecionamentos, páginas bloqueadas por robots.txt, soft 404s, 404s e páginas com tags canônicas adequadas. Pode ser frustrante ver esses erros, especialmente se você pensou que já havia definido diretivas nas páginas afetadas. Mas por que esses erros estão ocorrendo e o que você pode fazer para corrigi-los?

Com base em uma discussão aqui no fórum da comunidade CloudFlare sobre o problema, aqui está um pouco mais de um esboço e resumo e como resolver essas URLs de página incorretas de entrar nos dados do IndexNow.

Neste artigo, exploraremos as possíveis causas desses erros e forneceremos soluções para resolvê-los. Algumas causas possíveis podem incluir o uso do recurso "indexar agora" da Cloudflare ou alterações nas páginas de resultados do mecanismo de pesquisa (SERPs) do Google. Também discutiremos os benefícios de usar seu próprio recurso “indexar agora” ou um plug-in, bem como as possíveis desvantagens de bloquear determinados mecanismos de pesquisa. Seguindo essas dicas, você pode ajudar a garantir que seu site esteja livre de erros e totalmente otimizado para mecanismos de pesquisa.

• O recurso “Indexar agora” da Cloudflare
• Usando seu próprio recurso “Indexar agora” ou um plug-in
• Bloqueando determinados mecanismos de pesquisa
• Mantenha-se atualizado sobre as mudanças nas SERPs do Google

O que é “IndexNow”?

IndexNow é uma ferramenta que ajuda os proprietários de sites a notificar rapidamente os mecanismos de pesquisa sobre atualizações em seu conteúdo. Ao usar o IndexNow, os proprietários de sites podem enviar um sinal aos mecanismos de pesquisa de que uma URL e seu conteúdo associado foram adicionados, modificados ou removidos. Isso permite que os mecanismos de pesquisa reflitam essas alterações em seus resultados de pesquisa mais rapidamente, em vez de esperar que seu cronograma regular de rastreamento descubra as atualizações. Sem o IndexNow, pode levar vários dias ou semanas para que os mecanismos de pesquisa detectem alterações no conteúdo de um site. O IndexNow ajuda a priorizar o rastreamento de URLs alterados, reduzindo a necessidade de os mecanismos de pesquisa rastrearem todos os URLs para descobrir novos conteúdos.

O recurso “Indexar agora” da Cloudflare

O recurso “Index Now” da Cloudflare é uma ferramenta que permite aos usuários enviar URLs para serem indexados pelos mecanismos de pesquisa, especificamente Bing e Yandex. Embora esse recurso possa ser útil para obter rapidamente novas páginas indexadas, ele também pode causar problemas se não for usado corretamente.

Um problema com o recurso “indexar agora” é que ele envia todos os URLs inseridos para Bing e Yandex, mesmo que sejam digitados incorretamente ou protegidos por regras de firewall. Isso pode levar a erros de relatórios do Google em páginas que foram solicitadas para serem rastreadas por outros mecanismos de pesquisa. Por exemplo, se uma página for bloqueada por robots.txt, o Google não irá rastreá-la, mas se for solicitado para ser rastreado pelo Bing ou Yandex por meio do recurso “indexar agora”, o Google ainda poderá reportá-la como um erro.

Para evitar esse problema, você pode usar o recurso “indexar agora” em seu próprio site, em vez de confiar no Cloudflare. Também existem plug-ins para CMS, como o WordPress, que podem oferecer suporte ao recurso “indexar agora” e ajudar a garantir que apenas URLs válidos sejam enviados para indexação. Isso pode economizar tempo e esforço na correção de erros no Google Search Console.

Também é importante notar que, embora o recurso “indexar agora” possa ser útil para obter rapidamente novas páginas indexadas, pode não ser a solução mais eficaz para todos os sites. Alguns especialistas recomendam o uso de métodos mais tradicionais, como enviar um mapa do site ou usar links internos, para indexar as páginas. Como acontece com qualquer ferramenta, é importante considerar cuidadosamente os prós e os contras antes de usá-la em seu site.

Baixando uma lista de URLs enviados por CloudFlare IndexNow

É possível baixar uma lista de URLs que foram enviadas ao Bing por meio do recurso IndexNow do CloudFlare usando as Ferramentas do Bing para webmasters. Isso pode ser útil para proprietários de sites que desejam revisar as URLs que estão sendo enviadas para indexação e garantir que apenas páginas válidas sejam rastreadas pelo Bing.

Para baixar uma lista de URLs enviadas pelo CloudFlare IndexNow a partir do Bing Webmaster Tools, você precisará ter uma conta verificada do Bing Webmaster e estar logado. Uma vez logado, siga estas etapas:

1. Navegue até a seção "Relatórios e dados" no menu principal.
2. Clique na opção “Envios de URL”.
3. Na guia “Envios de URL”, selecione a opção “Indexar agora”.
4. Use os filtros na página para selecionar o intervalo de datas dos URLs que deseja baixar.
5. Clique no botão “Exportar” no canto superior direito da página.
6. Escolha o formato no qual deseja exportar os dados (por exemplo, CSV, Excel, etc.).
7. Clique em “Exportar” para baixar o arquivo.

O arquivo baixado conterá uma lista de todas as URLs que foram enviadas ao Bing por meio do CloudFlare IndexNow, bem como informações sobre a data e a hora do envio.

Usando essas informações, os proprietários de sites podem revisar as URLs que estão sendo enviadas para indexação e tomar as ações necessárias para garantir que apenas páginas válidas sejam rastreadas pelo Bing. Isso pode ajudar a evitar erros nos resultados do mecanismo de pesquisa e melhorar a otimização geral do mecanismo de pesquisa do site.

Usando seu próprio recurso “IndexNow” ou um plug-in

Usar seu próprio recurso “indexar agora” ou um plug-in pode ser uma maneira eficaz de evitar erros em seu Google Search Console causados ​​pelo recurso “indexar agora” da Cloudflare. Ao enviar URLs diretamente de seu próprio site ou usando um plug-in, você pode controlar quais URLs são enviados para indexação e garantir que apenas páginas válidas sejam rastreadas pelos mecanismos de pesquisa.

Uma opção para implementar seu próprio recurso “indexar agora” é usar um plug-in, como o plug-in WordPress SEO. Esses plug-ins geralmente incluem ferramentas para enviar mapas de site e URLs individuais para mecanismos de pesquisa, bem como outros recursos para otimizar seu site para mecanismos de pesquisa. O uso de um plug-in pode economizar tempo e esforço no envio manual de URLs e pode fornecer benefícios adicionais, como ajudá-lo a identificar e corrigir outros problemas de SEO em seu site.

Outra opção é usar o recurso “indexar agora” diretamente do seu próprio site. A maioria dos mecanismos de pesquisa, incluindo Google, Bing e Yandex, possui ferramentas para enviar URLs manualmente para indexação. Essas ferramentas podem ser acessadas por meio de suas contas de webmaster do mecanismo de pesquisa e normalmente permitem que você envie URLs individuais ou mapas de site inteiros.

Embora usar seu próprio recurso “indexar agora” ou um plug-in possa ser eficaz na prevenção de erros causados ​​pelo recurso “indexar agora” da Cloudflare, ainda é importante considerar cuidadosamente os prós e contras de cada abordagem. Usar um plug-in pode ser mais conveniente, mas também pode introduzir dependências adicionais e exigir manutenção contínua. O envio manual de URLs por meio das ferramentas do webmaster do mecanismo de pesquisa pode ser mais demorado, mas também pode fornecer mais controle e potencialmente fornecer uma solução mais estável a longo prazo.

Bloqueando determinados mecanismos de pesquisa

Bloquear determinados mecanismos de pesquisa, como Bing, Seznam e Yandex, em seu arquivo robots.txt pode ser uma maneira eficaz de evitar erros em seu Google Search Console causados ​​pelo recurso “indexar agora” da Cloudflare, mas não é uma solução recomendada. Ao bloquear esses mecanismos de pesquisa, você pode impedir que eles rastreiem páginas em seu site que possam estar causando erros no Google.

Para bloquear um mecanismo de pesquisa em seu arquivo robots.txt, você precisará adicionar uma linha de código especificando qual mecanismo de pesquisa deseja bloquear e quais páginas ou diretórios deseja bloquear. Por exemplo, para impedir que o Bing rastreie todo o seu site, adicione a seguinte linha de código ao seu arquivo robots.txt:

Agente do usuário: Bing Disallow: /

Você também pode bloquear páginas ou diretórios específicos especificando seus caminhos, como:

Agente do usuário: Bing Disallow: /private/

É importante observar que bloquear um mecanismo de pesquisa em seu arquivo robots.txt não garante que o mecanismo de pesquisa não rastreie seu site. Alguns mecanismos de pesquisa podem ignorar as diretivas em seu arquivo robots.txt ou podem rastrear seu site apesar do bloqueio. No entanto, usar o arquivo robots.txt pode ser uma maneira útil de sinalizar aos mecanismos de pesquisa quais páginas ou diretórios em seu site você não deseja que eles rastreiem.

Bloquear determinados mecanismos de pesquisa pode ser uma maneira eficaz de evitar erros no Google Search Console, mas é importante considerar cuidadosamente as possíveis desvantagens. Ao confiar em apenas um mecanismo de busca, como o Google, você pode ficar mais vulnerável a mudanças em seus algoritmos ou políticas. Em geral, é recomendável ter o maior número possível de alternativas para ajudar a mitigar qualquer impacto potencial na classificação do seu site.

Verificando erros 404 com o Screaming Frog

Usar o Screaming Frog SEO Spider é uma maneira útil de verificar erros 404 em um site. Um erro 404 ocorre quando um usuário tenta acessar uma página da Web que não existe ou foi removida. Esses erros podem prejudicar a experiência do usuário de um site e a otimização do mecanismo de pesquisa, pois podem fazer com que os usuários saiam do site e impactar negativamente a classificação do site nos resultados da pesquisa.

Usando o Screaming Frog, podemos ter certeza de que o site não está cheio de erros 404.

Mantenha-se atualizado sobre as mudanças nas SERPs do Google

Manter-se atualizado sobre as alterações nas páginas de resultados do mecanismo de pesquisa (SERPs) do Google é uma parte importante da otimização do seu site para os mecanismos de pesquisa e da prevenção de erros no Google Search Console. O Google frequentemente faz alterações em seus algoritmos e fatores de classificação, o que pode ter um impacto significativo na visibilidade e na classificação do seu site nos resultados de pesquisa.

Para se manter informado sobre as mudanças nos SERPs do Google, você pode se inscrever para receber alertas do Google Webmaster Central ou seguir os blogs e fontes de notícias do setor de SEO. Essas fontes podem fornecer atualizações sobre novos recursos, alterações nos algoritmos de classificação e outras informações importantes que podem ajudá-lo a otimizar seu site para mecanismos de pesquisa.

Além de se manter informado sobre as alterações nas SERPs do Google, também é importante revisar e otimizar regularmente seu site para os mecanismos de pesquisa. Isso pode incluir identificar e corrigir erros no Google Search Console, otimizar o conteúdo e as metatags do seu site e criar backlinks de alta qualidade. Ao revisar e otimizar regularmente seu site, você pode ajudar a garantir que ele seja totalmente otimizado para mecanismos de pesquisa e livre de erros.

No geral, manter-se atualizado sobre as alterações nas SERPs do Google e otimizar seu site regularmente pode ajudá-lo a evitar erros no Google Search Console e melhorar a visibilidade e a classificação do seu site nos resultados de pesquisa. Seguindo essas dicas, você pode ajudar a garantir que seu site seja totalmente otimizado para mecanismos de pesquisa e atrair mais tráfego e clientes.

Conclusão

Concluindo, os erros do site no Google Search Console podem ser frustrantes, mas existem etapas que você pode seguir para corrigi-los. Uma possível causa desses erros é o uso do recurso “indexar agora” da Cloudflare, que pode enviar URLs para Bing e Yandex mesmo se forem digitados incorretamente ou protegidos por regras de firewall. Para evitar esses erros, você pode usar seu próprio recurso “indexar agora” ou um plug-in, ou bloquear determinados mecanismos de pesquisa em seu arquivo robots.txt.

Usar seu próprio recurso “indexar agora” ou um plug-in pode fornecer mais controle sobre quais URLs são enviados para indexação, enquanto o bloqueio de determinados mecanismos de pesquisa pode ajudar a evitar erros causados ​​pelo recurso “indexar agora” da Cloudflare. No entanto, é importante considerar cuidadosamente os prós e contras de cada abordagem, bem como as possíveis desvantagens de contar com apenas um mecanismo de pesquisa.

Manter-se atualizado sobre as alterações nas páginas de resultados do mecanismo de pesquisa (SERPs) do Google e otimizar seu site regularmente também pode ajudar a evitar erros e melhorar a visibilidade e a classificação do site nos resultados de pesquisa. Seguindo essas dicas, você pode ajudar a garantir que seu site esteja totalmente otimizado para mecanismos de busca e livre de erros.