{"id":1322,"date":"2023-02-22T15:41:25","date_gmt":"2023-02-22T18:41:25","guid":{"rendered":"https:\/\/blackrat.pro\/blog\/?p=1322"},"modified":"2023-02-22T15:41:25","modified_gmt":"2023-02-22T18:41:25","slug":"google-nao-use-respostas-de-erro-403-404-para-limitar-a-taxa-do-googlebot","status":"publish","type":"post","link":"https:\/\/blackrat.pro\/blog\/google-nao-use-respostas-de-erro-403-404-para-limitar-a-taxa-do-googlebot\/","title":{"rendered":"Google: n\u00e3o use respostas de erro 403\/404 para limitar a taxa do Googlebot"},"content":{"rendered":"

O Google publicou orienta\u00e7\u00f5es sobre como reduzir adequadamente a taxa de rastreamento do Googlebot devido a um aumento no uso incorreto de c\u00f3digos de resposta 403\/404, o que pode ter um impacto negativo nos sites.<\/span><\/p>\n

A orienta\u00e7\u00e3o mencionou que o uso indevido dos c\u00f3digos de resposta estava aumentando o n\u00famero de editores da web e redes de distribui\u00e7\u00e3o de conte\u00fado.<\/span><\/p>\n

Googlebot de limita\u00e7\u00e3o de taxa<\/span><\/h2>\n

O Googlebot \u00e9 o software automatizado do Google que visita (rastreia) sites e baixa o conte\u00fado.<\/span><\/p>\n

A limita\u00e7\u00e3o da taxa do Googlebot significa diminuir a velocidade com que o Google rastreia um site.<\/span><\/p>\n

A frase, taxa de rastreamento do Google, refere-se a quantas solicita\u00e7\u00f5es de p\u00e1ginas da web por segundo o Googlebot faz.<\/span><\/p>\n

H\u00e1 momentos em que um editor pode querer desacelerar o Googlebot, por exemplo, se estiver causando muita carga no servidor.<\/span><\/p>\n

O Google recomenda v\u00e1rias maneiras de limitar a taxa de rastreamento do Googlebot, sendo a principal delas o uso do Google Search Console.<\/span><\/p>\n

A limita\u00e7\u00e3o de taxa por meio do console de pesquisa diminuir\u00e1 a taxa de rastreamento por um per\u00edodo de 90 dias.<\/span><\/p>\n

Outra forma de afetar a taxa de rastreamento do Google \u00e9 por meio do uso de Robots.txt para impedir que o Googlebot rastreie p\u00e1ginas individuais, diret\u00f3rios (categorias) ou o site inteiro.<\/span><\/p>\n

Uma coisa boa sobre o Robots.txt \u00e9 que ele est\u00e1 apenas pedindo ao Google para se abster de rastrear e n\u00e3o pedindo ao Google para remover um site do \u00edndice.<\/span><\/p>\n

No entanto, usar o robots.txt pode resultar em \u201cefeitos de longo prazo\u201d nos padr\u00f5es de rastreamento do Google.<\/span><\/p>\n

Talvez por isso a solu\u00e7\u00e3o ideal seja usar o Search Console.<\/span><\/p>\n

Google: pare a limita\u00e7\u00e3o de taxa com 403\/404<\/span><\/h2>\n

O Google publicou orienta\u00e7\u00f5es em seu blog da Central de Pesquisa aconselhando os editores a n\u00e3o usarem c\u00f3digos de resposta 4XX (exceto para o c\u00f3digo de resposta 429).<\/span><\/p>\n

A postagem do blog mencionou especificamente o uso indevido dos c\u00f3digos de resposta de erro 403 e 404 para limita\u00e7\u00e3o de taxa, mas a orienta\u00e7\u00e3o se aplica a todos os c\u00f3digos de resposta 4XX, exceto a resposta 429.<\/span><\/p>\n

A recomenda\u00e7\u00e3o \u00e9 necess\u00e1ria porque eles observaram um aumento no n\u00famero de editores usando esses c\u00f3digos de resposta de erro com o objetivo de limitar a taxa de rastreamento do Google.<\/span><\/p>\n

O c\u00f3digo de resposta 403 significa que o visitante (neste caso, o Googlebot) est\u00e1 proibido de visitar a p\u00e1gina da web.<\/span><\/p>\n

O c\u00f3digo de resposta 404 informa ao Googlebot que a p\u00e1gina da Web desapareceu completamente.<\/span><\/p>\n

O c\u00f3digo de resposta de erro do servidor 429 significa \u201cexcesso de solicita\u00e7\u00f5es\u201d e essa \u00e9 uma resposta de erro v\u00e1lida.<\/span><\/p>\n

Com o tempo, o Google pode acabar removendo p\u00e1ginas da web de seu \u00edndice de pesquisa se continuar usando esses dois c\u00f3digos de resposta de erro.<\/span><\/p>\n

Isso significa que as p\u00e1ginas n\u00e3o ser\u00e3o consideradas para classifica\u00e7\u00e3o nos resultados da pesquisa.<\/span><\/p>\n

Google escreveu:<\/span><\/p>\n

\u201cNos \u00faltimos meses, notamos um aumento nos propriet\u00e1rios de sites e algumas redes de entrega de conte\u00fado (CDNs) tentando usar 404 e outros erros de cliente 4xx (mas n\u00e3o 429) para tentar reduzir a taxa de rastreamento do Googlebot. A vers\u00e3o curta desta postagem no blog \u00e9: por favor, n\u00e3o fa\u00e7a isso\u2026\u201d<\/span><\/p><\/blockquote>\n

Por fim, o Google recomenda usar os c\u00f3digos de resposta de erro 500, 503 ou 429.<\/span><\/p>\n

O c\u00f3digo de resposta 500 significa que houve um erro interno do servidor. A resposta 503 significa que o servidor n\u00e3o pode lidar com a solicita\u00e7\u00e3o de uma p\u00e1gina da web.<\/span><\/p>\n

O Google trata esses dois tipos de respostas como erros tempor\u00e1rios. Ent\u00e3o, ele voltar\u00e1 mais tarde para verificar se as p\u00e1ginas est\u00e3o dispon\u00edveis novamente.<\/span><\/p>\n

Uma resposta de erro 429 informa ao bot que est\u00e1 fazendo muitas solicita\u00e7\u00f5es e tamb\u00e9m pode solicitar que aguarde um determinado per\u00edodo de tempo antes de rastrear novamente.<\/span><\/p>\n

O Google recomenda consultar a p\u00e1gina do desenvolvedor sobre a limita\u00e7\u00e3o de taxa do Googlebot .<\/span><\/p>\n

Mat\u00e9ria completa: <\/span>https:\/\/l.blackrat.pro\/u6bHy<\/span><\/a>\u00a0<\/span><\/p>\n","protected":false},"excerpt":{"rendered":"

O Google publicou orienta\u00e7\u00f5es sobre como reduzir adequadamente a taxa de rastreamento do Googlebot devido a um aumento no uso incorreto de c\u00f3digos de resposta 403\/404, o que pode ter um impacto negativo nos sites. A orienta\u00e7\u00e3o mencionou que o uso indevido dos c\u00f3digos de resposta estava aumentando o n\u00famero de editores da web e […]<\/p>\n","protected":false},"author":2,"featured_media":732,"comment_status":"open","ping_status":"closed","sticky":false,"template":"","format":"standard","meta":{"footnotes":""},"categories":[4],"tags":[86],"class_list":["post-1322","post","type-post","status-publish","format-standard","has-post-thumbnail","category-artigos","tag-google"],"_links":{"self":[{"href":"https:\/\/blackrat.pro\/blog\/wp-json\/wp\/v2\/posts\/1322","targetHints":{"allow":["GET"]}}],"collection":[{"href":"https:\/\/blackrat.pro\/blog\/wp-json\/wp\/v2\/posts"}],"about":[{"href":"https:\/\/blackrat.pro\/blog\/wp-json\/wp\/v2\/types\/post"}],"author":[{"embeddable":true,"href":"https:\/\/blackrat.pro\/blog\/wp-json\/wp\/v2\/users\/2"}],"replies":[{"embeddable":true,"href":"https:\/\/blackrat.pro\/blog\/wp-json\/wp\/v2\/comments?post=1322"}],"version-history":[{"count":1,"href":"https:\/\/blackrat.pro\/blog\/wp-json\/wp\/v2\/posts\/1322\/revisions"}],"predecessor-version":[{"id":1323,"href":"https:\/\/blackrat.pro\/blog\/wp-json\/wp\/v2\/posts\/1322\/revisions\/1323"}],"wp:featuredmedia":[{"embeddable":true,"href":"https:\/\/blackrat.pro\/blog\/wp-json\/wp\/v2\/media\/732"}],"wp:attachment":[{"href":"https:\/\/blackrat.pro\/blog\/wp-json\/wp\/v2\/media?parent=1322"}],"wp:term":[{"taxonomy":"category","embeddable":true,"href":"https:\/\/blackrat.pro\/blog\/wp-json\/wp\/v2\/categories?post=1322"},{"taxonomy":"post_tag","embeddable":true,"href":"https:\/\/blackrat.pro\/blog\/wp-json\/wp\/v2\/tags?post=1322"}],"curies":[{"name":"wp","href":"https:\/\/api.w.org\/{rel}","templated":true}]}}