<?xml version="1.0" encoding="UTF-8"?><rss version="2.0"
	xmlns:content="http://purl.org/rss/1.0/modules/content/"
	xmlns:wfw="http://wellformedweb.org/CommentAPI/"
	xmlns:dc="http://purl.org/dc/elements/1.1/"
	xmlns:atom="http://www.w3.org/2005/Atom"
	xmlns:sy="http://purl.org/rss/1.0/modules/syndication/"
	xmlns:slash="http://purl.org/rss/1.0/modules/slash/"
	>

<channel>
	<title>Conteúdos sobre Googlebot | Pink and Brain</title>
	<atom:link href="https://www.pinkandbrain.com/conteudos-sobre/googlebot/feed/" rel="self" type="application/rss+xml" />
	<link>https://www.pinkandbrain.com/conteudos-sobre/googlebot/</link>
	<description>Ratos do Desenvolvimento Web, SEO e aquisição, propulsores de estratégias eficientes de marketing digital que geram vantagem competitiva.</description>
	<lastBuildDate>Thu, 05 Nov 2026 13:33:26 +0000</lastBuildDate>
	<language>pt-BR</language>
	<sy:updatePeriod>
	hourly	</sy:updatePeriod>
	<sy:updateFrequency>
	1	</sy:updateFrequency>
	<generator>https://wordpress.org/?v=7.1.4</generator>

<image>
	<url>https://www.pinkandbrain.com/wp-content/uploads/2024/10/cropped-favicon-180x180-1-386x386.png</url>
	<title>Conteúdos sobre Googlebot | Pink and Brain</title>
	<link>https://www.pinkandbrain.com/conteudos-sobre/googlebot/</link>
	<width>32</width>
	<height>32</height>
</image> 
	<item>
		<title>Códigos de status HTTP para SEO: 200, 3xx, 4xx, 5xx e soft 404</title>
		<link>https://www.pinkandbrain.com/codigos-http-para-seo-guia-completo-de-200-301-404-e-500/</link>
		
		<dc:creator><![CDATA[Pink and Brain]]></dc:creator>
		<pubDate>Thu, 05 Nov 2026 13:33:25 +0000</pubDate>
				<category><![CDATA[Desenvolvimento web]]></category>
		<category><![CDATA[SEO]]></category>
		<category><![CDATA[Crawl budget]]></category>
		<category><![CDATA[Crawling]]></category>
		<category><![CDATA[Google Search Console]]></category>
		<category><![CDATA[Googlebot]]></category>
		<category><![CDATA[HTML]]></category>
		<category><![CDATA[HTTPS (Hypertext Transfer Protocol Secure)]]></category>
		<category><![CDATA[Indexação]]></category>
		<category><![CDATA[Robots.txt]]></category>
		<category><![CDATA[SEO Técnico]]></category>
		<guid isPermaLink="false">https://www.pinkandbrain.com/?p=17157</guid>

					<description><![CDATA[<p>Entenda o que 200, 301, 404, 410, soft 404 e 503 fazem com o seu site no Google, como conferir o código de qualquer página e qual resposta usar em cada situação.</p>
<p>O post <a href="https://www.pinkandbrain.com/codigos-http-para-seo-guia-completo-de-200-301-404-e-500/">Códigos de status HTTP para SEO: 200, 3xx, 4xx, 5xx e soft 404</a> apareceu primeiro em <a href="https://www.pinkandbrain.com">Pink and Brain</a>.</p>
]]></description>
										<content:encoded><![CDATA[
<p class="wp-block-paragraph">Você troca o layout do site, confere tudo no navegador e fica satisfeito: as páginas abrem, as fotos carregam, o formulário funciona. Duas ou três semanas depois, a página de serviço que mais trazia contatos some do Google, e ninguém na equipe consegue apontar o que mudou.</p>



<p class="wp-block-paragraph">Um cenário assim tem várias explicações possíveis. A primeira que recomendamos conferir é a mais simples e a mais esquecida: o número de três dígitos que o servidor devolve quando alguém, pessoa ou robô, pede aquela página. É o código de status HTTP. O visitante nunca o vê. O Google, por outro lado, lê esse número antes de qualquer palavra do seu conteúdo. É ele que diz se a página segue para o índice, se foi para outro endereço, se deixou de existir ou se o servidor está com problemas.</p>



<p class="wp-block-paragraph">A ideia deste guia é que você saia dele sabendo três coisas. Qual código cada tipo de página deve devolver. Como conferir o código de qualquer URL em menos de um minuto. E quais sinais no Search Console mostram que um código errado já está custando tráfego.</p>



<p class="wp-block-paragraph"><strong>Resumindo antes de detalhar:</strong> 200 diz &#8220;está tudo aqui&#8221;; os 3xx dizem &#8220;mudei de endereço&#8221;; 404 e 410 dizem &#8220;isto não existe mais&#8221;; 5xx e 503 dizem &#8220;o servidor está com problema, volte depois&#8221;. O SEO dá errado quando o código não combina com a realidade da página, como uma página de erro que responde 200 (o chamado soft 404) ou uma página importante que responde 404 depois de uma reformulação.</p>



<h2 class="wp-block-heading">Códigos de status HTTP: por que um número de três dígitos pesa tanto no SEO</h2>



<p class="wp-block-paragraph">Pense no código de status como a primeira frase de uma conversa entre o seu servidor e o <a href="https://www.pinkandbrain.com/elementos/googlebot/">Googlebot</a>. Se a primeira frase é &#8220;aqui está a página&#8221;, o Google lê o resto e decide se vale indexar. Se é &#8220;não existe&#8221;, ele nem se dá ao trabalho de olhar o conteúdo.</p>



<p class="wp-block-paragraph">Por isso, na nossa visão, conferir códigos de status não é tarefa de desenvolvedor que o time de marketing pode ignorar. É o tipo de verificação que deveria acontecer antes de qualquer lançamento, reformulação ou troca de plataforma, junto com a revisão de títulos e conteúdo.</p>



<h2 class="wp-block-heading">200: o &#8220;tudo certo&#8221; que às vezes mente</h2>



<p class="wp-block-paragraph">O 200 é o código que você quer ver em toda página que existe e tem conteúdo útil. Ele significa que o servidor entregou a página normalmente.</p>



<p class="wp-block-paragraph">Só que o 200 é o começo, não a garantia. Uma página que responde 200 entra na fila de avaliação do Google, que ainda decide se ela merece virar uma <a href="https://www.pinkandbrain.com/elementos/pagina-indexada/">página indexada</a>. Conteúdo fraco, duplicado ou bloqueado por outra configuração pode ficar de fora mesmo com o código perfeito.</p>



<p class="wp-block-paragraph">E há o caso oposto, que é bem mais traiçoeiro: o servidor diz 200, mas a página está quebrada ou vazia. Falamos dele mais abaixo, quando chegarmos ao soft 404.</p>



<h2 class="wp-block-heading">Redirecionamentos 301, 302, 307 e 308 sem complicação</h2>



<p class="wp-block-paragraph">Os códigos 3xx avisam que a página mudou de endereço. A regra de bolso que recomendamos é simples. Se a mudança é definitiva, use um redirecionamento permanente (301 ou 308), que é o sinal mais forte para o Google transferir a atenção para a nova URL. Se é temporária, como uma página de campanha que volta ao normal na semana seguinte, use 302 ou 307. E evite cadeias: aponte a URL antiga direto para o destino final, em vez de fazê-la passar por três ou quatro endereços no caminho.</p>



<p class="wp-block-paragraph">Os detalhes de cada tipo, as cadeias e os loops estão no nosso <a href="https://www.pinkandbrain.com/redirects-em-seo-guia-para-preservar-autoridade-trafego-e-ranqueamento/">guia de redirects em SEO</a>.</p>



<h2 class="wp-block-heading">404 e 410: quando o erro é a resposta certa</h2>



<p class="wp-block-paragraph">Se você já abriu o Search Console e levou um susto com a lista de páginas &#8220;não encontradas&#8221;, respire. Um 404 não é defeito em si. Imagine que você tirou do ar um produto descontinuado e não existe uma página equivalente para onde mandar o visitante. Nesse caso, o 404 está fazendo exatamente o trabalho dele: dizer ao Google que aquela URL pode sair do índice.</p>



<p class="wp-block-paragraph">O problema é o 404 na página errada. É a página de serviço que mudou de endereço na reformulação e ficou sem redirecionamento. É o post antigo que ainda recebe links de outros sites e foi apagado sem ninguém perceber. Nesses casos, o certo é redirecionar para o novo endereço ou para o conteúdo que substitui o antigo. Em projetos maiores, esse cuidado faz parte do planejamento de <a href="https://www.pinkandbrain.com/migracao-de-sites-estrategias-mirabolantes-e-melhores-praticas/">migração de sites</a>, e é ali que um mapa de URLs bem feito evita a maior parte dos sustos.</p>



<p class="wp-block-paragraph">Uma tentação comum é redirecionar todas as páginas removidas para a página inicial. Não recomendamos. Quem clicou procurando um produto específico cai numa página genérica e fica perdido, e o Google pode tratar esse tipo de redirecionamento em massa para um destino sem relação como soft 404. Se não há substituto de verdade, deixe o 404.</p>



<p class="wp-block-paragraph">E o 410? Ele diz &#8220;removido de propósito e para sempre&#8221;, enquanto o 404 diz só &#8220;não encontrado&#8221;, sem explicar se é temporário. Para o Google, os dois têm o mesmo efeito: a URL sai do índice e passa a ser visitada cada vez menos. A nossa recomendação é usar o código que descreve a situação real. Remoção definitiva e intencional, 410. Qualquer outra ausência, 404. Não espere que um ou outro faça o Googlebot esquecer a URL de um dia para o outro: ele ainda vai voltar de vez em quando para conferir.</p>



<p class="wp-block-paragraph">Dois primos do 404 merecem atenção. O 403 (acesso proibido) numa página que deveria ser pública geralmente aponta para firewall, plugin de segurança ou permissão mal configurada. E 401 ou 403 não servem para &#8220;frear&#8221; o Googlebot quando ele visita demais: esses códigos não reduzem o ritmo de rastreamento e ainda tiram as páginas do índice.</p>



<h2 class="wp-block-heading">Soft 404: quando o servidor diz que está tudo bem, mas não está</h2>



<p class="wp-block-paragraph">Este é o erro que mais engana, porque parece correto no navegador. Um soft 404 acontece quando a URL responde 200, mas o conteúdo é, na prática, uma página de erro ou uma página vazia. O Google percebe, pelo conteúdo, que ali não há nada de útil, exclui a página da Pesquisa e mostra &#8220;Erro soft 404&#8221; no relatório de indexação.</p>



<p class="wp-block-paragraph">As causas mais típicas são bem cotidianas:</p>



<ul class="wp-block-list">
<li>a página &#8220;não encontrada&#8221; personalizada do tema, que mostra a mensagem de erro mas responde 200;</li>



<li>a busca interna ou a categoria sem produtos, que aparece em branco com código 200;</li>



<li>a conexão com o banco de dados que caiu, deixando a página só com cabeçalho e rodapé;</li>



<li>um arquivo JavaScript que não carregou, e a página que depende dele ficou vazia para o robô.</li>
</ul>



<p class="wp-block-paragraph">A correção depende da pergunta &#8220;o que aconteceu com esta página?&#8221;. Se o conteúdo deixou de existir, faça o servidor devolver 404 ou 410. A página de erro bonita, com busca e links úteis, pode continuar aparecendo para o visitante, só que com o código certo. Se o conteúdo mudou de lugar, redirecione. E se a página existe e foi marcada por engano, o mais provável é que o Google não tenha conseguido carregá-la direito. Recursos bloqueados no <a href="https://www.pinkandbrain.com/elementos/robots-txt/">robots.txt</a>, scripts lentos e pesados ou erros intermitentes do servidor costumam estar por trás disso.</p>



<p class="wp-block-paragraph">Sites feitos inteiramente em JavaScript, em que o navegador monta cada rota, têm um desafio extra, porque nem sempre conseguem devolver um código diferente para cada página. Nesses casos, o caminho que recomendamos é redirecionar as rotas inexistentes para uma URL que o servidor responda com 404 ou marcar as páginas de erro com meta robots noindex.</p>



<h2 class="wp-block-heading">5xx e 503: quando o problema é o servidor</h2>



<p class="wp-block-paragraph">Os códigos 5xx dizem &#8220;o servidor falhou&#8221;. Um 500 isolado num pico de acesso não é motivo de pânico. O que preocupa é o erro que se repete. Quando o Google encontra muitos 5xx (ou 429, o código de &#8220;requisições demais&#8221;), ele entende que o servidor está sobrecarregado e desacelera o rastreamento. Se o volume de erros é grande, essa desaceleração vale para o host inteiro (o domínio ou subdomínio), inclusive para as páginas que estão funcionando. As URLs já indexadas aguentam algum tempo, mas acabam saindo do índice se o problema persistir.</p>



<p class="wp-block-paragraph">O efeito prático é sutil e chato. Páginas novas demoram mais a ser descobertas, e mudanças de preço ou de estoque demoram a aparecer nos resultados. Mesmo depois que o servidor se recupera, o ritmo de rastreamento volta a subir só aos poucos.</p>



<h3 class="wp-block-heading">Manutenção programada: o 503 é seu amigo, por pouco tempo</h3>



<p class="wp-block-paragraph">Para manutenção curta, o 503 é a resposta certa. Ele diz &#8220;estou temporariamente indisponível&#8221; e pode vir com o cabeçalho Retry-After, que informa quando vale tentar de novo. É bem melhor do que uma página &#8220;em manutenção&#8221; respondendo 200, que corre o risco de virar soft 404.</p>



<p class="wp-block-paragraph">O cuidado é com o prazo. Recomendamos o 503 para algumas horas, no máximo um ou dois dias. Se a manutenção vai passar disso, o Google começa a tirar as URLs do índice, e aí o melhor é repensar o plano: manter o site antigo no ar até a nova versão ficar pronta, por exemplo.</p>



<h3 class="wp-block-heading">O arquivo que pode parar o site inteiro: robots.txt</h3>



<p class="wp-block-paragraph">Existe um caso em que um único 5xx afeta tudo: o do robots.txt. Se esse arquivo responde com erro de servidor, o Google para de rastrear o site por até 12 horas enquanto tenta buscá-lo e, depois, por até 30 dias, trabalha com a última versão que conseguiu ler. Tudo isso pode acontecer com as páginas abrindo normalmente para os visitantes, por causa de um plugin, uma regra de CDN ou um firewall. Já um 404 no robots.txt faz o Google entender que não há restrições, e ele rastreia tudo normalmente. Só é problema se você contava com alguma regra ali.</p>



<h2 class="wp-block-heading">Como conferir o código de status de qualquer página</h2>



<p class="wp-block-paragraph">Não precisa de ferramenta paga. Há três jeitos que recomendamos, do mais rápido ao mais completo.</p>



<p class="wp-block-paragraph"><strong>No navegador.</strong> Abra a página no Chrome, aperte F12, vá à aba Network (Rede) e recarregue. A primeira linha da lista é a própria página, e a coluna Status mostra o código. Se houver redirecionamento, você vê o 301 ou 302 antes do 200 final.</p>



<p class="wp-block-paragraph"><strong>No terminal.</strong> Para quem tem acesso a uma linha de comando, curl -sI https://www.seusite.com.br/pagina/ mostra o código e os cabeçalhos da resposta na primeira linha. Acrescente -L para seguir os redirecionamentos e ver a cadeia inteira. Se quiser entender os cabeçalhos que aparecem ali, o nosso post sobre <a href="https://www.pinkandbrain.com/http-headers-o-que-sao-o-que-o-analista-de-seo-deve-saber/">HTTP headers para SEO</a> explica os principais.</p>



<p class="wp-block-paragraph"><strong>No Search Console.</strong> É onde você vê os códigos pelo olhar do Google. O relatório de indexação de páginas agrupa as URLs com problema por motivo. Vários desses motivos são códigos de status com outro nome: &#8220;Erro no servidor (5xx)&#8221;, &#8220;Erro de redirecionamento&#8221;, &#8220;Não encontrado (404)&#8221;, &#8220;Bloqueada devido a acesso proibido (403)&#8221; e &#8220;Erro soft 404&#8221;. A inspeção de URL mostra a resposta de uma página específica e, no teste ao vivo, uma captura de como o Google a renderizou, o que costuma revelar de cara o soft 404. E o relatório de estatísticas de rastreamento mostra a proporção de respostas por código ao longo do tempo. O ideal é que a grande maioria seja 200. Se você ainda está se familiarizando com o <a href="https://www.pinkandbrain.com/elementos/google-search-console/">Google Search Console</a>, vale começar pelo relatório de páginas.</p>



<h2 class="wp-block-heading">Qual código de status usar: a nossa regra de bolso</h2>



<p class="wp-block-paragraph">Quando bate a dúvida, a situação da página resolve quase sempre:</p>



<figure class="wp-block-table"><table class="has-fixed-layout"><tbody><tr><td>
<p><strong>Situação da página</strong></p>
</td><td>
<p><strong>Código que recomendamos</strong></p>
</td></tr><tr><td>
<p>Existe e tem conteúdo útil</p>
</td><td>
<p>200</p>
</td></tr><tr><td>
<p>Mudou de endereço de vez ou tem substituto claro</p>
</td><td>
<p>301 ou 308</p>
</td></tr><tr><td>
<p>Fora do endereço só por alguns dias</p>
</td><td>
<p>302 ou 307</p>
</td></tr><tr><td>
<p>Removida, sem substituto</p>
</td><td>
<p>404 (ou 410, se a remoção é definitiva e intencional)</p>
</td></tr><tr><td>
<p>Área restrita, que não deve aparecer no Google</p>
</td><td>
<p>401 ou 403</p>
</td></tr><tr><td>
<p>Site em manutenção por poucas horas</p>
</td><td>
<p>503 com Retry-After</p>
</td></tr></tbody></table></figure>



<p class="wp-block-paragraph">Se a página não se encaixa em nenhuma linha, provavelmente a pergunta é outra. O post <a href="https://www.pinkandbrain.com/meu-site-nao-aparece-no-google-e-agora-o-que-fazer/">Meu site não aparece no Google: e agora?</a> ajuda a investigar outras causas.</p>



<h2 class="wp-block-heading">Códigos de status e as respostas geradas por IA</h2>



<p class="wp-block-paragraph">Os recursos de IA da Pesquisa, como as Visões Gerais criadas por IA, só usam como link de apoio páginas que estão indexadas e aptas a aparecer com snippet. Ou seja, uma página que responde 404, 5xx ou soft 404 fica fora da busca tradicional e dessas respostas ao mesmo tempo. Códigos de status corretos não garantem citação em IA, mas códigos errados excluem a página logo de saída. Se o assunto interessa, o nosso guia de <a href="https://www.pinkandbrain.com/geo-na-pratica-o-que-dizem-as-documentacoes-oficiais/">GEO na prática</a> aprofunda o que pesa nesse tipo de visibilidade.</p>



<p class="wp-block-paragraph"><strong>Uso:</strong> respostas reescritas para o bloco FAQ do Yoast do post publicado Códigos HTTP para SEO. As 4 perguntas são as mesmas do post; só as respostas mudam. Em cada item, a pergunta vai no campo &#8220;Pergunta&#8221; e o parágrafo abaixo dela no campo &#8220;Resposta&#8221;.</p>



<h2 class="wp-block-heading">Perguntas frequentes sobre códigos de status HTTP</h2>



<h3 class="wp-block-heading">Ter muitos 404 prejudica o site inteiro?</h3>



<p class="wp-block-paragraph">Não. Na nossa visão, a quantidade de 404 sozinha não é o problema. Se a página foi removida e não tem substituta, o 404 é a resposta correta e não reduz o rastreamento do resto do site. <strong>O que merece atenção é o 404 em página que deveria existir</strong>, que ainda recebe links ou tráfego, ou que tem uma substituta clara. Nesses casos, recomendamos restaurar a página ou redirecionar com 301.</p>



<h3 class="wp-block-heading">Devo usar 410 ou 404?</h3>



<p class="wp-block-paragraph">Para o Google, o efeito prático é o mesmo: as duas respostas tiram a página do índice. <strong>Recomendamos o 410 quando você tem certeza de que a remoção é definitiva</strong>, porque ele comunica isso com mais clareza, e o 404 para o resto. Trocar 404 antigos por 410 não costuma valer o esforço.</p>



<h3 class="wp-block-heading">Um 503 durante a manutenção derruba o ranqueamento?</h3>



<p class="wp-block-paragraph">Não, se a manutenção for curta. Para algumas horas fora do ar, <strong>o 503 é a resposta certa</strong>: ele avisa que a indisponibilidade é temporária, e o Google volta a rastrear depois. O risco aparece quando o 503 passa de um ou dois dias, porque aí as URLs podem começar a sair do índice. Se a manutenção vai demorar mais que isso, vale dividir o trabalho em etapas.</p>



<h3 class="wp-block-heading">Soft 404 é penalidade?</h3>



<p class="wp-block-paragraph">Não. <strong>Soft 404 é uma classificação, não uma punição.</strong> O Google concluiu que a página, apesar de responder 200, parece um erro ou está vazia, e a deixou fora da Pesquisa. Se a página não existe mais, faça o servidor devolver 404 ou 410. Se ela deve existir, entregue conteúdo de verdade. Corrigida a causa, a página volta a ser avaliada normalmente.</p>



<hr class="wp-block-separator has-alpha-channel-opacity"/>



<h2 class="wp-block-heading">Erros 5xx, soft 404 e redirecionamentos quebrados estão travando o seu SEO?</h2>



<p class="wp-block-paragraph">Códigos de status errados fazem o Google gastar rastreamento à toa, tirar páginas importantes do índice e perder a autoridade que levou anos para ser construída, muitas vezes sem que ninguém perceba no navegador.</p>



<p class="wp-block-paragraph">A <strong>Pink and Brain, <a href="https://www.pinkandbrain.com/servicos/seo-tecnico/">agência especializada em SEO técnico</a></strong>, cruza os sinais do Search Console com a resposta real do seu servidor para mostrar o que corrigir primeiro. Combinamos auditoria técnica, análise de rastreamento e acompanhamento das correções para manter o site saudável para o Google.</p>



<p class="wp-block-paragraph"><strong><a href="https://www.pinkandbrain.com/contato/">Fale com nossos especialistas</a></strong> e descubra o que os códigos de status do seu site estão dizendo ao Google.</p>
<p>O post <a href="https://www.pinkandbrain.com/codigos-http-para-seo-guia-completo-de-200-301-404-e-500/">Códigos de status HTTP para SEO: 200, 3xx, 4xx, 5xx e soft 404</a> apareceu primeiro em <a href="https://www.pinkandbrain.com">Pink and Brain</a>.</p>
]]></content:encoded>
					
		
		
			</item>
		<item>
		<title>Google atualiza documentação de crawlers e fetchers no robots.txt</title>
		<link>https://www.pinkandbrain.com/google-atualiza-documentacao-de-crawlers-e-fetchers-no-robots-txt/</link>
		
		<dc:creator><![CDATA[Pink and Brain]]></dc:creator>
		<pubDate>Mon, 16 Sep 2024 12:25:39 +0000</pubDate>
				<category><![CDATA[Dicas]]></category>
		<category><![CDATA[Notícias]]></category>
		<category><![CDATA[SEO]]></category>
		<category><![CDATA[Google]]></category>
		<category><![CDATA[Google Search]]></category>
		<category><![CDATA[Googlebot]]></category>
		<category><![CDATA[Marketing Digital]]></category>
		<category><![CDATA[Robots.txt]]></category>
		<category><![CDATA[SEO Técnico]]></category>
		<guid isPermaLink="false">https://www.pinkandbrain.com/?p=13436</guid>

					<description><![CDATA[<p>O Google explicou que a principal alteração foi a reorganização das informações. A documentação anterior era extensa e dificultava a adição de novos conteúdos relacionados aos crawlers e fetchers. Com isso, a página única foi transformada em diversas páginas mais específicas. </p>
<p>O post <a href="https://www.pinkandbrain.com/google-atualiza-documentacao-de-crawlers-e-fetchers-no-robots-txt/">Google atualiza documentação de crawlers e fetchers no robots.txt</a> apareceu primeiro em <a href="https://www.pinkandbrain.com">Pink and Brain</a>.</p>
]]></description>
										<content:encoded><![CDATA[
<p class="wp-block-paragraph">Em setembro de 2024, o <strong>Google realizou atualizações importantes na documentação sobre seus crawlers e fetchers acionados pelo usuário</strong>. Essas mudanças reorganizaram a apresentação das informações, expandindo detalhes sobre como cada produto é afetado e incluindo exemplos de como utilizar os comandos do arquivo <code>robots.txt</code> para controlar a atuação de cada <em>crawler</em>.</p>



<h2 class="wp-block-heading">O que mudou?</h2>



<p class="wp-block-paragraph">O Google explicou que a principal alteração foi a <strong>reorganização das informações</strong>. A <strong>documentação anterior era extensa e dificultava a adição de novos conteúdos relacionados aos crawlers e fetchers</strong>. Com isso, a página única foi transformada em diversas páginas mais específicas. </p>



<p class="wp-block-paragraph">Além disso, agora cada <em>crawler</em> tem uma seção dedicada que mostra quais produtos do Google ele afeta diretamente, além de exemplos práticos de como configurar o arquivo <code>robots.txt</code>.</p>



<h2 class="wp-block-heading">Produtos afetados e novos exemplos de robots.txt</h2>



<p class="wp-block-paragraph">Uma das principais novidades dessa atualização foi a inclusão de uma seção chamada “Produtos afetados”, que lista em detalhes como cada <em>crawler</em> impacta os diferentes serviços do Google. Além disso, foram adicionados trechos exemplares de configuração do <em>robots.txt</em> para cada agente de usuário.</p>



<p class="wp-block-paragraph">Abaixo, listamos alguns dos crawlers e os produtos afetados:</p>



<ul class="wp-block-list">
<li><strong>Googlebot</strong>: Afeta o Google Search (incluindo Discover e todos os recursos de pesquisa), além de outros produtos como Google Imagens, Google Vídeos, Google Notícias e Discover.</li>



<li><strong>Googlebot-Image</strong>: Afeta o Google Imagens, Discover, Google Vídeos e todos os recursos no Google Search que exibem imagens, logotipos e favicons.</li>



<li><strong>Googlebot-Video</strong>: Afeta os recursos de vídeo no Google Search e outros produtos dependentes de vídeos.</li>



<li><strong>Googlebot-News</strong>: Afeta todas as superfícies do Google Notícias (por exemplo, a aba Notícias no Google Search e o aplicativo Google News).</li>



<li><strong>Storebot-Google</strong>: Afeta todas as superfícies do Google Shopping (como a aba Shopping no Google Search e o Google Shopping).</li>



<li><strong>Google-InspectionTool</strong>: Afeta ferramentas de teste de busca, como o Teste de Resultados Ricos e a inspeção de URLs no Search Console. Não tem impacto no Google Search ou em outros produtos.</li>



<li><strong>GoogleOther</strong>: Não afeta nenhum produto específico. É um <em>crawler</em> genérico usado por várias equipes de produtos do Google para buscar conteúdo acessível publicamente. Não afeta o Google Search ou outros produtos.</li>



<li><strong>GoogleOther-Image</strong>: Semelhante ao GoogleOther, mas otimizado para buscar URLs de imagens públicas. Não afeta nenhum produto específico.</li>



<li><strong>GoogleOther-Video</strong>: Versão do GoogleOther otimizada para buscar URLs de vídeos públicos. Também não afeta nenhum produto específico.</li>



<li><strong>Google-CloudVertexBot</strong>: Afeta <em>crawls</em> solicitados por proprietários de sites para construir Agentes Vertex AI. Não tem efeito no Google Search ou em outros produtos.</li>



<li><strong>Google-Extended</strong>: Um token de produto independente que os editores podem usar para gerenciar se seus sites ajudam a melhorar o Gemini Apps e as APIs generativas Vertex AI, incluindo futuras gerações de modelos que alimentam esses produtos. O Google-Extended não impacta a inclusão ou o ranqueamento de um site no Google Search.</li>



<li><strong>APIs-Google</strong>: Afeta a entrega de mensagens de notificação <em>push</em> por APIs do Google.</li>



<li><strong>AdsBot Mobile Web</strong>: Afeta a capacidade do Google Ads de verificar a qualidade das páginas de anúncios na web móvel.</li>



<li><strong>AdsBot</strong>: Afeta a capacidade do Google Ads de verificar a qualidade das páginas de anúncios na web.</li>



<li><strong>AdSense</strong>: Afeta o Google AdSense. O <em>crawler</em> do AdSense visita sites participantes para fornecer anúncios relevantes.</li>



<li><strong>Google-Safety</strong>: Responsável por rastreamentos específicos de abuso, como descoberta de malware para links postados publicamente em propriedades do Google. Não é afetado pelas preferências de <em>crawling</em>.</li>



<li><strong>Feedfetcher</strong>: Usado para rastrear feeds RSS ou Atom para Google News e PubSubHubbub.</li>



<li><strong>Google Publisher Center</strong>: Busca e processa feeds fornecidos explicitamente por editores para uso nas páginas de destino do Google News.</li>



<li><strong>Google Read Aloud</strong>: Quando solicitado por um usuário, o Google Read Aloud busca e lê páginas da web em voz alta usando tecnologia de síntese de fala (TTS).</li>



<li><strong>Google Site Verifier</strong>: Busca tokens de verificação do Search Console.</li>
</ul>



<h2 class="wp-block-heading">Por que essa informação é importante para quem trabalha com SEO?</h2>



<p class="wp-block-paragraph">Entender como cada <em>crawler</em> afeta os diversos produtos do Google é essencial para ajustar corretamente as configurações do seu site e otimizar a forma como ele é indexado. As novas seções sobre produtos afetados, juntamente com os exemplos práticos de <em>robots.txt</em>, oferecem uma maneira clara para desenvolvedores e equipes de SEO controlarem melhor a interação do Google com seus sites.</p>



<p class="wp-block-paragraph">Para as empresas e sites que trabalham com equipe de SEO Técnico, essas atualizações trazem maior clareza e precisão no controle de como o Google acessa e exibe o conteúdo. No laboratório da <strong>Pink and Brain</strong>, essas informações são essenciais para garantir que cada site tenha o máximo de visibilidade, ao mesmo tempo que segue as diretrizes específicas de cada serviço do Google.</p>



<p class="wp-block-paragraph">Agora que o Google disponibilizou essas mudanças, é importante revisar a configuração de <code>robots.txt</code> do seu site e garantir que os <em>crawlers</em> certos estão interagindo adequadamente com suas páginas, otimizando os resultados de SEO e a presença digital.</p>



<p class="wp-block-paragraph">Somos 🐀🐀 <strong>ratos quando assunto é SEO e visibilidade no Google</strong>. Entre em contato e marque um ☕ <strong>café digital</strong> conosco. </p>
<p>O post <a href="https://www.pinkandbrain.com/google-atualiza-documentacao-de-crawlers-e-fetchers-no-robots-txt/">Google atualiza documentação de crawlers e fetchers no robots.txt</a> apareceu primeiro em <a href="https://www.pinkandbrain.com">Pink and Brain</a>.</p>
]]></content:encoded>
					
		
		
			</item>
	</channel>
</rss>
