Otimização de crawl budget em e-commerce
E-commerce·2023

Otimização de crawl budget em e-commerce

200k+produtos no catálogo
70%crawl desperdiçado
48htempo de indexação
───contexto

Um e-commerce com mais de 200 mil produtos percebia que novos lançamentos demoravam semanas para aparecer no Google. A equipe não entendia por que a indexação era tão lenta.

───desafio

O Google estava gastando crawl budget em páginas de baixo valor (filtros, ordenações, paginação infinita) e não chegava aos produtos novos. Precisávamos realocar esse orçamento de rastreamento.

───abordagem

Analisei logs de servidor para entender o comportamento do Googlebot. Identifiquei que 70% do rastreamento estava sendo desperdiçado em URLs parametrizadas. Implementei regras no robots.txt, canonical tags e ajustes de arquitetura de links internos.

───resultado

Em 30 dias, o número de páginas de produto rastreadas por dia aumentou 340%. Novos produtos passaram a ser indexados em 48-72 horas.

───aprendizados
Log analysis é subutilizado em SEO. Ver o comportamento real do bot é infinitamente mais valioso do que suposições baseadas em ferramentas de terceiros.
───autor
Lucas Cassapula

Lucas Cassapula

Consultor de SEO & Automação

Especialista em SEO técnico com foco em automação e análise de dados. Mais de 8 anos de experiência otimizando sites de alta escala com Python e abordagem data-driven.