Faceted Navigation Crawl/İndeksleme Yönetimi Nasıl Yapılır?

E-ticaret sitelerinde filtreler ve sıralama seçenekleri çok sayıda URL üretir. Faceted navigation crawl/indeksleme yönetimi doğru kurulmazsa tarama bütçesi boşa gider ve indeks şişebilir. Aşağıdaki yaklaşım, Google’ın faceted URL varyasyonlarını birlikte kontrol etme vurgusunu temel alır. Konuya bütüncül yaklaşımı Fora Growth sunar.

URL tiplerini sınıflandırarak kontrol alanı oluşturma

Faceted navigation crawl/indeksleme yönetimi planı, önce URL tiplerini netleştirmeyi gerektirir. Her filtre kombinasyonu aynı hedefe hizmet etmez: Bazıları sadece seçim deneyimi sunar, bazıları ise gerçek arama sonuç sayfası gibi değerlidir. Bu yüzden URL’leri kategori tabanlı, filtreli listeleme, sıralama parametreli ve arama sonuçları gibi gruplara ayırın. Ardından her gruba “crawl edilebilir mi, indeks hedefi var mı, kanonik konsolidasyon uygulanacak mı” kararı verin.

Google’ın faceted navigasyon yaklaşımında kritik nokta, crawl ve indeks kontrolünü tek bir yöntemle çözmeye çalışmamaktır. faceted URL’lerde hangi varyasyonların hedefleneceği, hangi varyasyonların sadece tarama için engellenebileceği veya indekslenmeyeceği birlikte düşünülmelidir. Bu nedenle sınıflandırma, sonraki sinyal kararlarını sadeleştirir ve tutarlılık sağlar. Sonuçta hem arama görünürlüğü korunur hem de gereksiz URL’ler dizine eklenmez. (topic.source_insight ile uyumlu biçimde, farklı sinyallerin birlikte kullanımı burada temel kurgu haline gelir.)

• Faceted URL’leri kategori tabanı, filtreli listeleme, sıralama ve arama sonuçları gibi gruplara ayır.
• Değeri düşük kombinasyonlarda robots.txt ile crawl dışlama uygula.
• Benzer varyasyonlarda rel="canonical" ile tek tercih edilen URL belirle.
• İndekse girmemesi gereken sayfalarda noindex kullan; robots.txt ile tamamla.
• Parametre üretimini deterministik hale getir; sıralama ve ayraç tutarlılığını koru.
• Uygulama sonrası Search Console’da dizine eklenen ve taranan URL davranışını izle.

robots.txt ile crawl dışlama stratejisi kurma

Crawl bütçesi yönetiminin ilk pratik adımı, değersiz veya düşük değerdeki faceted URL varyasyonlarını robots.txt üzerinden crawl dışlamaktır. Örneğin çoklu filtre kombinasyonları, yüksek kardinaliteli parametreler veya kullanıcı davranışına bağlı varyasyonlar çoğu zaman zayıf içerik sinyali taşır. Bu sayfaların taranması, kaynak israfına yol açabilir. Robots.txt kuralı, hedef URL tipini gereksiz varyasyonlardan korumaya yardımcı olur.

Buradaki amaç noindex ile karıştırılmamalıdır. Noindex, taramadan sonra indeks kararını etkiler; robots.txt ise taramayı baştan engeller. Google’ın faceted navigation crawl/indeks kontrol yaklaşımında, crawl ve indeks hedefleri için birden fazla sinyalin birlikte ele alınması önerilir. Bu nedenle önce robots.txt ile “tarama ekonomisi” sağlanır, sonra geriye kalan ve değerli varyasyonlar için canonical ve gerekirse noindex/nofollow gibi sinyaller planlanır. Bu düzen, overcrawl riskini azaltır. (topic.source_insight doğrultusunda robots.txt odaklı dışlama vurgusu kullanılır.)

rel="canonical" ile varyasyonları konsolide etme

Faceted navigation crawl/indeksleme yönetiminde en sık görülen sorunlardan biri, benzer sonuç sayfalarının birbirini kanibalize etmesidir. Bu durumu azaltmanın yolu rel="canonical" ile doğru varyasyonları konsolide etmektir. Her filtre kombinasyonu için tek bir “tercih edilen URL” belirleyin. Genellikle kategori bazlı ana sayfalar veya belirli filtrelerin oluşturduğu ana liste sayfaları canonical hedef olabilir. Böylece indeks, tek bir merkezden güçlenir.

Google’ın yaklaşımı, canonical kullanarak faceted URL varyasyonlarını birleştirmeyi vurgular. Ancak canonical seçimi, sadece teknik kolaylığa göre yapılmamalıdır. İdeal canonical, kullanıcı için en faydalı sıralama ve filtre setiyle ilişkilidir. Ayrıca canonical, parametre düzeniyle tutarlı olmalıdır; aynı içeriği farklı parametre sıralarıyla üreten sistemlerde canonical kurgusu özellikle önem kazanır. Bu bölümdeki amaç, indeks kararını güçlendirirken crawl edilen varyasyonların birden fazla URL’de dağılmasını önlemektir. (topic.source_insight’ta ifade edilen “hangi varyasyonların tercih edileceği” fikri burada somutlaştırılır.)

noindex ve nofollow sinyallerini indeks hedefiyle eşleştirme

Tüm faceted URL’leri indekslemeye çalışmak çoğu e-ticaret için sürdürülebilir değildir. Değeri sınırlı olan filtre kombinasyonlarında noindex kullanımı, Google’ın bu sayfaları tarayıp dizine eklemesini engelleyerek indeks şişmesini azaltır. Bununla birlikte noindex, crawl dışlamaya eşdeğer değildir; tarama devam edebilir. Bu nedenle noindex kararını, robots.txt ile belirlenen crawl stratejisini tamamlayacak şekilde konumlandırın.

Google’ın faceted navigation crawl/indeks kontrol yaklaşımı, canonical ile konsolidasyonu ve gerektiğinde bağlam sinyallerini birlikte ele almanız gerektiğini ima eder. Örneğin belirli parametrelerin ürün listelemede yalnızca sıralama amaçlı olduğu senaryolarda noindex mantıklı olabilir. Bağlam sinyalleri olarak nofollow kullanımı da bazı iç bağlantı dinamiklerinde fayda sağlayabilir; ancak her site için otomatik kural gibi uygulanmamalıdır. En iyi sonuç, hangi URL’lerin arama sonucu olarak anlamlı olduğu ve hangilerinin kullanıcıyı sadece içeride gezdirdiği ayrımıyla gelir. (topic.source_insight, “birden fazla sinyali birlikte düşünme” yönünü güçlendirir.)

URL parametrelerini doğru ayrıştırma ve varyasyonları sadeleştirme

Faceted navigation crawl/indeksleme yönetiminde teknik titizlik, parametrelerin doğru şekilde ayrıştırılmasına dayanır. Aynı filtre seti farklı parametre sıralarıyla üretilebiliyorsa, Google bunu ayrı URL varyasyonları olarak değerlendirebilir. Bu yüzden parametreleri sabit bir sıraya oturtun, gereksiz parametreleri kaldırın ve URL’yi mümkün olan en deterministik hale getirin. Ayrıca bir URL parametre seti, içerik değişimini doğru yansıtmalıdır; aksi halde canonical ve indeks sinyalleri zayıflar.

Google’ın ilgili yönlendirmelerinde, parametrelerin doğru yapılandırılması gibi teknik ayrıntılara dikkat edilmesi vurgulanır. Bu çerçevede URL parametre ayırıcıların ve sayfalardaki filtre eşleşmesinin tutarlı olması gerekir. Böylece crawl edilen varyasyonlar gerçekten anlamlı farklılıklar taşıdığında, canonical ile konsolidasyon daha etkili çalışır. İyileştirme sadece “daha az URL” üretmek değil, üretilen URL’lerin Google tarafından doğru eşleştirilmesini sağlamaktır. Böylece hem crawl kalitesi yükselir hem de indeks kararları daha öngörülebilir olur. (topic.source_insight’ta belirtilen teknik doğru yapılandırma vurgusu burada yansıtılır.)

Uygulama ve ölçüm: sinyal tutarlılığıyla sürdürülebilirlik

Planı uyguladıktan sonra ölçümleme, faceted navigation crawl/indeksleme yönetiminin kalbidir. Önce Search Console’da tarama raporlarındaki değişimi ve dizine eklenen URL sayılarını izleyin. Ardından site üzerinden erişilen filtre kombinasyonlarının hangilerinin crawl edildiklerini ve hangilerinin indekslendiğini karşılaştırın. Hedef, zamanla gereksiz varyasyonların tarama sıklığının azalması ve indeksin daha seçici hale gelmesidir. Bu dönüşüm gözlenmiyorsa robots.txt, canonical veya noindex kurgusu yeniden değerlendirilmelidir.

Ölçüm sürecinde yalnızca sayı değil kaliteyi de izleyin. İndekste kalan sayfaların arama sorgularında performansına bakın; canonical hedeflediğiniz URL’lerin görünürlük kazanıp kazanmadığını kontrol edin. Ayrıca filtre parametreleri güncellenince yeniden tarama davranışı değişebilir; bu yüzden değişiklik yönetimi yapın. Google’ın faceted navigasyon yaklaşımındaki temel fikir, crawl ve indeks kontrol sinyallerini birlikte kurgulamak olduğundan, tek bir ayarı “sihrî çözüm” gibi görmek yerine tutarlılığı koruyun. (topic.source_insight ile uyumlu şekilde çoklu sinyal yaklaşımı operasyonel takibe bağlanır.)

Uygulama desteği için E-Ticaret SEO hizmetini inceleyebilirsiniz.

Kaynak: Google Search Central (Google for Developers).