Magento sitesinde “Robots.txt tarafından engellenmiş olsa da dizine eklendi” hatası nasıl çözülür?
Magento sitenizde Search Console'da “Robots.txt tarafından engellenmiş olsa da dizine eklendi” durumunu görüyorsanız doğru yerdesiniz. Adres robots.txt ile kapalı ama yine de dizinde. Bu sayfa Magento için nedenleri ve adım adım düzeltmeyi anlatır. Büyük kataloglar için güçlü bir e-ticaret yazılımı (Adobe Commerce). Katman gezinme filtreleri çok sayıda parametreli adres üretir.
İçindekiler
Bu durum ne anlama gelir?
Google adresi taramadı çünkü robots.txt izin vermiyor, ama başka sayfaların verdiği bağlantılardan adresi biliyor ve içeriksiz olarak dizine ekledi. Arama sonucunda genellikle "Bu sonuç için açıklama yok" yazar.
Magento sitelerinde olası nedenler
- Sayfayı gizlemek için yalnızca robots.txt kullanılmış.
- Dış ve iç bağlantılar adresi Google'a duyurmuş.
- Sayfa önce dizine girmiş, sonradan robots.txt ile kapatılmış.
- Sitemap hâlâ bu adresi listeliyor.
- Magento notu: Aynı ekrandan robots.txt içeriğini düzenleyin. Filtre parametrelerini, arama sonuçlarını ve sepet adreslerini Disallow ile kapatmak tarama bütçesini korur.
Magento üzerinde adım adım düzeltme
- Magento yönetiminde şuraya gidin: Mağazalar > Yapılandırma > Katalog > Katalog > Arama motoru optimizasyonu ve Pazarlama > SEO ve Arama.
- Aynı ekrandan robots.txt içeriğini düzenleyin. Filtre parametrelerini, arama sonuçlarını ve sepet adreslerini Disallow ile kapatmak tarama bütçesini korur.
- Mağazalar > Yapılandırma > Genel > Tasarım > Arama motoru robotları bölümünde varsayılan robot değeri INDEX,FOLLOW olmalı. Geliştirme ortamından kalan NOINDEX,NOFOLLOW değeri canlıda sık görülen bir hatadır.
- Dizinde kalmasını istemiyorsanız robots engelini kaldırın ve sayfaya noindex ekleyin; Google noindex'i görebilsin diye taramaya izin verin.
- Gizli kalması gereken içeriği parola ya da giriş ile koruyun, yalnızca robots.txt'ye güvenmeyin.
- Acil kaldırma için Search Console'daki Kaldırmalar aracını geçici olarak kullanın.
- Dizinde kalmasını istiyorsanız robots engelini kaldırın ve adresi gönderin.
- Sitemap'ten engelli adresleri çıkarın.
Magento için ek kontroller
- canonical ve kopya adresler: Katalog > SEO bölümünde kategori ve ürünler için "Canonical bağlantı meta etiketi kullan" seçeneklerini açın. Ürün adreslerinde kategori yolunu kaldırmak yinelenen adresleri azaltır.
- yönlendirme ve 404: Pazarlama > URL yeniden yazma ekranından 301 ekleyin. Ürün URL anahtarı değişince "301 yönlendirme oluştur" kutusu seçili kalsın.
Düzelttikten sonra
Search Console'da bu durum için "Düzeltmeyi doğrula" seçeneğini başlatın ve sayfayı URL denetimiyle yeniden gönderin. Önce ücretsiz Ücretsiz indekslenebilirlik kontrolü ile engelin kalktığını doğrulayın; çok sayıda adres için Toplu URL indeksleme: binlerce sayfa Google'a nasıl gönderilir? akışını izleyin. Google dizine alma kararını kendisi verir, süre günlerden haftalara değişebilir.
Daha fazla bilgi
Sık sorulan sorular
Neden önce noindex, sonra robots?
Google noindex'i görmek için sayfayı tarayabilmelidir. Önce noindex ile dizinden düşmesini bekleyin, sonra isterseniz robots.txt ile kapatın.
Bu bir hata mı?
Bir uyarıdır; sayfanın içeriksiz görünmesi markanız için istenmeyebilir.
Magento'da bu ayarlar nerede?
Mağazalar > Yapılandırma > Katalog > Katalog > Arama motoru optimizasyonu ve Pazarlama > SEO ve Arama.
İlgili sayfalar
- Magento: Yetkisiz istek (401) / erişim yasak (403) nedeniyle engellendiSorun çözümleri
- Magento: URL Google tarafından bilinmiyorSorun çözümleri
- Magento: Dizine eklendi, ancak sitemap'te gönderilmediSorun çözümleri
- OpenCart: Robots.txt tarafından engellenmiş olsa da dizine eklendiSorun çözümleri
- PrestaShop: Robots.txt tarafından engellenmiş olsa da dizine eklendiSorun çözümleri
- Ticimax: Robots.txt tarafından engellenmiş olsa da dizine eklendiSorun çözümleri