SEO

Web Sitenizin Dizinlenememesinin 11 Nedeni

3
0
0

Web sitesi indekslemesi, her SEO’nun çalışmasındaki en önemli konulardan biridir. Ve şaşırtıcı olmamakla birlikte; web siteniz arama motoru robotlarında bulunmuyorsa, sürekli teknik optimizasyonun amacı nedir?

Bu yazıda, web sitenizin arama motorları tarafından endekslenememesinin 11 nedeni hakkında konuşacağız ve hangisinin sitenizi endekslemesini kesebileceğini bulmak için Netpeak Spider'i nasıl kullanacağınızı göstereceğiz.

1. Bir robots.txt dosyasında tüm web sitesine izin verilmiyor

Bir çok web sitesinin arama motoru robotları için görünmez olmasının ilk ve en önemli nedeni bir robots.txt dosyasında yanlış yönergeler kullanmasıdır. Garip bir şekilde, direktiflerin ve sözdizimi bilgisinin eksikliğinden veya ihmalden kaynaklanmaktadır. Bir web sitesi sürümünden sonra, birçok webmaster ve SEO uzmanı web sitesini görünür hale getirmeyi unutur.

Bu durumda, Netpeak Spider size bir "robots.txt tarafından engellendi" sorunu gösterecektir.

web-sitenizin-dizinlenememesinin-11-nedeni-1

2. Meta Robotlarda veya X-Robots-Tag'da Yanlış Yönergeler

Meta Robots veya X-Robots-Tag ile ayarlanan yönergeler yalnızca belirli URL'ler için çalışır ve yalnızca seçilen bazı sayfaları gizleyebilir. Yanlışlıkla oluşturulan Noindex veya nofollow yönergeleri hayatınızı mahvedebilir ve kapsamlı teknik SEO denetimine kadar başarıyla gizlenebilir.

Netpeak Spider meta verilerde veya HTTP başlık yanıt sayfasında noindex yönergesi bulursa, "Meta Robotlar tarafından Engellenen" veya "X-Robots-Tag Tarafından Engellenen" sorunu olan URL olarak vurgulanır.

web-sitenizin-dizinlenememesinin-11-nedeni-2

3. Web Sitesi Google Tarafından Cezalandırılmış

Bu, geçmişi olan web siteleri için en çok karşılaşılan sorundur. İkinci el domain alırken de dikkatli olmanız gerekir; zira geçmişi pek de iyi olmayan bir web sitesine sahip olma olasılığınız oldukça yüksektir. Bu durumda Google’nin güvenini geri kazanmanız için göstereceğiniz çaba oldukça önemlidir.

Geçmişi olan bir web sitesi satın alıyorsanız, şunları yapmanız önerilir:

  • Trafik büyüme dinamiklerini analiz etmek ve olası anomalileri bulmak için Google Analytics’e erişim isteyin.
  • Google Arama Konsolu'ndaki tüm verileri kontrol edin.
  • Wayback Machine'deki web sitesinin arşivlenmiş sürümlerine bir göz atın.
  • Backlink analizi yapın (örneğin bir Serpstat veya Ahrefs ile).
  • Arama motorlarının bu web sitesini cezalandırmadığından emin olmak için Sucuri SiteCheck kullanın.

4. Arama Robotları için .js Dosyalarına Erişim Sınırlı

Web sitenizin içeriğinin bir kısmı yalnızca JS oluşturulduktan sonra görünür hale gelirse, arama robotlarının tüm .js dosyalarına erişimi olmalıdır. Aksi takdirde, bir sayfayı doğru göremez ve JavaScript’te gizlenmiş tüm bağlantıları dizine ekleyemezler.

Netpeak Spider ile arama robotlarından gizlenmiş herhangi bir JS dosyası olup olmadığını kontrol edebilirsiniz. Ana ayarlar menüsünde JavaScript’i Kontrol Et ’seçeneğini açmanız ve her zamanki gibi taramaya başlamanız yeterlidir.

Web sitenizi Yandex, Bing, Yahoo ve diğer arama motorları için optimize etmek istiyorsanız, JS web taramaları ve son araştırmalar hakkındaki resmi belgelere bir göz atmanızı öneririz.

5. Düşük Web Sitesi Yükleme Hızı

SEO uzmanları pek çok konuda anlaşamayabilir, ancak hepsi düşük web sitesi yükleme hızının SEO'yu olumsuz yönde etkilediği konusunda hemfikirdir. Sabırsız arama motorlarının web sitenizi görmezden gelmesinin bir nedeni olabilir.

Web sitenizdeki hangi sayfaların kritik şekilde düşük yükleme hızına sahip olduğunu bulmak için Netpeak Spider ile tarayın. Bu tür sayfalarınız varsa, bir 'Uzun Sunucu Yanıt Süresi' sorunu ile işaretlenirler. Ayrıca, Netpeak Spider penceresinden çıkmadan her sayfayı Google PageSpeed ile analiz edebilirsiniz. Sayfa URL’sini sağ tıklayın ve URL’yi servislerde aç ’→‘ Google PageSpeed’i seçin.

web-sitenizin-dizinlenememesinin-11-nedeni-3

6. Rel = "canonical" Yeniden Yönlendirme ile Sayfaya Yönlendirme

SEO’lar, hangi sayfaların indeksleme için tercih edildiğini göstermek için rel = “canonical” özelliğini kullanır. Ancak, kurallı sayfa başka bir URL’ye yönlendirirse, yalnızca son yönlendirme adresinin arama robotları tarafından endekslenme şansı olur. Bunun nedeni, web sayfası yanıt kodunun 200 Tamam’dan farklı olmasıdır.

7. Sayfa İçinde Bağlantı Yok

Bir veya birkaç yeni sayfa oluşturduysanız, ancak bir web sitesine bunlara bağlantı yerleştirmediyseniz, arama motoru robotu onları muhtemelen bulamaz.

Bu tür sayfaları Netpeak Spider ile bulabilirsiniz. Netpeak Spider’deki bir ‘Dahili Sayfa Sırası Hesaplama Aracı’, link juice bozulmasına neden olan tüm sayfaları algılar - özellikle de gelen bağlantılarla uyumlu olmayan sayfaları. Bu sayfalar ‘orphans’ olarak nitelendirilir.

8. İçerik Yönetim Sistemi Ayarlarında Arama Motoru Dizin Oluşturma Devre Dışı Bırakıldı

WordPress içerik yönetim sisteminde bir web sitesi oluşturduysanız, tek tıklamayla arama motoru robotlarından gizleyebilirsiniz. Ayarlar panelinde sadece 'Arama Motoru Görünürlüğü' seçeneğini etkinleştirmeniz gerekir. Bu seçeneğin Google’ın veya diğer bazı arama motorlarının endekslemesini etkileyip etkilemediğini söyleyemeyiz, ancak buna dikkat etmek daha iyi olur.

web-sitenizin-dizinlenememesinin-11-nedeni-4

Diğer içerik yönetim sistemlerinde de benzer ayarları kontrol edin.

9. Web Sitesine Sadece Yetkili Kullanıcılar Tarafından Erişilebilir

Sitenizi, hazır olana kadar yetkisiz ziyaretçilerden gizlemeye karar verdiyseniz, onu arama motorlarından da gizlediğinizi unutmayın.

Bu arada, web sitenizi piyasaya sürmeden önce tarayacaksanız, otorizasyon Netpeak Spider'ı durduramaz. Ayarlar menüsünde bir ‘Kimlik Doğrulama’ sekmesi açmanız ve siteye erişmek için giriş ve şifrenizi girmeniz yeterlidir.

web-sitenizin-dizinlenememesinin-11-nedeni-5

10. Web Sitesine Erişim .htaccess Dosyasında Reddedildi

Çoğu durumda, .htaccess dosyası yönlendirmeleri belirlemeye yardımcı olur, ancak bazen arama motoru robotlarına erişimi sınırlamak için de kullanılır. Örneğin, Google’ın botunu engellemek istiyorsanız .htaccess dosyanız şöyle görünür:

RewriteEngine On

RewriteCond %{HTTP_USER_AGENT} Googlebot [OR]

RewriteRule . - [F,L]

Yanlışlıkla (veya bilerek) bu şekilde kullanıyorsanız, yukarıda gösterilen satırları kaldırmanızı veya .htaccess dosyasının eski bir sürümünü kullanmanızı öneririz.

11. Hatalı Sunucu Yanıt Kodu

Yalnızca 200 Tamam Sunucu Yanıt Koduna sahip web sayfalarının arama motorları dizininde yer alma şansı vardır. Sayfa tamamen normal görünse bile, 200'den farklı (örneğin, 404 veya 503) yanıt koduna sahipse, arama motoru robotları tarafından dizine eklenmez. Web sitenizde böyle bir sorun saptadıysanız, web geliştiricisinden yardım isteyin.

Özetle

Bazı arama motorlarının çalışma mekanizmalarının gizemle örtülmesine rağmen, web sitenizin robotlar tarafından endekslenememesinin birkaç temel nedenini söyleyebiliriz:

  • Web sitesinin tamamı robots.txt dosyasına dahil edilmedi
  • Meta Robots veya X-Robots-Tag'deki yanlış talimatlar
  • Web sitesi Google tarafından cezalandırıldı
  • .js dosyalarına erişim, arama robotları için sınırlıdır
  • Rel = "canonical", yönlendirmeye sahip sayfaya yönlendirir
  • Sayfada dahili bağlantı yok
  • Düşük web sitesi yükleme hızı
  • Arama motoru dizin oluşturma, CMS ayarlarında devre dışı
  • Web sitesine yalnızca yetkili kullanıcılar tarafından erişilebilir
  • Web sitesine erişim .htaccess dosyasında reddedildi
  • Yanlış sunucu yanıt kodu

Yukarıda belirtilen bazı indeksleme sorunlarıyla karşılaştınız mı? Neden göründüler ve URL ile uyumsuzluk sorununu nasıl çözdünüz? Deneyimlerinizi aşağıda yorumlarda bize anlatın.

Found a mistake? Select it and press Ctrl + Enter

Yorumlar (0 )

Yorum bırakmak için giriş yapmalısınız

Abone

internet marketing hakkında yazılmış en faydalı bültene

En çok

Tartışılan Popüler Okunabilir

Bu site, gezinmeniz ve geri bildirim sağlamanız, ürünlerimiz ve hizmetlerimizin kullanımını analiz etmeniz için çerezleri ve diğer teknolojileri kullanır, daha iyi bir kullanıcı deneyimi için reklam ve pazarlama çabalarımızda bize yardımcı olur.