Anasayfa'nın indexlenmemesi - Sunucu Hatası (5xx)

Merhabalar.
Bir sitemin anasayfası indexlenmiyor. Diğer 7 000 küsür link indexlenirken ana sayfa ve bazı sayfalar indexlenmiyor. Google webmaster tools'ta baktığımda dizinin eklemesinin mümkün olmadığı ve sunucu hatası (5xx) yer aldığına dair bir ekran çıkıyor. Fakat öyle bir hata yok. Şuan sitenin anasayfası ve diğer sayfaları gayet erişilebilir durumda. Ne robot.txt dosyalarında ne de sitemap'te burayı engelleyecek bir öğe de bulunmuyor. Nasılsa google bu sayfada böyle bir hata yer aldığını belirtiyor. Sizce ne yapmam gerek? Bilgisi olan birileri çıkarsa çok sevinirim.

İndex sayfanızda ya bir yönlendirme sorunu ya da robots.txt sayfanızda index engellemeye yönelik bir kod var. Bu da indexlenmeyi engelliyor. Çözüm için uyarılarda bulunan adımları takio edin. Bu size yardımcı olacaktır.
https://support.google.com/webmasters/answer/7440203?hl=tr

Cevap icin teşekkürler. Robot.txt yalnizca admin panel uzantimizi engelliyor. Onun disinda hic bir engeli bulunmuyor. Wrbmaster tools tan kontrol ettiğimde link uzerinde engel bulunmuyor. Manuel kontrolden baktigimda bir spam durumu soz konusu değil. Bir türlü anlam veremedim. Daha once boyle bir durum yoktu.

aaksu
Robot.txt yalnizca admin panel uzantimizi engelliyor. >> robots.txt olmalı.

Sunucu hatalarını düzeltme
Sunucu hatası, Googlebot'un URL'nize erişemediği, isteğin zaman aşımına uğradığı veya sitenizin meşgul olduğu anlamına gelir. Sonuç olarak, Googlebot isteği iptal etmeye zorlanmıştır.

Sunucu bağlantısı testi
Dizin Kapsamı Durumu raporu tarafından bildirilen bir sunucu hatasını yeniden oluşturup oluşturamayacağınızı görmek için URL Denetleme aracını kullanabilirsiniz.
Sunucu bağlantısı hatalarını düzeltme
Dinamik sayfa istekleri için aşırı sayfa yüklemeyi azaltın.
Birden fazla URL için aynı içeriği sunan bir site, içeriği dinamik olarak sunuyor demektir (ör. www.example.com/ayakkabı.php?renk=kırmızı&numara=7 URL'si www.example.com/ayakkabı.php? www.example.com/ayakkabı.php?numara=7&renk=kırmızı ile aynı içeriği sunar). Dinamik sayfaların yanıt vermesi fazla sürebilir, bu da zaman aşımı sorunlarına neden olur. Veya sunucu, Googlebot'un siteyi daha yavaş taramasını istemek için aşırı yüklenme durumu döndürebilir. Genel olarak, parametreleri kısa tutmanızı ve bunları tutumlu bir şekilde kullanmanızı öneririz. Parametrelerin siteniz için nasıl çalıştığından eminseniz Google'a bu parametreleri nasıl kullanmamız gerektiğini belirtebilirsiniz.

Sitenizin barındırma sunucusunun devre dışı, aşırı yüklü veya yanlış yapılandırılmış olmadığından emin olun.
Bağlantı, zaman aşımı veya yanıt sorunları devam ederse, web barındırma sağlayıcınıza başvurun ve sitenizin trafik işleme gücünü artırmayı düşünün.
Yanlışlıkla Google'ı engelleyip engellemediğinizi kontrol edin.

Bir DNS yapılandırma sorunu, yanlış yapılandırılmış bir güvenlik duvarı veya DoS koruma sistemi ya da içerik yönetim sistemi yapılandırması gibi sistem düzeyinde bir sorun nedeniyle Google'ı engelliyor olabilirsiniz. Koruma sistemleri, başarılı bir barındırmanın önemli bir parçasıdır ve genellikle olağandışı bir şekilde gerçekleşen yüksek miktarda sunucu isteğini otomatik olarak engellemek üzere yapılandırılırlar. Ancak, Googlebot genellikle gerçek bir kullanıcıdan daha fazla istekte bulunduğundan, bu koruma sistemlerini tetikleyebilir. Daha sonra, bu sistemler Googlebot'u engeller ve web sitenizi taramasını önler. Bu tür sorunları düzeltmek için, web sitesi altyapınızın hangi bölümünün Googlebot'u engellediğini tanımlayın ve engellemeyi kaldırın. Güvenlik duvarı denetiminiz altında olmayabilir. Bu durumda, konuyu barındırma sağlayıcınızla görüşmeniz gerekebilir.

Arama motoru site tarama ve dizine ekleme işlemlerini akıllı bir şekilde denetleyin.
Bazı web yöneticileri bilinçli olarak, bazen yukarıda açıklandığı gibi bir güvenlik duvarı kullanarak Googlebot'un web sitelerine ulaşmasını engeller. Bu durumlarda, genellikle amaç Googlebot'u tamamıyla engellemek değil, sitenin taranma ve dizine alınma yöntemini kontrol etmektir. Bu sizin için de geçerliyse aşağıdakileri kontrol edin:
Googlebot’un içeriğinizi tarayıp taramadığını kontrol etmek için robots.txt dosyası kullanın ve URL parametrelerini yapılandırın.
Googlebot kullanıcı aracısını kullanan sahte bot'lardan endişeleniyorsanız, bir tarayıcının aslında Googlebot olup olmadığını doğrulayabilirsiniz.
Googlebot'un sitenizi tarama sıklığını değiştirmek isterseniz, Googlebot’un tarama hızında değişiklik yapılmasını isteyebilirsiniz. Barındırma sağlayıcıları da IP adreslerinin sahipliğini doğrulayabilir.

enerjiveguc

hocam öncelikle ilginiz için tekrardan teşekkür ederim. Fakat 2 yıldır varolan sitemizde sunucu kaynaklı vs. herhangi bir değişikliğe gitmedik. Özel yazılım bir projemiz var. O yüzden arada robots.txt ve sitemap üzerinde müdahelelerimiz oldu. Fakat iki dosyayı da ne kadar ararsak arayalım anasayfayı engellemeye yönelik herhangi bir ibare yer almıyor. Sunucu kaynaklı desek, aynı hostingde şuan iki farklı projemiz daha aktif durumda ve anasayfaları indexleniyor. size özelden link atıyorum. eğer vaktiniz olur da bir göz atabilirseniz sevinirim.

aaksu
tamam gönderin linkinizi yardımcı olmaya çalışayım.

İçinden çıkamadık. hala devam ediyor.

Suna baktinjz mi
Head kisminda robots.txt no index mi ?

.htaccess dosyasınla hiç bir değişikliğiniz vs oldumu hocam

Cevaplar için teşekkürler

MDSALMAN proje özel kodlama. header kısmı ayrı dosyada. kontrol ettiğimde herhangi bir noindex ibaresi göremedim.

batuhan745 siteyi ssl'e çevirdik yakın zamanda ve bir arkadaşa http linkleri https yönlendirmesini istedik. bi o değişiklikler var ama index almaması ile alakalı bir ibare göremedim orada da.