25.000 bin konu olan sitede 15 gün içinde 4.000 index göründü. 14gün boyunca 100 index yazıyordu. Belli günler veya aylar yenileniyor. Her link eklenmez.

Bu arada "robots.txt" örnekleri bak. Sitene uygun. Her forum script için kendi robots.txt olur.

mybb,ipboard,worldpress,tv-scriptleri vb... hepsinde farklı engeleme izinler olur.

Diğer konu tarama hızı; siten baş edemiyor olabilir. Clouldflare kullan. Bot girişlerini görebilirsin.
Günde "4.000" google bot giriyor benim siteme. Ortalama sizede bu kadar girmesi gerek. Eğer sayısı 100 veya 50 civarı takılırsa, firewall takılıyordur. Host engelleyebiliyor. Cpu kısmak için, yandex,bing falan engelliyorlardı. Google limit atmış olabilirler.

Harici sitemaps gelince. Tavsiye ederim. "sitemaps1.xml" gibi yapıp. Google webmaster ekleyebilirsin. "Screaming Frog SEO Spider" full sürüm indir. Crack falan etrafta var. Ram-Cpu hızına göre anında siteni tarar. Sitemaps oluşturursun. Google göre oluşturcan. Yani zaman,öncelik cart curt olmaz. Sadece link olarak belirtiliyor. Birde resim..

Etkisi; Resimleri görseller kısmına ekler. 1-3 gün içinde tüm resimler google kayıt oluyor.
Konulara gelince. %70 yakın Ekleme artışı olabilir.