hocam farklı kaynaklardan forumlardan + bazı tutulmuş webmaster sitelerinden yada pr 7-8 üzeri sitelerin robots dosyalarından kendime göre derleğim şu an kullandığım robots.txt dosyam şu şekilde; (Engellenen bazı botlar vbulltin vs. başka altyapılar için zararlı olabilecek botlar ama olsun engelledim yinede ;) )
Bunu bir yararı var mı ?