- 
                    Üyelik
                    01.01.2014
                
- 
                    Yaş/Cinsiyet
                    29 / E
                
- 
                    Meslek
                    öğrenci
                
- 
                    Konum
                    İstanbul Anadolu
                
                - 
                    Ad Soyad
                    E** Y**
                
- 
                    Mesajlar
                    15
                
- 
                    Beğeniler
                    0 / 0
                
- 
                    Ticaret
                    0, (%0)
                
 
                Arkadaşlar bir blogum var ve ben bu bloga robots.txt dosyası oluşturmak istiyorum ama nasıl yapıldığını bilemiyorum tek olmasını istediğim robots.txt içinde tüm botlar sitemi indexlesin
                        
     
                 
                                            
        
        
        
            
            
                - 
                    Üyelik
                    30.10.2013
                
- 
                    Yaş/Cinsiyet
                    30 / E
                
- 
                    Meslek
                    Bilişim Teknolojileri
                
- 
                    Konum
                    Bursa
                
                - 
                    Ad Soyad
                    H** H**
                
- 
                    Mesajlar
                    86
                
- 
                    Beğeniler
                    3 / 4
                
- 
                    Ticaret
                    0, (%0)
                
 
                robots.txt olusturma konusunda irternette bir çok konu mevcut fakat ben kısaca bahsedeyim
Robots.txt sitenin ana dizininde bulunan ismi değişmeyen, Google Botları için kılavuz bir dosyadır. Yani Google Botları sitenizi ziyaret ettiğinde, dosyanız varsa ilk Robots.txt dosyasına girecektir, yoksa işiniz zor, Robots.txt dosya içersinde bazı kodlar görecektir ve bu kodlar doğrultusunda nereleri indexleyeceğini, nerelere girmeyeceğini anlayacaktır.
User-agent: Google Botu’nun adı gelecek
Disallow: Botun izinlerini gireceğimiz komutlar yer alacak
örnek olarak 
User-agent: *
Disallow: /cgi-bin/
Disallow: /images/
Disallow: /tmp/
Disallow: /private/
Bütün google botları, bu 4 dosyayı indexlemeyecektir.
                        
     
                 
                                                                                                                
        
        
        
            
            
                - 
                    Üyelik
                    01.01.2014
                
- 
                    Yaş/Cinsiyet
                    29 / E
                
- 
                    Meslek
                    öğrenci
                
- 
                    Konum
                    İstanbul Anadolu
                
                - 
                    Ad Soyad
                    E** Y**
                
- 
                    Mesajlar
                    15
                
- 
                    Beğeniler
                    0 / 0
                
- 
                    Ticaret
                    0, (%0)
                
 
                benim için sadece paylaştığım haberlerin indexlenmesi yeterli bunun için nasıl bir kodmam gerek peki
Ek Olarak: giren kişiler sadece admin panelini görmesin o kadar yeter diğer tüm sayfaların haberlerin indexlenmesini istiyorum
                        
     
                 
                                                                                                                
        
        
        
            
            
                - 
                    Üyelik
                    30.10.2013
                
- 
                    Yaş/Cinsiyet
                    30 / E
                
- 
                    Meslek
                    Bilişim Teknolojileri
                
- 
                    Konum
                    Bursa
                
                - 
                    Ad Soyad
                    H** H**
                
- 
                    Mesajlar
                    86
                
- 
                    Beğeniler
                    3 / 4
                
- 
                    Ticaret
                    0, (%0)
                
 
                User-agent: Googlebot
Disallow: /wp-content/
Disallow: /trackback/
Disallow: /wp-admin/
Disallow: /archives/
Disallow: /index.php
Disallow: /*.php$
Disallow: /*.js$
Disallow: /*.css$
Disallow: */feed/
Disallow: */trackback/
User-agent: Googlebot-Image
Disallow: /wp-includes/
User-agent: ia_archiver
Disallow: /
User-agent: duggmirror
Disallow: /
genel olarak yukardakiler WORDPRESS bir site için genel ayarlamalar tabi sizin siteniz wordpress ise.
                        
     
                 
                                                                                                                
        
        
        
            
            
                - 
                    Üyelik
                    01.01.2014
                
- 
                    Yaş/Cinsiyet
                    29 / E
                
- 
                    Meslek
                    öğrenci
                
- 
                    Konum
                    İstanbul Anadolu
                
                - 
                    Ad Soyad
                    E** Y**
                
- 
                    Mesajlar
                    15
                
- 
                    Beğeniler
                    0 / 0
                
- 
                    Ticaret
                    0, (%0)
                
 
                şuan indirapp ile pm'den konuşuyorum sağolsun kendisi yardımcı oluyor
Ek Olarak: benim ki wordpress değil onları eklesem sıkıntı olurmu normal blogger