robots.txt ayrı bir durum
benim istediğim HTTP request metodu kullanan programların bir çoğu eski browser user agentlerini kullanır bunlar robots.txt dosyasına bakmaksızın php betiğine yüklenir post ve get istekleri gönderir arasında dağlar kadar fark var lütfen karıştırmayalım ;)
üst mesajımda belirttiğim user agentler için .htaccess dosyamı düzenlemek istiyorum lakin çorba oldu işin içinden çıkamadım bana yardımcı olacak bir arkadaş varmı :(