robot txt te sorun ! bi bakarmısınız

[beyn54]

 

[irfpas1]

Bu robot.txt/ sorununu bende aşamadım google yada yahoo botu gırıyor kim nerde online yolundan bakıyorum ama bu ne işe yarar yada nasıl kurulur bunu detaylı bir şekilde nasıl ögrenirim.
Şimdiden cok tesekkürler arkadaslar.