NE DEMEK?

Robots.txt, web sitenizin kök dizininde bulunur ve sitenizi taramaya mevrut taharri motorlarına hangi sayfalarınızı tarayıp hangilerini dizinlerine ekleyebileceklerini mütekellim bir komut dosyasıdır. Sitenize mevrut botlar burada konum saha komutları izlem ederek eylem paha.Taharri motorlarının çtuzakışma mantığını anladıktan