Robot.txt Nasıl Olmalıdır ? Doğru Robot.txt Kullanımı 24 Ocak 2019 SEO Yorum Yok Robots.txt kısa anlamı ile bir dosya türüdür. Bu, çeşitli arama motorlarının sitenizde hangi dosyaların dizine eklemesi gerektiğini bildirmek için çeşitli sitelerde bulunan metin tabanlı bir dosyadır. Sitenize erişebilecek olan botlar site haritasında hangi bölümü okuyacağını veya hangi bölümü okumayacağını robot.txt  dosyası sayesinde belirler. […]