Yandex botun performansı etkilememesi

Yandex çok  hızlı bir şekilde sitenizi indexliyor ve bu web sunucunuzda önemli bir yoğunluk yaratıyorsa robot.txt içine aşağıdaki satırları ekleyebilirsiniz:

https://yandex.com/support/search/robots/request-rate.html

{STRINGCACHE:MD5:485e4f54608ff8898866211a3c107722}
{STRINGCACHE:MD5:461ab3c6360ad4e1d30c8c97df81df05}

 

Leave a Reply