Архив метки: нагрузка от поисковых роботов

Сокращение нагрузки от поисковых роботов

Настройка времени индексирования поискового робота

Наверно многим приходилось работать с файлом robots.txt , но мало кто знает о всех его возможностях. Сегодня мы расскажем, как с помощью одной директивы можно контролировать нагрузку от поисковых роботов.

Читать далее