Robots.txt

Robots.txt — текстовый файл, который содержит директивы, указывающие поисковым роботам особенности индексации сайта.

Файл располагается в «корне» сайта и содержит указания для поисковых систем, такие как: запрет или разрешение на индексацию документов, основное написание доменного имени, рекомендованные паузы обращения к серверу и тому подобные.

Добавить в избранное

Поделиться с друзьями

Другие популярные термины

Наши достижения

Входим в число лучших компаний России в сферах интернет-рекламы и разработки сайтов по результатам самых авторитетных рейтингов

Победитель в номинации «SEO под ключ» по итогам WORKSPACE DIGITAL AWARDS 2024

Лидер SEO-рейтинга среди сайтов SEO-агентств по итогам Optimization 2018

Рейтинг с самой прозрачной методологией SEO глазами клиентов 2023

Рейтинг известности SEO-компаний 2020 по версии SEO-news

Подробнее о компании Наши достижения