Robots.txt файл

Автор:Александр Милютин Опубликовано: Обновлено:

Файл robots.txt — это один из системных файлов сайта в котором прописываются команды управляющие роботами поисковых сиетем. Основное назначение файла — это запрет индексации страниц, категорий которые не должны быть в результатах поиска. Системные страницы, админ панель сайта, страница результатов поиска, другие динамические страницы. Файл должен находиться в корне сайта к которому прописываются правила.

Основные функции файла robots.txt:

Как редактировать файл в CMS системах

WordPress

С помощью плагина SEO Ultimate

В админ панели сайта, перейти в меню плагина, выбрав File Editor

Приступаем к редактированию файла.

После внесения изменений обязательно проверяйте robots.txt

Александр Милютин

Founder & CEO в Академии IMT, 13 лет в маркетинге из них 10 в Digital Marketing. Автор курсовSEO, SMM, интернет-маркетинг. Спикер конференций. Организатор ежегодной конференции Digital Marketing Trends

Похожие записи

CSV

АвторАлександр Милютин

CSV ( Comma Separated Values) — формат текстового файла для хранения табличных данных. Данные в файле отделены специальными разделителями (это может быть как запятая, так и точка с запятой, так и любой спецсимвол по желанию) Одна строка файла — это одна строка таблицы. Этот формат часто используется для экспорта-импорта данных между программами и базами данных….

СДЛ, сайт для людей

АвторАлександр Милютин

На сленге SEO специалистов СДЛ — Сайт Для Людей Составляющие СДЛ: уникальный контент контент для людей, а не для ботов человеческий дизайн регулярное обновление контента