- Настройка robots.txt
- Настройка sitemap.xml
- Настройка редиректов в файле .htaccess
Создание файла robots. txt
В данном файле прописываются инструкции для поисковых роботов.
В файле можно:
- Закрыть разделы и страницы сайта (директива Disallow), которые не должны быть проиндексированы поисковыми системами. Обычно это дубли страниц, технические страницы cms, любые мусорные страницы, которые не представляют важности для поисковиков.
- Открыть нужные разделы и страницы для индексации (директива Allow).
- Прописать главное зеркало сайта (директива Host).
- Указать путь до файла sitemap.xml (директива Sitemap).
Для этого переходим в панель Администрирования – Маркетинг – Поисковая оптимизация – настройка robots.txt
Выбираем «Стартовый набор» на вкладке «Общие правила».
Система предложит указать главное зеркало. Важно главное зеркало указывать с именем протокола, то есть полный адрес сайта начиная с http либо https
Сохраняем созданный файл robots.txt
Создание файла sitemap.xml
В файле sitemap.xml прописываются все страницы сайта, которые необходимо проиндексировать поисковым роботам.
В системе cms Битрикс файл sitemap.xml можно создать посредством стандартного функционала.
Для этого переходим в панель Администрирования – Маркетинг – Поисковая оптимизация – Настройка sitemap.xml
Выбираем нужный сайт, для которого будет создана карта sitemap.xml
Выбираем нужный домен. Ставим галочку «Добавить правило в robots.txt после генерации».
Выбираем «Сохранить и запустить».
Карта sitemap.xml создана. Важно периодически обновлять карту после добавления новых страниц.
Также автоматически прописался путь к файлу sitemap.xml в файле robots.txt
Настройка редиректов в файле .htaccess
Настройки данного файла лучше производить через ftp сайта либо через файловый менеджер хостинга. Если настройки файла производить через панель администрирования Битрикс (Администрирование – Контент – Структура сайта – Файлы и папки - .htaccess), то при допущении ошибки в коде файла сайт перестанет работать (включая панель администрирования Битрикс).
В пример 3 редиректа.
- На https
- Без www
- На / со страницы /index.php
Данный код необходимо разместить в самом начале файла (site.ru необходимо заменить на имя вашего домена).
Готовые решения от веб-студии ГВОЗДЕВСОФТ:
Все наши решения можно посмотреть по ссылке:
Фото:
