Настройка файла robots.txt для сайта

Дата публикации: 19.07.2021 21:20:40
Нужно грамотно настроить файл robots.txt для сайта на WP
Под настройкой понимаю следующие пункты:
1. Закрыть от поисковых роботов ненужные страницы, такие как страницы логина и т д
2. Необходимо закрыть от поисковиков, кроме Google и “Яндекс”, стили и темы оформления, js.
3. Убрать от поисковых роботов служебные страницы сайта, где нет ключевых слов (например, с ошибкой 404).
4. Закрыть от поисковиков веб-документы с UTM-метками и сессиями.
5. Добавить директивы Host и Sitemap.

Если что-то упустил - то конечно стоит все сделать.
Источник: www.weblancer.net
Число просмотров: 2

Еще проекты:

Лендинг для сайта агротуризма

Лендинг сайта для рекламы агротуризма. Необходимо сделать одну страницу с рекламными проспектами местности, фотографиями и формой для бронирования. Присылайте ссылки на портфолио и ориентировочную стоимость.

Пример дизайна: https://daly.nyc/?ref=land-book.com (но в зелёных оттенках)

сделать описание для маркетплейса OZON до 1 тыс. символов

https://russian.alibaba.com/product-detail/amazon-s-same-baby-shark-plush-toy-can-sing-baby-shark-full-song-glows-baby-toys-1600247397984.html?spm=a2700.picsearch.offer-list.9.c87c5f93dLTONt

Написать SEO текст на сайт

Нужно написать текст на главную страницу сайта Грузоперевозок 1000-1500 знаков без пробелов. В корпоративном (деловом) стиле.  Оплата через безопасный платёж.  

Продвижение instagram

Есть профиль ребенка-спорстмена, хотелось бы проверить интерес продвижения через facebook.
У кого есть аккаунт и умеет грамотно настроить таргет? хотелось бы проверить как идет подписка.
ценник - обсудим, но на большие деньги не рассчитывайте, это не коммерция, а любительский, мотививационный проект.

Обработать фото (Бюджет: 1200 руб)

Обработать фото ТЗ 1. Вырезать грядку со стойками для подвязки растений http://joxi.ru/eAOOyWJC6dOMBA , обработать и поместить на другой фон может газон и т. д. (пример http://joxi.ru/YmE5Z3OHBv5NBm)