Здесь отличный заработок в сети от 100 рублей в день!

Доброй
ночи!
Ваш IP: 107.21.169.9

ПОЛЕЗНАЯ ИНФОРМАЦИЯ

22:16
18.12.2018
Вторник

Привильный файл Robots.txt для WordPress

Сегодня хочу рассказать о правильном файле Robots.txt для CMS WordPress. Не подумайте, что это будет длинный и нудный пост о том, что такое Robots.txt и как правильно его написать  для своего сайта, материала в сети на эту тему предостаточно. Я просто приведу пример который я использую на всех своих сайтах.За приведенным вариантом я наблюдал около года и в принципе остался доволен результатом. Поисковые системы индексируют только нужный контент, все дубли закрыты от индексации.

Ниже приведен пример для сайта на котором включены ЧПУ ссылки:

User-agent: *
Disallow: /cgi-bin
Disallow: /wp-admin
Disallow: /wp-includes
Disallow: /wp-content/plugins
Disallow: /wp-content/cache
Disallow: /wp-content/themes
Disallow: /wp-trackback
Disallow: /wp-feed
Disallow: /wp-comments
Disallow: */trackback
Disallow: */feed
Disallow: */comments
Disallow: /*?*
Disallow: /*?

User-agent: Yandex
Disallow: /cgi-bin
Disallow: /wp-admin
Disallow: /wp-includes
Disallow: /wp-content/plugins
Disallow: /wp-content/cache
Disallow: /wp-content/themes
Disallow: /wp-trackback
Disallow: /wp-feed
Disallow: /wp-comments
Disallow: */trackback
Disallow: */feed
Disallow: */comments
Disallow: /*?*
Disallow: /*?
Host: your-web-site.ru

Sitemap: http://your-web-site.ru/sitemap.xml

Если ЧПУ ссылки не включены, тогда нужно использовать это вариант Robots.txt:

User-agent: *
Disallow: /cgi-bin
Disallow: /wp-admin
Disallow: /wp-includes
Disallow: /wp-content/plugins
Disallow: /wp-content/cache
Disallow: /wp-content/themes
Disallow: /wp-trackback
Disallow: /wp-feed
Disallow: /wp-comments
Disallow: */trackback
Disallow: */feed
Disallow: */comments

User-agent: Yandex
Disallow: /cgi-bin
Disallow: /wp-admin
Disallow: /wp-includes
Disallow: /wp-content/plugins
Disallow: /wp-content/cache
Disallow: /wp-content/themes
Disallow: /wp-trackback
Disallow: /wp-feed
Disallow: /wp-comments
Disallow: */trackback
Disallow: */feed
Disallow: */comments
Host: your-web-site.ru

Sitemap: http://your-web-site.ru/sitemap.xml

Не забудьте заменить приведенное в примере имя домена your-web-site.ru на свое.


HTML ссылка на статью *:
<a href="http://your-web-site.ru/privilnyj-fajl-robots-txt-dlya-wordpress/" target="_blank" title="Сделать (купить) свой веб сайт - Привильный файл Robots.txt для WordPress">Сделать (купить) свой веб сайт - Привильный файл Robots.txt для WordPress</a>

BBCode ссылка для форума *:
[url=http://your-web-site.ru/privilnyj-fajl-robots-txt-dlya-wordpress/]Сделать (купить) свой веб сайт - Привильный файл Robots.txt для WordPress[/url]
* Копирование материалов без индексируемой обратной гиперссылки на этот сайт - ЗАПРЕЩЕНО!


Навигация между соседними записями:
Вы можете пропустить чтение записи и оставить комментарий. Размещение ссылок запрещено.

Похожие записи:



Оставить комментарий:

*

Хотите купить веб сайт очень дешево? Нажмите на этот текст!
Кликните по баннеру чтобы увидеть мои работы на бирже сайтов.
Яндекс.Метрика Яндекс цитирования