Добро пожаловать в самую большую библиотеку wordpress-кода в рунете

Идеальный robots.txt для Wordpress и Woo

WordPress · 12.03.2018 13:05

0 0 383

По последним стандартам (согласно исследованию от Yoast) нет необходимости закрывать все что можно в robots.txt, он реально может быть небольшим по количеству условий, и при этом эффективным.

User-agent: *
Disallow: /wp-login
Disallow: /wp-admin
Disallow: /*add-to-cart=
Disallow: *?s=
Disallow: */?att
Disallow: *?pr
Disallow: *?filter
Disallow: */page/
Disallow: *?orderby=
Allow: /wp-admin/admin-ajax.php
Crawl-delay: 40
Host: ДОМЕН
Sitemap: http://ДОМЕН/sitemap.xml

Обсудить сниппет
romapad

romapad

присоединился
30.04.2016

  • 54 Добавлено
    Сниппетов
  • 2 Получено
    Лайков
  • 0 Comments Posted
Теги
Поделиться с друзьями