Robots.txt для WordPress

User-agent: *                      # Общие правила для всех роботов, кроме тех, которые указаны ниже
# podrobnee o fajle mozhno uznat tut - https://seo-personal.ru/blog/robots-txt-for-wordpress/
Disallow: /wp-
Disallow: /wp/
Disallow: /wp-login.php
Disallow: /wp-register.php
Disallow: /*orderby
Disallow: /cgi-bin                 # Папка на хостинге
Disallow: /wp-admin
Disallow: *preview_id
Disallow: */feed                   # все фиды (нужны больше для Яндекс)
Disallow: */rss                    # rss фид (нужны больше для Яндекс)
Disallow: */wp-json/
Disallow: */wlwmanifest.xml
Disallow: /xmlrpc.php
Disallow: *product_view=
Disallow: *yandex-source=
Disallow: *preview=                # Просмотр страницы из административной панели
Disallow: /*view_result=           # Страницы с параметром просмотра
Disallow: *escaped_fragment
Disallow: *debug=
Disallow: *semalt_com
Disallow: *back=
Disallow: *page_id=
Disallow: *type=                   # Страницы с типами статей
Disallow: *unapproved=
Disallow: *customize_changeset*
Disallow: *s=                      # Закрывает результаты поиска
Disallow: /search/                 # Закрывает результаты поиска
Disallow: */trackback       	   # трекбеки, уведомления в комментариях о появлении открытой ссылки на статью
Disallow: *v=
Disallow: /access.log
Disallow: /plugins
Disallow: *attachment_id=*         # Мусорные страницы attachment (рекомендую вовсе их удалять)
Disallow: /*add-to-cart=*          # URL после добавления товара в корзину
Disallow: /*attribute*
Disallow: /cart/*                  # Корзина v1
Disallow: *checkout                # Корзина v2
Disallow: /korzina/*               # Корзина v3
Disallow: /rpjou/*
Disallow: /blnoer/*
Disallow: /*my-account             # Личный кабинет
Disallow: *ordr=                   # Сортировка по дате добавления
Disallow: *openstat=               # Закрывает страницы с метками Openstat
Disallow: *ref=                    # Реферальные ссылки
Disallow: *utm*=                   # Ссылки с utm-метками
Disallow: *etext=                  # Рекламная метка
Disallow: *fbclid=                 # UML-метка (переходы на страницу из Facebook)
Disallow: *source=
Disallow: /*from*
Disallow: /*gclid*                 # Ссылки с метками
Disallow: /*yclid*                 # Ссылки с метками
Disallow: */amp                    # Закрываем все AMP страницы (нужны только для Google)
Disallow: *amp=                    # Закрытие 2-го варианта реализации AMP страниц
#Правила, которые открывают определенные файлы
Allow: /wp-*.php
Allow: /wp-*.css           # js-скрипты
Allow: /wp-*.js            # css-файлы
Allow: /wp-*.png           # png картинки
Allow: /wp-*.jpg           # jpg картинки
Allow: /wp-*.gif           # гифки
Allow: /wp-*.pdf           # pdf файлы
Allow: /wp-*.svg           # svg файлы (иконки)
Allow: /wp-*.ttf           # шрифтовые файлы TrueType
Allow: /wp-*.woff          # расширение шрифта OpenType или TrueType
Allow: /wp-*.webp          # файлы формата .webp

User-agent: GoogleBot              #Правила только для робота Google
Disallow: /wp-
Disallow: /wp/
Disallow: /wp-login.php
Disallow: /wp-register.php
Disallow: /*orderby
Disallow: /cgi-bin
Disallow: /wp-admin
Disallow: *preview_id
Disallow: */feed
Disallow: */rss
Disallow: */wp-json/
Disallow: */wlwmanifest.xml
Disallow: /xmlrpc.php
Disallow: *back=
Disallow: *page_id=
Disallow: *type=
Disallow: *unapproved=
Disallow: *customize_changeset*
Disallow: *s=
Disallow: /search/
Disallow: */trackback
Disallow: *v=
Disallow: /access.log
Disallow: /plugins
Disallow: /*?attribute*
Disallow: /cart/*
Disallow: *checkout
Disallow: /korzina/*
Disallow: *product_view=
Disallow: *yandex-source=
Disallow: *ref=
Disallow: *preview=
Disallow: *escaped_fragment
Disallow: *debug=
Disallow: /*my-account
Disallow: *ordr=
Disallow: *openstat=
Disallow: /*utm*
Disallow: *etext=
Disallow: *fbclid=
Disallow: *source=
Disallow: /*from*
Disallow: /*gclid*
Disallow: /*yclid*
Allow: */amp                       #Разрешаем гуглу сканировать AMP страницы
Allow: *amp=
Allow: /wp-*.php
Allow: /wp-*.css
Allow: /wp-*.js
Allow: /wp-*.png
Allow: /wp-*.jpg
Allow: /wp-*.gif   
Allow: /wp-*.pdf
Allow: /wp-*.svg
Allow: /wp-*.ttf
Allow: /wp-*.woff
Allow: /wp-*.webp

User-agent: Yandex                  #Правила только для робота Яндекс
Disallow: /wp-
Disallow: /wp/
Disallow: /wp-login.php
Disallow: /wp-register.php
Disallow: /*orderby
Disallow: /cgi-bin
Disallow: /wp-admin
Disallow: *preview_id
Disallow: */wp-json/
Disallow: */wlwmanifest.xml
Disallow: /xmlrpc.php
Disallow: *product_view=
Disallow: *yandex-source=
Disallow: *ref=
Disallow: *preview=
Disallow: *escaped_fragment
Disallow: *debug=
Disallow: *semalt_com
Disallow: *back=
Disallow: *page_id=
Disallow: *type=
Disallow: *unapproved=
Disallow: *customize_changeset*
Disallow: *s=
Disallow: /search/
Disallow: */trackback
Disallow: *v=
Disallow: /access.log
Disallow: /plugins
Disallow: *?attachment_id=*
Disallow: /*?*add-to-cart=*
Disallow: /*?attribute*
Disallow: /cart/*
Disallow: *checkout
Disallow: /korzina/*
Disallow: /rpjou/*
Disallow: /blnoer/*
Disallow: /*my-account
Disallow: *ordr=
Disallow: *openstat=
Disallow: /*utm*
Disallow: *fbclid= 
Disallow: *etext=
Disallow: *source=
Disallow: /*from*
Disallow: /*gclid*
Disallow: /*yclid*
Disallow: */amp
Disallow: *amp=
Allow: /wp-*.php
Allow: /wp-*.css
Allow: /wp-*.js
Allow: /wp-*.png
Allow: /wp-*.jpg
Allow: /wp-*.gif   
Allow: /wp-*.pdf
Allow: /wp-*.svg
Allow: /wp-*.ttf
Allow: /wp-*.woff
Allow: /wp-*.webp

Sitemap: https://site.com/sitemap.xml       # Укажите ссылку на вашу карту сайта в формате xml