mi-check.ru Review

 User-agent: GoogleBot       # правила для Google (комментарии не дублирую)
Disallow: /cgi-bin
Disallow: /wp-
Disallow: /wp/
Disallow: *?s=
Disallow: *&s=
Disallow: /search/
Disallow: /author/
Disallow: /users/
Disallow: */trackback
Disallow: */feed
Disallow: */rss
Disallow: /xmlrpc.php
Disallow: *utm=
Disallow: *openstat=
Disallow: *?criteria=
Allow: */uploads
Allow: /*/*.js              # открываем js-скрипты внутри /wp- (/*/ - для приоритета)
Allow: /*/*.css             # открываем css-файлы внутри /wp- (/*/ - для приоритета)
Allow: /wp-*.png            # картинки в плагинах, cache папке и т.д.
Allow: /wp-*.jpg            # картинки в плагинах, cache папке и т.д.
Allow: /wp-*.jpeg           # картинки в плагинах, cache папке и т.д.
Allow: /wp-*.gif            # картинки в плагинах, cache папке и т.д.
Allow: /wp-admin/admin-ajax.php # используется плагинами, чтобы не блокировать JS и CSS

User-agent: Yandex          # правила для Яндекса (комментарии не дублирую)
Disallow: /cgi-bin
Disallow: /wp-
Disallow: /wp/
Disallow: *?s=
Disallow: *?sa=
Disallow: *&s=
Disallow: /search/
Disallow: /author/
Disallow: /users/
Disallow: */trackback
Disallow: */feed
Disallow: */rss
Disallow: /xmlrpc.php
Disallow: *?criteria=
Allow: /feed/zen
Allow: */uploads
Allow: /*/*.js
Allow: /*/*.css
Allow: /wp-*.png
Allow: /wp-*.jpg
Allow: /wp-*.jpeg
Allow: /wp-*.gif
Allow: /wp-admin/admin-ajax.php
Clean-Param: utm_source&utm_medium&utm_campaign # Яндекс рекомендует не закрывать 
                            # от индексирования, а удалять параметры меток, 
                            # Google такие правила не поддерживает
Clean-Param: openstat       # аналогично

# Укажите один или несколько файлов Sitemap (дублировать для каждого User-agent 
# не нужно). Google XML Sitemap создает 2 карты сайта, как в примере ниже.


# Укажите главное зеркало сайта, как в примере ниже (с WWW / без WWW, если HTTPS 
# то пишем протокол, если нужно указать порт, указываем). Команду Host понимает 
# Яндекс и Mail.RU, Google не учитывает.
Host: https://mi-check.ru
Sitemap: https://mi-check.ru/sitemap.xml

User-agent: *
Crawl-delay: 250

HTTP/1.1 301 Moved Permanently
Server: nginx-reuseport/1.21.1
Date: Sun, 24 Aug 2025 23:00:25 GMT
Content-Type: text/html; charset=iso-8859-1
Content-Length: 303
Connection: keep-alive
Keep-Alive: timeout=30
Location: https://mi-check.ru/

HTTP/1.1 200 OK
Server: nginx-reuseport/1.21.1
Date: Sun, 24 Aug 2025 23:00:26 GMT
Content-Type: text/html; charset=UTF-8
Content-Length: 79044
Connection: keep-alive
Keep-Alive: timeout=30
Vary: Accept-Encoding,Cookie
Last-Modified: Thu, 21 Aug 2025 03:18:40 GMT
Cache-Control: max-age=3, must-revalidate
Expires: Sun, 24 Aug 2025 23:00:29 GMT
Content-Encoding: gzip
Accept-Ranges: bytes