urband.ru Review

 # Документация по файлу доступна по адресу:
# http://help.yandex.ru/webmaster/?id=996567

# Последующие строки написаны для роботов Яндекс
User-agent: Yandex
# Не индексировать корзину
Disallow: /cart
# Не индексировать страницы оформленных заказов
Disallow: /order
# Не индексировать личный кабинет
Disallow: /user
# Не индексировать результаты поиска по сайту
Disallow: /search
# Не индексировать страницу сравнения товаров
Disallow: /compare
# Не индексировать страницу установки cookie файлов на не основных доменах магазина
Disallow: /setcookie
# Не индексировать страницу добавления товаров в избранное
Disallow: /favorites
#Не индексировать панель администрирования 
Disallow: /admin/
# Не индексировать разные модификации товара
Clean-param: mod_id&from&form /goods/

# Последующие строки написаны для роботов Гугл
User-agent: Googlebot
# Не индексировать корзину
Disallow: /cart
# Не индексировать страницы оформленных заказов
Disallow: /order
# Не индексировать личный кабинет
Disallow: /user
# Не индексировать результаты поиска по сайту
Disallow: /search
# Не индексировать страницу сравнения товаров
Disallow: /compare
# Не индексировать страницу установки cookie файлов на не основных доменах магазина
Disallow: /setcookie
# Не индексировать страницу добавления товаров в избранное
Disallow: /favorites
#Не индексировать панель администрирования 
Disallow: /admin/

# Последующие строки написаны для всех роботов
User-agent: *
# Не индексировать корзину
Disallow: /cart
# Не индексировать страницы оформленных заказов
Disallow: /order
# Не индексировать личный кабинет
Disallow: /user
# Не индексировать результаты поиска по сайту
Disallow: /search
# Не индексировать страницу сравнения товаров
Disallow: /compare
# Не индексировать страницу установки cookie файлов на не основных доменах магазина
Disallow: /setcookie
# Не индексировать страницу добавления товаров в избранное
Disallow: /favorites
# Информация о том где находится карта сайта
Sitemap: http://urband.ru/sitemap

HTTP/1.1 301 Moved Permanently
Server: nginx/1.18.0 (Ubuntu)
Date: Sat, 12 Jul 2025 13:47:38 GMT
Content-Type: text/html; charset=utf-8
Transfer-Encoding: chunked
Connection: keep-alive
Expires: Mon, 26 Jul 1970 05:00:00 GMT
Last-Modified: Sat, 12 Jul 2025 13:47:38 GMT
Cache-Control: no-store, no-cache, must-revalidate
Pragma: no-cache
X-Powered-By: PHP
X-Generator: StoreLand
Set-Cookie: s540801[u]=db56977f; expires=Sun, 12-Jul-2026 13:47:38 GMT; Max-Age=31536000; path=/; domain=.urband.ru; HttpOnly
Location: https://urband.ru/

HTTP/1.1 200 OK
Server: nginx/1.18.0 (Ubuntu)
Date: Sat, 12 Jul 2025 13:47:41 GMT
Content-Type: text/html; charset=utf-8
Transfer-Encoding: chunked
Connection: keep-alive
Expires: Mon, 26 Jul 1970 05:00:00 GMT
Last-Modified: Sat, 12 Jul 2025 13:47:41 GMT
Cache-Control: no-store, no-cache, must-revalidate
Pragma: no-cache
X-Powered-By: PHP
X-Generator: StoreLand
Set-Cookie: s540801[u]=9962c334; expires=Sun, 12-Jul-2026 13:47:41 GMT; Max-Age=31536000; path=/; domain=.urband.ru; HttpOnly
Set-Cookie: s540801[g]=w%CB%A7; expires=Sun, 12-Jul-2026 13:47:41 GMT; Max-Age=31536000; path=/; domain=.urband.ru; HttpOnly
Content-Encoding: gzip