User-Agent: *
# Разрешаем сканирование всех публичных страниц сайта
Allow: /
# ---------------------------------------------------------
# Блокируем технические и системные страницы сайта
# Эти страницы не нужны в поисковой выдаче и могут создавать дубли.
Disallow: /wp-admin/ # Панель администратора WordPress
Disallow: /wp-includes/ # Внутренние файлы WordPress
Disallow: /wp-login.php # Страница входа в админку
Disallow: /cart/ # Корзина, не должна индексироваться
Disallow: /checkout/ # Оформление заказа, приватная страница
Disallow: /my-account/ # Личный кабинет пользователя
Disallow: /wp-json/ # API WordPress
Disallow: /xmlrpc.php # API для старых приложений
# ---------------------------------------------------------
# Блокируем дублирующий контент
# Параметры фильтров, сортировки и пагинация могут создавать одинаковый контент на разных URL.
Disallow: /*?*filter=* # Фильтры товаров
Disallow: /*?*sort=* # Сортировка товаров
Disallow: /*/page/* # Пагинация категорий и блога
# ---------------------------------------------------------
# Блокируем теги и архивы блога, если они создают дубли
Disallow: /tag/ # Теговые страницы блога
Disallow: /category/*/page/* # Пагинация архивов категорий блога
# ---------------------------------------------------------
# Блокируем AMP-версии
# Если основная страница индексируется, AMP может создавать дублирующийся контент
Disallow: /*/amp/
# ---------------------------------------------------------
# Sitemap для ускоренной индексации
Sitemap: https://bikershop.com.ua/sitemap.xml