# robots.txt
# Optimized for SEO and crawl efficiency
# Blocks unnecessary Drupal paths, spam targets, duplicate content, and bot traps
# Keeps critical CSS/JS/images indexable
# Applies to all user agents
User-agent: *
# Crawl rate control (optional, adjust as needed)
Crawl-delay: 10
##########################################
# Allow CSS, JS, and image resources
##########################################
Allow: /misc/*.css$
Allow: /misc/*.css?
Allow: /misc/*.js$
Allow: /misc/*.js?
Allow: /misc/*.gif
Allow: /misc/*.jpg
Allow: /misc/*.jpeg
Allow: /misc/*.png
Allow: /modules/*.css$
Allow: /modules/*.css?
Allow: /modules/*.js$
Allow: /modules/*.js?
Allow: /modules/*.gif
Allow: /modules/*.jpg
Allow: /modules/*.jpeg
Allow: /modules/*.png
Allow: /profiles/*.css$
Allow: /profiles/*.css?
Allow: /profiles/*.js$
Allow: /profiles/*.js?
Allow: /profiles/*.gif
Allow: /profiles/*.jpg
Allow: /profiles/*.jpeg
Allow: /profiles/*.png
Allow: /themes/*.css$
Allow: /themes/*.css?
Allow: /themes/*.js$
Allow: /themes/*.js?
Allow: /themes/*.gif
Allow: /themes/*.jpg
Allow: /themes/*.jpeg
Allow: /themes/*.png
##########################################
# Disallow Drupal system directories
##########################################
Disallow: /news/3986/acronis-true-image-2009-review
Disallow: /includes/
Disallow: /misc/
Disallow: /modules/
Disallow: /profiles/
Disallow: /scripts/
Disallow: /themes/
Disallow: /hybridauth/
##########################################
# Disallow sensitive system files
##########################################
Disallow: /CHANGELOG.txt
Disallow: /cron.php
Disallow: /install.php
Disallow: /INSTALL.txt
Disallow: /INSTALL.mysql.txt
Disallow: /INSTALL.pgsql.txt
Disallow: /INSTALL.sqlite.txt
Disallow: /LICENSE.txt
Disallow: /MAINTAINERS.txt
Disallow: /update.php
Disallow: /UPGRADE.txt
Disallow: /xmlrpc.php
##########################################
# Disallow user-related paths and logins
##########################################
Disallow: /user
Disallow: /user/
Disallow: /user/login
Disallow: /user/register
Disallow: /users/
Disallow: /users
Disallow: /?q=user
##########################################
# Disallow comment system paths
##########################################
Disallow: /comment/
Disallow: /comment/reply/
Disallow: /*/comment/reply/
##########################################
# Disallow authors, category, tag, and taxonomy paths
##########################################
Disallow: /authors/
Disallow: /categories/
Disallow: /tags/
Disallow: /tags?page=
Disallow: /taxonomy/
Disallow: /*/feed
##########################################
# Disallow feeds and duplicate index files
##########################################
Disallow: /rss.xml
Disallow: /atom.xml
Disallow: /rss/
Disallow: /feeds/
Disallow: /index.xml
Disallow: /*.ics
Disallow: /lists/
##########################################
# Disallow duplicate or low-value pages
##########################################
Disallow: /admin/
Disallow: /filter/
Disallow: /search
Disallow: /search?
Disallow: /news/archive
Disallow: /news/archive/
Disallow: /news/archive/*
##########################################
# Disallow URL parameters often used in bots or duplicate pages
##########################################
Disallow: /?q=
Disallow: /*?page=
Disallow: /*&page=
Disallow: /*?destination=
Disallow: /*?keys=
Disallow: /*?sort=
Disallow: /*?order=
##########################################
# Disallow known bot-probe paths (for security)
##########################################
Disallow: /.env
Disallow: /.git/
Disallow: /.git/config
Disallow: /.well-known/
Disallow: /wp-login.php
##########################################
# Block Drupal system paths that create duplicates
##########################################
Disallow: /node/
Disallow: /node
Disallow: /node?*
##########################################
# Allow Sitemap
##########################################
Sitemap: https://www.infopackets.com/sitemap.xml