# robots.txt - Công An Phường Thuận Hóa
# https://vndpv.vn

# Cho phép tất cả các bot crawl site
User-agent: *
Allow: /

# Chặn các đường dẫn admin và không cần index
Disallow: /admin/
Disallow: /admin
Disallow: /login
Disallow: /logout
Disallow: /storage/
Disallow: /vendor/
Disallow: /build/
Disallow: /build-admin/
Disallow: /hot

# Chặn các file không cần thiết
Disallow: /*.json$
Disallow: /*.xml$
Disallow: /mix-manifest.json

# Crawl delay để giảm tải server (5 giây)
Crawl-delay: 5

# Google Bot cụ thể
User-agent: Googlebot
Allow: /
Disallow: /admin/
Crawl-delay: 2

# Bing Bot
User-agent: Bingbot
Allow: /
Disallow: /admin/
Crawl-delay: 5

# Sitemap location
Sitemap: https://vndpv.vn/sitemap.xml