# ==========================================
# Robots.txt pro Tomáš Adamička Portfolio
# https://tomas.adamicka.cz/robots.txt
# Optimalizováno pro SEO a performance
# ==========================================

# Všeobecné pravidla pro všechny crawlery
User-agent: *
Allow: /
Allow: /galerie/
Allow: /*.jpg
Allow: /*.png
Allow: /*.jpeg
Allow: /*.gif
Allow: /*.webp
Allow: /*.avif
Allow: /*.svg
Allow: /*.pdf
Allow: /manifest.json
Allow: /manifest.webmanifest
Allow: /sitemap.xml

# Blokování citlivých souborů a adresářů
Disallow: /*.log
Disallow: /*.bak
Disallow: /*.tmp
Disallow: /*.old
Disallow: /config/
Disallow: /.env*
Disallow: /.git/
Disallow: /.htaccess
Disallow: /404.html
Disallow: /403.html
Disallow: /500.html

# Specializované crawlery pro obrázky
User-agent: Googlebot-Image
Allow: /
Allow: /galerie/
Allow: /*.jpg
Allow: /*.png
Allow: /*.jpeg
Allow: /*.gif
Allow: /*.webp
Allow: /*.avif
Allow: /*.svg
Disallow: /*.log
Disallow: /*.bak
Allow: /*.gif
Allow: /*.webp

# Google Mobile crawler
User-agent: Googlebot-Mobile
Allow: /
Allow: /galerie/
Allow: /manifest.json
Allow: /manifest.webmanifest
Crawl-delay: 0.5

# Yahoo crawler
User-agent: Slurp
Allow: /
Allow: /galerie/
Allow: /*.jpg
Allow: /*.png
Allow: /*.jpeg
Allow: /*.gif
Allow: /*.webp

# Yandex crawler
User-agent: YandexBot
Allow: /
Allow: /galerie/
Allow: /*.jpg
Allow: /*.png
Allow: /*.jpeg
Allow: /*.gif
Allow: /*.webp
Crawl-delay: 1

# DuckDuckGo crawler
User-agent: DuckDuckBot
Allow: /
Allow: /galerie/
Allow: /*.jpg
Allow: /*.png
Allow: /*.jpeg

# Seznam.cz crawler
User-agent: SeznamBot
Allow: /
Allow: /galerie/
Allow: /*.jpg
Allow: /*.png
Allow: /*.jpeg
Crawl-delay: 1

User-agent: Bingbot
Allow: /
Allow: /galerie/
Allow: /*.jpg
Allow: /*.png
Allow: /*.jpeg
Allow: /*.gif
Allow: /*.webp

# Specializovaný Bing crawler pro obrázky
User-agent: bingbot
Allow: /
Allow: /galerie/
Allow: /*.jpg$
Allow: /*.png$
Allow: /*.jpeg$
Allow: /*.gif$
Allow: /*.webp$
Allow: /*.svg$
Allow: /imagemap.xml
Crawl-delay: 0.5

# Microsoft Edge crawler pro obrázky
User-agent: adidxbot
Allow: /
Allow: /galerie/
Allow: /*.jpg
Allow: /*.png
Allow: /*.jpeg
Allow: /*.gif
Allow: /*.webp

# Bing preview crawler
User-agent: BingPreview
Allow: /
Allow: /galerie/
Allow: /*.jpg
Allow: /*.png
Allow: /*.jpeg

# Povolit všechny hlavní crawlery pro sociální sítě
User-agent: facebookexternalhit
Allow: /
Allow: /galerie/

User-agent: Twitterbot
Allow: /
Allow: /galerie/

User-agent: LinkedInBot
Allow: /
Allow: /galerie/

User-agent: WhatsApp
Allow: /
Allow: /galerie/

User-agent: Discordbot
Allow: /

User-agent: TelegramBot
Allow: /

# Blokovat některé crawlery, které nejsou relevantní
User-agent: AhrefsBot
Disallow: /

User-agent: MJ12bot
Disallow: /

User-agent: DotBot
Disallow: /

# Blokovat SEO audit crawlery
User-agent: SemrushBot
Disallow: /

User-agent: MajesticSEO
Disallow: /

User-agent: BLEXBot
Disallow: /

# Blokovat spam/malicious crawlery
User-agent: SiteAuditBot
Disallow: /

User-agent: ZoomBot
Disallow: /

User-agent: Mail.RU_Bot
Disallow: /

# Sitemap lokace
Sitemap: https://tomas.adamicka.cz/sitemap.xml
Sitemap: https://tomas.adamicka.cz/imagemap.xml

# Crawl delay pro méně agresivní crawlování
Crawl-delay: 1

# Request rate limiting pro lepší performance
Request-rate: 1/10s

# Preferred visit time (UTC)
Visit-time: 0200-0800

# Cache directives pro crawlery
Cache-directive: max-age=86400

# Blokování nepotřebných souborů
Disallow: /ping.php
Disallow: /ping2.php
Disallow: /ping_batch.php
Disallow: /324F2E1386FC4dCbbb7F720b5862FF21.txt
Disallow: /database_setup.sql
Disallow: /game_database.php
Disallow: /*.txt$

# Blokování CV souboru z indexace
Disallow: /galerie/CV.pdf