# robots.txt - ComparaSemplice.it

user-agent: *
disallow: *?replytocom
disallow: /speedtest_terzo_livello/*
disallow: /speedtest_terzo_livello
disallow: /auto/ricerca*
disallow: /informazioni/*/embed
disallow: /informazioni/*/*/feed
disallow: /informazioni/author/*/feed
disallow: *?s=*
disallow: /click*
disallow: /condizioni?*
disallow: /adsl-fibra-tel-offerte*
disallow: /compara/offerte-tv/risultati*
disallow: /compara/offerte-sim-cellulare/risultati*
disallow: /pay-tv-offerte?*
disallow: /informazioni/tag/*

# --- LLM / AI Crawlers (Allow tutto il resto, ma con le stesse esclusioni di cui sopra) ---
user-agent: GPTBot
disallow: *?replytocom
disallow: /speedtest_terzo_livello/*
disallow: /speedtest_terzo_livello
disallow: /auto/ricerca*
disallow: /informazioni/*/embed
disallow: /informazioni/*/*/feed
disallow: /informazioni/author/*/feed
disallow: *?s=*
disallow: /click*
disallow: /condizioni?*
disallow: /adsl-fibra-tel-offerte*
disallow: /compara/offerte-tv/risultati*
disallow: /compara/offerte-sim-cellulare/risultati*
disallow: /pay-tv-offerte?*
disallow: /informazioni/tag/*

user-agent: ChatGPT-User
disallow: *?replytocom
disallow: /speedtest_terzo_livello/*
disallow: /speedtest_terzo_livello
disallow: /auto/ricerca*
disallow: /informazioni/*/embed
disallow: /informazioni/*/*/feed
disallow: /informazioni/author/*/feed
disallow: *?s=*
disallow: /click*
disallow: /condizioni?*
disallow: /adsl-fibra-tel-offerte*
disallow: /compara/offerte-tv/risultati*
disallow: /compara/offerte-sim-cellulare/risultati*
disallow: /pay-tv-offerte?*
disallow: /informazioni/tag/*

user-agent: CCBot
disallow: *?replytocom
disallow: /speedtest_terzo_livello/*
disallow: /speedtest_terzo_livello
disallow: /auto/ricerca*
disallow: /informazioni/*/embed
disallow: /informazioni/*/*/feed
disallow: /informazioni/author/*/feed
disallow: *?s=*
disallow: /click*
disallow: /condizioni?*
disallow: /adsl-fibra-tel-offerte*
disallow: /compara/offerte-tv/risultati*
disallow: /compara/offerte-sim-cellulare/risultati*
disallow: /pay-tv-offerte?*
disallow: /informazioni/tag/*

user-agent: ClaudeBot
disallow: *?replytocom
disallow: /speedtest_terzo_livello/*
disallow: /speedtest_terzo_livello
disallow: /auto/ricerca*
disallow: /informazioni/*/embed
disallow: /informazioni/*/*/feed
disallow: /informazioni/author/*/feed
disallow: *?s=*
disallow: /click*
disallow: /condizioni?*
disallow: /adsl-fibra-tel-offerte*
disallow: /compara/offerte-tv/risultati*
disallow: /compara/offerte-sim-cellulare/risultati*
disallow: /pay-tv-offerte?*
disallow: /informazioni/tag/*

user-agent: Claude-Web
disallow: *?replytocom
disallow: /speedtest_terzo_livello/*
disallow: /speedtest_terzo_livello
disallow: /auto/ricerca*
disallow: /informazioni/*/embed
disallow: /informazioni/*/*/feed
disallow: /informazioni/author/*/feed
disallow: *?s=*
disallow: /click*
disallow: /condizioni?*
disallow: /adsl-fibra-tel-offerte*
disallow: /compara/offerte-tv/risultati*
disallow: /compara/offerte-sim-cellulare/risultati*
disallow: /pay-tv-offerte?*
disallow: /informazioni/tag/*

user-agent: PerplexityBot
disallow: *?replytocom
disallow: /speedtest_terzo_livello/*
disallow: /speedtest_terzo_livello
disallow: /auto/ricerca*
disallow: /informazioni/*/embed
disallow: /informazioni/*/*/feed
disallow: /informazioni/author/*/feed
disallow: *?s=*
disallow: /click*
disallow: /condizioni?*
disallow: /adsl-fibra-tel-offerte*
disallow: /compara/offerte-tv/risultati*
disallow: /compara/offerte-sim-cellulare/risultati*
disallow: /pay-tv-offerte?*
disallow: /informazioni/tag/*

user-agent: Applebot-Extended
disallow: *?replytocom
disallow: /speedtest_terzo_livello/*
disallow: /speedtest_terzo_livello
disallow: /auto/ricerca*
disallow: /informazioni/*/embed
disallow: /informazioni/*/*/feed
disallow: /informazioni/author/*/feed
disallow: *?s=*
disallow: /click*
disallow: /condizioni?*
disallow: /adsl-fibra-tel-offerte*
disallow: /compara/offerte-tv/risultati*
disallow: /compara/offerte-sim-cellulare/risultati*
disallow: /pay-tv-offerte?*
disallow: /informazioni/tag/*

user-agent: Google-Extended
disallow: *?replytocom
disallow: /speedtest_terzo_livello/*
disallow: /speedtest_terzo_livello
disallow: /auto/ricerca*
disallow: /informazioni/*/embed
disallow: /informazioni/*/*/feed
disallow: /informazioni/author/*/feed
disallow: *?s=*
disallow: /click*
disallow: /condizioni?*
disallow: /adsl-fibra-tel-offerte*
disallow: /compara/offerte-tv/risultati*
disallow: /compara/offerte-sim-cellulare/risultati*
disallow: /pay-tv-offerte?*
disallow: /informazioni/tag/*

user-agent: Meta-ExternalAgent
disallow: *?replytocom
disallow: /speedtest_terzo_livello/*
disallow: /speedtest_terzo_livello
disallow: /auto/ricerca*
disallow: /informazioni/*/embed
disallow: /informazioni/*/*/feed
disallow: /informazioni/author/*/feed
disallow: *?s=*
disallow: /click*
disallow: /condizioni?*
disallow: /adsl-fibra-tel-offerte*
disallow: /compara/offerte-tv/risultati*
disallow: /compara/offerte-sim-cellulare/risultati*
disallow: /pay-tv-offerte?*
disallow: /informazioni/tag/*

# Riferimenti
sitemap: https://www.comparasemplice.it/sitemap.xml
sitemap: https://www.comparasemplice.it/informazioni/sitemap_index.xml
sitemap: https://www.comparasemplice.it/informazioni/sitemap-news.xml
ai: https://www.comparasemplice.it/llms.txt