Cloudflare introduce il controllo differenziato dei crawler AI per scopo (heise.de)

• Cloudflare introduce tre categorie di crawler AI: Search, Agent, Training
• Da settembre 2026, blocco predefinito dei crawler di training/agent su nuovi domini con pubblicità
• Database enterprise BotBase classifica bot e livelli di utilizzo

"Cloudflare amplia il controllo sui crawler AI: gli operatori di siti web possono ora distinguere e bloccare gli accessi in base allo scopo (ricerca, agente, addestramento). Dal 15 settembre 2026, i nuovi domini bloccheranno per impostazione predefinita i crawler di addestramento e agenti sui siti con pubblicità, mentre consentiranno quelli dei motori di ricerca. Cloudflare introduce anche BotBase, un database di bot verificati con classificazioni e livelli di utilizzo. Le funzionalità sono disponibili per tutti i clienti, incluso il piano gratuito."