Come tracciare quali agenti AI visitano il tuo sito web e cosa fanno

Scopri come tracciare quali agenti AI visitano il tuo sito web con Reaudit. Identifica gli AI crawler, il traffico di referral AI e ottimizza per l'agent analytics.

Torna agli articoli
Come tracciare quali agenti AI visitano il tuo sito web e cosa fanno
Riassunto AI
ChatGPT icon
Perplexity icon
Claude icon
Google AI icon
Grok icon
Ascolta l'articolo

Per tracciare quali agenti AI visitano il tuo sito, ti serve l'agent analytics: un sistema che identifica gli AI crawler (GPTBot, ClaudeBot, PerplexityBot, Google-Extended) e il traffico di referral AI (visitatori umani da ChatGPT, Perplexity, Copilot) usando fonti dati stratificate come i log edge di Cloudflare, GA4 e un tracker JavaScript. Reaudit fornisce questa piattaforma unificata, mostrandoti quali agenti scansionano le tue pagine, cosa citano, dove falliscono e come ottimizzare per loro.

Cos'è l'Agent Analytics?

Agent analytics è la disciplina di tracciare e analizzare gli agenti AI non umani, i crawler LLM, i retrieval bot e i browser guidati dall'AI, così puoi vedere:

  • Quali agenti AI visitano il tuo sito (ad es. GPTBot, ChatGPT-User, ClaudeBot, PerplexityBot, Google-Extended)

  • Cosa scansionano, interrogano e citano dalle tue pagine

  • Dove falliscono, rimbalzano o vanno in timeout

  • Quali visitatori umani arrivano tramite referral AI da ChatGPT, Perplexity, Copilot o altre superfici AI

  • Come ottimizzare il tuo sito affinché gli agenti capiscano, raccomandino e ti inviino più traffico ad alta intenzione

Estende la web analytics classica (sessioni, conversioni) al web degli agenti, dove i sistemi AI autonomi sono ormai l'utente principale che scansiona i tuoi contenuti e decide se gli umani li vedranno mai.

Perché l'Agent Analytics è importante adesso

Salesforce ha stimato che il traffico da referral AI e agenti ha generato il 21% di tutti gli ordini globali delle festività nella stagione 2023-24, pari a 263 miliardi di dollari di vendite. Gli acquirenti che arrivano dalle piattaforme di AI generativa hanno il doppio delle probabilità di acquistare rispetto ai visitatori da altre fonti. Per i brand, soprattutto in SaaS, e-commerce e agenzie digitali, ignorare il traffico degli agenti significa lasciare ricavi sul tavolo.

Gli strumenti di analytics tradizionali come Google Analytics trattano gli AI crawler come rumore. Filtrano il traffico bot, quindi non vedi mai i 50+ bot LLM che visitano il tuo sito ogni giorno. Nel frattempo, i referral AI (clic umani dalle risposte AI) spesso appaiono come traffico diretto, nascondendo la loro vera origine. L'agent analytics risolve questo rendendo visibili entrambi.

AI Crawl vs. AI Referral: la differenza cruciale

Capire la distinzione tra un AI crawl e un AI referral è essenziale per l'ottimizzazione.

AI Crawl (visita dell'agente)

Un bot o agente GPTBot, ClaudeBot, PerplexityBot colpisce il tuo sito per indicizzare, recuperare o validare informazioni. Potrebbe non apparire mai come sessione umana in GA4 perché è traffico non umano. Il risultato: i tuoi contenuti diventano parte della knowledge base che gli LLM possono citare nelle risposte future.

AI Referral (visita umana dall'AI)

Un utente umano fa una domanda a un LLM, l'AI mostra o cita il tuo sito e l'utente clicca. Questo appare come una sessione umana, ma la fonte dell'intenzione è l'AI, non Google o il diretto. Questi visitatori convertono a tassi più alti perché l'AI li ha pre-qualificati.

Entrambi contano. Se tracci solo i crawl, sai di essere visto ma non se quella visibilità si traduce in traffico o ricavi. Se tracci solo i referral, ti perdi il motivo per cui certe pagine performano bene con gli agenti. L'agent analytics unisce questi aspetti: quali agenti hanno scansionato quali pagine, quali pagine vengono citate e quali citazioni generano visite umane reali e conversioni.

I principali user-agent degli AI crawler e cosa fanno

AI Crawler / Agente

Pattern tipico dello User-Agent

Cosa fa sul tuo sito

OpenAI GPTBot

GPTBot

Scansiona le pagine così i modelli OpenAI (ChatGPT) possono imparare dai tuoi contenuti e citarli nelle risposte.

OpenAI ChatGPT-User

ChatGPT-User

Recupera pagine specifiche in tempo reale quando un utente ChatGPT apre un link o un plugin accede al tuo sito.

Anthropic ClaudeBot

ClaudeBot

Indicizza i contenuti che i modelli Claude usano per retrieval e QA; rispetta robots.txt.

PerplexityBot

PerplexityBot

Scansiona e cattura snapshot delle pagine che Perplexity AI usa per rispondere alle domande con citazioni web in tempo reale.

Google-Extended

Google-Extended

Meccanismo di opt-out per i siti per controllare l'uso dei contenuti per l'addestramento AI e le funzionalità generative.

Reaudit rileva e classifica correttamente questi user-agent nei tuoi log, mostra l'andamento dei volumi nel tempo ed evidenzia quali crawler generano citazioni e referral a valle.

Come iniziare a tracciare gli agenti AI con Reaudit

Reaudit rende operativo l'agent analytics attraverso un'integrazione passo passo che richiede pochi minuti per essere configurata.

1. Collega i tuoi dati edge (Cloudflare)

Concedi a Reaudit l'accesso ai log di Cloudflare così può vedere tutte le richieste all'edge, incluso il traffico che non emerge mai in GA4 perché è stato bloccato, messo in cache o filtrato come bot. Questo ti fornisce conteggi autorevoli delle crawl AI e dei loro user-agent.

2. Sincronizza la tua proprietà GA4

Collega la tua proprietà Google Analytics 4 così Reaudit può attribuire sessioni e conversioni alle fonti di referral AI dove rilevabili, confrontare il traffico degli agent con quello umano e fare benchmark dei tassi di conversione dei visitatori provenienti da AI rispetto agli altri canali.

3. Installa il JavaScript Tracker

Aggiungi lo snippet JS di Reaudit al template del tuo sito. Questo cattura i metadati lato client sulle visite che appaiono come direct ma provengono da superfici AI, e registra gli eventi front-end che i log all'edge non vedono.

4. Attiva il rilevamento di AI Crawler e Agent

Reaudit analizza le stringhe user-agent e i pattern IP noti per classificare i crawler LLM (GPTBot, ClaudeBot, PerplexityBot, Google-Extended) e i browser guidati da AI. Li normalizza in una dimensione Agent pulita per l'analisi.

5. Attiva il tracciamento dei referral AI

Configura le regole di origine e i pattern UTM così Reaudit può etichettare il traffico come ChatGPT/OpenAI, Perplexity, Bing Copilot e altri assistenti AI. Questo abilita report su visite, conversioni e ricavi per fonte di referral AI.

6. Attiva il tracciamento delle citazioni di pagina

Reaudit traccia quali delle tue pagine appaiono come citazioni o riferimenti nelle risposte AI sulle principali superfici (ChatGPT, Perplexity, Claude, Gemini). Ottieni una vista a livello di pagina: crawled → cited → clicked → converted.

7. Monitora i fallimenti degli agent e le opportunità di ottimizzazione

Usa le dashboard di Reaudit per vedere le pagine con alto volume di crawl AI ma basso volume di citazioni/referral (gli agent le vedono ma non si fidano o non le usano) e le pagine che vengono spesso crawlate prima che gli agent abbandonino (non riescono a trovare risposte strutturate). Itera contenuti e SEO tecnico per colmare queste lacune.

Per vedere quali agent AI stanno già visitando il tuo sito e quanti ricavi generano, collega il tuo stack su reaudit.io.

Dati reali: cosa puoi aspettarti di vedere

In un case study con 3dplotter.xyz, Reaudit ha tracciato 726 menzioni AI e 11.204 citazioni sui principali motori AI. La piattaforma ha identificato che PerplexityBot ha crawllato il sito 4 volte più di GPTBot, eppure le citazioni di GPTBot hanno guidato il 60% del traffico di referral AI. Questo tipo di insight ti permette di dare priorità agli sforzi di ottimizzazione: sistema ciò che gli agent usano davvero, non solo ciò che crawla di più.

Oltre il rilevamento: ottimizzare per gli agent

Una volta identificato il traffico dei bot AI sul tuo sito, il passo successivo è l'ottimizzazione. Il rilevamento degli agent AI per i siti web è utile solo se agisci sui dati. La piattaforma full-stack di Reaudit va oltre il monitoraggio e ti aiuta a generare contenuti che vincono le citazioni, pubblicarli con dati strutturati e misurare l'impatto sulla visibilità.

Usa l'AI Crawler URL Inspector per vedere esattamente cosa estraggono ChatGPT, Claude e Perplexity dalle tue pagine. Poi applica questi insight per migliorare l'AI-readability dei tuoi contenuti.

Conclusione: il web degli agent è qui

Gli agent AI sono già un importante livello di scoperta e conversione. Con il 39% dei consumatori che usa l'AI per trovare prodotti, e gli acquirenti provenienti da AI che convertono al doppio del tasso degli altri visitatori, monitorare i crawler AI che visitano il tuo sito web non è più opzionale. Reaudit ti offre la piattaforma di agent analytics per tracciare, comprendere e ottimizzare questa nuova fonte di traffico.

Domande frequenti

Come faccio a sapere se gli agent AI stanno scrapando il mio sito?

Puoi controllare i log del server o i log all'edge (Cloudflare) per stringhe user-agent come GPTBot, ClaudeBot, PerplexityBot e Google-Extended. In alternativa, usa uno strumento come Reaudit che rileva e classifica automaticamente oltre 50 agent AI e ti mostra quali pagine crawla e con quale frequenza.

Qual è la differenza tra una crawl AI e un referral AI?

Una crawl AI è un bot che visita il tuo sito per indicizzare contenuti per un LLM. Un referral AI è un utente umano che clicca un link al tuo sito da una risposta AI. Entrambi sono importanti: le crawl costruiscono la tua presenza nella knowledge base, i referral guidano traffico ad alta intenzione.

Google Analytics può rilevare gli agent AI?

GA4 filtra il traffico dei bot per impostazione predefinita, quindi non mostra le visite dei crawler AI. Spesso inoltre attribuisce erroneamente il traffico di referral AI come direct. Per un rilevamento accurato degli agent AI, ti serve uno strumento che analizza i log grezzi o i dati all'edge, come Reaudit.

Quali sono i crawler AI più comuni?

I crawler AI più comuni sono GPTBot (OpenAI), ChatGPT-User (OpenAI), ClaudeBot (Anthropic), PerplexityBot (Perplexity) e Google-Extended. Ognuno ha una stringa user-agent e uno scopo specifici, dall'indicizzazione al recupero in tempo reale.

Come posso bloccare i crawler AI dal mio sito?

Puoi bloccare i crawler AI usando le direttive di robots.txt, come Disallow per GPTBot o PerplexityBot. Tuttavia, bloccarli significa che i tuoi contenuti non appariranno nelle risposte AI. La maggior parte dei brand preferisce ottimizzare per l'AI visibility invece di bloccare.

Cos'è l'agent analytics?

L'agent analytics è la pratica di tracciare e analizzare gli agent AI non umani — crawler, bot e browser guidati da AI — per capire come interagiscono con il tuo sito web, cosa citano e come guidano traffico umano e conversioni.

Come posso tracciare il traffico di referral AI?

Usa uno strumento come Reaudit che rileva le fonti di referral AI analizzando parametri UTM, pattern di referrer e dati lato client. Può etichettare il traffico da ChatGPT, Perplexity, Copilot e altre piattaforme AI, dandoti report chiari su visite e conversioni.

Perché il traffico di referral AI è più prezioso?

Salesforce ha rilevato che gli acquirenti che arrivano dalle piattaforme di AI generativa hanno il doppio delle probabilità di acquistare rispetto ai visitatori provenienti da altre fonti. L'AI pre-qualifica gli utenti, quindi il traffico proveniente dalle risposte AI ha un intento e tassi di conversione più elevati.

Reaudit funziona con Cloudflare e GA4?

Sì, Reaudit si integra con i log edge di Cloudflare per dati autorevoli sul volume di crawl e con GA4 per l'attribuzione di sessioni e conversioni. Utilizza anche un tracker JavaScript per catturare il comportamento lato client e i referral AI che appaiono come traffico diretto.

Cosa devo fare dopo aver identificato gli agenti AI sul mio sito?

Ottimizza i tuoi contenuti per la leggibilità AI: usa dati strutturati, intestazioni chiare, fatti accurati e schemi FAQ. Monitora quali pagine gli agenti citano e quali ignorano, poi itera. La piattaforma di Reaudit ti aiuta a generare, pubblicare e misurare contenuti ottimizzati per l'AI.

Domande frequenti

Come faccio a sapere se gli agenti AI stanno facendo scraping del mio sito?

Puoi controllare i log del server o gli edge log (Cloudflare) per le stringhe user-agent come GPTBot, ClaudeBot, PerplexityBot e Google-Extended. In alternativa, usa uno strumento come Reaudit che rileva e classifica automaticamente oltre 50 agenti AI e ti mostra quali pagine eseguono la scansione e con quale frequenza.

Qual è la differenza tra una scansione AI e un referral AI?

Una scansione AI è un bot che visita il tuo sito per indicizzare i contenuti per un LLM. Un referral AI è un utente umano che clicca un link verso il tuo sito da una risposta AI. Entrambi sono importanti: le scansioni costruiscono la tua presenza nella knowledge base, i referral generano traffico ad alta intenzione.

Google Analytics può rilevare gli agenti AI?

GA4 filtra il traffico dei bot per impostazione predefinita, quindi non mostra le visite degli AI crawler. Spesso inoltre attribuisce erroneamente il traffico di referral AI come diretto. Per un rilevamento accurato degli agenti AI, ti serve uno strumento che analizzi i log grezzi o i dati edge, come Reaudit.

Quali sono gli AI crawler più comuni?

Gli AI crawler più comuni sono GPTBot (OpenAI), ChatGPT-User (OpenAI), ClaudeBot (Anthropic), PerplexityBot (Perplexity) e Google-Extended. Ognuno ha una stringa user-agent e uno scopo specifici, dall'indicizzazione al recupero in tempo reale.

Come posso bloccare gli AI crawler dal mio sito?

Puoi bloccare gli AI crawler usando le direttive di robots.txt, come Disallow per GPTBot o PerplexityBot. Tuttavia, bloccarli significa che i tuoi contenuti non appariranno nelle risposte AI. La maggior parte dei brand preferisce ottimizzare per l'AI visibility invece di bloccare.

Come posso monitorare il traffico di referral AI?

Usa uno strumento come Reaudit che rileva le fonti di referral AI analizzando i parametri UTM, i pattern dei referrer e i dati lato client. Può etichettare il traffico proveniente da ChatGPT, Perplexity, Copilot e altre piattaforme AI, offrendoti report chiari su visite e conversioni.

Share this article
Crea un post social con Broadcast