Besöker AI-crawlers din webbplats på riktigt?
Besök från AI-crawlers syns. Åtkomst som är tillåten på pappret och åtkomst som faktiskt sker är två olika saker.
Vad kontrollen tittar på
Den här frågan går inte att svara på utifrån. Sidkontrollen läser din webbplats; om GPTBot, ClaudeBot eller PerplexityBot någonsin kommer syns bara inifrån, i de anrop webbplatsen tar emot. Agenten på webbplatsen loggar varje sådant anrop och visar dem sida för sida.
Varför det spelar roll
Åtkomst som är tillåten på pappret och åtkomst som faktiskt sker är två olika saker. En webbplats kan klara varje dörrkontroll och ändå aldrig bli hämtad — antingen för att inget länkar till den, eller för att ett lager ingen har kontrollerat släpper anropen. Observerade besök är beviset; att de saknas är en fråga.
Så ser du det på din egen webbplats
Sök i dina server- eller CDN-loggar efter AI-user-agents, verifiera käll-IP:na mot leverantörernas publicerade intervall och räkna per sida. Eller installera agenten: den gör precis detta vid varje anrop och skiljer en sida som hämtas för att svara på en fråga i stunden från en som crawlas för att lära.
AI bot verifier → — gratis, ingen registrering.
Så åtgärdar du det
- Åtgärda dörrkontrollerna först — robots.txt, botfiltret och väggarna.
- Gör sidorna nåbara: med i sitemap, länkade från andra sidor och svarar 200.
- Titta sedan: AI-trafiken i dashboarden visar vilken motor som öppnade vilken sida, och om det var för att svara någon just då.
Det här gör agenten: agenten på webbplatsen loggar varje AI-anrop när det sker — det är den räkning sidkontrollen inte kan göra utifrån.
Relaterade kontroller
- robots.txt tillåter AI-crawlers
- Inget CDN eller botfilter blockerar AI-crawlers
- sitemap.xml finns och är giltig
Del av de 23 kontrollerna · grupp: Åtkomst för crawlers — robots.txt, CDN/bot-filter, inloggningsväggar, noindex, HTTP-status, sitemap, canonical.
Vanliga frågor
Varför går det här "inte att kontrollera utifrån"?
Därför att ett besök är en händelse på din server. En kontroll utifrån kan bara se din webbplats som en besökare ser den; den kan inte se vilka andra som besöker.
Visar Google Analytics besök från AI?
Inte crawlernas hämtningar — de kör ingen JavaScript, så ingen tagg utlöses. Analytics kan visa en människa som klickade sig vidare från ett AI-svar, vilket är en annan och mycket mindre siffra.
Börja med den kostnadsfria kontrollen. Säg sedan agenten vad du behöver.
Den kostnadsfria kontrollen kör de 23 kontrollerna på dina publika sidor. Inget installeras, inget ändras förrän du trycker på knappen.
Gratis kontroll utifrån på några minuter · rapporten via e-post · inget installeras ännu