Pošlji povpraševanje EN

Brezplačno orodje

Ali AI roboti lahko berejo vašo stran?

Vpišite domeno in orodje prebere njeno datoteko robots.txt. Za 11 robotov OpenAI, Anthropic, Perplexity, Google in Microsoft pokaže, ali smejo brati naslovno stran, in loči robote za iskanje od robotov za učenje modelov.

Robotov v preverjanju
11
Cena
brezplačno
Registracija
ni potrebna

Katere robote preverimo

  • OAI-SearchBot (OpenAI): iskanje v ChatGPT. Če ga blokirate, strani ni med viri v iskalnih odgovorih ChatGPT
  • GPTBot (OpenAI): učenje modelov. Po navedbah OpenAI blokada ne vpliva na iskanje
  • ChatGPT-User (OpenAI): obisk strani na zahtevo uporabnika. OpenAI navaja, da pravila robots.txt zanj morda ne veljajo
  • Claude-SearchBot (Anthropic): iskanje v Claude
  • ClaudeBot (Anthropic): učenje modelov
  • Claude-User (Anthropic): obisk strani, ko uporabnik Claudu postavi vprašanje
Povzetek s te strani

Preverite svojo domeno

Vpišite samo domeno, na primer podjetje.si. Orodje prebere javno datoteko robots.txt, preveri še, ali obstaja llms.txt, in za vsakega robota pokaže, katero pravilo zanj velja.

Preberemo samo javni datoteki robots.txt in llms.txt. Rezultat hranimo največ 15 minut, da ponovno preverjanje iste domene ne obremeni njenega strežnika.

Katere robote preverimo

Ponudniki AI uporabljajo različne robote za različne namene. Za vidnost v odgovorih štejejo predvsem roboti za iskanje; roboti za učenje modelov določajo, ali se vsebina uporabi za učenje.

  • OAI-SearchBot (OpenAI): iskanje v ChatGPT. Če ga blokirate, strani ni med viri v iskalnih odgovorih ChatGPT.
  • GPTBot (OpenAI): učenje modelov. Po navedbah OpenAI blokada ne vpliva na iskanje.
  • ChatGPT-User (OpenAI): obisk strani na zahtevo uporabnika. OpenAI navaja, da pravila robots.txt zanj morda ne veljajo.
  • Claude-SearchBot (Anthropic): iskanje v Claude.
  • ClaudeBot (Anthropic): učenje modelov.
  • Claude-User (Anthropic): obisk strani, ko uporabnik Claudu postavi vprašanje.
  • PerplexityBot (Perplexity): iskanje in povezave v Perplexity, po navedbah ponudnika ne za učenje.
  • Perplexity-User (Perplexity): obisk na zahtevo uporabnika; Perplexity navaja, da pravil robots.txt praviloma ne upošteva.
  • Googlebot (Google): Google Iskanje, vključno z iskalnimi funkcijami.
  • Google-Extended (Google): oznaka v robots.txt, ne ločen robot. Določa uporabo vsebine za Gemini. Na Google Iskanje ne vpliva.
  • Bingbot (Microsoft): iskalnik Bing, na katerem gradi Microsoft Copilot.

Viri: Viri: dokumentacija OpenAI, Anthropic, Perplexity in Google, preverjeno 13. 11. 2026.

Kaj pomeni rezultat

  • Dovoljen

    Robot sme brati naslovno stran in ni posebnih omejitev zanj.

  • Delno omejen

    Naslovna stran je dovoljena, nekateri deli strani pa ne. To je pogosto namerno, na primer za košarico ali administracijo.

  • Blokiran

    Pravilo prepoveduje branje naslovne strani. Pri robotih za iskanje to pomeni, da vas ta iskalnik ne bo navajal kot vir.

  • Brez robots.txt

    Datoteke ni (odgovor 404). Po standardu to pomeni, da smejo brati vsi roboti.

Blokada robota za učenje ni napaka

Odločitev, ali vsebino dovolite za učenje modelov, je vaša. OpenAI in Anthropic ločujeta robote: GPTBot in ClaudeBot lahko blokirate, robota za iskanje (OAI-SearchBot, Claude-SearchBot) pa pustite odprta. Tako ostanete med možnimi viri v odgovorih, vsebine pa ne ponudite za učenje.

Pogosta napaka je obratna: splošno pravilo »Disallow: /« za vse robote, ki ostane na strani po prenosu iz razvojnega okolja, ali vtičnik, ki z enim klikom zapre vse AI robote, tudi tiste za iskanje.

Kaj kaže 500 slovenskih strani

V naši raziskavi Digitalni utrip (zajem 22. 9. 2026) je robots.txt dovolil Googlebota na 499 od 500 domen in OAI-SearchBot na 497 od 500. Datoteko llms.txt je imelo 42 od 497 pregledanih strani (8,5 %). Blokada v robots.txt je torej redka. Robota pa lahko ustavi tudi požarni zid ali zaščita pred roboti, česar robots.txt ne pokaže. Več v raziskavi.

Česa orodje ne preveri

  • Požarnega zidu in zaščite pred roboti (npr. Cloudflare): ti lahko robota zavrnejo, čeprav ga robots.txt dovoli.
  • Pravil za posamezne strani: preverimo naslovno stran, ne vsake podstrani, in ne oznak noindex v HTML.
  • Ali ste res v indeksu ali v odgovorih: dovoljenje pomeni samo, da robot sme brati. Indeksacijo pokaže Search Console, omembe v odgovorih pa meritev AI vidnosti.

Pogosta vprašanja

Več vprašanj in kontaktni obrazec na strani povpraševanje.

Ali naj blokiram GPTBot?

To je poslovna odločitev. GPTBot zbira vsebino za učenje modelov OpenAI; po navedbah OpenAI njegova blokada ne vpliva na prikaz v iskanju ChatGPT. Za iskanje skrbi OAI-SearchBot, ki ga je smiselno pustiti odprtega, če želite biti naveden kot vir.

Ali blokada Google-Extended vpliva na Google Iskanje?

Ne. Google navaja, da Google-Extended ne vpliva na vključenost v Google Iskanje in ni signal za uvrstitev. Določa le uporabo vsebine za modele Gemini.

Ali llms.txt izboljša uvrstitev v Googlu?

Ne. llms.txt je predlog formata, ki ga Google ne uporablja kot signal za uvrstitev. Orodje pokaže, ali datoteka obstaja, njena prisotnost pa ne pove ničesar o vidnosti v odgovorih.

Robots.txt dovoli robote, a me ChatGPT vseeno ne navaja. Zakaj?

Dovoljenje je le prvi pogoj. Odgovor je odvisen od tega, ali je stran v indeksu, ali jasno odgovarja na vprašanje in ali jo navajajo drugi viri. Robota lahko ustavi tudi požarni zid, ki ga to orodje ne vidi.

Ali orodje shrani mojo domeno?

Rezultat za posamezno domeno hranimo največ 15 minut, nato se izbriše. Domene ne povezujemo z obiskovalcem in je ne uporabljamo za nič drugega.

Dostop je urejen. Kaj pa vidnost?

Če želite vedeti, ali vas AI iskalniki res navajajo in kaj bi popravili najprej, začnite z brezplačnim pregledom strani.

Odgovor
v enem delovnem dnevu
Delovni čas
pon–pet, 8.00–⁠16.00

Zadovoljni s sodelovanjem? Povejte naprej.

Za majhno agencijo je priporočilo največja pohvala. Delite povezavo s podjetnikom, ki bi mu prišla prav boljša spletna stran.