E-shop Wiki

Roboty OpenAI a robots.txt: čo povoliť a čo blokovať

Overené 28. 10. 2026

Zdieľať

OpenAI používa viac robotov a každý má vlastné nastavenie v súbore robots.txt. Zablokovaním nesprávneho robota sa môžete vyradiť z odpovedí ChatGPT alebo naopak umožniť trénovanie modelov na vašom obsahu.

Čo budete potrebovať

  • Prístup k súboru robots.txt vo vašom e-shope. Kde sa upravuje, závisí od platformy a hostingu (názov položky v administrácii sa líši), prípadne ho upraví správca webu.
  • Súbor musí ležať v koreni domény, teda vasa-domena.sk/robots.txt.

Roboty

RobotNa čo slúžiVplyv robots.txt
OAI-SearchBotzobrazenie webov vo vyhľadávaní ChatGPTzablokovaný web sa nezobrazí v odpovediach vyhľadávania ChatGPT, môže sa objaviť iba ako navigačný odkaz
GPTBotzber obsahu, ktorý sa môže použiť na trénovanie modelovzákaz znamená, že obsah sa nemá použiť na trénovanie
ChatGPT-Userakcie spustené používateľom, napríklad otvorenie stránky na jeho požiadaniepravidlá robots.txt sa nemusia uplatniť; nerozhoduje o zobrazení vo vyhľadávaní
OAI-AdsBotkontrola cieľových stránok reklámúdaje sa nepoužívajú na trénovanie modelov

Postup

  1. Otvorte vasa-domena.sk/robots.txt v prehliadači.
  2. Skontrolujte, či v ňom nie je pravidlo, ktoré blokuje OAI-SearchBot, alebo všeobecný zákaz celého webu (User-agent: * s Disallow: /).
  3. Ak chcete byť vo vyhľadávaní ChatGPT, nechajte OAI-SearchBot povolený.
  4. Či povolíte alebo zakážete GPTBot (trénovanie), je samostatné rozhodnutie. Nastavenia sú nezávislé, takže môžete povoliť vyhľadávanie a zakázať trénovanie. Ukážka (vlastná, nie z dokumentácie): User-agent: GPTBot a pod ním Disallow: /, potom User-agent: OAI-SearchBot a Allow: /.
  5. Uložte súbor a po zmene počkajte približne 24 hodín, kým sa nastavenie prejaví v systémoch OpenAI.

Ako overiť, že to funguje

Otvorte robots.txt znova a skontrolujte výsledné znenie. Roboty sa v serverových logoch identifikujú reťazcom user-agent (napríklad OAI-SearchBot/1.4) a OpenAI zverejňuje zoznamy IP adries pre každého robota. Ak v logoch niektorý robot vidíte, dostal sa na web.

Časté chyby

  • Všeobecný zákaz Disallow: / zostal z testovacej verzie webu.
  • Zmena sa robí na inej doméne či subdoméne než na tej, kde je e-shop.
  • Predpoklad, že zákaz GPTBot skryje web z vyhľadávania, alebo že povolenie robota zaručí zobrazenie. Zobrazenie nie je zaručené.
  • Prístup robotov blokuje firewall alebo ochrana pred botmi na hostingu, aj keď robots.txt povoľuje.

Rozhodnutie o trénovaní je obchodné, nie technické; pri obchodných tajomstvách a cenníkoch pre veľkoodberateľov zvážte, čo je verejne dostupné.

zdroje

  1. Overview of OpenAI Crawlers, OpenAI
  2. Create and Submit a robots.txt File, Google Search Central
Zdieľať

Súvisiace články