Създайте robots.txt без грешки.
Изберете платформа, какво да не се обхожда и как да се отнасяте към AI ботовете. Файлът се създава веднага в браузъра — готов за копиране или изтегляне.
Как работи?
- 01
Попълнете данните
Въведете текста или стойностите, с които искате да работите.
- 02
Вижте резултата
Резултатът се изчислява веднага във вашия браузър.
- 03
Копирайте и използвайте
Копирайте готовия резултат и го приложете там, където ви трябва.
Какво трябва да знаете?
WordPress правила
Блокира /wp-admin/, но оставя admin-ajax.php, който много теми и плъгини използват.
AI ботове
Изберете дали да разрешите всички, да спрете само ботовете за обучение или да блокирате и AI търсачките.
Локална работа
Файлът се създава в браузъра ви. Нищо не се изпраща към сървър.
Какво представлява Генератор на robots.txt
Генераторът създава robots.txt файл от няколко ясни избора: платформа, служебни адреси, търсене и филтри, отношение към AI ботовете и адрес на XML картата.
Получавате правилно подреден файл без синтактични грешки, готов за копиране или изтегляне, с правила, които пестят бюджета за обхождане и не блокират важни ресурси.
Как да използвате инструмента
Започнете с платформата и адреса на XML картата. За WordPress генераторът блокира административния панел и вътрешното търсене, които нямат стойност за търсачките. Добавяйте собствени забрани само за адреси, които наистина не трябва да се обхождат, по един на ред и с наклонена черта в началото.
Как да тълкувате резултата
robots.txt управлява обхождането, а не индексирането. Блокиран адрес може да остане в резултатите, ако към него има линкове; за премахване използвайте noindex и не го блокирайте едновременно.
След като качите файла, отворете /robots.txt в браузъра и го проверете с инструмента за robots.txt в Google Search Console. Не използвайте robots.txt за скриване на лични данни, защото файлът е публичен и всеки може да прочете забранените пътища.
Често задавани въпроси
Къде се качва robots.txt?
В главната папка на домейна, така че да се отваря на адрес https://вашиятсайт.bg/robots.txt. В WordPress може да се редактира и от Rank Math или Yoast.
Трябва ли да блокирам CSS и JavaScript?
Не. Google трябва да зарежда стиловете и скриптовете, за да види страницата като посетител.
Ако блокирам GPTBot, ще изчезна ли от ChatGPT?
GPTBot е за обучение. Търсенето в ChatGPT използва OAI-SearchBot, затова генераторът може да спре обучението и да остави търсенето разрешено.
Искате пълен професионален анализ?
Бързият инструмент дава полезна първоначална оценка. За задълбочен анализ, стратегия и конкретен план за растеж — свържете се с мен.