← Усі безкоштовні інструменти

Перевірка ШІ-краулерів для robots.txt

Встав свій robots.txt і подивись, які відомі ШІ-краулери він дозволяє чи блокує.

Твій robots.txt

Встав вміст файла. Do4U нічого не читає з твого сайту.

Перевірити

Залишилося безкоштовних перевірок на сьогодні: 100

Працює в нашому коді, без ШІ. Твій текст не зберігається. Ми лише рахуємо перевірки за день (за IP-адресою або акаунтом, у вигляді хешу) і видаляємо лічильник за кілька днів.

Більше інструментів із ШІ →