AdsBot-Google – це пошуковий робот Google, який сканує та визначає якість сторінок, на яких підключено контекстну рекламу AdWords. Він призначений для перевірки якості та визначення релевантності оголошення, що допомагає встановити оптимальну вартість за клік. У деяких випадках, коли сайт прихований від індексації всіх ботів у файлі robots.txt, AdsBot-Google дозволяє пошуковій системі отримати уявлення про нього.
Контроль доступа робота AdsBot-Google к сайту
Контролювати доступ AdsBot-Google до свого сайту можна різними методами: через файл robots.txt, метатеги або спеціальний файл.htaccess. Документ robots.txt повинен розміщуватись у кореневому каталозі інтернет-ресурсу. Якісний бот перед тим як працювати з іншими сторінками сайту переглядає його. Якщо його буде заборонено, тоді роботи не проаналізують сторінку. Щоб закрити доступ AdsBot-Google до будь-якої частини сайту, необхідно в robots.txt вказати:
Користувацький агент: AdsBot-Google
Disallow:/
Використання метатегів для контролю доступу AdsBot-Google
Щоб заборонити доступ AdsBot-Google до частини сторінки на сайті, необхідно перед нею вставити тег: <meta name=”robots” content=”noindex”>. Для закриття цієї області потрібно прописати <meta name=”robots” content=”noindex, nofollow”>.
