Ошибки сканирования AdSense: убедитесь, что в файле robots.txt заданы наиболее эффективные и релевантные настройки
30.11.11 | 14:36
Labels: Оптимизация
Представляем вашему вниманию первую статью из серии "Ошибки сканирования AdSense".
Существует много способов оптимизации сайта для работы с AdSense. Наши партнеры включают показ как текстовых, так и графических объявлений, используют наиболее эффективные форматы, увеличивают рекламное покрытие своего веб-ресурса, а также применяют множество других стратегий. Но известно ли вам, что зачастую владельцы сайтов забывают выполнить самое базовое и очевидное действие?
Небольшое техническое пояснение
Файл robots.txt выполняет на сайте роль привратника: он определяет, какие роботы и поисковые машины получают доступ, а какие – блокируются. Системы, которым предоставляется разрешение, могут сканировать страницы и индексировать содержание веб-ресурса. Если же роботу или поисковой машине доступ закрыт, сайт (либо определенные его разделы) окажется "невидимым" для этих операций.
Для показа объявлений AdSense используется специальный поисковый робот. Он сканирует содержание страницы и подбирает объявления по ключевым словам. Если в файле robots.txt заблокирован доступ для робота AdSense, наша система не сможет подобрать релевантную рекламу для показа на вашем сайте. В результате посетители увидят объявления, не соответствующие содержанию ваших страниц, что может привести к снижению CTR.
Практические рекомендации
Проанализируйте содержание файла robots.txt, который находится по адресу [ваш сайт]/robots.txt. Убедитесь, что поисковому роботу AdSense не закрыт доступ к вашему сайту. Чтобы гарантированно предоставить нашей системе разрешение, просто добавьте следующие две строки в начало файла:
User-agent: Mediapartners-Google
Disallow:
В результате робот AdSense сможет сканировать содержание вашего сайта для подбора более релевантных объявлений, что в перспективе позволит вам увеличить свой доход. Обратите внимание, что данное изменение не повлияет на позиции сайта в результатах поиска Google. Добавление этих строк в файл robots.txt просто обеспечит показ более релевантных объявлений на тех страницах, где уже размещен код AdSense. Остальных страниц это действие не коснется.
Чтобы просмотреть сведения об ошибках сканирования, войдите в AdSense и выберите "Настройки аккаунта" на главной странице. Затем нажмите на ссылку "Просмотреть ошибки" в разделе "Доступ и авторизация".
Не пропустите вторую статью из серии "Ошибки сканирования AdSense"! В ней мы обсудим проблемы с доступом для робота, а также расскажем о способах их устранения.
Автор: Эндрю Бони, специалист команды Inside AdSense



2 comments:
greek комментирует...
Благодарны за информацию! Надеемся,она окажется действительно ценной.
07.12.11, 7:17
Кубриков Константин комментирует...
Здравствуйте!
А можно ли вообще удалить файл robots.txt? На индексации это не отразится?
Я слышал - без этого файла даже быстрее индескироваться будет, и вообще многих проблем избежать получится.
15.02.12, 23:54
Отправить комментарий