|
Оглавление
04 апреля 2007, 03:49
Новые поисковые роботы Google
Для индексирования новых сайтов поисковые системы выпускают в Мировую паутину так называемых «пауков». Их ещё называют
поисковыми роботами. Они путешествуют от ссылки к ссылке и добавляют в базу данных всю информацию о страницах сайта. Поисковые
роботы Google носят имя «Googlebot».
Разновидности поисковых роботов Google.
Многие веб-мастеры обратили внимание на то, что у Google появилось две разновидности поисковых роботов. Оба они индексируют
страницы.
- Обычный робот Google: 66.249.64.47 - "GET /robots.txt HTTP/1.0" 404 1227 "-" "Googlebot/2.1"
- Дополнительный робот Google: 66.249.66.129 - "GET / HTTP/1.1" 200 38358 "-" "Mozilla/5.0"
Различия между этими роботами.
Новый робот носит название "Mozilla/5.0", это значит, что Googlebot сможет теперь понимать протокол HTTP 1.1. Это также
означает, что новый поисковой робот сможет понимать намного больше разновидностей контента, включая сжатые страницы.
Поисковые роботы AdWords
Google использует специальных роботов для сканирование страниц на пригодность размещения на них рекламы и для определения
тематики сайта (также для рекламы). Так же они служат для определения качества вашей страницы, для назначения цены за рекламу.
Чем выше качество – тем дороже.
Зачем же Google выпустил новых поисковых роботов.
Этому существует два объяснения:
1. Google использует новых роботов чтобы найти сайты которые используют запрещённые способы оптимизации, сайты использующие
редиректные ссылки. Новые поисковые роботы будут намного функциональней, чем предыдущие.
2. Выпуск новых роботов может создать панику в Интернете. Многие страницы нужно будет оптимизировать заново, причём за
очень малое время. Зато, возможно, будут удалены страницы, не содержащие никакой информации, кроме спама.
Что же вам делать с вашим сайтом.
Если же вы используете сомнительные способы оптимизации, то у вас будут серьёзные проблемы. Если Google действительно использует
новых роботов для поиска таких сайтов, то вам грозит бан лист. Вывод – нужно использовать не запрещённые способы раскрутки.
Получу ли я отчёт о посещении вашего сайта поисковым роботом.
Большинство страниц в Интернете сгенерированы с помощью PHP и очень часто обновляются. Поэтому отчёт о каждом посещении роботом
вашего сайта отправляется вам на e-mail.
Перевод
http://www.selfseo.com/story-19305.php
[34] [35] [36] [37] [38] [39] [40] [41] [42] [43] |
|
|