Блог Алексея Гончарова
Не пропустите новые статьи!

Новые статьи блога на Ваш e-mail:

Канал блога на YouTube
Где в мире читают блог
Архивы
Волшебная кнопка

Поисковый робот – что за зверь?

поисковый робот

Google, Yahoo, Яндекс, Рамблер, QiP, bigmir и прочие – что всех их объединяет? То, что у них есть свои порталы, новости, погода, картинки? Нет. Самое главное, что объединяет все эти проекты – это то, что у каждого из них есть свой поисковый робот, свой алгоритм поиска информации, о котором и поговорим.

Что же это за сущность такая – робот-поисковик? В первую очередь – это программа. Во вторую – это робот. То есть работает автономно, без вмешательства людей. Но написана это программа–робот самими людьми.

Зачем нужен этот поисковый  робот? Для поиска информации по ВСЕМУ интернету. То есть эта штука ЗНАЕТ ВСЁ! И знает где это всё лежит и как его найти.

Кроме этого поисковый робот не только находит по вашему запросу все то, что вы ищите, но и в процессе своего поиска он записывает результаты того, как ВЫ отнеслись к найденному. То есть, если вы нашли то, что искали и сразу остановились на найденном, то  в следующий раз, при поиске похожего или такого же запроса, он выдаст наиболее соответствующее на первое место в списке найденного.

Поисковый робот по принципу своей работы похож на обычный интернет-браузер, только как паук с кучей щупалец. Он всегда «ползает» в интернете и щупает все сайты, записывает информацию о них в свою базу данных в своём специальном коде, сохраняет у себя на сервере, к которому относится и идёт дальше. И так постоянно и без остановки.

Есть также у «паука» – так еще называют поисковую машину, специальные щупальца, которые постоянно простукивают сайты на предмет их работы и доступности – так называемы «дятлы». Если сайт оказался недоступен или не работает, то поисковый робот тут же делает отметку себе об этом и на этот сайт прекращает обращать внимание. Робот проникает не только на поверхность сайта – на главную, но и вглубь сайта – на его внутренние страницы. Регулировку глубины проникновения и частоты входа можно задать с помощью специального файла robots.txt, но об этом поговорим в других статьях – не пропустите.

Отличаются поисковые роботы  друг от друга поисковыми алгоритмами. А эти алгоритмы пишут люди. Именно поэтому система поиска двух молодых людей Сергея Брина и Ларри  Пейджа всего каких-то 14 лет назад сделала революцию поиска в интернете, что на настоящий момент дало миру такого монстра интернет индустрии, как корпорацию Google, которая начала свое существование 14 сентября 1997 года с простого домена google.com. На настоящий момент работа в Google одна из самых престижных в мире, так как конкурс на одно рабочее место там составляет несколько тысяч человек. Там работают лучшие умы планеты. Поэтому если вам вздумается обмануть поисковик – помните, что против вас стоит армада лучших программистов всего мира.

Более подробно о том, что есть такое поисковый робот вы можете почитать в википедии. С поисковиком нужно дружить и помнить что мы от него зависим больше, чем от нас. А все почему – да потому что мы же с вами занимаемся продвижением своего сайта, а значит нам нужно понимать, что его будет находить и показывать людям, а это важно, не так ли?

Пройдись по кнопочкам, расскажи о статье друзьям - это к деньгам!

Новые статьи блога на Ваш e-mail:

5 комментариев: Поисковый робот – что за зверь?

  • Все равно не понятно что делать с этим робото .тхт :sad: :sad: :sad:

  • Алексей, подскажите пожалуйста как самостоятельно загрузить обновленную версию файла robots.txt на сайт. В корневую папку сайта на хостинге обновленная версия уже занесена. Данные требования предъявляет Яндекс вебмастер в разделе анализ robots.txt.

    • Раиса, не совсем понимаю о каких требованиях Яндекса вы говорите. Создаете новый текстовый файл с именем robots.txt, записываете в него все новые директивы для роботов и загружаете его в корневую папку вашего сайта. Либо второй вариант: в файловом менеджере хостинга ищете ваш старый файл robots.txt и редактируете его прямо там (если панель управления это позволяет), после чего сохраняете изменения.

  • Здравствуйте !
    Подскажите , а где можно узнать как именно поисковики видят твой сайт на данный момент времени ?!
    В смысле сколько минусов они уже тебе поставили , или наоборот плюсов ?

    • Александр, вам пригодятся эти статьи: http://dengi-vseti.ru/?p=1366, http://dengi-vseti.ru/?p=2198, http://dengi-vseti.ru/?p=3118. В некоторых сервисах для анализа нужно предварительно зарегистрироваться. В статье про поиск воспользуйтесь ключом №9 – поиск по сайту, он покажет вам количество страниц в поиске, как и плагин хрома по определению ТиЦ и PR, который покажет эту же информацию через нажатие в нём на ссылки G-idx и Y-idx.

Оставить комментарий

Ваш email не будет опубликован. Обязательные поля отмечены *

:) 
*hi* 
;) 
:-( 
:good: 
:aga: 
*blush* 
:negative: 
:yahoo: 
B-) 
*bravo* 
*klass* 
:shock: 
:-)) 
Больше смайлов!..
 
Обменник.ws » Автоматический обмен Webmoney