ПАНЕЛЬ УПРАВЛЕНИЯ
Логин :  
Пароль :  
 
Регистрация | Напомнить пароль?
Сделать стартовой | Добавить в избранное
Как заработать в интернете  |  Регистрация  |  Статистика  |  Rss
 
Навигация по сайту
Как заработать в интернете, заработок в сети
С чего начать новичку
Способы заработка в интернете
Электронные платёжные системы
Словарь терминов
Учебные материалы и статьи
Полезные программы
О сайте
Способы заработка
Кликовые спонсоры (bux, PTC)
Файлообменники
Партнерские программы
Заработок на блогах
Реклама (контекстная, тизеры, pop-up, topline, баннеры)
Ввод картинок (капча)
PTC
Проверяемые bux
Проверенные PTC
Чёрный список (SCAM)
Учебные материалы и статьи по bux (PTC)
Файлообменники
1. Заработок на своих файлах с Letitbit
2. Бонус-программа файлообменника Deposit Files
3. Файлообменник smsfiles
4. Файлообменник rapidshare com
Лучшие PTC спонсоры
Wmmail.ru
Neobux.com
Onbux.com
пусто
пусто
Платежные системы
WebMoney
PayPal{sys_info}
E-gold
Яндекс Деньги
Alert Pay
Популярные статьи
Наш опрос
Какие разделы Вы бы больше всего хотели видет у нас на сайте?

Bux
Файлообменники
Почтовые спонсоры
Hyip инвестиционные фонды
Биржа форекс
Программы (полезный софт)
Видеоуроки
Всё для сайтостроения
Ничего не надо добавлять
Облако тегов
4files.net, AlertPay, bux, bux лохотрон, DepositFiles.com, e-gold, hrefer, letitbit.net, mail заработок без сайта, paypal, PTC, rapidshare.com, SEO, SMO, smsfiles.ru, vip-file.com, Webmoney, xrumer, Яндекс Деньги, быстрый заработок, выкуп трафика, заработок без вложений, заработок без сайта, заработок денег, заработок для сайта, заработок на блогах, заработок на файлах, заработок реклама, заработок серфинг, инет заработки, инструкция, интернет заработок клики, оплата за клики, партнёрки, рассылка, русские спонсоры, серфинг, софт, средний заработок, файлообменник

Показать все теги
 
Заработок в сети » Словарь терминов » Поисковый робот

Поисковый робот Словарь терминов
 
Поиско́вый ро́бот («веб-пау́к», краулер) — программа, являющаяся составной частью поисковой системы и предназначенная для обхода страниц Интернета с целью занесения информации о них (ключевые слова) в базу поисковика. По своей сути паук больше всего напоминает обычный браузер. Он сканирует содержимое страницы, забрасывает его на сервер поисковой машины, которой принадлежит и отправляется по ссылкам на следующие страницы. Владельцы поисковых машин обычно ограничивают глубину проникновения паука внутрь сайта и максимальный размер сканируемого текста, поэтому чересчур большие сайты могут оказаться не полностью проиндексированными поисковой машиной. Кроме обычных пауков, существуют так называемые «дятлы» — роботы, которые «простукивают» проиндексированный сайт, чтобы определить, что он подключен к Интернету.

Порядок обхода страниц, частота визитов, защита от зацикливания, а также критерии выделения ключевых слов определяется алгоритмами поисковой машины.

В большинстве случаев переход от одной страницы к другой осуществляется по ссылкам, содержащимся на первой и последующих страницах.

Также многие поисковые системы предоставляют пользователю возможность самостоятельно добавить сайт в очередь для индексирования. Обычно это существенно ускоряет индексирование сайта, а в случаях, когда никакие внешние ссылки не ведут на сайт, вообще оказывается единственной возможностью заявить о его существовании.

Ограничить индексацию сайта можно с помощью файла robots.txt, однако некоторые поисковые системы могут игнорировать наличие этого файла. Полная защита от индексации обеспечивается механизмами, обойти которые пока паукам не под силу. Обычно — установкой пароля на странице, либо требованием заполнить регистрационную форму перед тем, как получить доступ к содержимому страницы.

Материал из Википедии — свободной энциклопедии
 
 


 
 
 
Полное или частичное копирование любых материалов с этого сайта возможно только с указанием активной ссылки на ресурс emoney-expert.com.

Уважаемый посетитель, Вы зашли на сайт как незарегистрированный пользователь. Мы рекомендуем Вам зарегистрироваться либо зайти на сайт под своим именем.

Другие статьи по теме:

  • Поисковый спам
  • Клоакинг
  • PageRank PR
  • Поисковая оптимизация СЕО (SEO)
  • Система управления контентом сайта (CMS)


  •  

     
     
    Besucherzahler russian brides interesting marriage foreign men
    счетчик посещений
    Как заработать в интернете  |  Регистрация  |  Статистика  |  Новое на сайте  |  Rss

    Copyright © 2008 - 2011 Emoney-expert.com - Как заработать в интернете, заработок в сети. All Rights Reserved.