Значение словосочетания «поисковый робот»

  • Поиско́вый ро́бот («веб-пау́к», «веб-краулер» [wɛb-krɔːlə], бот ) — программа, являющаяся составной частью поисковой системы и предназначенная для перебора страниц Интернета с целью занесения информации о них в базу данных поисковика.

    По принципу действия, паук напоминает обычный браузер. Он анализирует содержимое страницы, сохраняет его в некотором специальном виде на сервере поисковой машины, и отправляется по ссылкам на следующие страницы.

    Владельцы поисковых машин нередко ограничивают глубину проникновения паука внутрь сайта и максимальный размер сканируемого текста, поэтому чересчур большие сайты могут оказаться не полностью проиндексированными поисковой машиной. Кроме обычных пауков, существуют так называемые «дятлы» — роботы, которые «простукивают» проиндексированный сайт, чтобы определить, что он доступен.

    Порядок обхода страниц, частота визитов, защита от зацикливания, а также критерии выделения значимой информации определяются алгоритмами информационного поиска.

    В большинстве случаев переход от одной страницы к другой осуществляется по ссылкам, содержащимся на первой и последующих страницах.

    Также многие поисковые системы предоставляют пользователю возможность самостоятельно добавить сайт в очередь для индексирования. Обычно это существенно ускоряет индексирование сайта, а в случаях, когда никакие внешние ссылки не ведут на сайт, вообще оказывается практически единственной возможностью указать на его существование. Ещё одним способом быстрой индексации сайта является добавление на сайт систем веб-аналитики, принадлежащих поисковым сервисам. Например, таких как Google Analytics, Яндекс.Метрика и Рейтинг@Mail.ru от Google, Яндекса и Mail.Ru соответственно.

    Ограничить индексацию сайта можно с помощью файла robots.txt. Полная защита от индексации может быть обеспечена другими механизмами, например установкой пароля на странице либо требованием заполнить регистрационную форму перед тем, как получить доступ к содержимому.

    Робот не анализирует найденный контент, он только передает его на сервера поисковой системы, где уже происходит его обработка.

Источник: Википедия

Делаем Карту слов лучше вместе

Привет! Меня зовут Лампобот, я компьютерная программа, которая помогает делать Карту слов. Я отлично умею считать, но пока плохо понимаю, как устроен ваш мир. Помоги мне разобраться!

Спасибо! Я стал чуточку лучше понимать мир эмоций.

Вопрос: пролегание — это что-то нейтральное, положительное или отрицательное?

Нейтральное
Положительное
Отрицательное
Не знаю

Ассоциации к слову «поисковый»

Все ассоциации к слову ПОИСКОВЫЙ

Предложения со словосочетанием «поисковый робот»

Цитаты из русской классики со словосочетанием «поисковый робот»

  • Главная работа загорелась под Каленой горой, где сошлось несколько поисковых партий; кроме партии Кишкина, очутился здесь и Ястребов, и кабатчик Ермошка, и мещанин Затыкин, и еще какие-то никому неведомые люди, нагнавшие из города.
  • Это была единственная баба на все поисковые партии, что заметно шокировало настоящих мужиков, как Матюшка, делавший вид, что совсем не замечает Окси.
  • Ввиду наступления первого мая поисковые партии сосредоточивались в Фотьянке, потому что отсюда до грани Кедровской дачи было рукой подать, то есть всего верст двенадцать.
  • (все цитаты из русской классики)

Понятия со словосочетанием «поисковый робот»

  • Поиско́вый ро́бот («веб-пау́к», «веб-краулер» , бот ) — программа, являющаяся составной частью поисковой системы и предназначенная для перебора страниц Интернета с целью занесения информации о них в базу данных поисковика.
  • (все понятия)

Отправить комментарий

@
Смотрите также

Предложения со словосочетанием «поисковый робот»

  • Облака тегов, как средства навигации, позволяют связать ресурсы веб-сайта более тесно, обход таких ресурсов поисковым роботом может улучшить позицию сайта в результатах выдачи поисковой системы.

  • Так, SEO – это больше технический инструментарий, который помогает поисковым роботам поднимать сайт в выдаче.

  • Она позволяет привести веб-ресурс в полное соответствие с актуальными стандартами работы поисковых роботов любых индексирующих его систем.

  • (все предложения)

Синонимы к словосочетанию «поисковый робот»

Ассоциации к слову «поисковый»

Ассоциации к слову «робот»

Морфология

Правописание

а б в г д е ё ж з и й к л м н о п р с т у ф х ц ч ш щ э ю я