Главная Интернет-Бизнес Что такое программный паук?

Что такое программный паук?

Ваш гороскоп на завтра

«Программный паук» - это неуправляемая программа, управляемая поисковой системой, которая просматривает Интернет так же, как и вы. При посещении каждого веб-сайта он записывает (сохраняет на жесткий диск) все слова на каждом сайте и отмечает каждую ссылку на другие сайты. Затем он «щелкает» ссылку и переходит к чтению, индексации и сохранению другого веб-сайта.

какой рост у Ричарда Симмонса

Программный паук часто читает и затем индексирует весь текст каждого посещаемого веб-сайта в основной базе данных поисковой системы, для которой он работает. В последнее время многие системы, такие как AltaVista, начали индексировать только определенное количество страниц сайта, часто всего около 500, а затем остановились. Видимо, это связано с тем, что Интернет стал настолько большим, что все проиндексировать невозможно. Сколько страниц проиндексирует паук, не совсем предсказуемо. Поэтому рекомендуется специально отправлять каждую важную страницу вашего сайта, которую вы хотите проиндексировать, например те, которые содержат важные ключевые слова.

Программный паук подобен электронному библиотекарю, который вырезает оглавление каждой книги в каждой библиотеке мира, сортирует их в гигантский главный указатель, а затем создает электронную библиографию, в которой хранится информация о том, какие тексты ссылаются на другие тексты. Некоторые программные пауки могут индексировать более миллиона документов в день! Важно понимать, что пауки поисковых систем делают только две вещи:

  • Они индексируют текст.
  • Они переходят по ссылкам.

На недавней конференции Search Engine Strategies, организованной SearchEngineWatch.com, один из приглашенных докладчиков, Шари Туроу из Grantastic Designs, подчеркнул эту мысль и повторил ее несколько раз, чтобы проиллюстрировать ее значение: «Поисковые системы индексируют текст и переходят по ссылкам. Они индексируют текст и переходят по ссылкам. Это все, что они делают ».

Ее точка зрения важна и важна для понимания природы пауков поисковых систем. Если текст вашего веб-сайта содержится в графике, поисковые системы не могут его проиндексировать. Если все ваши важные ключевые слова, по которым вы надеетесь получить рейтинг, включены в графику, а не в текст HTML, ваш сайт не получит рейтинга. Помните, поисковые системы не индексируют картинки и не читают картинки, они индексируют текст и переходят по ссылкам. Это все. Если у вас нет текста на вашей просматриваемой странице, никакое количество ключевых слов в метатеге ключевого слова не поможет вам достичь рейтинга.

То, что «паук» увидит на вашем сайте, определит, какое место ваш сайт будет занесен в индекс. Поисковые системы определяют релевантность сайта на основе сложной системы оценок, которую поисковые системы стараются держать в секрете. Эта система добавляет или вычитает баллы в зависимости от того, сколько раз ключевое слово появлялось на странице, где на странице оно появлялось и сколько всего слов было найдено. Страницы, набравшие наибольшее количество баллов, возвращаются вверху результатов поиска; остальные погребены на дне, и их никогда не найти.

Когда программный паук посещает ваш сайт, он отмечает любые ссылки на вашей странице на другие сайты. В обширной базе данных любой поисковой системы записываются все ссылки между сайтами. Поисковая система знает, на какие сайты вы ссылаетесь, и, что более важно, какие из них ссылаются на вас. Многие поисковые системы даже будут использовать количество ссылок на ваш сайт как показатель популярности, а затем будут повышать ваш рейтинг на основе этого фактора.

Алисия Уитт с мужем Натаном Фулджером

Авторские права © 2000 iProspect.com