Боты поисковых систем: как они работают?

Спроси любого, кто хоть немного понимает в принципах работы интернета, что главное в работе с сайтом, и тебе ответят – раскрутка и продвижение! А если спросить: «Что главное в раскрутке и продвижении», большинство ответят – Поисковая оптимизация! Поисковая оптимизация (англ. search engine optimization, SEO) — комплекс мер для поднятия позиций сайта в результатах выдачи поисковых систем по определенным запросам пользователей. Так, по крайней мере, говорит Википедия. Чтобы грамотно продвигать сайт, необходимо понимать, как осуществляется выдача по поисковым запросам. Выдачу осуществляет поисковый бот и руководствуется он при этом собственным индексом.

Например, если зарабатывать при помощи партнерки www.smartbucks.ru, то мой доход напрямую зависит от количества посетителей. То, сколько человек посетит ваш сайт, зависит от множества причин, но главной является положение вашего сайта в выдаче поисковиков. И сегодня я хотел бы поговорить с вами о работе поисковых ботов, которые собственно и определяют, будет ли ваш сайт в первой десятке выдачи, или где-нибудь на пятой странице.

Как я уже говорил, бот в своей работе опирается на собственный индекс. Как образуется этот поисковый индекс? Существует два способа индексации сайтов:

1) Поисковые боты постоянно шерстят интернет в поисках новых сайтов и изменений в уже индексированных. Если поисковый бот натыкается на новый сайт, он ставит его на заметку и в течение какого-то времени следит за ним. Если бот не обнаруживает на сайте спама, чего-то незаконного, видит, что он постоянно обновляется, и периодически заходят новые пользователи, он индексирует сайт. Время, в течение которого поисковый бот будет «присматриваться» к новому сайту и количество «правил» которым должен соответствовать этот сайт, дабы быть проиндексированым, зависит от конкретного поисковика. Рамблеру, например, необходимо не меньше пару месяцев, дабы добавить новый сайт, Яндекс же, пожалуй, самый «демократичный» поисковик, именно поэтому в его выдаче так много спамерских сайтов.

2) Веб – мастер самостоятельно обращается к поисковику, дабы тот проиндексировал его новое творение. На самом деле, послать подобный запрос на индексацию – первое, что должен сделать веб – мастер, после открытия нового сайта. Обращаться стоит в Яндекс, Рамблер, Гугл, Апорт. Остальные поисковики составляют слишком малую долю рынка поисковых услуг, так что ими можно спокойно пренебречь.

Стандартная ошибка новичков – получили высокий индекс и забыли о поисковой оптимизации. Это очень большая ошибка, потому как поисковые боты постоянно «перепроверяют» сайты. Если вы, после получения высокого индекса, начнёте захламлять свой сайт спамом, ворованным контентом и т.д. – уже через месяц ваш сайт может пропасть из выдачи вообще. И, кстати, получить высокий индекс изначально значительно проще, нежели опуститься в выдаче и снова подняться. Я уже молчу про тот случай, если вас забанит популярный поисковик. Если вас забанил Яндекс – можете сразу закрывать сайт! Вернее, не сразу конечно – можно попробовать сменить хостинг, название, домен, платформу, но на самом деле даже это не всегда помогает. Так что постоянно следите за положением своего сайта в выдаче поисковиков! По скорости реиндексации самый скоростной поисковый бот у системы Яндекс, самый медленный – Апорт. У последнего на реиндексацию сайта с количеством посещений 60 – 120 хостов за сутки может уйти до полугода! То есть, если вы упали в выдаче Апорта – можете смело забыть об этом поисковике, так как любые ваши действия по поднятию индекса дадут результат ещё очень не скоро.

Не стоит забывать также о разных АГС и прочих ужасах. Хотя я уже сомневаюсь, что Яндекс способен отличить СДЛ от ГС (судя по тому, что у меня он забанил несколько СДЛ), все равно нужно делать сайты для людей.

Мне кажется, что основным признаком СДЛ теперь становится дизайн. Не шаблон, не “на коленке”, а нормальный, красивый, купленный дизайн.

Комментариев (30)

Ты выкинул пончик за 20 центов!

Постовой: Портал поиска отелей hotellink.ru бронирует все гостиницы Санкт-Петербурга в реальном времени.

Привет. Вот такая идея, как заставить себя ценить бабосики. В izombie.ru это писать не хочется, зато сюда в самый раз. В моем духе

Предположим, купили мы молоко. Литр в бутылочке. Обычное такое молоко. И чего-то нам его пить не хочется, а поставили мы его вообще не в холодильник, а рядом с плитой - лень было. На следующее утро молоко прокисло. Что делаем? Берем и выливаем нафиг в туалет, да?

И вот теперь ключевой момент. Молоко у меня в соседнем ларьке, где я его покупаю, стОит 45 рублей (примерно). Поэтому надо представить, что я беру кошелек, открываю, нахожу там 100 рублей, спускаюсь на улицу, размениваю их по полтиннику, прихожу домой, открываю крышку унитаза и спускаю 50 рублей туда. Ну как ощущения?

Читать полностью »

Комментариев (10)

О маленьких и больших целях

Постовой: Один из самых знаменитых пятизвездочных отелей города, Невский Палас Санкт-Петербург, готовится открыть еще один конференц-зал для деловых встреч и семинаров.

Все (или почти никто) знают, что я начинал как “бомж”. То есть - с нуля начать работать в сети, накопить на что-то и бла-бла-бла. Мне удалось начать зарабатывать в сети, причем неплохо (смотря сколько работаешь за месяц, конечно). Но вот с целью… А цель была покупка квартиры - я точно просчитался. Дело в том, что все “темы”, которые работали, когда я еще не знал, где оформлять домены, перестали работать к моменту, когда я начал получать деньги. Самый яркий пример, это, конечно, сапа - сначала можно было получать по 100 рублей в день с нулевого сателлита (в первые месяцы возникновения сапы), а теперь 3-5 рублей.

Поэтому хочу предложить всем “бомжам” и зарабатывающим в сети следующую схему.

Читать полностью »

Комментариев (16)

Мысль, приводящая всех в состояние зарабатывания денег

Сейчас я напишу мысль, которая должна постоянно биться в головах тех, кто не может дойти до какой-то цели (а уж тем более до совсем простой, вроде 100$/месяц с сапы или раскрутки своего блога). Кому-то она может показаться оскорбительной, но часть читателей проникнутся, я надеюсь. И еще - это не депрессивный пост. Это посетившее меня откровение. Пост не носит оскорбительный характер, но только грубо можно донести ту мысль, что я понял, до народа. Пост носит позитивный характер дать волшебный пендаль всем ленивым манимейкерам, которые ставят цели и одна за другой проваливают их. Перед нервными заранее извиняюсь.

Вот вчера ты гулял, встретил случайно старого друга. А сам не ел ни крошки с утра. Жрать охото жутко. Но ради такого дела остался с ним поболтать. А он тебе такой предлагает - слушай, а давай по пиву за встречу! Через пару часов ты обнаруживаешь, что пиво по счету было уже пятое и уже 12 ночи и пора домой. Дополз, лег спать. Утром проснулся и первое: “О, *ля, моя голова!”. Хреново, аж жуть, не ел же, а на голодный желудок сколько выпил. И ходишь такой, всем домашним ноешь - люди, как же мне хреново.

Или например ты без работы. И не хочется как-то устраиваться. Сел на шею родителям, сидишь себе, ножками болтаешь и жрешь их еду, живешь в их квартире. Денег больше 200 рублей по карманам не обнаруживается.

А, или вот. Поступил в два университета сразу. И какой выбрать не знаешь. Ходишь, всех спрашивает, что лучше. Гуглишь, задаешься вопросами, в какое русло направить свою жизнь, чтобы она потом была распрекрасной.

Всем манимейкерам, бизнесменам, программистам и врачам, дошколятам и студентам, директорам и дворникам надо запомнить одну очень простую вещь. Если они ее и знали, то точно не воспринимали в серьез. Постарайтесь именно ПОЧУВСТВОВАТЬ это, не просто прочитать.

Читать полностью »

Комментариев (30)

Sape и логика: какие сателлиты делать и как

В общем-то, я хочу сказать одну простую мысль. До нее очень просто дойти, но многие самостоятельно не доходят. Краеугольный камень чудо-сервиса - это, конечно, пузомерки. Вернее их отсутствие - большинство веб-мастеров работают с нулевыми сайтами. Так вот, достаю карты из рукавов: если сателлит нулевой (по нулям тИЦ и ПР), у него должно быть много страниц. Если он не нулевой (есть тИЦ и ПР), у него может быть немного страниц и уникальный контент. Давайте посчитаем!

Читать полностью »

Комментариев (24)