БАЗА подписчиков за 1 месяц! (Секретная технология)minimazer

Индексация сайта — что это, как проверить, как запретить индексацию сайта в поисковых системах


индексация сайта в поисковиках

Каждый из вас знает, что создание красивого сайта, полностью удобного со всех сторон – это лишь половина дела. Вам такой сайт ничего не принесет если его не будут посещать. А вот чтобы его посещали – ваша задача дать поисковикам информацию про ваш сайт.

Или , как говорят в народе “скормить сайт поисковикам”. Вопрос такой: насколько вам это нужно?

Итак, сегодня я раскрою для вас следующие интересные темы:

Индексация сайта – что это такое и нужно ли это вам?

После такого скармливания – уже в первый месяц к вам начнут заходить из поисковиков. Я не могу гарантировать супер мега посещаемость, но кое кто заходить будет – однозначно. Ну, хватит теории.

Давайте предположим, что у вас уже есть сайт (или блог) и вы его благополучно выложили на свой хостинг. Вы начинаете наполнять его красивенными статьями. Напрягаетесь так, что при написании статьи семь раз потеете. Статьи выходят у вас красивенные дальше некуда. Но блин, никто не читает их. На блог не заходят. Почему? Потому что поисковики еще не в курсе о вашем блоге. Логично вроде бы.

Давайте разберемся что за процесс такой – индексация сайта.

Индексация сайта – это когда на ваш сайт приходит робот того же поиска Яндекса, записывает сведения о вашей статье, что по такому-то адресу находится такая-то статья. Информация о вашей статье заносится в поисковую базу, обрабатывается и, если с текстом у вас все в порядке (вы ведь его поверили на уникальность?) – вы попадаете в выдачу поисковой системы. А вот на сколько высоко вы окажетесь – зависит от мнооогих факторов.

к оглавлению ↑

Индексация сайта: всему своё время!

Так вот, не переживайте, если у вас сайт не индексируется. Я вам открою секрет. К молодым блогам и сайтам поисковики относятся с осторожностью. У меня был сайт который Яндекс не хотел индексировать почти пол года. И это нормально. Каждый сайт должен накопить какой-то показатель трастовости (уровень доверия) со стороны поисковиков.

Читайте также:  UTM метки: что это, как их создать, настроить, можно ли генерировать?

А вот на этот показатель влияют очень много вещей, например количество, а главное качество ссылок, которые ведут на ваш сайт со всего интернета. Уникальность ваших статей, релевантность ваших статей, количество комментариев на каждой из ваших статей, регулярность выхода ваших статей, И , наверное самый важный пункт – упоминание о ваших статьях в социальных сетях.

к оглавлению ↑

Пару советов для быстрой индексации сайта.

Конечно, чтобы индексация сайта проходила быстрее — нужно следовать определенным правилам. Вот вам первые, элементарные правила по ускорению индексации, которые должен знать каждый блоггер.

  • Сделайте две разные карты сайта. Как сделать карту сайта мы еще опишем чуть позже, есть специальные плагины таких дел.
  • Грамотно настройте внутреннюю перелинковку. Это поможет при индексации, да также поможет при продвижении ваших статей.
  • Транслируйте RSS ленту в RSS каталоги – обязательно! Кстати, хорошая тема для новой статьи – лучшие RSS читалки для хрома. Возьму на заметку.
  • Делайте анонсы ваших постов в соц сетях и группах , например в Subscribe.
  • Конечно же вам нужен правильный robots – без него никуда.
  • Прикупите пару ссылок с главных страниц трастовых блогов.
  • Добавьте пинг сервисы для вашего блога.

Что такое пинг сервисы?

Да не важно. Если вы мне зададите этот вопрос — я заморочусь и напишу статью на эту тему, обещаю. Но пока не задавали.

1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
20
21
22
23
24
25
26
27
28
29
30
31
32
33
34
35
36
37
38
39
40
41
42
43
44
45
46
47
48
49
50
51
52
53
54
55
56
57
58
59
60
61
62
63
64
65
66
67
68
69
70
71
72
73
74
75
76
77
78
79
80
81
82
83
84
85
86
87
88
89
90
91
92
93
94
95
96
97
98
99
100
101
102
103
104
105
106
107
108
109
110
111
112
113
114
115
116
117
118
119
120
121
http://1470.net/api/ping 
http://a2b.cc/setloc/bp.a2b 
http://api.feedster.com/ping 
http://api.moreover.com/ping 
http://api.moreover.com/RPC2 
http://api.mw.net.tw/RPC2 
http://api.my.yahoo.com/ping 
http://api.my.yahoo.com/rpc2 
http://api.my.yahoo.com/rss/ping 
http://bblog.com/ping.php 
http://bitacoles.net/ping.php 
http://bitacoras.net/ping 
http://blog.goo.ne.jp/xmlrpc 
http://blogbot.dk/io/xml-rpc.php 
http://blogdb.jp/xmlrpc 
http://blogdigger.com/RPC2 
http://blogmatcher.com/u.php 
http://blogoole.com/ping 
http://blogoon.net/ping 
http://blogpeople.net/servlet/weblogUpdates 
http://blogsdominicanos.com/ping 
http://blogsearch.google.co.uk/pingRPC2 
http://blogsearch.google.com/ping/RPC2 
http://blogsearch.google.com/pingRPC2nd 
http://blogsearch.google.us/pingRPC2 
http://blogshares.com/rpc.php 
http://blogsnow.com/ping 
http://blogstreet.com/xrbin/xmlrpc.cgi 
http://bulkfeeds.net/rpc 
http://catapings.com/ping.php 
http://coreblog.org/ping 
http://effbot.org/rpc/ping.cgi 
http://feedsky.com/api/RPC2 
http://fgiasson.com/pings/ping.php 
http://focuslook.com/ping 
http://focuslook.com/ping.php 
http://godesigngroup.com/blog/feed/ 
http://holycowdude.com/rpc/ping 
http://imblogs.net/ping 
http://lasermemory.com/lsrpc 
http://mod-pubsub.org/kn_apps/blogchatt 
http://mod-pubsub.org/kn_apps/blogchatter/ping.php 
http://mod-pubsub.org/ping.php 
http://newsisfree.com/rpccloud 
http://newsisfree.com/xmlrpctest.php 
http://ping.bitacoras.com 
http://ping.bitacoras.com 
http://ping.blo.gs/ 
http://ping.blogg.de 
http://ping.bloggers.jp/rpc/ 
http://ping.blogmura.jp/rpc 
http://ping.blogmura.jp/rpc/ 
http://ping.blogs.yandex.ru/RPC2 
http://ping.blogs.yandex.ru/RPC2 
http://ping.cocolog-nifty.com/xmlrpc 
http://ping.exblog.jp/xmlrpc 
http://ping.fakapster.com/rpc 
http://ping.feedburner.com 
http://ping.myblog.jp 
http://ping.rootblog.com/rpc.php 
http://ping.syndic8.com/xmlrpc.php 
http://ping.weblogalot.com/rpc.php 
http://ping.weblogs.se/ 
http://ping.wordblog.de 
http://pinger.blogflux.com/rpc 
http://pinger.onejavastreet.com 
http://pingoat.com/goat/RPC2 
http://pingqueue.com/rpc 
http://queerfilter.com/ping 
http://rcs.datashed.net/rpc2 
http://rpc.blogbuzzmachine.com/RPC2 
http://rpc.blogrolling.com/pinger/ 
http://rpc.britblog.com 
http://rpc.icerocket.com:10080/ 
http://rpc.newsgator.com/ 
http://rpc.pingomatic.com/ 
http://rpc.tailrank.com/feedburner/RPC2 
http://rpc.technorati.com/rpc/ping 
http://rpc.weblogs.com/RPC2 
http://rpc.wpkeys.com 
http://rssfeeds.com/suggest_wizzard.php 
http://rssfwd.com/xmlrpc/api 
http://services.newsgator.com/ngws/xmlrpcping.aspx 
http://signup.alerts.msn.com/alerts-PREP/submitPingExtended.doz 
http://snipsnap.org/RPC2 
http://thingamablog.sourceforge.net/ping.php 
http://topicexchange.com/RPC2 
http://trackback.bakeinu.jp/bakeping.php 
http://wasalive.com/ping 
http://weblogalot.com/ping 
http://www.a2b.cc/setloc/bp.a2b 
http://www.bitacoles.net/ping.php 
http://www.blogdigger.com/RPC2 
http://www.blogoole.com/ping/ 
http://www.blogoon.net/ping/ 
http://www.blogpeople.net/servlet/weblogUpdates 
http://www.blogroots.com/tb_populi.blog?id=1 
http://www.blogsdominicanos.com/ping/ 
http://www.blogshares.com/rpc.php 
http://www.blogsnow.com/ping 
http://www.blogstreet.com/xrbin/xmlrpc.cgi 
http://www.catapings.com/ping.php 
http://www.feedsky.com/api/RPC2 
http://www.focuslook.com/ping.php?url=http://www.yourblog.com 
http://www.godesigngroup.com 
http://www.holycowdude.com/rpc/ping 
http://www.imblogs.net/ping 
http://www.lasermemory.com/lsrpc/ 
http://www.mod-pubsub.org/kn_apps/blogchatter/ping.php 
http://www.newsisfree.com/RPCCloud 
http://www.newsisfree.com/xmlrpctest.php 
http://www.popdex.com/addsite.php 
http://www.snipsnap.org/RPC2 
http://www.wasalive.com/ping/ 
http://www.weblogues.com/RPC/ 
http://www.xianguo.com/xmlrpc/ping. 
http://xianguo.com/xmlrpc/ping.php 
http://xmlrpc.blogg.de 
http://xping.pubsub.com/ping/ 
http://zhuaxia.com/rpc/server.php 
https://phobos.apple.com/WebObjects/MZFinance.woa/wa/pingPodcast

Читайте также:  Проверка релевантности страницы - что это?
к оглавлению ↑

Как добавить этот список пинг сервисов к себе в блог?

Большое спасибо комментаторам за то что дополняете наши статьи. И первый коментарий к этой статье заставил нас рассказать как же добавлять пинг сервисы в блог. Итак. У вас есть список сервисов, который мы дали выше. Что с ним делать?

Идем в админку.

Там есть пункт “Параметры – Написание”.

пинг сервисы для индексации

Заходим на эту страницу и в саааамом низу мы видим поле “Сервисы обновления”. Эти сервисы оповещают поисковых роботов о том что у вас появилась новая статья. Сюда и вставляем весь наш список. вот в принципе и все дела. Еще раз спасибо вам за вопросы.

к оглавлению ↑

Как добавить свой блог в очередь на индексацию?

Добавить очень просто. У каждой поисковой системы есть сервис, в народе “Аддурилка”, которая позволяет добавить не то что сайт, а каждую отдельную страницу в очередь. Только это очередь не на индексацию, а очередь страниц, по которых пройдет специальный робот поисковика. Я уже не буду пичкать вас устаревшими данными, поэтому дам аддурилки только основных поисковиков. Остальные при желании найдете сами.

Аддурилка Гугла
Аддурилка Яндекса

к оглавлению ↑

А как запретить индексацию сайта?

Маловероятно что это вам пригодиться, но мало ли. Я этим вопросом задаюсь когда создаю новые сайты и не хочу чтобы эти сайты пока индексировались, до тех пор пока сайт не будет полностью готов. Ну, ситуации разные бывают, поэтому вопрос обязан быть рассмотрен.

Во-первых, есть такой тег как <noindex> и </noindex> – все что между этими тегами – Яндексом не индексируется вообще, НО к сожалению, только Яндексом. Этим приемом можно пользоваться, чтобы закрыть от Яндекса какой-то кусок текста на странице.

Читайте также:  Автоматический кросспостинг в твиттер

Чтобы закрыть весь сайт – можно воспользоваться следующим приемом: между тегами <head></head> вставить вот такую строчку:
<meta name=”robots” content=”noindex, nofollow” />/span>

к оглавлению ↑

UPD: Оптимизируем индексацию блога

Да, оптимизация индексации тоже важна и нужна. Как оказалось, тебе может пригодиться плагин WordPress Ping Optimizer, который оптимизирует пинги, посылаемые твоим блогом. По умолчанию, WordPress все время отправляет пинги, даже когда ты просто обновил статью в блоге. А это в свою очередь может привести к тому что пинг-сервис посчитает что ты и твой блог это банальный спам и занесет твой блог в black-list и все, индексация ухудшится.

А вот чтобы этого не произошло — есть плагин WordPress Ping Optimizer, который позволяет запретить отправлять пинги при обновлении поста, но сигнал будет отправляться при создании нового поста на блоге. Вот в принципе и вся его задача. Я пока не нашел возможности как это сделать кодом, поэтому пока придется довольствоваться плагином.

Чтобы страницы вашего блога быстрее индексировались — используйте возможности сервиса IndexingMaster — я постоянно им пользуюсь и у меня нет проблем с индексацией!

к оглавлению ↑

UPD: Как удалить страницу из индекса Яндекса и Гугла?

Иногда бывает так, что нужно удалить ненужные страницы из индекса. Конечно, можно прописать правила нужные в robots, но это лишь создаст правила для поисковых роботов. Роботы станут меньше заходить, но это не исключит страницу из индекса яндекса или гугла.

Так вот, чтобы удалить страницу из выдачи, нужно:

1. Удалить саму страницу на блоге, чтобы на не существующей странице показывалась страница 404.
2. Запретить индексацию этой страницы в роботсе.
3. Поставить этот урл в очередь на удаление из индекса.

Поставить в очередь на удаление из индекса можно по следующим ссылкам:
В Яндексе
В Гугле

как удалить url из выдачи яндекса

На этом у меня все, подписывайтесь и делитесь с друзьями этой статьёй в соц сетях.

Всегда ваш, Тумилович Денис

Понравилась статья? Расскажи друзьям:


Мой подарок подписчикам

Подписывайтесь на новости блога и получите подарок - книгу "Как заработать 1000$ в первый месяц". В ней я рассказал свои наблюдения исходя из своего опыта. Я выделил всего ТРИ метода для заработка.

Добавить комментарий

Такой e-mail уже зарегистрирован. Воспользуйтесь формой входа или введите другой.

Вы ввели некорректные логин или пароль

Извините, для комментирования необходимо войти.

14 комментариев

по хронологии
по рейтингу сначала новые по хронологии

Здравствуйте! Прочитала вашу статью и оказывается совсем не знала про пинг сервисы. Спасибо - добавила к себе. Ещё бы поподробнее, как RSS ленту в каталог затолкать.

Автор

В какой каталог вы хотите затолкать RSS ленту? )

Смотри п.3. статьи :) Вот и меня это тоже интересует, только я до тебя, Денис, никак достучаться не могу. Сама по себе RSS лента наверное никому не интересна, если у нее нет читателей...

Денис, я немного по другому продвигаю страницы в индекс Гугл и Яндекса. Это платные и бесплатные методы и сервисы. Ждать и надеяться только на пинг сервисы сегодня не приходится. Яндекс тормозит, его надо подгонять, Гугл индексирует на раз, два.

А так мне нравится как вы пишите :)

Автор

Оля, давай сразу на ты :)

Речь же в статье не про продвижение запросов. А именно про ускорение индексации. Про продвижение - пообщаемся в будущем. Лучше подписаться :)

Денис, привет! Я неправильно написала, конечно индексация страниц, а не продвижение) Просто спешила!

Нет, индексация совершенно не нужно, блог и без нее процветет =)

Необычное мнение, я как-то даже опешил... Всем блогерам нужна индексация, чтобы статьи быстрее попадали в поиск, чтобы по ним переходили люди..., А вам вот не нужна и посетители видимо тоже... Удивительно!!!

Хотел бы еще уточнить вопрос искючения статьи из индексации. Если я просто удаляю какую-то статью, нужно обязательно делать процедуру запрета индексации и постановки в очередь на удаление? Честно говоря, думал, что это произодет автоматически, когда робот при посещении сайта не увидит этой статьи... Можно более подробно осветить этот вопрос?

Автор

В теории это должно происходить автоматически. Просто сайтов и страниц становится очень много и порой роботы не успевают всё учесть. Чтобы провести удаление быстрее - пользуйтесь возможностью вебмастера.

По поводу запрета на индексацию - это лишнее. Статья-то уже проиндексирована. И когда робот увидит что статьи нет (будь это 404 ошибка или запрет на индексацию) он поставит соответствующую пометку и поставит в очередь на удаление из индекса.

Спасибо за подробный ответ, все теперь понятно. А то я уже судорожно начал вспоминать какие я статьи удалил с сайта и как их теперь ставил в очередь на удаление :)

А можно ведь в файле Robots.txt запретить индексацию всего блога? Если да, то получается, что ненужно вставлять строку, указанную в статье между тегами ?

Интересно, а кому нужен блог,закрытый от индексации? В чем же тогда его назначение? :)

Ну, например, блог, где ведется работа над дизайном. Например, вы вставляете «рыбий» текст, чтобы проверить, как он будет смотреться (шрифт). Возможно, робот как раз в этот момент зайдет на блог и проиндексирует бред))) Да и другие варианты есть)