Індэксацыя старонак. Хуткая індэксацыя сайта пошукавымі сістэмамі "Гугл" і "Яндэкс"

Кожны вэбмайстар ведае, што для таго каб на яго рэсурс пачалі заходзіць людзі з пошукавых сістэм, неабходна яго індэксацыя. Пра тое, што з сябе ўяўляе індэксацыя сайта, як яна праводзіцца, і ў чым заключаецца яе сэнс, мы распавядзем у дадзеным артыкуле.

Што такое індэксацыя?

Такім чынам, слова «індэксацыя» само па сабе азначае ўнясенне ў рэестр чаго-небудзь, перапіс матэрыялаў, якія маюцца ў наяўнасці. Гэты ж прынцып прымяняецца і да індэксацыі сайтаў. Па сутнасці, гэты працэс можна назваць таксама унясеннем інфармацыі аб інтэрнэт-рэсурсах у базу дадзеных пошукавых сістэм.

Такім чынам, як толькі карыстач будзе ўбіваць чарговую фразу ў пошукавае поле Google, скрыпт будзе вяртаць яму вынік, які ўключае загаловак вашага сайта і яго кароткае апісанне, якое мы бачым ніжэй.

Як ажыццяўляецца індэксацыя?

Сама індэксацыя ( "Яндэкс" гэта, ці Google - ролі не гуляе) праходзіць даволі проста. Усю павуцінне інтэрнэт, арыентуючыся на базу ip-адрасоў, якая ёсць у пошукавікаў, скануюць магутныя робаты - «павукі», якія збіраюць інфармацыю аб вашым сайце. Іх у кожнай з пошукавых сістэм вялікая колькасць, а працуюць яны ў аўтаматычным рэжыме 24 гадзіны ў суткі. Іх задача - зайсці на ваш сайт і «прачытаць» ўвесь кантэнт на ім, занёсшы пры гэтым дадзеныя ў базу.

Такім чынам, у тэорыі індэксацыя сайта мала залежыць ад ўладальніка рэсурсу. Вырашальным фактарам тут з'яўляецца пошукавы робат, які заходзіць на сайт і даследуе яго. Менавіта гэта і ўплывае на тое, як хутка ваш сайт з'явіцца ў пошукавай выдачы.

Тэрміны індэксацыі?

Зразумела, кожнаму вэбмайстру выгадна, каб яго рэсурс з'явіўся ў пошукавай выдачы як мага хутчэй. Гэта будзе ўплываць, па-першае, на тэрміны вываду сайта на першыя пазіцыі, а, па-другое, на тое, калі пачнуцца першыя этапы манетызацыі сайта. Такім чынам, чым раней пошукавы робат «з'есць» усё старонкі вашага рэсурсу, тым лепш.

Кожная пошукавая сістэма мае свой алгарытм ўнясення дадзеных пра сайты ў сваю базу. Напрыклад, індэксацыя старонак у «Яндэкс» ажыццяўляецца паэтапна: робаты скануюць сайты пастаянна, затым парадкуюцца інфармацыю, пасля чаго праходзіць так званы «апдэйт», калі ўсе змены ўступаюць у сілу. Рэгулярнасць такіх падзей кампаніяй не ўсталёўваецца: яны праводзяцца раз у 5-7 дзён (як правіла), аднак могуць здзяйсняцца і за 2, і за 15 сутак.

Пры гэтым індэксацыя сайта ў Google ідзе па іншай мадэлі. У гэтай пошукавай сістэме такія «апдэйты» (абнаўлення базы) праходзяць рэгулярна, у сувязі з гэтым чакаць кожны раз, пакуль робаты занясуць інфармацыю ў базу, а затым яна будзе ўпарадкавана раз у некалькі сутак, ня трэба.

На аснове вышэйсказанага, можам зрабіць наступную выснову: старонкі ў «Яндэкс» дадаюцца праз 1-2 «апдэйта» (то бок, за 7-20 дзён у сярэднім), а ў Google гэта можа адбыцца значна хутчэй - літаральна за суткі.

Пры гэтым, зразумела, у кожнай пошукавай машыны ёсць свае асаблівасці таго, як праводзіцца індэксацыя. «Яндэкс», напрыклад, мае так званага «быстробота» - робата, які можа ўносіць дадзеныя ў выдачу за некалькі гадзін. Праўда, зрабіць так, каб ён зайшоў на ваш рэсурс, няпроста: гэта датычыцца пераважна навін і розных гучных падзей, якія развіваюцца ў рэжыме рэальнага часу.

Як трапіць у індэкс?

Адказ на пытанне пра тое, як занесці дадзеныя аб сваім сайце ў індэкс пошукавікаў, адначасова і просты, і складаны. Індэксацыя старонак - гэта з'ява натуральнае, і калі вы нават не задумляецеся аб ёй, а проста, скажам, вядзеце свой блог, паступова напаўняючы яго інфармацыяй - пошукавыя механізмы з часам выдатна «праглынуць» ваш кантэнт.

Іншая справа - гэта калі вам трэба паскорыць індэксацыю старонкі, напрыклад, калі ў вас сетка так званых «сатэлітаў» (сайтаў, разлічаных на продаж спасылак або размяшчэнне рэкламы, якасць якіх, як правіла, горш). У такім выпадку неабходна прымаць меры для таго, каб робаты заўважылі ваш сайт. Агульнараспаўсюджаны лічацца наступныя: даданне URL-адрасы сайта ў спецыяльную форму (завецца яна «AddUrl»); прагон адрасу рэсурсу па каталогах спасылак; даданне адрасы ў каталогі закладак і шмат іншага. Пра тое, як працуе кожны з гэтых метадаў, вядуцца шматлікія дыскусіі на SEO-форумах. Як паказвае практыка, кожны выпадак унікальны, і больш дакладна вызначыць прычыны таго, чаму адзін сайт праіндэксаваны за 10 дзён, а другі - за 2 месяцы, складана.

Як паскорыць трапленне ў індэкс?

Тым не менш, логіка, з дапамогай якой можна зрабіць так, каб сайт патрапіў у індэкс хутчэй, грунтуецца на размяшчэнні спасылак на яго. У прыватнасці, гаворка ідзе пра прастаноўцы URL на бясплатных і агульнадаступных сайтах (закладкі, каталогі, блогі, форумы); аб куплі спасылак на буйных і раскручаных сайтах (з дапамогай біржы Sape, напрыклад); а таксама аб даданні карты сайта ў форму addURL. Магчыма, ёсць і іншыя метады, аднак тыя, што ўжо былі пералічаныя, можна з упэўненасцю назваць самымі папулярнымі. Нагадаем, у цэлым жа ўсё залежыць ад сайта і шанцавання яго ўладальніка.

Якія сайты трапляюць у індэкс?

Згодна з афіцыйнай пазіцыі ўсіх пошукавых сістэм, у індэкс трапляюць сайты, якія праходзяць шэраг фільтраў. Якія патрабаванні ўтрымліваюць апошнія, не ведае ніхто. Вядома толькі, што з цягам часу ўсе яны ўдасканальваюцца такім чынам, каб адсяваць псевдосайты, створаныя для заробку на продажы спасылак і іншыя рэсурсы, якія не утрымліваюць карыснай інфармацыі для карыстальніка. Зразумела, для стваральнікаў гэтых сайтаў галоўнай задачай з'яўляецца індэксацыя старонак у як мага большым аб'ёме (каб прыцягнуць наведвальнікаў, прадаць спасылкі і гэтак далей).

Якія рэсурсы пашукавікі банят?

Грунтуючыся на папярэдняй інфармацыі, можна зрабіць выснову аб тым, якія сайты, хутчэй за ўсё, не трапяць у пошукавую выдачу. Тая ж інфармацыя агучваецца і афіцыйнымі прадстаўнікамі пошукавых сістэм. У першую чаргу гэта сайты, якія змяшчаюць неуникальный, генераваць аўтаматычна кантэнт, які не з'яўляецца карысным для наведвальнікаў. Далей ідуць рэсурсы, у якіх мінімум інфармацыі, створаныя для продажу спасылак і гэтак далей.

Праўда, калі прааналізаваць выдачу пошукавых сістэм, то ў ёй можна знайсці ўсе гэтыя сайты. Таму, калі казаць пра сайты, якія не будуць прысутнічаць у выдачы, варта адзначаць не толькі неуникальный кантэнт, а яшчэ і шэраг іншых фактараў - мноства спасылак, няправільна арганізаваная структура і гэтак далей.

Ўтойваем кантэнт. Як забараніць індэксацыю старонкі?

Пошукавыя сістэмы скануюць ўвесь кантэнт, які знаходзіцца на сайце. Аднак існуе методыка, з дапамогай якой можна абмежаваць доступ пошукавых робатаў да таго ці іншага падзелу. Робіцца гэта з выкарыстаннем файла robots.txt, на які і рэагуюць «павукі» пошукавых сістэм.

Калі ў корані сайта змясціць гэты файл, індэксацыя старонак будзе праходзіць па сцэнары, які прапісаны ў ім. У прыватнасці, можна забараніць індэксацыю з дапамогай адзінай каманды - Disallow. Акрамя яе, у файле можна паказваць яшчэ і раздзелы сайта, на якія гэтая забарона будзе распаўсюджвацца. Да прыкладу, для забароны ўваходжання ў індэкс ўсяго сайта, досыць паказаць адзін слэш «/»; а каб выключыць з выдачы раздзел «shop», досыць паказаць такую характарыстыку ў сваім файле: «/ shop». Як бачыце, усё лагічна і вельмі проста. Індэксацыя старонак зачыняецца вельмі лёгка. Пры гэтым пошукавыя робаты заходзяць на вашу старонку, чытаюць robots.txt і не ўносяць дадзеныя ў базу. Так можна лёгка маніпуляваць, каб бачыць у пошуку тыя ці іншыя характарыстыкі сайтаў. Зараз пагаворым аб тым, як правяраецца горада.

Як можна праверыць індэксацыю старонкі?

Існуе некалькі спосабаў даведацца тое, колькі і якія старонкі прысутнічаюць у базе «Яндэкс» або Google. Першы - самы просты - гэта задаць адпаведны запыт у пошукавую форму. Выглядае яна так: site: domen.ru, дзе замест домен.ру вы прапісваеце, адпаведна, адрас вашага сайта. Калі вы зробіце такі запыт, пошукавік пакажа ўсе вынікі (старонкі), размешчаныя па ўказанні URL. Прычым, акрамя простага пераліку ўсіх старонак, вы можаце таксама бачыць агульная колькасць праіндэксаваных матэрыялу (справа ад фразы «Колькасць вынікаў»).

Другі спосаб - гэта праверыць індэксацыю старонкі, выкарыстоўваючы спецыялізаваныя сэрвісы. Іх зараз вялікая колькасць, наўскідку можна назваць xseo.in і cy-pr.com. На такіх рэсурсах можна не толькі ўбачыць агульная колькасць старонак, але і вызначыць якасць некаторых з іх. Аднак гэта трэба вам толькі ў тым выпадку, калі вы больш паглыблена разбіраецеся ў дадзенай тэме. Як правіла, гэта прафесійныя SEO-інструменты.

Аб «прымусовай» індэксацыі

Яшчэ хацелася б крыху напісаць пра так званую «прымусовай» індэксацыі, калі чалавек рознымі «агрэсіўнымі» метадамі спрабуе загнаць свой сайт у індэкс. Рабіць гэтага аптымізатары не рэкамендуюць.

Пошукавыя сістэмы як мінімум, заўважыўшы празмерную актыўнасць, звязаную з новым рэсурсам, могуць увесці ў дзеянне нейкія санкцыі, негатыўна адбіваюцца на стане сайта. Таму лепш рабіць усё так, каб індэксацыя старонак выглядала як мага больш арганічнай, паступовай і плыўнай.