Праверка індэксацыі старонкі ў Google: ці ёсць URL у пошуку і чаму яго тамака няма

Кароткі адказ: каб праверыць індэксацыю старонкі ў Google, устаўце яе адрас у Праверку індэксацыі старонкі PromoPilot. Інструмент зробіць рэальны запыт site: у Google і скажа, ці ёсць URL у азначніку. Калі не – праверыць, што замінае: meta robots і X-Robots-Tag, забарона ў robots.txt, canonical на іншы адрас, адсутнасць у sitemap.xml – і выдасць вердыкт з прычынамі і спосабамі выпраўлення. Бясплатна, без рэгістрацыі. Ніжэй - як чытаць вердыкт і што рабіць з кожнай прычынай.

«Старонка апублікаваная месяц таму, а ў Google яе няма» – самае частае пытанне, якое мне дасылаюць. У палове выпадкаў вінаваты забыты noindex, які застаўся пасля распрацоўкі.

Што правярае індэксацыя старонкі?

Інструмент сумяшчае дзве рэчы: факт (ці ёсць старонка ў Google зараз) і дыягностыку (ці можа яна туды патрапіць у прынцыпе).

Як праверыць індэксацыю старонкі ў Google?

1. Адкрыйце Праверку індэксацыі старонкі.
2. Устаўце поўны адрас старонкі - з пратаколам і сапраўды так, як ён адчыняецца ў браўзэры: https://example.com/new-page.
3. Націсніце "Праверыць індэксацыю" і дачакайцеся запыту ў Google і аналізу фактараў.
4. Прачытайце вердыкт: "у індэксе" ці "не ў індэксе" і спіс знойдзеных блакіровак.
5. Ухіліце прычыну і праз некалькі дзён праверце зноў.

Так выглядае старонка інструмента: поле адрасу, лічыльнік бясплатных праверак на сёння і спіс таго, што аналізуецца.

Прыклад вердыкта: старонка https://example.com/new-page - індэксацыя заблакаваная: у кодзе стаіць meta noindex, а canonical паказвае на іншы URL. Дзве прычыны адразу, і абедзве ў шаблоне.

Чаму старонка не ў азначніку і што выправіць першым?

Разбірайце прычыны ў такім парадку - ад прамых забарон да «мяккім».

1. noindex у meta robots або X-Robots-Tag. Выдаліце. Частая сітуацыя: на этапе распрацоўкі ў CMS уключылі "схаваць сайт ад пошукавікаў" і забыліся выключыць. Для X-Robots-Tag глядзіце налады сервера, CDN або плагіна SEO.
2. Забарона ў robots.txt. Правіла выгляду Disallow: /blog/ закрывае ўсю частку. Тонкасць: калі старонка зачынена ў robots.txt, Google не можа прачытаць на ёй noindex - таму для выдалення з індэкса патрэбен адкрыты robots.txt і noindex, а для індэксацыі - проста прыбраць Disallow.
3. canonical на іншы адрас. Калі старонка ўнікальная, canonical павінен паказваць на яе саму. Памылка часта жыве ў шаблоне: усе тавары з canonical на катэгорыю, усе артыкулы - на галоўную блога.
4. Няма ў sitemap і няма спасылак. Старонка-сірата, аб якой Google не ведае. Дадайце яе ў sitemap.xml і пастаўце спасылкі з ужо праіндэксаваных старонак - з меню, катэгорый, звязаных артыкулаў.
5. Усё адкрыта, але старонкі няма. Значыць, Google яе бачыў і вырашыў не ўключаць - звычайна з-за тонкага або дубляванага кантэнту. Тут дапамагае толькі паляпшэнне самой старонкі.

Як хутка знайсці забарону самастойна. Адкрыйце старонку, націсніце Ctrl+U і пашукайце ў кодзе noindex і canonical. Загаловак X-Robots-Tag відаць у прыладах распрацоўніка браўзэра (укладка Network → адказ дакумента → Headers). robots.txt адчыняецца па адрасе ваш-домен/robots.txt — знайдзіце правілы Disallow, якія супадаюць з пачаткам адрасу старонкі. Інструмент робіць усё гэта за вас, але ведаць, дзе глядзець, карысна: так прасцей праверыць, што праўка сапраўды прымянілася.

Асобны выпадак - старонкі з параметрамі і фільтрамі: ?sort=price, ?color=red, UTM-пазнакі. Іх звычайна і не трэба індэксаваць; правільна, калі canonical вядзе на асноўную вэрсію. Калі вы правяраеце такі адрас і бачыце "не ў індэксе" з canonical на катэгорыю – усё працуе як задумана.

Калі тэхнічныя чыннікі ўхіленыя, можна паскорыць працэс: для свайго пацверджанага сайта адпраўце URL на пераіндэксацыю праз прыладу праверкі URL у Search Console. Але гэта просьба, а не гарантыя: новыя старонкі пападаюць у індэкс ад некалькіх дзён да некалькіх тыдняў.

Параўнанне: праверка індэксацыі старонкі PromoPilot і альтэрнатывы

Выснова: Search Console - эталон для свайго сайта, але туды патрэбен доступ. Анлайн-праверка зручная, калі доступу няма (сайт кліента, стары праект, старонка канкурэнта) ці калі трэба за хвіліну зразумець, ці ёсць тэхнічнае блакіроўка.

У PromoPilot яшчэ 87 бясплатных SEO-інструментаў. Калі пытанне не пра адну старонку, а пра ўвесь сайт - колькі старонак дамена ў Google і якая доля ад sitemap, - для гэтага ёсць асобная праверка індэксацыі сайта, ёй прысвечаны суседні артыкул раздзела. Разабрацца ў правілах robots.txt дапамагае аналізатар robots.txt.

Абмежаванні праверкі індэксацыі старонкі?

Інструмент выкарыстоўвае публічныя сігналы і не замяняе дадзеныя інструмента праверкі URL у Search Console: дакладны статус і прычыны выключэння з боку Google бачыць толькі ўладальнік сайта.

Часовыя блакаванні ботаў – абарона ад DDoS, капча, абмежаванне частаты запытаў – могуць паўплываць на дакладнасць: калі прылада не змог адкрыць старонку, вынік па meta robots і canonical будзе няпоўным. І яшчэ: свежая старонка можа ўжо быць у азначніку, але запыт site: паказвае яе не адразу. Калі вердыкт "не ў індэксе", а блакіровак няма, пераправерце праз пару дзён.

Нарэшце, прылада правярае старонку "звонку" і не ведае, як Google ацаніў яе якасць. Статус «прасканаваны, але пакуль не праіндэксаваны» відаць толькі ў Search Console – і ён лечыцца не кодам, а зместам старонкі.

Калі бясплатнай прылады мала?

Адна старонка з забытым noindex - пяць хвілін працы. Але бывае складаней. Спецыяліст патрэбен, калі:

• не індэксуюцца дзясяткі старонак, а відавочных забарон няма;
• canonical, noindex або robots.txt генеруюцца плагінам або шаблонам і «вяртаюцца» пасля праўкі;
• пасля пераезду старонкі выпалі з індэкса, а новыя не з'яўляюцца;
• старонкі ў індэксе, але Google выбірае кананічным іншы адрас.

Што я магу зрабіць для вашага сайта?

Мяне клічуць Валер Данюк, я распрацоўшчык і SEO-спецыяліст: 12 гадоў і 200+ кліентаў. Праблемы з індэксацыяй - адна з самых частых прычын, па якіх да мяне прыходзяць.

SEO і прасоўванне

• SEO-аўдыт пад ключ: знаходжу, чаму старонкі не пападаюць у азначнік, і выпраўляю шаблоны, robots.txt, canonical і sitemap.
• Кантэнт, які індэксуецца адразу: аўтаблог з ІІ-агентамі публікуе артыкулы з правільнай разметкай і sitemap.
• Індэксацыя моўных вэрсіяў — у разборы як зрабіць шматмоўны сайт без перакладчыка.

Сайты і інтэрнэт-крамы

• Лэндынг пад новы тавар за вечар - адкрыты для індэксацыі з першай хвіліны.
• Сайт у стылі ўпадабанага сайта за хвіліны на 1001site: серверны рэндэр, sitemap і разметка настроены аўтаматычна.
• Перанос крамы з Instagram на сайт - з карткамі, якія знаходзіць Google.

CRM, улік і аўтаматызацыя

• ERP + сайт + Telegram -бот з ІІ для авторазборки за 6 дзён.

Дашліце адрас старонкі, якой няма ў Google, у Telegram – падкажу, дзе шукаць прычыну.

Вынік

1. Праверка індэксацыі старонкі адказвае на два пытанні: ці ёсць URL у Google і што замінае яму туды патрапіць.
2. Прычыны па частаце: noindex (у кодзе або загалоўку), robots.txt, canonical на чужы адрас, старонка-сірата без sitemap і спасылак.
3. Пасля выпраўлення адпраўце URL на пераіндэксацыю ў Search Console і пераправерце праз некалькі дзён.
4. Калі не індэксуюцца дзясяткі старонак – патрэбен аўдыт, а стары сайт з заблытанымі шаблонамі часам прасцей перасабраць на 1001site.

Праверце старонку, якая «знікла» з пошуку - вердыкт з прычынай з'явіцца менш чым за хвіліну.

Крыніцы

• Старонка інструмента «Праверка індэксацыі старонкі» PromoPilot – спіс праверак, прыклад і абмежаванні.
• Даведка Google Search Console - інструмент праверкі URL.
• Google Search Central - блакіроўка індэксацыі з дапамогай noindex.
• Google Search Central - кананічныя адрасы і дублюючыя старонкі.