Прискорення індексації сторінок в Google

Інформація оновлена 9 лютого 2023 року

Я вже багато писала про індексацію як термін, про методи перевірки індексації, а також деякі інші моменти, пов'язані з наявністю сторінки в індексі. Ця стаття присвячена проблемі повільної індексації існуючих сторінок, а також можливим методам її виправлення. Якщо ви не хочете читати причини, а відразу бажаєте знати методи прискорення індексації, натисніть сюди. А для решти рекомендую вивчити весь матеріал повністю. Поїхали.

Чому сторінки не потрапляють до індексу

Відразу варто відзначити, з якого моменту ми можемо почати вважати, що сторінка має проблему з індексацією. Для нових сторінок термін індексації може становити до 14 днів. Також необхідно стежити за тим, чи відвідував бот сторінки (які не в індексі). Якщо Google не знайшов джерело, що посилається на сторінку, а ви як вебмайстер її не відправляли на переобхід, то незрозуміло, як Google в принципі повинен знайти цю адресу і просканувати її. Якщо і багато часу минуло, і інструмент перевірки урла показує, що Google сканував сторінку, але при цьому в індексі вона не з'явилася, то вже можна говорити про наявність проблеми з індексацією сторінок.

Розглянемо найпоширеніші причини відсутності сторінок в індексі, поділивши всі ситуації на умовно 3 типи.

Нові сторінки

Повторю ще раз: навіть якщо робити все правильно, нові сторінки можуть потрапляти в індекс до 14 днів. Можливо й більше, але я сама з таким не стикалася, а якихось офіційних даних не зустрічала у довідці. Однак, якщо вже пройшло багато часу, а бот не сканує ранок, перевірте:

• ✅ Чи розмістили ви посилання на нову сторінку на іншій внутрішній сторінці хоста;
• ✅ Чи запитали ви індексування в Серчконсоль або за допомогою Google Indexing Api.
• ✅ Чи додали ви сторінку в sitemap.

Це три залізно рекомендовані Гуглом методи індексації нових сторінок. При чому, Джон Мюллер говорив, що посилання з існуючої сторінки є більш пріоритетним методом, ніж запит індексування або додавання сторінки в сайтмап (що, все ж, так само потрібно зробити для чистоти совісті). Посилання на нові статті можна розмістити навіть на головній сторінці; це ніяк не розмиває її вагу, а щоб уникнути великого скупчення таких вихідних внутрішніх посилань, блок потрібно динамічно змінювати у процесі розширення структури сайту.

Рано чи пізно будь-які нові сторінки, про які було повідомлено Гуглу таким методом, повинні бути проскановані і якщо все добре - потрапити в індекс. Якщо ні, то переходимо до вивчення інформації нижче.

Проскановані сторінки не в індексі

Якщо ви відправили нову сторінку до інструменту перевірки url і був виданий результат як на скріншоті нижче - вітаємо, бот переобійшов сторінки, але поки не викинув в індекс.

Не забувайте, що це може бути пов'язане просто з природною затримкою цих процесів - від кількох годин до кількох днів (залежно від трасту сайту) потрібно пошуковій системі на те, щоб додати відсканований урл до індексу.

Якщо ж така ситуація триватиме довго, перевірте такі моменти:

• ✅ Чи немає помилок індексації сторінки (ноіндекс, закриття в Роботсі, не та відповідь сервера, вказано канонікал на іншу сторінку тощо). Помилка індексації також відображається в інтрументі перевірки url.
• ✅ Чи унікальний контент (перевірити будь-яким безкоштовним інструментом).
• ✅ Чи заповнені метатеги сторінки (дескрипшин, тайтл, h1) і є хоча б кілька абзаців унікального контенту.

Пам'ятайте, що Google не любить низькоякісного контенту або порожніх сторінок, і навряд чи заіндексує їх. Докладніше про те, які можуть виникнути помилки при скануванні, і чому це впливає на індексацію, можна дізнатися у довідці Гугла за Цим посиланням .

Якщо проблема з тим, що проскановані сторінки не потрапляють в індекс, відрізняється масовістю, і триватиме це вже досить довго, це може свідчити про якийсь фільтр на цілому домені.

Деіндексовані сторінки

Деіндексація – серйозний удар по трафіку сайту, адже цей термін означає, що з індексу пропадають старі сторінки, які вже генерували трафік. Що може спричинити деіндексацію:

• ⛔ Серйозний фільтр за порушення правил пошуковика;
• ⛔ DMCA.

І у випадку з ДМСА, і у випадку з фільтром ситуація виправна, але вимагає оперативного вирішення. Інформацію про такі проблеми також можна знайти в консолі, у розділі “Порушення” та “Повідомлення”.

Способи додавання сторінок до індексу та їх ефективності

Сам пошуковик рекомендує біленькі, але порівняно довгі (якщо ваш сайт не супер-трастовий-гігант) методи індексації, а саме:

• ✅ Надсилання запиту на індексацію може бути тривалим;
• ✅ Оновлення картки сайту (stemap.xml) - може бути довгим;
• ✅ Надсилання запиту на індексацію за допомогою API - порівняно швидкий метод, але порівняно важко настроюваний;
• ✅ Внутрішні посилання можуть бути довгими.

Моя особиста рекомендація - використовувати Google Indexing Api. Таким чином особисто я змогла закинути в індекс за кілька днів по кілька десятків сторінок на підпапках сайту під дуже конкурентні кластери Best Australian Online Casino та Die besten Online Casinos in Deutschland. За темою використання апі рекомендую переглянути відео:

Якщо ви зробили все це, перевірте якість вмісту. Якщо контент покращувати більше нікуди (чого ніколи не трапиться, але це не завжди допомагає), спробуйте поставити зовнішні посилання для індексації. Цей метод, однак, має свої мінуси: він може бути дорогим, але якщо це і не допомогло, варто провести повну діагностику сайту та виявити проблеми з ним.

Бонус-фіча для індексації старих сторінок

Є один дуже цікавий баг, що дозволяє проіндексувати старі сторінки не в індексі (за умови нормального контенту на ньому). Для цього необхідно всього лише змінити старий url - додати йому букву/цифру/символ. Якщо на старому урлі є зовнішні посилання, можна додати редирект зі старого урла на новий. Причина чому при зміні адреси бот додає сторінку в індексі, не особливо зрозуміла, але це працює. Продивіться скріни нижче та пояснення до них, щоб зрозуміти, як це працює:

На цьому скріншоті видно стару адресу сторінки, а також видно, що вона не в індексі.

Результат перевірки сторінки: видно, що з нею все гаразд, жодних заборон на індексацію немає. Відразу видно дату, коли я почала тест: 20 вересня 2022 року.

На цьому скріншоті видно вже нову адресу сторінки. Я попросила для нього індексацію. Все, що я зробила – прибрала дефіс між словами, все. Жодних інших правок я не робила.

Кілька днів - і нова адреса в індексі!

Індексація беклінків

Індексація беклінків - тема більш складна, тому що беклінки на сайтах, власниками яких ви не є, не може бути зроблена звичними методами. Проблему індексації беклінків вирішують одним з методів:

• ✅ Користуються так званими "аддурілками" (від анлійського add url, тобто додати урл) - сервісами, які обіцяють індексувати сторінки. Прикладом такої аддурілки є Linkbox. Щодо роботи аддурілок в мене буде окреме тестування.
• ✅ Проставляють tier-2 (в перекладі з англійського "другий ярус"), тобто ставлять посилання на свої посилання. На мою думку, якщо проставляти погані посилання на погані посилання, це не спрацює, а якщо ставити хороші посилання на хороші посилання, то це може бути дорого.
• ✅ Індексують за допомогою своїх сайтів, наприклад, ставлять 301 зі свого сайту на урли, які треба проіндексувати, а потім відправляють список своїх сторінок з 301 в Indexing Api. На мою думку, це може "спалити" ваші куплені посилання.

Чого не варто робити

На мій досвід, не варто на сторінки не в індексі ставити лом, тому що заробити фільтр можна з більшою ймовірністю, ніж допомогти ситуації.

Окрім іншого, не варто запитувати індексування кілька разів поспіль - це не прискорить процес (про це написано у довідці Гугла). Ви просто використовуєте таким чином усі ліміти.

Якщо ваша мета – індексування ваших донорів, то не варто індексувати ці сторінки за допомогою методу проставлення великої кількості посилань з однієї адреси на ці беки – так ви просто "спалите" Гуглу свої замовлені посилання.

Сподіваюся, що стаття була вам корисною.