Добрий день, друзі! У світі SEO-оптимізації існує безліч специфічних термінів — чого варта лише фраза нудотність тексту або «соплі Google». У цій статті поговоримо про індексацію сайту.
Що таке індексація сайту?
Це термін, який позначає процес додавання інформації, розміщеної на вебпроєкті, до бази пошукової системи. Для цього використовуються спеціальні пошукові роботи, які систематично відвідують сайти та додають інформацію до індексу. Індекс, своєю чергою, і є базою даних пошукової системи. Пошуковий бот працює за певними алгоритмами й сканує сторінку. Індексації може підлягати різний контент, зокрема текст, посилання, зображення й відео. Для посилань пошукові системи також враховують атрибути та інші вказівки, які можуть обмежувати їх обробку.
Індексація сайту належить до найважливіших початкових етапів оптимізації вебпроєкту.
Як прискорити індексацію сайту?
Дотримуючись кількох наведених нижче рекомендацій, можна допомогти пошуковим системам швидше знаходити й обробляти сторінки сайту.
Перевірка файлу robots.txt
Одна з причин відсутності сайту в пошуку — помилки в robots.txt. Спочатку потрібно переконатися, що вебпроєкт не закритий від індексації. За замовчуванням цей системний файл розташовується в корені сайту. Одна справа, коли його немає, й зовсім інша — коли в ньому прописана директива, що забороняє пошукову індексацію. Наприклад:
User-agent: *
Disallow: /
Директива Disallow використовується для заборони сканування певних розділів. У старому матеріалі для протилежної дії наводилася команда Allow. Оскільки пошуковим роботам не обов’язково обходити всі системні каталоги, варто приділити час грамотному налаштуванню robots.txt. Раніше я публікував статтю про те, як створити правильний robots.txt для Joomla.
Додавання сайту до пошукових систем
Приділіть цьому трохи часу: додавання сайту та його сторінок через інструменти для вебмайстрів допомагає повідомити пошуковій системі про ресурс. У матеріалі рекомендувалося щонайменше додати сайт до Яндекса й Google. URL головної сторінки після цього ставав кандидатом на сканування та індексацію.
Розміщення активних посилань на сайтах-донорах
Для цього веброзробники й SEO-оптимізатори збирали бази сайтів, які називали донорами. Рекомендувалося розміщувати посилання на авторитетних ресурсах, попередньо аналізуючи їх і перевіряючи, чи немає санкцій.
Крім того, посилання можна було купувати на спеціальних біржах.
Посилання із соціальних мереж
У матеріалі як один зі способів прискорення виявлення сторінок згадувалися прямі посилання із соціальних сервісів, зокрема Facebook, Google+ і Twitter.
Також зазначалося, що посилання з ВКонтакте на той час проходили через редирект, тому автор вважав їх менш придатними для цієї мети.
Додавання сайту до RSS-каталогів та агрегаторів
Про те, як зробити RSS-стрічку на Joomla, написано в цій замітці. Також раніше було опубліковано докладний матеріал про інтеграцію фіда з FeedBurner. Якщо стрічку вже створено, її можна було додавати до RSS-каталогів і агрегаторів.
На той час існувало багато каталогів і агрегаторів, які безкоштовно додавали вебпроєкти до своїх списків. Додатковою перевагою вважалося отримання зворотних посилань.
Публікація нового контенту
Так і є! Пошукові роботи регулярно відвідують ресурси, на яких часто з’являються нові матеріали. Тому продовжуйте публікувати грамотний та унікальний контент 
.
Залежно від різних факторів індексація сайту може займати від кількох годин до кількох тижнів.
До цього процесу варто підготуватися заздалегідь:
— Правильно скласти заголовки та title.
— Прибрати небажані дублікати адрес. Наприклад, якщо сайт доступний за кількома варіантами URL, потрібно налаштувати єдиний основний варіант і редиректи. Для Joomla можна скористатися відповідними налаштуваннями та редиректами.
— Видалити або виправити биті посилання.
Із задоволенням відповім на запитання в коментарях. Бажаю вашим проєктам швидкої індексації.
Дякую за увагу і до зустрічі на сторінках StimylRosta.
