Mobile-First Indexing – це процес, під час якого Google використовує мобільну версію вашого сайту як основну для індексації та ранжування. Це означає, що саме мобільний контент стає ключовим для визначення релевантності вашого сайту у пошукових запитах.
SEO пагінація – це нумерація сторінок на веб-сайті. Зазвичай вона представлена у вигляді списку номерів чи літер. Кожен номер – це посилання, яке веде на певну сторінку. Блок з пагінацією зазвичай розміщують у нижній чи верхній частині сайту.
Для полегшення процедури переіндексації створено спеціальний скрипт – Google Index API. І хоча довгий час цей інструмент вважався актуальним тільки для сайтів пошуку роботи і з наявністю прямих трансляцій (як стверджував сам Джон Мюллер), але практика показала, що він підходить для всіх веб-ресурсів і даних.
Файл robots.txt – це спеціальний індексний файл, призначений для вказівки пошуковим роботам на те, що можна індексувати на сайті, а що не можна. Він потрібен для того, щоб побачити повну кількість сторінок та файлів на сайті. Також за його допомогою добре видно шляхи розташування тих чи інших файлів та наявності сторінок сортувань, фільтрів та сторінок з динамічними параметрами.
Файл robots.txt – це простий текстовий документ, в якому містяться рекомендації для пошукових роботів всіх типів щодо індексування вашого сайту – які сторінки та файли потрібно сканувати та додавати до індексу, а які ні. Зауважте, що саме рекомендації, а не конкретні вказівки.