5 способів видалити сторінку з пошуку Яндекса або Google

Всі веб-майстри й SEO-спеціалісти хочуть, щоб сторінки їхнього сайту якнайшвидше потрапляли в індекс пошукових систем, однак бувають ситуації, коли навпаки потрібно видалити сторінку з пошуку. Причини для цього бувають різні:

• неактуальна сторінка або розділ сайту;
• сторінка, яка є дублем іншої;
• потрапляння особистих даних, контактної інформації користувачів у результати пошуку;
• потрапляння технічних розділів, результатів пошуку сайту та інших непотрібних для індексації сторінок і розділів сайту.

Далі ми розглянемо 5 способів видалення сторінок з пошуку Google і Яндекс, усі вони передбачають, що ви є власником або адміністратором ресурсу.

Сторінка з помилкою 404

Перший простий спосіб, для реалізації якого треба видалити непотрібну сторінку з сайту, а замість неї повинен відображатися налаштований редирект на сторінку 404 з повідомленням, що ця сторінка не існує. Цей метод є надійним, але повільним, оскільки доведеться чекати відвідування робота для нової індексації сторінок, а пошукова система Яндекс буває, не навідується в гості по кілька місяців, на не дуже цікаві їй ресурси.

У випадку, коли сторінку потрібно зберегти на сайті, і тільки вилучити з пошукового індексу, цей метод не підійде, для цього є інші способи.

Закриття розділів і окремих сторінок через robots.txt

Цей спосіб застосовують, коли, на думку веб-майстрів або SEO-спеціалістів, потрібно зберегти вміст розділів або сторінок, але закрити їх від індексації. У файлі robots.txt оголошується тип пошукового робота, для всіх типів ставиться «*»:

User-Agent: *, а далі прописується забороняюча директива з адресою сторінки або розділу: Disallow: /сторінка.html.

У цьому випадку також доведеться чекати відвідування пошукового робота, і сторінка може не випасти з індексу, якщо на неї ведуть інші посилання.

Закриття індексації тегом Robots

Це альтернативний метод закриття від індексації за допомогою файлу robots.txt, тільки закриття сторінок відбувається додаванням коду в сам HTML: <meta name="robots" content="noindex,nofollow" />. Зручність цього методу в тому, що цей код можна вбудувати в будь-які непотрібні сторінки сайту, за допомогою системи управління контентом (CMS).

Заголовки сторінок X-Robots-Tag

Це альтернатива тегу robots, тільки код прописується не в тілі HTML, а в HTTP-заголовку сторінки, який не видно користувачам: X-Robots-Tag: noindex, nofollow.

Видалення з індексу за допомогою інструментів веб-майстрів

Для того щоб швидко сторінка або розділ зник з індексу пошукової системи, потрібно зайти в розділ Webmaster Яндекса, або в Google Webmaster Tools, і вручну видалити непотрібні URL. При цьому попередньо необхідно закрити від повторної індексації сторінки в файлі robots.txt, за допомогою мета-тегів або заголовків. Користуючись цим способом, сторінки випадуть з індексу протягом кількох годин. Однак з Яндексом бувають затримки, аж до очікування наступного оновлення пошукового індексу.