Іноді веб-майстру потрібно видалити з пошукової системи одну з проіндексованих сторінок. Найчастіше до даної операції вдаються після помилкового занесення адреси сторінки в загальний список карти сайту. Свого часу з цією помилкою зіткнулися фахівці компанії Мегафон (sms-повідомлення стали доступні будь-якому користувачеві пошукової системи «Яндекс»).
Вам знадобиться
- Особистий сайт.
Інструкція
Один з найпростіших способів видалення власної веб-сторінки з архівів пошукових систем полягає в її фізичному видаленні, зміні адреси розташування і помилкового видалення (потрібно задати атрибут віддаленої сторінки). Після перетворення даної сторінки пошуковий робот замість вмісту побачить наступний рядок: HTTP / 1.1 404 Not Found. Однак не варто забувати про те, що пошукові роботи можуть заходити на сайт кожні 3 години, а можуть і раз на 2-3 дні. Тому необхідно почекати деякий час, щоб отримати результат.
Наступний спосіб полягає в редагуванні файлу robots.txt, який визначає шлях пошукового робота, як тільки він зайшов на ваш сайт. Цей текстовий документ завжди має одне розташування - корінь сайту. У першому абзаці зазвичай вказують параметри індексації для Яндекс-робота (він помітно відрізняється від інших роботів), у другому абзаці для всіх інших пошукових систем.
На початку абзацу необхідно вказати заголовок агента "User-Agent: *" і адреси сторінок, які необхідно приховати - "Disallow: /wp-content/foto/fotojaba.html". Таким же чином необхідно вказати адреси сторінок або розділів, які ви хочете закрити від індексації. Майте на увазі, що даний спосіб не дозволяє отримати швидких результатів. Якщо на вашому сайті низька активність і новини не транслюються в соціальні мережі, обробка нових даних може досягати терміну в кілька днів. До того ж, знадобиться видалити версії цих сторінок з архіву пошукової служби.
Альтернативним варіантом методу прописування посилань у файлі robots.txt є використання однойменного мета-тега robots. Синтаксис цього тега буде наступним: його необхідно розміщувати між парними тегами [head] і [/ head]. Значення robots потрібно розміщувати в тезі meta name. Приклад буде виглядати наступним чином: .