Поиск

Удалить страницу из яндекса. Несуществующие страницы существуют в поиске по причинам. Причины удаления веб страниц из поиска

Многие вебмастера рано или поздно сталкиваются с необходимостью удалить из поисковой системы страницы сайта, которые попали туда по ошибке, перестали быть актуальными, являются дублями или содержат конфиденциальную информацию клиентов (причины могут быть разные). Яркий пример тому уже нашумевшая ситуация с Мегафоном, смс-ки пользователей которого проиндексировал Яндекс, ситуация с интернет-магазинами, когда в поиске можно было найти личную информацию клиентов и подробности их заказов, ситуация с банками и транспортными компаниями и так далее…

Не будем касаться в этой статье причин описанных выше казусов, а рассмотрим, как удалить из Яндекса или Google ненужные страницы. Подразумевается, что они пренадлежат вашему сайту, в противном случае необходимо связываться с владельцем нужного ресурса с соответствующей просьбой.

5 способов удаления страниц из поисковых результатов

1. 404 ошибка

Один из простых способов удаления страницы из поиска это удаление её со своего сайта, с условием, что в дальнейшем, при обращении по старому адресу, сервер выдавал 404-ую ошибку, означающую, что страницы не существует.

HTTP/1.1 404 Not Found

В данном случае придётся подождать, пока робот ещё раз не зайдёт на страницу. Иногда это занимает значительное время, в зависимости от того, как она попала в индекс.

Если страница при удалении её из поиска должна существовать на сайте, то данный способ не подходит, лучше использовать другие, представленные ниже.

2. Файл robots.txt

Очень популярный метод закрыть от индексации целые разделы или отдельные страницы это использование корневого файла robots.txt. Существует множество мануалов, как правильно настроить этот файл. Здесь приведём лишь несколько примеров.

Закрыть раздел администраторской панели от попадания её в индекс поисковиков:

User-Agent: *
Disallow: /admin/

Закрыть определенную страницу от индексации:

User-Agent: *
Disallow: /my_emails.html # закрытие страницы my_emails.html
Disallow: /search.php?q=* # закрытие страниц поиска

В случае с robots.txt тоже придётся ждать переиндексации, пока робот не выкинет из индекса страницу или целый раздел. При этом, некоторые страницы могут остаться в индексе, если причиной их попадания туда было несколько внешних ссылок.

Данный метод неудобно использовать в случае необходимости удаления разных страниц из разных разделов, если невозможно составить общий шаблон для директивы Disallow в robots.txt.

3. Мета-тег robots

Это альтернатива предыдущего метода, только правило задаётся непосредственно в HTML -коде страницы, между тегами .

Удобство мета-тега в том, что его можно добавить на все нужные страницы (с помощью системы управления), попадание которых нежелательно в индекс поисковика, оставляя файл robots.txt при этом простым и понятным. Недостаток данного метода лишь в том, что его сложно внедрить для динамического сайта, использующего один шаблон header.tpl, если отсутствуют специальные навыки.

4. Заголовки X-Robots-Tag

Данный метод используют зарубежные поисковые системы, в том числе Google, как альтернативу предыдущему методу. У Яндекса пока нет официальной информации о поддержке этого http-заголовка, но возможно, в ближайшее время будет.

Суть его использования очень похожа на мета-тег robots, за исключением того, что запись должна находиться в http-заголовках, которые не видны в коде страницы.

X-Robots-Tag: noindex, nofollow

В некоторых, часто неэтичных, случаях его использование очень удобно (например, при обмене ссылками и скрытии страницы линкопомойки).

5. Ручное удаление из панели для вебмастеров

Наконец последний, и самый быстрый способ удаления страниц из индекса – это их ручное удаление.

Единственное условие для ручного удаления страниц – они должны быть закрыты от робота предыдущими методами (в robots.txt, мета-теге или 404-ой ошибкой). Замечено, что Google обрабатывает запросы на удаление в течение нескольких часов, в Яндексе придётся подождать следующего апдейта. Используйте этот метод, если вам надо срочно удалить небольшое количество страниц из поиска.


Улучшение юзабилити 404-ых страниц уменьшает показатель отказов. В статье приведены несколько советов, которые помогут сделать 404-ую страницу более эффективной.

Всё о файле robots.txt
Для тех, кто ещё не сталкивался с настройкой файла robots.txt, данный ресурс будет полезной отправной точкой. Здесь собрано много примеров и другой полезной информации.

Яндекс: Использование robots.txt
Официальные примеры использования файла robots.txt от Яндекса. Также там представлены учитываемые Яндексом директивы и другие советы.


Пример использования HTTP -заголовка X-Robots-Tag в Apache.

Чтобы добиться поставленных целей в работе с сайтом нужно учесть массу различных тонкостей. Во время оптимизации по невнимательности случается, что в индексе оказывается информация не для глаз серферов просторов интернета. Логично, что от контента подобного рода нужно избавляться. В этой статье мы разберем рядовые случаи возникновения такой необходимости и, конечно же, узнаем как удалить страницу из поиска Яндекса.

Причины удаления веб страниц из поиска

Мы не станем разбирать проблемы гигантов, как, например, история с известным мобильным оператором, название которого я афишировать не стану, лишь скажу, что он начинается на «мега» и заканчивается на «фон». Когда у последнего проиндексировались и попали в поиск страницы со смс-сообщениями пользователей. Также не станем заострять внимание на проблемах интернет-магазинов, у которых периодически можно найти личные данные пользователей и подробности их заказов в открытом доступе. Ну и так далее.

Мы разберем наболевшие проблемы обычных предпринимателей, которые хотят решить свои задачи:

  1. Дубли. Дублированный контент мешает продвижению сайтов, это ни для кого не секрет. Причины возникновения могут быть разными. Подробнее можете посмотреть в нашей .
  2. Информация утратила свою актуальность. К примеру, была какая-то разовая акция, да прошла. Страницу нужно удалить.
  3. «Секретики». Данные, которые не для всех. Вспоминаем ситуацию с оператором связи. Такие странички необходимо скрывать от зевак.
  4. Смена URL адресов. Будь то переезд сайта или настройка ЧПУ, в любом случае придется избавляться от старых страниц и предоставлять поисковику новые.
  5. При переезде на новое доменное имя вы решили вообще удалить сайт из поисковика Яндекса, чтобы не пострадала уникальность контента.

На самом деле причин удалить сохраненные страницы из поисковых систем может быть кратно больше. Список нужен лишь для иллюстрирования типовых проблем.

Как удалить страницу из поисковика Яндекса

Есть два пути развития событий. Долгий (но ленивый) и ускоренный (придется чуть-чуть пошевелиться).

  • Долгий способ

Если время не торопит и есть дела поважнее, то можно просто удалить страничку через систему управления контентом (она же админка или CMS). В таком случае, переходя по уже несуществующему URL адресу, поисковой робот обнаружит, что сервер отвечает ему кодом 404 - страница не существует, а значит ее нужно выкинуть из поиска, что со временем случиться без вашего вмешательства.

  • Ускоренный способ

Своеобразное продолжение первого. После удаления из CMS, нужно воспользоваться сервисом Яндекса далить URL . Это приведет к оперативной реакции со стороны ПС и в ближайшее время ненужная информация пропадет из индекса.


Но что, если нужно удалить страницу из поисковика, оставив её при этом на самом сайте?

Как удалить страницу в поисковике Яндекса не удаляя ее с сайта

Во-первых, закрыть страницу от индексации с помощью файла robots. txt, уверен, с ним вы уже сталкивались. Внутри файла необходимо прописать следующее:

User-agent: Yandex
Disallow: /i-hate-my-page

Это закроет от индексации контент, URL адрес которого www.домен.ru/i-hate-my-page

Во-вторых, так как robots. txt содержит не жесткий набор правил для робота, а скорей носит рекомендательный характер, то обычного Disallow может быть недостаточно. Поэтому для пущей уверенности пропишите в html коде страницы следующее:



Обратите внимание, что теги head тут не для красоты. Мета-тег роботос должен располагаться между тегами .

Кульминацией станет добавление адреса в уже знакомый сервис Яндекса Удалить URL, которым мы уже умеем пользоваться.

Как удалить сайт из поисковика Яндекса

Для того чтобы полностью удалить сайт из поисковой базы нужно пройти те же пункты, что и для удаления страницы, но с некоторыми нюансами.

  • Закройте весь сайт от индексации добавив в файл robots. txt строчки
    User-agent: Yandex
    Disallow: /
  • Удалите страницы с помощью, уже родного сервиса Удалить URL.
  • Избавьтесь от всех ссылок ведущих на ваш сайт.
  • Ждите переиндексации.

Если же сайт вам больше совсем ненужен, удалите все файлы, которые находятся на хостинге и забудьте об этом. В крайнем случае, обратить в службу поддержки ПС.

Итог

Хочется сказать, что процедура удаления сохраненных страниц из поиска не очень трудная и порой бывает просто необходимой. Надеюсь, владельцы сайтов, которые не желают сильно погружаться в подробности, сумеют найти в этой статье ответ на вопрос как удалить ненужные веб-страницы из поиска Яндекс.

Надеюсь, что было полезно!

Недавно у меня возник вопрос как удалить статью из поисковой выдачи. То есть, чтобы от неё и духа не осталось. Можно конечно же просто удалить её с сайта. Так как у меня настроена страница 404. То есть, если кто-то зайдёт по ссылке удалённого поста, то мой блог выдаст ему четыреста четвёртую страницу.

А со временем удалённый урл сам выпадет из поиска. Но, если честно, то не хочется, чтобы на блоге было слишком много подобных страниц. Это же всё-таки хлам, чем меньше его – тем лучше. И потом подобная страница может быть доступна в кешированном варианте сайта. Да и роботов лучше пожалеть у них итак достаточно работы. И пусть им нравится наш блог.

Почему может возникнуть потребность удалить из индекса контент с сайта?

  • Страница может стать уже неактуальной
  • Вы захотели поменять URL
  • Нашли дублированную страницу на своём ресурсе

И так далее… Например недавно я неправильно написала заголовок. Так как в плане были сразу две статьи. Как назло статья проиндексировалась и пришлось скопировать код в html режиме, удалить тот пост. Проделать всё, что я написала ниже. И заново опубликовать статью. Ну что поделаешь, надо быть внимательнее.

Итак, сначала удаляем объект с блога. Если мы просто закроем её в файле роботс, то это не поможет. Так как, если кто-то уже сослался на неё, то она останется в поиске и в кеш. Мы сделаем это более надёжно:

Как удалить страницу из поиска Яндекс

Переходим на Яндекс, в сервис Вебмастер http://webmaster.yandex.ru/ И читаем его требования к той странице, которую хотим удалить:

Её уже не должно быть на сайте. А когда на неё ссылаются, то должна выдаваться страница 404, если её нет, то нужно, чтоб она была закрыта в файле роботс, или метатегом noindex.

У поисковой системы Google требования практически такие же, но без «или». Может просто браузер переводит не правильно? Но я всё-таки закрыла её в robots, на всякий случай. Но об этом ниже. А сейчас продолжим.



А теперь удаляем её из поисковой выдачи Гугла

Идём в инструменты для вебмастера https://www.google.com/webmasters/tools/ Выбираем нужный сайт и в левой колонке нажимаем раздел Индекс Google. В выпадающем меню находим Удалить URL адреса. И жмём на кнопку Создать новый запрос на удаление


После этого видим такую картину, нажимаем отправить запрос


И перед нами страница, где мы видим статус удаляемой ссылки


Можно зайти и проверить через некоторое время удалил её Гугл из индекса или нет. А теперь делаем всё то что «просит» от нас Гугл.

Закрываем страницу или пост в файле robots

Нам надо просто добавить этот код в роботс

Disallow:/адрес_вашей_страницы

Закрываем удалённую страничку метатегом noindex (делаем это пока не удалили по какой-то причине страницу)

Сделаем это, применив вот этот код на странице

Итак, мы правильно удалили страницу или пост с сайта и больше никто не сможет на неё зайти и прочитать!

УДАЛЕНИЕ СТАТЕЙ С ЧУЖИХ САЙТОВ

Но что делать если сайт, с которого нужно удалить статью принадлежит не вам? Можно попробовать связаться с администрацией сайта и вежливо попросить удалить информацию. Для этого нужно написать через контактную форму или на электронную почту указанную на сайте. Если на сайте не указаны контактные данные администрации, можно попробовать выяснить их используя сервисы Whois.

Если ввести адрес сайта, сервис покажет контактные данные владельца доменного имени. Иногда эта информация бывает скрыта, или заполнена поддельными данными, но шанс найти в whois электронную почту или телефон администратора домена достаточно высок.


Так выглядит пример запроса whois для домена. Иногда администратор указывает и реальный телефон. Тогда можно еще и позвонить. Но имейте в виду, что человек может находится совсем в другом часовом поясе нежели вы и перед звонком лучше выяснить к какому региону принадлежит данный код, чтобы не позвонить случайно посреди ночи.

УДАЛЕНИЕ ЧЕРЕЗ СУД

Если администратор сайта игнорирует ваши просьбы или упорно отказывается удалять нежелательную информацию, единственным возможным вариантом остается обратится в правоохранительные органы. Есть даже специализированные адвокатские компании, занимающиеся удалением информации в интернете. В такой компании вам помогут составить правильное обращение в суд, найдут контактные данные администратора сайта если у него установлен скрытый whois.


Одной из таких компаний является aдвокатское агентство F-Persona . Главной специализацией которой является защита репутации и удаление нежелательной информации из интернета. Услугами таких агентств пользуются в крайних случаях, когда все другие методы не действуют. Ведь известно, что судебные процессы довольно хлопотное и затратное дело.

Статьи в этой же категории

О х уж эти ошибки роста…

В моей практике был случай. Писал статьи, старался изо всех сил, написано на тот момент было статей шестьдесят и вдруг!

Нахожу такую деталь, мои настроены на блоге не совсем корректно, вы можете посмотреть как нужно в этой статье.

Ну а сами понимаете, блог в индексе и посетители приходят по запросам из выдачи поисковиками. Некоторые статьи в ТОПе на вторых –пятых позициях держатся и приводят кучу народа на блог.

И вот, засада, значит надо переделывать все ссылки? Обратился к опытным СЕОшникам, говорят этот вопрос все время в дискуссиях, а структура, как не крути, нарушена. Как бы вроде и так работает…

Но знакомый блогер сказал, что у него за 170 статей было, и стало колбасить, и он переделывал.

А всего лишь в конце URLа каждой статьи не слэш [ / ] должен быть, а [ .html ] !!!

Подумал-подумал и взялся. И переделал. Конечно, посещаемость упала, потом постепенно начала расти, но вот проблема.

Страницы со слэшем в индексе остаются и посетители из поисковиков естественно идут ко мне и натыкаются на 404 страницу. Нет мол тут такой статьи, бля… Какого хера…

Вот мы и пришли к сути статьи, надо убрать из индекса эти УРЛы.

Удаление страниц из индекса поисковых систем

Изучив этот вопрос, принялся за дело. Оказывается, что несуществующие страницы могут оказаться по многим причинам.

Почему же закрытые и удаленные страницы остаются в поиске

Причин несколько. Поясню, под закрытыми страницами подразумеваются служебные и другие страницы, запрещенные к индексации правилами robot.txt или метатэгами.

Несуществующие страницы существуют в поиске по причинам:

— Удаленные, а значит не существующие
— по причине ручного редактирования адреса вэб-страницы. Этого делать нельзя категорически, он сразу становится недоступным.
— не правильно настроена работа сервера, в связи с этим несуществующая страница будет выдавать 404 ошибку.

Лишние страницы образуются в индексе при условии:

— Страницы закрыты, но на самом деле они находятся в поиске и открыты для поисковых роботов (не правильно настроен robots.txt)
— были проиндексированы ранее, чем они были закрыты
— на эти страницы ссылаются другие сайты или на них ссылаются внутренние страницы.

Ну коли причины нам известны, диагнос поставлен, можно и приступить к лечению.

Не лишним стоит упомянуть, что сделав работу по устранению всех косяков, они еще какое-то время будут существовать в поиске. Все зависит от частоты прохода роботов по вашему сайту.

Как удалить страницу из поиска в Яндексе


Отправили и при следующем заходе робота запрос на удаление будет выполнен.

Как удалить из индекса в поисковой системе Google

В Гугле открываем инструменты вэбмастера в списке Оптимизация Удалить URL адреса по ссылке https://www.google.com/webmasters/tools/url-removal?hl=ru&siteUrl=http://www.сайт/


Или наберите в поиске Гугла «Инструмент для вебмастеров» и в верхней кликните по верхней строчке.

Откроется окно Search Console, где кликните на URL вашего сайта, если он там есть. Если нет, добавьте свой ресурс (слева кнопка).

Затем слева будет меню, на нем путь Индекс Google —> Удалить URL-адреса.

Жмите на кнопку Временно скрыть, и внесите адрес для удаления в окно. Кнопка Продолжить.

Затем выберите причину и Отправьте запрос. Запрос о статусе отобразится.

И через какое-то время страница уйдет из индекса.

Ну вот и вся история)))

Компьютерные вирусы доставляют пользователям очень много хлопот. От некоторых можно избавиться очень быстро, какие-то требуют отдельного внимания. Все чаще и чаще стала встречаться страница 2inf.net. Как удалить ее из браузера? Что это вообще такое? Стоит ли избавляться от данного сайта, который заменяет стартовую страницу? Или можно обойтись без этого? Лучшие советы и рекомендации по борьбе с 2inf.net представлены далее. На самом деле избавиться от этой страницы не так уж и трудно. Особенно если правильно подготовиться.

Что это

Пользователь открыл браузер и увидел на стартовой странице http://2inf.net? Как удалить данную проблему? Чтобы ответить на этот вопрос, следует понять, о каком вирусе идет речь. Ведь у каждого типа компьютерной "заразы" имеются свои особенности.

Изучаемый вирус - это угонщик браузера. Он не так опасен, как трояны. И удалить его зачастую получается без особого труда. Он грузит собой процессор, выводит в браузере много рекламы и спама, не позволяет сменить стартовую страницу. Угонщик может украсть данные, введенные в браузере. Он также способствует проникновению прочей компьютерной "заразы" на компьютер. Именно поэтому следует как можно скорее избавляться от http://2inf.net. Как удалить эту страницу?

Подготовка

Чтобы процесс борьбы с данной проблемой прошел с максимальным удобством и минимальными трудностями, рекомендуется провести небольшую подготовку. Иногда наличие угонщика браузера лишь указывает на более серьезные вирусы. Поэтому подстраховка не повредит.

Какие действия нужно предпринять, чтобы не бояться бороться с 2inf.net? Как удалить это без особого ущерба? Для этого нужно:

  1. Сохранить важные данные. Нужно это на случай обнаружения более серьезных вирусов в системе. Утрата информации мало кого порадует.
  2. Обзавестись хорошей антивирусной системой. Прекрасно в последнее время с любыми вирусами борется Dr.Web. Его можно заменить Nod32 или "Авастом".
  3. Установить дополнительный софт. Удалить 2inf.net с компьютера и нормализовать работу машины помогут программы под названием CCleaner и SpyHunter.
  4. Установочный диск с операционной системой тоже рекомендуется подготовить. Особенно если есть подозрение на борьбу не только с 2inf.net, а с настоящими троянами.

Пожалуй, этих шагов хватит, чтобы провести "лечение" компьютера с минимальным ущербом. Сами угонщики браузеров практически не несут никакой опасности. Но они способствуют проникновению троянов в систему. Именно поэтому многие задумываются, как удалить страницу 2inf.net.

Процессы

Первый этап - очистка процессов. Все, что запущено и работает на компьютере, отображается среди выполняемых действий. Их можно увидеть в "Диспетчере задач", во вкладке "Процессы". Поэтому именно в эту службу придется заглянуть в первую очередь. Если не очистить процессы, то дальнейшее "лечение" системы окажется бесполезным.

Беспокоит это? Для этого нужно нажать сочетание клавиш Ctrl + Alt + Del, в появившемся окне выбрать "Диспетчер задач". Далее требуется перейти во вкладку "Процессы". Следует завершить все подозрительные задачи и все пункты, в которых упоминается 2inf.net. Как удалить их? Для этого курсором выделяется нужная строчка, а затем пользовать должен кликнуть на "Завершить процесс", согласиться с возможным нанесением и радоваться достигнутому результату.

Важно: нельзя перезагружать операционную систему до полного окончания борьбы с 2inf.net. Иначе все придется повторять с самого начала. Перезагрузка должна состояться исключительно в самом конце всех действий. Только так можно удалить 2inf.net с компьютера в полной мере.

Сканирование

Следующий этап - сканирование операционной системы на наличие вирусов. Это обязательный пункт, без которого не обойтись, если нужно избавиться от той или иной проблемы.

Для этого нужно в антивирусе настроить глубокую проверку. Далее осуществить сканирование всех разделов жесткого диска и прочих накопителей информации. В конце пользователю выведется результат.

На компьютере появилась стартовая страница http://2inf.net? Как удалить ее? Для этого все требуется при помощи антивируса "пролечить". А сами вирусы - удалить. Для этого существуют отдельные кнопки.

Как только работа с антивирусом будет завершена, можно приступать к следующему шагу. А именно, избавляться от шпионов, которые имеются в системе. Для этого при помощи SpyHunter осуществляется поиск "заразы", а затем по аналогии с антивирусом все объекты удаляются.

А как же реестр?

Беспокоит страница http:2inf.net? Как удалить ее раз и навсегда? Следующим обязательным шагом является очистка системного реестра. Она может осуществляться вручную или автоматически. Первый метод не так эффективен. Поэтому рекомендуется воспользоваться вторым.

Как удалить страницу 2inf.net? Чтобы очистить реестр операционной системы, пользователь должен запустить CCleaner. Этот софт поможет автоматической очистке изучаемой службы. После запуска в левой части появившегося окна нужно отметить все жесткие диски, накопители и прочие устройства. В правом нижнем углу надо нажать на "Анализ", затем на пункт "Очистка". Вот и все - реестр чист. Но пользователей все равно еще будет беспокоить 2inf.net. Как удалить эту страничку окончательно?

Свойства ярлыков

Осталось всего одно действие. Оно помогает только тогда, если речь идет о "лечении" компьютера от угонщиков. Как удалить "браузер" 2inf.net? Чтобы избавиться от проблемы, которая прописалась в программу выхода в Интернет, нужно заглянуть в свойства запускаемой утилиты. Для этого требуется кликнуть правой кнопкой мышки по ярлыку браузера и нажать там на "Свойства".

В появившемся окне необходимо обратиться к пункту "Ярлык", там отыскать поле "Общие". Оно пролистывается до самого конца. И при наличии угонщика в браузере в данном поле отобразится адрес 2inf.net. Как удалить его? Для этого просто стирается адрес страницы вместе с кавычками и оставляется только исполняемый файл. Например, chrome.exe. После этой надписи не должно быть иных записей.

Изменения сохраняются. Вот и все. Теперь можно перезагрузить компьютер, в настройках браузера установить новую стартовую страницу и дополнительно установить AdBlock. Кстати, процедуру со свойством ярлыка проделать необходимо со всеми браузерами. Больше ничего не нужно. При желании можно переустановить браузер вовсе. Теперь понятно, как удалить страницу 2inf.net.