Удаление URL с проверкой результата
  1. Причина

    Скрыть, удалить или перенести

  2. Сайт

    Доступ, noindex, статус или редирект

  3. Поиск

    Запрос в нужной панели

  4. Контроль

    Анонимный доступ и статус URL

Чтобы удалить страницу из поиска надолго, сначала измените её доступность или правила индексирования на самом сайте. Запрос в поисковой панели помогает ускорить скрытие, но не заменяет работу с документом. Для конфиденциального содержания первым действием должна быть защита доступа или удаление данных: noindex не мешает человеку открыть известный адрес.

Выбор способа: страница нужна посетителям, но не поиску — noindex; удалена без замены — 404 или 410; переехала на равнозначный адрес — постоянный редирект; содержит закрытые данные — авторизация с проверкой прав. Затем отдельно проверяется обработка в Яндексе и Google.

Как выбрать способ удаления

СитуацияЧто настроитьЧто проверить
Открытая служебная страница не нужна в поискеМетатег robots с noindex или подходящий HTTP-заголовокРобот может получить запрет; пользовательский сценарий работает.
Страница удалена, равнозначной замены нетРеальный 404 или 410Ответ не превратился в 200 с текстом ошибки.
Материал перенесён301/308 на соответствующий новый документНет цепочки и нерелевантного перехода на главную.
Личный документ случайно опубликованУдаление либо авторизация и права на файлАнонимный запрос не получает содержание, включая прямую ссылку на PDF.

Для HTML-страницы, которая остаётся доступной, пример запрета выглядит так:

<meta name="robots" content="noindex">

Расположите его в head. Для документа другого типа, например PDF, можно использовать HTTP-заголовок X-Robots-Tag: noindex. Не рассчитывайте на метатег страницы-обёртки, если сам файл открывается по отдельному URL. Общие способы для Google описаны в инструкции по удалению информации.

Удаление страницы из Google Search Console

Для срочного скрытия своего URL откройте инструмент «Удаления», создайте запрос и выберите точный адрес либо префикс. Временное удаление действует примерно шесть месяцев. Чтобы страница не вернулась, на сайте должно сохраниться постоянное основание: удаление, noindex или ограничение доступа. Условия описаны в справке инструмента удаления URL.

Перед отправкой префикса выпишите несколько адресов, которые он затронет. Учебный префикс /sale/old/ относится к одному разделу, а /sale может захватить и другие совпадающие начала пути. Нельзя использовать корень домена, когда нужно убрать единственную акцию.

Не применяйте этот инструмент, чтобы просто выбрать canonical или скрыть строки отчёта об ошибках. Задача удаления результата и задача объединения дублей различаются.

Удаление страницы из Яндекс Вебмастера

Сначала настройте основание для удаления на сайте. Затем в разделе «Инструменты → Удаление страниц из поиска» укажите URL и отправьте запрос. Для группового удаления есть режим по префиксу; у него отдельное условие: подходящие страницы должны быть запрещены директивой Disallow. Поэтому инструкцию для одного URL нельзя механически переносить на группу.

Сверяйте требования режима и статус запроса с документацией Яндекса. Для стратегии, которая одновременно работает с Google и noindex, не закрывайте обход до того, как робот сможет прочитать запрет. При массовой очистке сначала составьте план для обеих систем.

Почему одного robots.txt недостаточно

Запрет обхода и запрет индексирования — не одно действие. Если Google не может прочитать страницу из-за Disallow, он не увидит расположенный внутри noindex. Известный URL при определённых условиях может остаться в поиске без обычного описания.

Отдельная ошибка — удалить URL из Sitemap и считать задачу выполненной. Адрес по-прежнему может быть известен из внутренних или внешних ссылок. Удаление из карты полезно как часть согласованной настройки, а не как команда исключить документ.

Для сортировок, меток и фильтров используйте инструкцию по параметрам URL. Она поможет не удалить целевую страницу вместе с её техническими вариантами.

Как проверить результат на одном URL

Учебная ситуация: публичный файл https://example.com/files/old-price.pdf больше не должен открываться. Новый прайс не является прямой заменой, потому что прежний содержал данные, которые решили убрать.

  1. Проверьте прямой URL файла без авторизации. Если файл удалён, сервер должен вернуть выбранный 404 или 410, а не страницу с кодом 200.
  2. Уберите ссылки на старый файл из каталога, статьи, меню и Sitemap. Проверьте, не выдаёт ли его копию другой маршрут или хранилище.
  3. При необходимости срочного скрытия отправьте точный URL в поисковые панели.
  4. Зафиксируйте статус запроса и дату проверки. После обхода проверьте сведения о URL в каждой панели.
  5. Повторите анонимный запрос после очередного релиза, чтобы файл не вернулся из резервного каталога или импорта.

Первую часть проверки можно выполнить через проверку HTTP-ответов и редиректов. Запись в журнале должна разделять «содержимое недоступно на сайте» и «URL исчез из результатов поиска». Это два разных подтверждения.

Частые вопросы

Что лучше: 404 или 410?

404 сообщает, что ресурс не найден, без уточнения постоянства. 410 указывает на намеренное постоянное удаление. Выбирайте по состоянию ресурса, а не по обещанию мгновенного удаления из всех поисковых систем.

Нужно ли перенаправлять удалённые товары на главную?

Нет. Редирект уместен, когда есть соответствующая замена. Переход с конкретной модели на главную заставляет покупателя искать заново. Иногда полезнее оставить архивную карточку с документацией и ссылками на аналоги.

Можно ли убрать чужую страницу?

Эта инструкция относится к сайту, которым вы управляете. Для чужого ресурса нужны обращение к владельцу и подходящая процедура поисковой системы, например обновление устаревшего результата после фактического удаления содержания. Доступ к своей Search Console не даёт управления чужим сайтом.