В случаях когда страница удалена (перемещена) или контент страницы носит технический характер и не должен участвовать в поиске возникает необходимость удаления страниц из индекса.
Убрать URL из индекса, можно несколькими способами:
1. При помощи тега “NoIndex”. Его необходимо вставить в код страницы, которую необходимо убрать из индекса. <meta name="robots" content="noindex"> Для корректной работы он должен располагаться в разделе head.
2. С помощью файла robots.txt Файл размещается в корневом каталоге. Используя директиву «Disallow», можно отключать возможность индексации страницы или директории.
3. Запрос на временное удаление в Google Search Console Возможно исключить URL из результатов Google Поиска, а также удалить текущее описание страницы и ее кэшированную версию (которые будут созданы заново после очередного сканирования). URL исчезнут из Поиска на шесть месяцев.
4. С помощью сервиса Fast Indexing Модно отправить запрос на удаление списка URL из индекса. Базовый лимит до 2000 страниц за день.