Back to Question Center
0

Semaltное отображение некоторых каталогов / страниц в результатах поиска Google

1 answers:

У меня есть моя персональная домашняя страница, и я хочу, чтобы главная страница отображалась в результатах поиска. Но я не хочу, чтобы определенный каталог и его подкаталоги отображались в результатах поиска Google Source - kaiman mtb. Как мне это сделать?

February 11, 2018

Существует несколько механизмов, которые вы можете использовать для этого.

Первый - роботы. txt файл. Это протокол, который добровольно сопровождается «хорошими» поисковыми системами google и позволяет вам отображать разделы вашего сайта, за которыми они не будут следовать.

Пользовательский агент: *
Запретить: / myfolder /

Следующий метатег. Отдельные страницы могут быть помечены метаданными, которые указывают роботам не индексировать или отображать их. У Google есть хорошая запись о том, как реализовать их .

Последний механизм, если страницы уже были проиндексированы, заключается в использовании механизма удаления поисковой системы, если таковой существует. Я связался с документацией для механизмов удаления Google, Bing и Yahoo здесь:

  • Удаление URL-адреса Google
  • Удаление URL-адреса Bing
  • Удаление URL-адреса Yahoo

запретить поисковые роботы, чтобы войти в эти места:

http: // www. robotstxt. орг / robotstxt. html

google описывает процедуру довольно хорошо , например:

  Пользовательский агент: *
Запретить: / folder1 / 

Это запрещает всем ботам индексировать содержимое «/ folder1 /»

Используйте роботов. txt в вашей основной папке и установите для него:

  Пользовательский агент: *
Позволять: / 

В папке вы не хотите, чтобы кто-либо обращался к роботам. txt с этим телом:

  Пользовательский агент: *
Запретить: / 

Оформить заказ http: // www. robotstxt. org / для получения дополнительной информации о роботе. txt-файлы.