Як блокувати пошукові системи

При відсутності спеціальних розпоряджень пошукові системи, такі як Google і Bing, знайдуть ваш сайт і, можливо, додадуть в списки своїх результатів пошуку. Якщо ви не хочете, щоб подібне сталося, то маєте можливість блокувати індексацію свого сайту пошуковими системами за допомогою різних інструментів.

Кроки

Метод 1 з 4: Блокування окремої сторінки

1. 

   1

   У заголовку вашого HTML документа додайте ці два мета-тега:

Метод 2 з 4: Блокування окремої вихідної посилання

1. 

   1

   Для приховування окремої посилання на сторінці просто скористайтеся тегом «rel», як показано на зображенні:
   • Сайт wikiHow вказаний тільки як приклад.

     

   
   
   
   • Зверніть увагу, що дана методика не завадить пошуковим системам розшукати цю URL-посилання іншими засобами.

Метод 3 з 4: Блокування всього веб-сайту

1. 

   1

   Відредагуйте файл robots.txt вашого сайту і, зокрема, заблокуйте вхід будь-яких роботів. Це можна зробити, написавши:

Метод 4 з 4: Блокування розділів веб-сайту

1. 

   1

   Змініть файл robots.txt вашого сайту, щоб конкретно уточнити, в які директорії заборонений доступ роботові: