Як контролювати, яка інформація з вашого сайту буде доступна Google

Існує багато способів, за допомогою яких власники сайтів можуть контролювати, яка інформація буде відображатися в результатах пошуку Google. Хоча більшість з них зацікавлені в тому, щоб їхні сторінки потрапили в індекс, іноді важливо досягти протилежного: запобігти появі контенту в результатах пошуку. Є кілька причин приховувати від Google контент, представлений на сайті.

  • Обмеження доступу до даних. На вашому сайті може бути інформація, яку ви хочете надати лише користувачам, які вже зайшли на ваш сайт. Ви можете заборонити Google сканувати такі дані, щоб вони не з’являлися в результатах пошуку.
    Слід пам’ятати, що деякі файли, розміщені на вашому сайті, можуть містити метадані, які, у свою чергу, можуть відображатися в результатах пошуку. Детальніше про те, як видалити інформацію, видалену з документів, з Пошуку Google…
  • Приховування контенту, який має низьку цінність для користувачів. На вашому сайті може бути контент низької якості, який не повинен з’являтися в результатах пошуку. Наприклад, якщо на вашому сайті дозволено створювати контент користувачами, частина цього контенту може бути низької якості або навіть спамом. Індексація такого контенту може негативно вплинути на позиції вашого сайту в результатах пошуку.
  • Обробка найважливішого контенту. Якщо у вас дуже великий сайт з сотнями тисяч URL, то на ваших сторінках може бути багато другорядного або повторюваного контенту. Радимо заблокувати менш важливі сторінки для роботів Google, щоб наші системи зосередилися на основних матеріалах.

Нижче перераховані основні способи, які дозволяють запобігти появі контенту в результатах пошуку Google.

Методи

Видалення контенту з вашого сайту

Для всіх типів контенту

Це один з найнадійніших способів запобігти появі контенту в Пошуку Google і в Інтернеті в цілому.

Захист файлів паролем

Для всіх типів контенту

Конфіденційні матеріали, розміщені на вашому сайті, слід захищати паролем, щоб забезпечити доступ до них обмеженій кількості користувачів. Це також дозволить запобігти появі контенту в результатах Пошуку Google або, якщо він вже проіндексований, видалити його з індексу.

Правило noindex

Для всіх типів контенту

Тег robots noindex (meta) є правилом, яке вказує Google, що контент не потрібно індексувати або показувати в результатах пошуку Google. Контент як і раніше можна буде відкрити за посиланнями, але в Google Пошуку він перестане з’являтися.

Заборона на сканування за допомогою файлу robots.txt

Для зображень та відео

Google індексує лише ті зображення та відео, які дозволені для сканування роботу Googlebot. Щоб заборонити роботу Googlebot доступ до медіафайлів, використовуйте правила robots.txt для блокування файлів.

Заборона на показ контенту в деяких сервісах Google

Для вебсторінок

Ви можете заборонити показ контенту зі свого сайту не в усіх, а лише в деяких сервісах Google, таких як Google Покупки або пошук готелів і житла для відпочинку.

Якщо вміст вашого сайту вже з’являється в Google, ви можете попросити видалити ці результати пошуку. Інформацію про те, як видалити інформацію з Google, можна знайти на сайті Google Developers.