Яндекс і amp
Але так як все ще половина трафіку йде на сайти з Яндекса, виникає цілком слушне запитання, як до AMP поставиться Яндекс, адже по суті це будуть дублі сторінок і так недалеко до пессимізації сайту.
На даному сайті включена підтримка Accelerated Mobile Pages (AMP), зроблена через відповідний плагін для CMS WordPress. Загалом я задав питання платоновцам, попередньо закривши від індексації AMP сторінки в Robots.txt наступним текстом:
Відповідь від Платонов був такий:
Робот вважає посилання з атрибутом rel = "canonical» не обов'язковою директивою, а одним з варіантів, який може бути не обов'язковим.
Якщо Ви бажаєте, щоб наш робот виключав такі сторінки, Ви можете заборонити їх індексування за допомогою мета-тега noindex або в файлі robots.txt спеціально для User-Agent: Yandex. Наприклад, директивою:
У цьому випадку робот буде знати, що індексувати такі сторінки не можна і не буде їх обходити. Просимо звернути увагу, що в цьому випадку всі інші вказівки теж потрібно додавати спеціально для User-Agent: Yandex, оскільки загальні вказівки в цьому випадку будуть їм ігноруватися.
Рекомендую Вам також скористатися інструментом перевірки файлу robots.txt в вебмайстрів. Безпосередньо в інструменті Ви зможете скорегувати вказівки і перевірити, заборонені або дозволені необхідні Вам сторінки до індексування.
Загалом, rel = "canonical» - атрибут для роботи не обов'язковий, і поки Яндекс не буде підтримувати AMP, потрібно робити заборона індексації на рівні robots.txt, як я і допустив спочатку спочатку.