Говорим про SEO и внутреннюю кухню студии. Основной контент из корпоративного seo-чата «АлаичЪ и Ко». Автор канала: @VictimAlex (Александр Алаев, АлаичЪ).
User-agent: CCBot
Disallow: /
- Или можно использовать meta robots на страницах:
<meta name="CCBot" content="noindex nofollow">
Надо иметь в виду, что это рекомендации из не официальных источников, так что все может однажды измениться.
А если сайт уже был просканирован, собранные данные никак нельзя удалить.
Проклятые капиталисты 👊🏻