Анализ сайта конкурента: что можно узнать законно и какими инструментами

Сайт конкурента — витрина, которую он сам открыл всем: цены, ассортимент, условия доставки, тексты услуг, акции. Анализ сайта — часть анализа конкурентов, и часто самая доступная: всё нужное видно в браузере. Ниже — что смотреть, какими инструментами и где у данных пределы. Описания инструментов — по их официальным сайтам и справке на октябрь 2026 года.

Что смотреть на сайте конкурента

Предложение. Цены, ассортимент, условия доставки и оплаты, гарантии, акции. Это главное: с этим сравнивают ваше предложение покупатели.

Структура. Какие разделы и посадочные страницы есть у конкурента, под какие услуги и города он делает отдельные страницы. Структуру удобно смотреть по файлу sitemap.xml — списку адресов, который сайт отдаёт поисковым системам. В robots.txt видно, какие разделы владелец просит роботов не обходить. По стандарту RFC 9309 эти правила — просьба к роботам и не являются формой разрешения доступа; мы их соблюдаем.

Тексты и подача. Как конкурент описывает услугу, какие вопросы закрывает на странице, какие аргументы ставит первыми. Тексты охраняются авторским правом: их читают для анализа и не копируют.

Какими инструментами

Мы перечисляем инструменты по задачам, без оценок и рейтингов. Факты — из справки самих сервисов.

Спрос — Яндекс Вордстат. Показывает число запросов с заданной фразой, их долю от всех запросов в регионе и индекс интереса по регионам; данные можно скачать в CSV. Так видно, сколько людей ищет услуги, под которые у конкурента есть страницы.

История сайта — Wayback Machine. Архив Internet Archive хранит снимки страниц прошлых лет. По ним видно, когда конкурент менял цены, тексты и структуру. Архив неполный: снимков некоторых страниц и дат в нём нет.

Реклама — Google Ads Transparency Center. Архив объявлений проверенных рекламодателей в сервисах Google: формат, регион показа и даты. Поиск — по рекламодателю или сайту. Рекламу в Яндексе удобнее смотреть в самой выдаче по нужным запросам.

Скорость — PageSpeed Insights. Сервис Google показывает лабораторную проверку Lighthouse и полевые данные реальных пользователей Chrome за последние 28 дней — показатели LCP, INP и CLS. Полевые данные есть только у сайтов с достаточным трафиком.

Трафик — Similarweb и похожие сервисы. По справке Similarweb, оценки строятся по нескольким источникам: данные сайтов, подключивших аналитику, анонимные данные о поведении пользователей, партнёрские данные и открытые страницы. Сервис сам указывает, что для сайтов с небольшим трафиком оценки менее точны. Наш вывод: такие цифры годятся для сравнения сайтов между собой и для динамики; реальную посещаемость знает только владелец сайта.

Где проходит граница

• Можно: смотреть и собирать открытые страницы — цены, ассортимент, условия, структуру — с паузами между запросами, чтобы не нагружать сайт.
• С оглядкой: существенная часть чужой базы данных охраняется Гражданским кодексом, тексты и фотографии — авторским правом. Собранное используют для анализа и не публикуют у себя.
• Нельзя: заходить в личные кабинеты, обходить авторизацию и защиту, собирать персональные данные сотрудников и клиентов конкурента, оставлять заявки и заказы под видом клиента.

Подробно юридические вопросы мы разобрали в статьях «Законен ли парсинг сайтов» и «Парсинг цен конкурентов: где проходит граница». Если непонятно, как вообще устроен автоматический сбор страниц, начните со статьи «Что такое парсинг».

Разовый анализ или наблюдение

Разовый анализ отвечает на вопрос «как устроен сайт конкурента сейчас». Если важно, что меняется — цены, акции, новые страницы, — нужен регулярный сбор: раз в день или в неделю, с оповещением об изменениях. Как организовать такое наблюдение по открытым источникам, мы рассказали в статье «Конкурентная разведка для малого бизнеса».

Как это делаем мы

В Datamill мы собираем открытые данные с сайтов конкурентов: цены, ассортимент, условия, структуру — и сводим их в таблицу, где ваше предложение стоит рядом с чужими. Разовый парсинг сайтов — от 5 000 ₽, мониторинг цен конкурентов — от 8 000 ₽ в месяц. Закрытые разделы и данные людей не собираем.

Частые вопросы

Можно ли узнать точную посещаемость сайта конкурента?

Нет. Точные цифры есть только у владельца сайта в его системе аналитики. Сервисы вроде Similarweb дают оценку по своим моделям и сами пишут, что для небольших сайтов она менее точна. Такие оценки годятся для сравнения сайтов между собой.

Законно ли парсить сайт конкурента?

Открытые страницы — цены, ассортимент, условия — собирать можно, если соблюдать три границы: персональные данные, чужая база и нагрузка на сайт. Нормы и ссылки на тексты законов собраны в статье «Законен ли парсинг сайтов».

Что показывает robots.txt конкурента?

Какие разделы владелец просит роботов не обходить. По стандарту RFC 9309 эти правила — просьба к роботам, доступ они не закрывают. Мы их соблюдаем, а сам файл и sitemap.xml помогают увидеть структуру сайта.

Как часто повторять анализ сайта конкурента?

Структуру и тексты — раз в квартал или при заметных изменениях. Цены и ассортимент меняются чаще, для них удобнее регулярный мониторинг с оповещением об изменениях.

Можно ли оставить заявку на сайте конкурента, чтобы узнать условия?

Мы так не делаем. Заявка под видом клиента вводит в заблуждение и отнимает время у менеджеров. Условия, которые конкурент не публикует, остаются за границей анализа открытых данных.

Источники

• RFC 9309, Robots Exclusion Protocol — rfc-editor.org/rfc/rfc9309
• Яндекс, справка Вордстата — yandex.ru/support2/wordstat
• Internet Archive, Wayback Machine — web.archive.org
• Google, Ads Transparency Center — adstransparency.google.com
• Google, «About PageSpeed Insights» — developers.google.com/speed/docs/insights/v5/about
• Similarweb, «Data Methodology» — support.similarweb.com
• Гражданский кодекс РФ, ст. 1334 — права изготовителя базы данных
• Наши услуги: парсинг сайтов, мониторинг цен конкурентов