Настройки анализа: исключённые домены и маски поддоменов

Вкладка «Настройки анализа» управляет списком доменов и масок поддоменов, которые исключаются из конкурентного корпуса при анализе поисковой выдачи (SERP).

Исключение агрегаторов, маркетплейсов, справочников и нецелевых сайтов защищает эталонные метрики кластера (длину текста, закон Ципфа, словарь N-грамм, TF-IDF и метатеги) от смещения показателями сайтов-гигантов.

Обзор вкладки «Настройки анализа»

Чтобы перейти к реестру правил, откройте раздел «Анализ» в шапке проекта и переключитесь на вкладку «Настройки анализа».

Вкладка Настройки анализа: таблица исключённых доменов, типы правил и кнопки действий — Реестр исключённых доменов: список активных правил фильтрации, типы правил («Домен» / «Поддомены») и действия с выборкой.

1 Раздел «Анализ» — поисковый модуль анализа конкурентов и выдачи в верхнем меню проекта.
2 Вкладка «Настройки анализа» — подраздел управления глобальными правилами фильтрации конкурентного корпуса проекта.
3 Кнопка «Добавить домены» — открывает диалоговое окно для пакетной вставки списка доменов, URL и масок.
4 Кнопка «Переименовать» (бирюзовая) — становится активной, когда в таблице выбран ровно один домен. Открывает окно быстрого редактирования значения.
5 Кнопка «Удалить [N]» (розовая) — отображается с бейджем количества выбранных строк и открывает модальное окно подтверждения безвозвратного удаления.
6 Чекбокс выбора строки — позволяет выделять отдельные правила для переименования или массового удаления. Чекбокс в заголовке таблицы выбирает все строки текущей фильтрации.

Колонки таблицы правил

Домен или маска — нормализованное имя хоста (например, aliexpress.ru) либо маска с префиксом звездочки (например, *.yandex.ru). Поддерживает алфавитную сортировку и текстовый поиск через иконку фильтра.
Тип правила — автоматическая классификация Descore:
- Домен — правило применяется только к корневому хосту (с опциональным префиксом www.).
- Поддомены — правило исключает все субдомены любого уровня вложенности для указанной зоны.

Синтаксис правил: корневые домены и маски поддоменов

Сервис разграничивает фильтрацию основного домена и поддоменов. Это сделано намеренно: в ряде ниш корневой сайт является агрегатором или маркетплейсом, а отдельные региональные поддомены или блоги — релевантными конкурентами (или наоборот).

Маска вводится только в формате *.example.com. Протокол, путь и порт в маске недопустимы; звёздочка должна стоять перед точкой в начале строки.

Синтаксис ввода	Тип в таблице	Что исключается	Что НЕ исключается
`example.com`	Домен	`example.com`, `www.example.com`	`sub.example.com`, `shop.example.com`
`*.example.com`	Поддомены	`blog.example.com`, `spb.example.com`, `a.b.example.com`	`example.com` (корневой домен)
`example.com` `*.example.com`	Домен + Поддомены	Полное исключение: корневой домен и любые его поддомены	—

Автоматическая нормализация данных

При вводе пользователю не требуется вручную очищать адреса. Парсер Descore автоматически выполняет следующие преобразования:

Удаление схем и протоколов: из строк вида https://site.ru или http://site.ru извлекается чистый хост site.ru.
Очистка путей и параметров: из URL https://site.ru/catalog/item?id=5#top отсекаются путь, GET-параметры и хэш.
Регистронезависимость: любые написания (Site.RU, SITE.RU) приводятся к нижнему регистру (site.ru).
Поддержка IDN / Punycode: русскоязычные домены вроде яндекс.рф корректно распознаются и валидируются.
Ограничения ввода: IP-адреса, адреса с логином или паролем и явным портом отклоняются. Например, site.ru:8080 и https://site.ru:443/catalog нужно заменить на site.ru.

Пакетное добавление доменов и счётчики предпросмотра

Нажмите синюю кнопку «Добавить домены», чтобы открыть окно массовой вставки правил.

Окно Добавить исключённые домены: поле ввода построчного списка и интерактивные счётчики предпросмотра — Окно добавления доменов: многострочное поле ввода с примерами, подсказка о масках и счётчики валидации в реальном времени.

Поле ввода «Домены или URL»

В поле можно вставить готовый список из буфера обмена (например, экспортированный из таблицы Excel или выгрузки SERP). Каждое правило вводится с новой строки: пустые строки автоматически игнорируются.

Счётчики предпросмотра

Под полем ввода система в реальном времени рассчитывает статус введённого текста:

Распознано — общее число строк с корректным синтаксисом хоста или маски.
Новых — количество валидных уникальных правил, которые ещё не добавлены в проект.
Дубликатов — количество строк, которые уже есть в проекте либо повторяются внутри текущего списка. Дубликаты будут пропущены при сохранении без генерации ошибки.
Ошибок — количество некорректных строк (например, неподдерживаемые символы, некорректный формат маски, отсутствие доменной зоны). При наличии ошибки кнопка «Добавить» блокируется. Пояснение с номером строки появляется после выхода из поля ввода.
Доступно мест — оставшийся свободный лимит проекта. Суммарный лимит проекта составляет 500 правил — доменов и масок суммарно. Если число новых правил превышает доступный остаток, сократите список: частичное добавление не выполняется.

Переименование и удаление правил

Управление существующими строками осуществляется через чекбоксы выбора в таблице.

Переименование правила

Отметьте чекбоксом ровно один домен в таблице — на панели действий появится бирюзовая кнопка «Переименовать».

Модальное окно Переименовать исключённый домен: ввод нового значения и валидация — Диалог переименования: ввод нового значения, автоматическая нормализация хоста и проверка на совпадение с существующими правилами.

В поле ввода укажите исправленный домен или маску. Если введён полный URL или адрес с протоколом, форма покажет канонический результат: «Будет сохранено: example.com». Кнопка «Переименовать» активируется только при вводе валидного значения, отличного от исходного.

Массовое и точечное удаление

Отметьте чекбоксами один или несколько доменов. На панели действий отобразится розовая кнопка «Удалить [N]», где бейдж указывает точное число выделенных элементов.

Модальное окно подтверждения удаления доменов: бейдж количества и предупреждение — Окно подтверждения удаления: проверка количества удаляемых доменов и защита от случайного клика.

Нажмите «Удалить» в диалоговом окне. Правила будут удалены из базы данных проекта, и при следующих запусках анализа ранее исключённые сайты снова смогут попадать в выборку документов топа.

Применение настроек при запуске анализа

Список исключений задаёт домены и маски, которые нужно пропустить при формировании конкурентного корпуса для текстового анализа.

Чекбокс в окне запуска анализа

При запуске анализа (как одиночного кластера, так и массового пакета кластеров из таблицы анализа, структуры ядра или позиций) в модальном окне настроек параметров присутствует опция:

«Применять настройки анализа» (чекбокс включён по умолчанию): поисковая выдача по маркерному запросу фильтруется конвейером Descore. Найденные URL, чей хост совпадает с правилами из списка или подпадает под маску поддоменов, отбрасываются. Для анализа выбираются следующие подходящие органические документы выдачи. Если доступных документов недостаточно, фактический корпус может быть меньше выбранного размера топа.
Чекбокс выключен: список исключений проекта не применяется. Остальные технические фильтры анализа продолжают действовать. Режим подходит для сравнения корпуса с учётом сайтов, которые обычно исключаются правилами проекта.

Типовые сценарии использования

Исключение маркетплейсов в e-commerce: добавьте wildberries.ru, *.wildberries.ru, ozon.ru, *.ozon.ru, aliexpress.ru, market.yandex.ru. Это исключит гигантские каталоги из медианы объёма текста и вернёт адекватные отраслевые требования для интернет-магазина.
Исключение классифайдов и гео-справочников в услугах: добавьте avito.ru, 2gis.ru, zoon.ru, yell.ru, profi.ru, чтобы текстовые метрики рассчитывались исключительно по сайтам реальных компаний и клиник.
Исключение энциклопедий и контентных платформ: добавьте wikipedia.org, *.wikipedia.org, dzen.ru, чтобы информационные лонгриды и словарные статьи не искажали требования к объёму и структуре коммерческих страниц в смешанной выдаче.

Частые вопросы

Зачем исключать сайты из конкурентного корпуса анализа?

Агрегаторы, классифайды (Авито, 2GIS) и маркетплейсы (Ozon, Wildberries, AliExpress) имеют специфическую структуру страниц: огромные листинги, миллионы ссылок и мало связанного оптимизированного текста. Если анализировать специализированный или монобрендовый сайт против таких гигантов, медианные показатели топа (длина текста, закон Ципфа, плотность ключей, объем метатегов) будут сильно искажены. Исключение нерелевантных сайтов оставляет в выборке прямых тематических конкурентов, формируя чистый отраслевой эталон.

Почему маска *.domain.com не исключает сам корневой домен domain.com?

Синтаксис масок в Descore строго разделяет уровень поддоменов и корневой хост. Префикс «*.» обозначает наличие точки перед доменным именем, то есть обязательно предполагает поддомен (например, sub.domain.com, spb.domain.com, shop.domain.com). Корневой хост domain.com не содержит поддомена, поэтому под маску не подпадает. Если вам необходимо полностью исключить ресурс и все его региональные или сервисные поддомены, добавьте в список две строки: «domain.com» и «*.domain.com».

Можно ли вставлять полные ссылки на страницы из выдачи (с https:// и путями)?

Да. Можно вставить полный http/https URL без логина, пароля и явного порта. Из адреса «https://site.ru/catalog/item?id=5#top» будет сохранён домен «site.ru»: протокол, путь, параметры и якорь отсекаются. Домен приводится к нижнему регистру; кириллические адреса сохраняются в Punycode.

Поддерживаются ли кириллические домены в зоне .рф?

Да. Вы можете вводить домены как на кириллице (например, «яндекс.рф» или «*.яндекс.рф»), так и в формате Punycode («xn--d1acpjx3f.xn--p1ai»). Система автоматически нормализует кириллический ввод и проверяет его валидность.

Какой лимит на количество исключённых доменов установлен для проекта?

Лимит одного проекта составляет 500 исключённых правил (доменов и масок суммарно). Текущее количество свободных слотов всегда отображается в окне добавления в счётчике «Доступно мест». Пакетный список, превышающий остаток слотов, не будет добавлен частично.

Влияют ли исключённые домены на съём позиций в модуле «Позиции»?

Нет. Настройки анализа управляют исключительно модулем текстового и конкурентного анализа SERP. В модуле отслеживания позиций фиксируется реальная видимость всех сайтов в поисковой выдаче без исключений.

Обновятся ли ранее рассчитанные кластеры после изменения списка исключений?

Исторические сохранённые данные уже проведённых анализов не перезаписываются автоматически. Чтобы исключённые домены перестали учитываться в конкретном кластере, необходимо запустить повторный анализ кластера с включённой опцией «Применять настройки анализа».

Запуск анализа SERP — подробный разбор параметров запуска, выбор размера топа (от 3 до 20) и связка с настройками анализа.
Таблица анализа — мониторинг статусов расчёта кластеров, режимы Z-метрик и инструменты фильтрации.
Детальный анализ кластера — обзор всех отчётов по проанализированному кластеру и посадочной странице.