Трекер контента конкурентов

Трекер контента конкурентов — маркетинговая автоматизация на кастомном коде, которая следит за публикациями выбранных конкурентов и еженедельно отдаёт сжатый отчёт о покрытии тем. Инструмент заменяет ручной обход 10–20 сайтов и закрытых рассылок одним структурированным дайджестом. Открытые темы становятся видимыми — это прямой источник идей для собственного контент-плана.

Процесс работы AI-агента состоит из шести шагов:

1. Планировщик запускает сбор по расписанию — раз в день для быстро обновляющихся источников или раз в неделю для длинных форматов.
2. AI-агент обходит список источников: блоги конкурентов, страницы и посты в LinkedIn, YouTube-каналы, подкаст-фиды, email-рассылки, базы знаний.
3. Для каждого найденного материала извлекается заголовок, дата публикации, основной тезис, формат (статья, видео, короткий пост) и ключевые факты.
4. AI-агент группирует публикации по темам, определяет частоту каждой темы в выборке и помечает нетипичные форматы.
5. Результаты сопоставляются с архивом предыдущих недель — выделяются новые темы, устойчивые тренды и темы, которые конкуренты перестали раскрывать.
6. Готовый дайджест падает в Slack, CMS или почту с разделами «часто пишут», «редко пишут», «новое за неделю», «пропало из повестки».

Чего трекер контента конкурентов не делает:

• Не пишет контент за вас. AI-агент формирует бэклог идей, но финальные статьи, видео и сценарии создаёт редакция.
• Не отслеживает закрытые источники. Публикации за paywall, приватные Telegram-чаты и личные DM остаются вне зоны видимости — агент работает только с открытым вебом.
• Не оценивает качество контента конкурентов. Агент считает частоты и выделяет темы; субъективную оценку «сильный / слабый / хороший продакшн» даёт человек.

Дайджест содержит 15–30 карточек за неделю и читается за 10–15 минут. Редактор помечает интересные темы тегом в CMS, Notion или Linear, и они автоматически попадают в бэклог контент-плана. Знания о рынке перестают жить в голове одного человека — они лежат в общем хранилище и доступны всей команде.

Технический стек трекера основан на связке скрейпера, LLM-суммаризатора и роутера уведомлений. Кастомный код нужен потому, что у каждого источника своя структура: RSS, HTML-блог, API соцсети, транскрипт YouTube — универсальный инструмент не справится без дополнительной логики.

Поток данных выглядит так:

1. Планировщик (cron, Vercel Cron, workflow-движок-таймер) инициирует прогон.
2. Скрейпер-модуль читает заранее настроенный список источников. Для блогов — RSS и fallback на HTML-парсинг; для LinkedIn — официальный API или верифицированный коннектор; для YouTube — Data API и транскрипты через Whisper; для подкастов — RSS-фиды и транскрибация.
3. Новые материалы (по published_at и идентификатору) складываются в базу — Postgres или Supabase — с сырым текстом и метаданными.
4. AI-агент на AI-модели проходит по батчам и для каждого материала генерирует карточку: тема, тезис (2–3 предложения), формат, ключевые факты, теги.
5. Второй проход суммаризации агрегирует карточки недели: группировка по темам, подсчёт частот, выделение нетипичных форматов, сравнение с предыдущими периодами.
6. Роутер уведомлений отправляет готовый дайджест в Slack-канал маркетинга, дублирует в email и (по желанию) создаёт черновик в CMS с тегом «competitor-digest».
7. Редактор читает дайджест и ставит метку на темы, которые идут в бэклог. Метки обратным сигналом возвращаются в базу — агент учится, какие темы важны именно вам.

Типичные варианты настройки

• Минимум (2 недели): 5–8 источников, RSS + HTML, один дайджест в неделю в Slack, без архива.
• Средний: 10–15 источников с разными типами контента, ежедневный сбор, недельный дайджест + ежедневные алерты на ключевые темы, архив в Postgres.
• Расширенный: 20+ источников, включая YouTube-транскрипты и подкасты; интеграция с CMS (Payload, Contentful) для автосоздания черновиков тем; semantic search по архиву через pgvector.

Альтернативные подходы

• Готовые медиамониторинги (BrandMentions, Brand24) закрывают brand mentions, но слабо работают с тематическим анализом контент-маркетинга.
• Feedly + ручная суммаризация — дешевле в старте, но упирается в 3–5 часов работы контент-маркетолога в неделю и теряет масштаб при более 10 источниках.
• оркестратор-flow без кастомного кода работает для RSS-источников, но ломается на LinkedIn, YouTube и нестандартных сайтах — поэтому итоговое решение строится на custom-code.

Безопасность и compliance

Агент ходит только по публичным страницам и официальным API. Скрейпинг уважает robots.txt и rate-limit. Данные конкурентов хранятся как цитаты с атрибуцией источника — это минимизирует правовые риски и оставляет след для fact-check.

Для запуска трекера контента конкурентов нужен минимальный набор входных данных, доступов и договорённостей внутри команды.

Данные и доступы:

• Согласованный список из 5–20 конкурентов с URL их основных каналов (блог, LinkedIn-страница, YouTube, подкаст-фид).
• Slack-воркспейс или email-рассыльщик, куда будут падать дайджесты.
• База для архива — Postgres, Supabase или аналог. В простом варианте достаточно managed-инстанса от Supabase.
• Доступ к API AI-модели или другой LLM для суммаризации.
• При работе с LinkedIn и YouTube — отдельные API-ключи и согласованные квоты.

Готовность команды:

• Маркетинг-лид или контент-редактор, который формулирует список источников и принимает решение, какие темы идут в бэклог. Ориентировочно 1–2 часа в неделю на работу с дайджестом.
• Инженер (внутренний или подрядчик), знакомый с Python или Node.js, для настройки скрейперов и разворачивания пайплайна. Минимум 20–30 часов на MVP.
• Договорённость о периметре: какие источники считаются конкурентами, что делать с дружественными ресурсами, какие темы не интересуют.

Возможные подводные камни

• Источники, которые блокируют скрейперы или часто меняют вёрстку — закладывайте 10–15% времени на починку.
• Неразмеченные видео и подкасты без транскриптов требуют дополнительного шага с Whisper и могут увеличить стоимость LLM-прогонов.

Сроки запуска: 2–4 недели для базового варианта с 5–10 источниками и еженедельным дайджестом. Усложнение — YouTube-транскрипты, интеграция с CMS, семантический поиск по архиву — добавляет ещё 2–4 недели.