tech-news-digest

• Ежедневные или еженедельные технические сводки: Вам нужна структурированная, ранжированная сводка событий в сферах ИИ, крипто и open-source — без необходимости вручную проверять десятки источников.
• Автоматизация рассылок в Discord/email: Вам нужен повторяемый рабочий процесс на основе cron, который публикует дайджесты в канал Discord или отправляет отформатированные HTML-письма по расписанию.
• Отслеживание KOL и активности на GitHub: Вы следите за конкретными аккаунтами в Twitter/X (исследователи ИИ, основатели компаний) и хотите видеть их публикации вместе с заметками о релизах GitHub и трендовыми репозиториями в одной ленте.
• Мониторинг пользовательских источников: Вы хотите отслеживать собственные RSS-ленты, сабреддиты или репозитории GitHub, а также получать результаты с оценкой качества и дедупликацией относительно предыдущих дайджестов.

• Оповещения в реальном времени: этот навык работает в пакетном/плановом режиме; он не предназначен для мгновенных push-уведомлений при появлении срочных новостей.
• Домены, не связанные с технологиями: источники и определения тем заранее настроены для ИИ, криптовалют и передовых технологий. Адаптация к несвязанным доменам (например, спорт, финансы) требует существенной переработки конфигурации.
• Среды без Python 3.8+: для работы пайплайна требуется Python 3; он не может функционировать в исключительно браузерных или no-code-средах.

Скрипт run-pipeline.py выполняет одновременный сбор данных из RSS-лент, Twitter/X KOL, релизов GitHub, трендовых репозиториев GitHub, Reddit и веб-поиска с использованием параллельных воркеров. Все 6 этапов сбора данных выполняются одновременно и завершаются приблизительно за 30 секунд.

merge-sources.py оценивает каждую статью с использованием метрик вовлечённости и приоритета источника, затем выполняет дедупликацию по схожести заголовков (порог 85%) и снижает рейтинг материалов, уже встречавшихся в предыдущих дайджестах. Результат группируется по темам и сортируется по оценке.

Поставляется с 62 RSS-лентами (лаборатории ИИ, технологические блоги, крипто-медиа), 48 лидерами мнений в Twitter/X, 28 репозиториями GitHub, 13 сабреддитами и 4 поисковыми запросами по темам — охватывает LLM, агентов ИИ, криптовалюты и передовые технологии без какой-либо настройки.

Включает готовые шаблоны для Discord (оптимизировано для мобильных устройств, с учётом ограничения в 2000 символов), HTML-письма (с executive summary и ссылками на архив), а также стилизованного PDF формата A4 (Noto Sans CJK SC, заголовки с эмодзи, нумерация страниц через weasyprint).

Сбор данных из Twitter поддерживает twitterapi.io (предпочтительный вариант, ~$3–5/мес.) или официальный bearer-токен X API v2 с автоматическим определением. Веб-поиск поддерживает Brave или Tavily с автоматическим переключением между параллельным и последовательным режимами выполнения запросов с учётом ограничений скорости.

Пользовательские файлы sources.json и topics.json в директории workspace/config/ переопределяют или расширяют настройки по умолчанию без изменения пакета навыка tech-news-digest. Добавляйте новые источники, отключайте избыточные или переопределяйте поисковые запросы по темам и ограничения отображения.

Настройте ежедневное задание cron со ссылкой на digest-prompt.md, чтобы запускать полный пайплайн за последние 48 часов, а затем публиковать сводку в формате маркированного списка в канал Discord — охватывая главные новости LLM, популярные репозитории GitHub и твиты KOL.

Сформируйте скользящий дайджест за 7 дней с 10–15 материалами в каждом разделе, дополните ведущие статьи полным текстом и отправьте стилизованное HTML-письмо с опциональным PDF-вложением, используя встроенный шаблон электронного письма и send-email.py.

Используйте fetch-github.py для отслеживания релизов таких проектов, как LangChain, vLLM, DeepSeek и Llama за прошедшую неделю — с оценкой и дедупликацией относительно предыдущих дайджестов, чтобы отображать только действительно новые релизы.

Запустите source-health.py на выходных данных пайплайна, чтобы отслеживать показатели успешных и неудачных запросов для каждого источника за 7 дней, выявлять фиды или API-эндпоинты с долей сбоев более 50%, а также удалять или заменять ненадёжные источники.