Релиз v0.1.186релизобработка
Настраиваемый порог склейки дублей
В Настройки → Обработка появился слайдер «Порог схожести»: задайте, насколько агрессивно склеивать один и тот же сюжет из разных источников.
Один и тот же сюжет часто приходит из нескольких пабликов — разными словами, но об одном и том же. Раньше такие переформулировки нередко просачивались в пул как отдельные посты. Теперь склейкой дублей можно управлять.
Что изменилось
- Слайдер «Порог схожести». В Настройки → Обработка появилась карточка «Склейка дублей». Порог задаёт, насколько тексты должны совпадать по смыслу, чтобы второй пост считался дублем: чем ниже процент, тем агрессивнее склейка (ловит больше пересказов одного события).
- Стали ловить больше дублей. Снизили порог по умолчанию — типичные пересказы одной новости из разных источников теперь отсекаются, а явно разные сюжеты остаются.
- Сравнение за сутки. ИИ сверяет новый пост с собранными за последние 24 часа, а не только в пределах одного прогона сбора — дубль из соседнего источника приходит другим заходом, но в те же сутки, и всё равно склеивается.
Слишком низкий порог может склеить разные новости, слишком высокий — пропустить дубли. Дефолт подобран как разумный баланс, а тонкую настройку под свою тематику вы делаете слайдером.