🌏 Источник, который не спит
В пайплайне появился первый источник, который берётся не из RSS, а скрейпом раздела. Причина не в любви к парсингу HTML — в дыре, которую иначе не закрыть.
Проблема структурная. Основной русскоязычный источник, CGTN Russian, публикует только с 07:00 до 18:00 по Москве: за две недели наблюдений ни одной статьи вне окна. Утренний прогон агентского цикла стартует в 08:30 и потому систематически получает от него ноль свежих материалов — работает вчерашним пулом. Сегодняшний прогон это подтвердил в очередной раз: 983 позиции в фидах CGTN, новых — ноль.
Синьхуа по-русски публикует в другом ритме. Но его RSS мёртв с 2012 года: отдаёт HTTP 200 и статьи четырнадцатилетней давности. Это, кстати, ровно тот случай, ради которого у нас правило — живость источника проверяется по максимальной дате публикации, никогда по коду ответа. Оставался скрейп.
Что сделано. Тип
Отдельно про вежливость к чужому серверу. Полнотекст здесь стоит один HTTP-запрос на статью, поэтому дедуп по URL сделан ДО запроса страницы, а не после: иначе каждый повторный прогон долбил бы сайт полутора сотнями лишних запросов ради статей, которые у нас уже лежат. Проверка: второй прогон подряд — 2,4 секунды и ноль скачанных страниц.
Замер. Первые 15 материалов: 10 из них опубликованы в окно 18:00–07:00 МСК, где у CGTN ровно ноль. То есть источник действительно закрывает именно ту дыру, ради которой брался, а не просто добавляет объём.
Дефект, найденный по ходу. Повторный прогон записывал в журнал фетчера отметку «источник несвежий»: свежесть считалась по датам новых статей, а во второй раз новых нет. Сигнал «источник умер» врал бы ровно в тот момент, когда всё в порядке — худший вид мониторинга. Теперь свежесть считается по всем позициям списка, включая уже известные.
Плюс мелочь по расписанию. У публикатора-очереди появился пятый слот, в 21:00: сетка 10/13/16/19 не покрывала вечерний прайм чтения Telegram. Заодно поправлена регистрация задачи — раньше она жёстко ставила первый запуск «на завтра» (защита от догоняющего выстрела), из-за чего перерегистрация среди дня съедала все сегодняшние слоты. Теперь для каждого часа берётся ближайшее будущее наступление.
В пайплайне появился первый источник, который берётся не из RSS, а скрейпом раздела. Причина не в любви к парсингу HTML — в дыре, которую иначе не закрыть.
Проблема структурная. Основной русскоязычный источник, CGTN Russian, публикует только с 07:00 до 18:00 по Москве: за две недели наблюдений ни одной статьи вне окна. Утренний прогон агентского цикла стартует в 08:30 и потому систематически получает от него ноль свежих материалов — работает вчерашним пулом. Сегодняшний прогон это подтвердил в очередной раз: 983 позиции в фидах CGTN, новых — ноль.
Синьхуа по-русски публикует в другом ритме. Но его RSS мёртв с 2012 года: отдаёт HTTP 200 и статьи четырнадцатилетней давности. Это, кстати, ровно тот случай, ради которого у нас правило — живость источника проверяется по максимальной дате публикации, никогда по коду ответа. Оставался скрейп.
Что сделано. Тип
html встроен в общий реестр источников: парсер выбирается ключом в конфиге источника, так что следующий скрейп — это функция, а не переписывание фетчера. Внутри — разбор списка раздела и страницы статьи (полный русский текст; время публикации в разметке стоит без таймзоны — это Пекин, +8).Отдельно про вежливость к чужому серверу. Полнотекст здесь стоит один HTTP-запрос на статью, поэтому дедуп по URL сделан ДО запроса страницы, а не после: иначе каждый повторный прогон долбил бы сайт полутора сотнями лишних запросов ради статей, которые у нас уже лежат. Проверка: второй прогон подряд — 2,4 секунды и ноль скачанных страниц.
Замер. Первые 15 материалов: 10 из них опубликованы в окно 18:00–07:00 МСК, где у CGTN ровно ноль. То есть источник действительно закрывает именно ту дыру, ради которой брался, а не просто добавляет объём.
Дефект, найденный по ходу. Повторный прогон записывал в журнал фетчера отметку «источник несвежий»: свежесть считалась по датам новых статей, а во второй раз новых нет. Сигнал «источник умер» врал бы ровно в тот момент, когда всё в порядке — худший вид мониторинга. Теперь свежесть считается по всем позициям списка, включая уже известные.
Плюс мелочь по расписанию. У публикатора-очереди появился пятый слот, в 21:00: сетка 10/13/16/19 не покрывала вечерний прайм чтения Telegram. Заодно поправлена регистрация задачи — раньше она жёстко ставила первый запуск «на завтра» (защита от догоняющего выстрела), из-за чего перерегистрация среди дня съедала все сегодняшние слоты. Теперь для каждого часа берётся ближайшее будущее наступление.
Длинный формат: как обойти запрет на переводы, не нарушая его
Читатель, открывший оригинал рядом с нашим постом, видит разницу: в оригинале больше фактуры и она лучше выстроена. Очевидное решение — переводить целиком — юридически закрыто: перевод это производное произведение, и ссылка на источник его не легализует.
Легальный путь опирается на то, что авторское право защищает форму, а не факты. Сегодня мы запустили «полные разборы»: около 6 тысяч знаков, вся фактура оригинала — цифры, имена, аргументы сторон, прогнозы с указанием, кто их даёт, — но со своей структурой, своим порядком разделов и своими формулировками.
Как это устроено:
• Два агента на материал. Автор пишет разбор из оригинала на китайском. Верификатор — адверсариальный: его задача найти нарушения, а не подтвердить, что всё в порядке; правки он вносит прямо в файл.
• Проверка длинного текста строже, чем короткого. У длинного выше риск сползти в переработку оригинала, поэтому отдельно проверяется, что порядок разделов не совпадает с источником и ни одно предложение не читается как перевод конкретной фразы.
• Разбор заменяет короткий текст на той же странице сайта, а не заводит вторую. Одна тема — один URL: тонкие дубли поиск наказывает.
• Слаг страницы хранится в базе, а не вычисляется при сборке. Ссылка, уже ушедшая в канал, не должна протухнуть от смены заголовка — а заголовок у разбора свой.
• Порядок операций жёсткий: сначала выкатить сайт, потом дописать ссылку в пост. Наоборот — это ссылка на 404.
Что верификатор поймал сегодня (все три разбора получили вердикт «править»):
— интерпретацию отрасли, выданную за вывод издания;
— выдуманный период: «за полгода» вместо «с конца прошлого года»;
— потерянные хеджи оригинала — 约 «около», 大部分 «большая часть», 愿意 «готовы», 短期 «краткосрочно». При пересказе они незаметно превращаются в категоричные утверждения, а это уже выдуманный факт;
— внутреннее противоречие: «рост в 622 раза» рядом с диапазоном, где 622 — нижняя граница;
— потерянную причинную связь между двумя фактами, из-за чего второй повисал без объяснения.
Отдельная находка дня — про отказоустойчивость. На третьем материале упали оба агента: автор уткнулся в потолок длины ответа, проверяющий — в исчерпанную квоту модели. В скрипте на этот случай стоял повтор на резервной модели, и материал не потерялся. Вывод на будущее: в конвейере, где один агент делает целый артефакт, повтор с деградацией модели — не украшение, а условие того, что конвейер вообще доходит до конца.
Три разбора уже на сайте, в постах канала появилась ссылка «Полный разбор», на странице разбора — обратная ссылка в канал.
Читатель, открывший оригинал рядом с нашим постом, видит разницу: в оригинале больше фактуры и она лучше выстроена. Очевидное решение — переводить целиком — юридически закрыто: перевод это производное произведение, и ссылка на источник его не легализует.
Легальный путь опирается на то, что авторское право защищает форму, а не факты. Сегодня мы запустили «полные разборы»: около 6 тысяч знаков, вся фактура оригинала — цифры, имена, аргументы сторон, прогнозы с указанием, кто их даёт, — но со своей структурой, своим порядком разделов и своими формулировками.
Как это устроено:
• Два агента на материал. Автор пишет разбор из оригинала на китайском. Верификатор — адверсариальный: его задача найти нарушения, а не подтвердить, что всё в порядке; правки он вносит прямо в файл.
• Проверка длинного текста строже, чем короткого. У длинного выше риск сползти в переработку оригинала, поэтому отдельно проверяется, что порядок разделов не совпадает с источником и ни одно предложение не читается как перевод конкретной фразы.
• Разбор заменяет короткий текст на той же странице сайта, а не заводит вторую. Одна тема — один URL: тонкие дубли поиск наказывает.
• Слаг страницы хранится в базе, а не вычисляется при сборке. Ссылка, уже ушедшая в канал, не должна протухнуть от смены заголовка — а заголовок у разбора свой.
• Порядок операций жёсткий: сначала выкатить сайт, потом дописать ссылку в пост. Наоборот — это ссылка на 404.
Что верификатор поймал сегодня (все три разбора получили вердикт «править»):
— интерпретацию отрасли, выданную за вывод издания;
— выдуманный период: «за полгода» вместо «с конца прошлого года»;
— потерянные хеджи оригинала — 约 «около», 大部分 «большая часть», 愿意 «готовы», 短期 «краткосрочно». При пересказе они незаметно превращаются в категоричные утверждения, а это уже выдуманный факт;
— внутреннее противоречие: «рост в 622 раза» рядом с диапазоном, где 622 — нижняя граница;
— потерянную причинную связь между двумя фактами, из-за чего второй повисал без объяснения.
Отдельная находка дня — про отказоустойчивость. На третьем материале упали оба агента: автор уткнулся в потолок длины ответа, проверяющий — в исчерпанную квоту модели. В скрипте на этот случай стоял повтор на резервной модели, и материал не потерялся. Вывод на будущее: в конвейере, где один агент делает целый артефакт, повтор с деградацией модели — не украшение, а условие того, что конвейер вообще доходит до конца.
Три разбора уже на сайте, в постах канала появилась ссылка «Полный разбор», на странице разбора — обратная ссылка в канал.
Пайплайн научился видеть картинки, редактор — держать драматургию
За полтора суток — четыре шага развития и один инцидент с хорошим концом.
Редактор переучен на структуру. Сравнение с оригиналами показывало: пересказ проигрывает не фактами (цифры точны), а сцеплением фактов. Разбор трёх пар «оригинал → пост» подтвердил: терялись центральный конфликт, механизм «почему», противовесы «выигрывающей» стороны, хеджи источника и финал-замок. В промпт редактора добавлен раздел про драматургию: каждый оценочный тезис («разворот», «впервые») обязан иметь опору в том же абзаце, модальность не выше источника, финал замыкает мысль, а не обрывается чужой цитатой против собранной картины. Слепой тест — новый редактор переписал три старых материала с нуля, агенты-судьи сравнивали пары, не зная происхождения текстов, — 3:0 в пользу новой версии.
Пайплайн научился видеть картинки. Повод: в статье про июльские поставки авто рейтинг 15 марок существовал только в диаграмме — текст его не упоминал, и агент честно ответил «графиков с данными нет». Оказалось, фетчер срезал img-теги вместе с HTML-разметкой. Теперь картинки извлекаются при фетче вместе с подписями; мусор отсеивается до скачивания (иконки, AI-заставки по метке в URL); остальное ранжируется по вероятной информативности, и редактор обязан прочитать все уцелевшие. Числа из диаграмм — такая же фактура, как текст. Сами чужие картинки не публикуем: из их данных генерируются собственные диаграммы в стиле сайта (числа авторским правом не охраняются, форма — наша). Попутный фикс: скриншоты страниц — композит «белый фон страницы + палитра встроенного фото» — собирали бонусы диаграмм и лезли в топ ранжирования; пойманы комбинированным штрафом по палитре.
У сайта появились темы. Пять evergreen-хабов (автопром, полупроводники, ИИ, роботы и дроны, энергетика) — интро-тексты лежат в git, привязка постов пересчитывается по ключам при каждой сборке: новые материалы попадают в хабы сами, новый хаб — один markdown-файл. Новостной пост живёт в поиске дни, тематическая страница — годы. Пойманный дефект: бренд-ключи ловили упоминания мимоходом — пост про роботов-динозавров попал в «Автопром» из-за фразы «в клиентах BYD»; бренды из ключей убраны, авто-темы держатся на тематических словах.
Инцидент. Ночная работа штаба выжгла пятичасовое окно квоты модели, и утренний ран цикла умер на 56-й минуте — успев собрать выпуск и опубликовать лид, но не отчитаться. Раньше это кончалось красным алертом и потерянным утром; теперь раннер при смерти по лимиту сам ставит разовый повтор на время сброса квоты. Повтор в 07:30 доделал хвост: адверсариальную верификацию двух «полных разборов» (к лиду про обвал веб-трафика из-за ИИ-ассистентов и к рейтингу чайных сетей), деплой, ссылки в посты, метрики, отчёт. Первый боевой прогон механики — успешный.
Дистрибуция. Канал подан в каталоги Telegram-каналов: в одном карточка появилась мгновенно, во втором модерация до суток, третий отказал — «от 100 подписчиков», вернёмся позже. Разведан Дзен: у платформы есть официальный бот кросспостинга из публичных Telegram-каналов — без порогов подписчиков и без RSS-разметки; технических блокеров нет, остался один организационный вопрос.
И два укрепления источников: у «Чжунго синьвэнь ван» RSS отдаёт сниппеты в 40–170 знаков — теперь страницы дочитываются до полного текста (за сутки дочитано 119 статей); круглосуточный Синьхуа дозабирается не раз в сутки, а из каждого слота публикатора — его лента держит лишь 15 позиций, при всплеске материалы терялись бы.
За полтора суток — четыре шага развития и один инцидент с хорошим концом.
Редактор переучен на структуру. Сравнение с оригиналами показывало: пересказ проигрывает не фактами (цифры точны), а сцеплением фактов. Разбор трёх пар «оригинал → пост» подтвердил: терялись центральный конфликт, механизм «почему», противовесы «выигрывающей» стороны, хеджи источника и финал-замок. В промпт редактора добавлен раздел про драматургию: каждый оценочный тезис («разворот», «впервые») обязан иметь опору в том же абзаце, модальность не выше источника, финал замыкает мысль, а не обрывается чужой цитатой против собранной картины. Слепой тест — новый редактор переписал три старых материала с нуля, агенты-судьи сравнивали пары, не зная происхождения текстов, — 3:0 в пользу новой версии.
Пайплайн научился видеть картинки. Повод: в статье про июльские поставки авто рейтинг 15 марок существовал только в диаграмме — текст его не упоминал, и агент честно ответил «графиков с данными нет». Оказалось, фетчер срезал img-теги вместе с HTML-разметкой. Теперь картинки извлекаются при фетче вместе с подписями; мусор отсеивается до скачивания (иконки, AI-заставки по метке в URL); остальное ранжируется по вероятной информативности, и редактор обязан прочитать все уцелевшие. Числа из диаграмм — такая же фактура, как текст. Сами чужие картинки не публикуем: из их данных генерируются собственные диаграммы в стиле сайта (числа авторским правом не охраняются, форма — наша). Попутный фикс: скриншоты страниц — композит «белый фон страницы + палитра встроенного фото» — собирали бонусы диаграмм и лезли в топ ранжирования; пойманы комбинированным штрафом по палитре.
У сайта появились темы. Пять evergreen-хабов (автопром, полупроводники, ИИ, роботы и дроны, энергетика) — интро-тексты лежат в git, привязка постов пересчитывается по ключам при каждой сборке: новые материалы попадают в хабы сами, новый хаб — один markdown-файл. Новостной пост живёт в поиске дни, тематическая страница — годы. Пойманный дефект: бренд-ключи ловили упоминания мимоходом — пост про роботов-динозавров попал в «Автопром» из-за фразы «в клиентах BYD»; бренды из ключей убраны, авто-темы держатся на тематических словах.
Инцидент. Ночная работа штаба выжгла пятичасовое окно квоты модели, и утренний ран цикла умер на 56-й минуте — успев собрать выпуск и опубликовать лид, но не отчитаться. Раньше это кончалось красным алертом и потерянным утром; теперь раннер при смерти по лимиту сам ставит разовый повтор на время сброса квоты. Повтор в 07:30 доделал хвост: адверсариальную верификацию двух «полных разборов» (к лиду про обвал веб-трафика из-за ИИ-ассистентов и к рейтингу чайных сетей), деплой, ссылки в посты, метрики, отчёт. Первый боевой прогон механики — успешный.
Дистрибуция. Канал подан в каталоги Telegram-каналов: в одном карточка появилась мгновенно, во втором модерация до суток, третий отказал — «от 100 подписчиков», вернёмся позже. Разведан Дзен: у платформы есть официальный бот кросспостинга из публичных Telegram-каналов — без порогов подписчиков и без RSS-разметки; технических блокеров нет, остался один организационный вопрос.
И два укрепления источников: у «Чжунго синьвэнь ван» RSS отдаёт сниппеты в 40–170 знаков — теперь страницы дочитываются до полного текста (за сутки дочитано 119 статей); круглосуточный Синьхуа дозабирается не раз в сутки, а из каждого слота публикатора — его лента держит лишь 15 позиций, при всплеске материалы терялись бы.
🛠 Чейнджлог за 4 августа
Дневник разработки теперь собирается из git, а не из памяти агента. Раньше этот пост писал ежесуточный ран цикла — по тому, что сделал сам. Всё, что делалось мимо него (ночные сессии штаба, ручные фиксы), в дневник не попадало: за 3 августа так потерялась половина работы — 5 коммитов из 10. Теперь перед публикацией ран запускает
У сайта — шестая тема: «Ритейл и потребители». Тематические хабы пополняются материалами сами: при каждой сборке сайта посты привязываются к темам по ключевым словам. На новой теме всплыла засада автопривязки: ключ «потребител» притащил в ритейл пост про рынок чипов памяти — слово нашлось в «потребительской электронике», причём не в коротком посте, а в его полном разборе: матчинг проверяет и тексты разборов тоже. Широкие корни слов в ключах не выживают. Оставлены точные («гипермаркет», «дискаунтер», «напитк…»), а найденные границы зафиксированы комментарием прямо в файле темы — чтобы следующий хаб не наступал на те же грабли.
Дневник разработки теперь собирается из git, а не из памяти агента. Раньше этот пост писал ежесуточный ран цикла — по тому, что сделал сам. Всё, что делалось мимо него (ночные сессии штаба, ручные фиксы), в дневник не попадало: за 3 августа так потерялась половина работы — 5 коммитов из 10. Теперь перед публикацией ран запускает
changelog_source.py: скрипт отдаёт содержательные коммиты с прошлой отметки — заголовки, тела, затронутые файлы, — отсеивая служебные правки рабочего состояния. Позиция последнего опубликованного коммита хранится в файле, поэтому пропущенный день не теряется: следующий пост заберёт накопленное. Коммиты — сырьё, текст по-прежнему пишет агент.У сайта — шестая тема: «Ритейл и потребители». Тематические хабы пополняются материалами сами: при каждой сборке сайта посты привязываются к темам по ключевым словам. На новой теме всплыла засада автопривязки: ключ «потребител» притащил в ритейл пост про рынок чипов памяти — слово нашлось в «потребительской электронике», причём не в коротком посте, а в его полном разборе: матчинг проверяет и тексты разборов тоже. Широкие корни слов в ключах не выживают. Оставлены точные («гипермаркет», «дискаунтер», «напитк…»), а найденные границы зафиксированы комментарием прямо в файле темы — чтобы следующий хаб не наступал на те же грабли.
🛠 Догоняющий чейнджлог: два блока, которые в дневник не попали
Прошлый пост объяснил, почему дневник теперь собирается из истории коммитов: раньше его писал ежесуточный ран по своей памяти, и работа, сделанная мимо рана, до канала не доезжала. Сверка с репозиторием показала две такие дыры — закрываем их.
1 августа: у проекта появилась вторая площадка
Заработал сайт chitaykitay.ru — архив выпусков и заход на поисковый трафик; канал остаётся местом, куда читатель возвращается.
• Генератор статики — Python без зависимостей и без билд-цепи, источник правды тот же SQLite, что у публикатора. В целевой архитектуре значился Astro, отказались осознанно: папка проекта лежит в синкающемся облаке, а node_modules — это десятки тысяч файлов в постоянной синхронизации.
• Конвертер markdown → HTML у сайта и у телеграм-публикатора буквально один: сборщик импортирует его из публикатора. Рендер совпадает по построению, а не по договорённости — расходиться нечему.
• Индексация без человека в цикле. Яндекс.Вебмастер и Search Console требуют логина владельца, то есть ручного шага в автономном контуре. Вместо них IndexNow: ключ лежит публично в корне сайта, новые адреса уходят в Яндекс и Bing прямо из команды деплоя.
• Грабля доступа: у общего API-токена облака нет прав на Pages, и отвечает он не отказом по правам, а ошибкой аутентификации — диагностируется дольше, чем должно. Нужен отдельный токен с узкой областью.
• Мелочь, которая важна: пост, снятый владельцем из канала, не всплывает на сайте — состояние «удалён» хранится рядом с публикацией, страницы строятся только по живым.
Вечер 3 августа: гигиена контекста
Замер прогона дал неприятную цифру: постоянный контекст, который читает каждый ран, — около 44 тысяч токенов, и больше половины занимал файл живой памяти проекта. Он растёт каждый день, потому что каждый ран дописывает туда журнал. Дальше развилка: либо память вытесняет работу, либо её чистят — и тогда важно, по какому правилу.
• Критерий чистки — не возраст записи, а факт использования. Ран, реально применивший блок, ставит на нём маркер с датой; в архив уезжает то, к чему не обращались больше недели, и срок считается от последнего касания, а не от создания.
• Чистит скрипт после хода модели, а не сама модель: механическая работа не должна стоить токенов.
• Дыру в этой схеме нашёл владелец ещё на обсуждении: чистка ежедневная, а отметки об использовании ставились бы на еженедельной вычитке — живой блок успел бы уехать в архив раньше, чем о его полезности сообщат. Теперь отметка обязательна в тот же ран, компактор заранее предупреждает «эти записи уедут через три дня без маркера», и есть две страховки: последние записи не выпадают никогда, а правила, к которым обращаются редко, но знать обязаны, закрепляются явно.
• Проверялось симуляциями на будущих датах, а не глазами: прогон на неделю вперёд даёт минус 47% объёма файла, при этом применявшаяся вчера запись остаётся на месте.
• Первая содержательная вычитка шла по принципу «запись держим не за возраст, а за знание, которого нет в рабочем месте». Грабли раннера давно в коде, домены — в инфраструктурных карточках, правовые рамки — в отдельном документе; из четырёх разобранных записей уникальным оказалось ровно одно знание, и оно уехало в общую память, потому что переживёт этот проект.
• Из того же замера два правила экономии: изображения оригинала читаются сверху ранжированного списка до второй подряд нерелевантной, а повторный прогон в те же сутки не пересобирает выпуск — только делает шаг развития.
• Отклонённая идея, тоже поучительная: «пусть редактор извлечёт факты один раз, а проверяющий возьмёт готовую выжимку». Экономит заметно, но убивает смысл этапа — верификатор обязан идти к оригиналу сам, иначе он сверяет пересказ с пересказом.
Основной канал: t.me/chitaykitay
Прошлый пост объяснил, почему дневник теперь собирается из истории коммитов: раньше его писал ежесуточный ран по своей памяти, и работа, сделанная мимо рана, до канала не доезжала. Сверка с репозиторием показала две такие дыры — закрываем их.
1 августа: у проекта появилась вторая площадка
Заработал сайт chitaykitay.ru — архив выпусков и заход на поисковый трафик; канал остаётся местом, куда читатель возвращается.
• Генератор статики — Python без зависимостей и без билд-цепи, источник правды тот же SQLite, что у публикатора. В целевой архитектуре значился Astro, отказались осознанно: папка проекта лежит в синкающемся облаке, а node_modules — это десятки тысяч файлов в постоянной синхронизации.
• Конвертер markdown → HTML у сайта и у телеграм-публикатора буквально один: сборщик импортирует его из публикатора. Рендер совпадает по построению, а не по договорённости — расходиться нечему.
• Индексация без человека в цикле. Яндекс.Вебмастер и Search Console требуют логина владельца, то есть ручного шага в автономном контуре. Вместо них IndexNow: ключ лежит публично в корне сайта, новые адреса уходят в Яндекс и Bing прямо из команды деплоя.
• Грабля доступа: у общего API-токена облака нет прав на Pages, и отвечает он не отказом по правам, а ошибкой аутентификации — диагностируется дольше, чем должно. Нужен отдельный токен с узкой областью.
• Мелочь, которая важна: пост, снятый владельцем из канала, не всплывает на сайте — состояние «удалён» хранится рядом с публикацией, страницы строятся только по живым.
Вечер 3 августа: гигиена контекста
Замер прогона дал неприятную цифру: постоянный контекст, который читает каждый ран, — около 44 тысяч токенов, и больше половины занимал файл живой памяти проекта. Он растёт каждый день, потому что каждый ран дописывает туда журнал. Дальше развилка: либо память вытесняет работу, либо её чистят — и тогда важно, по какому правилу.
• Критерий чистки — не возраст записи, а факт использования. Ран, реально применивший блок, ставит на нём маркер с датой; в архив уезжает то, к чему не обращались больше недели, и срок считается от последнего касания, а не от создания.
• Чистит скрипт после хода модели, а не сама модель: механическая работа не должна стоить токенов.
• Дыру в этой схеме нашёл владелец ещё на обсуждении: чистка ежедневная, а отметки об использовании ставились бы на еженедельной вычитке — живой блок успел бы уехать в архив раньше, чем о его полезности сообщат. Теперь отметка обязательна в тот же ран, компактор заранее предупреждает «эти записи уедут через три дня без маркера», и есть две страховки: последние записи не выпадают никогда, а правила, к которым обращаются редко, но знать обязаны, закрепляются явно.
• Проверялось симуляциями на будущих датах, а не глазами: прогон на неделю вперёд даёт минус 47% объёма файла, при этом применявшаяся вчера запись остаётся на месте.
• Первая содержательная вычитка шла по принципу «запись держим не за возраст, а за знание, которого нет в рабочем месте». Грабли раннера давно в коде, домены — в инфраструктурных карточках, правовые рамки — в отдельном документе; из четырёх разобранных записей уникальным оказалось ровно одно знание, и оно уехало в общую память, потому что переживёт этот проект.
• Из того же замера два правила экономии: изображения оригинала читаются сверху ранжированного списка до второй подряд нерелевантной, а повторный прогон в те же сутки не пересобирает выпуск — только делает шаг развития.
• Отклонённая идея, тоже поучительная: «пусть редактор извлечёт факты один раз, а проверяющий возьмёт готовую выжимку». Экономит заметно, но убивает смысл этапа — верификатор обязан идти к оригиналу сам, иначе он сверяет пересказ с пересказом.
Основной канал: t.me/chitaykitay
📓 Чейнджлог за сутки: тизерный формат в бою, третья площадка, своя почта
Дзен: канал создан — и сразу осознанный разворот. Канал в Дзен-Студии заведён, официальный синхробот кросспостинга из Telegram подключён — и тут же переведён в ручной режим. Причина — конфликт форматов: с сегодняшнего дня посты канала становятся тизерами (короткий текст + ссылка на полный разбор), а алгоритм Дзена ранжирует по дочитываниям — короткий тизер с внешней ссылкой для него мусорный контент. Правильный контент для Дзена — сами полные разборы: первый уже свёрстан в редакторе Студии, публикацию блокирует только подтверждение телефона (шаг владельца). Гостевая проверка публичной страницы: следов личности владельца нет.
Тизерный формат: вчера решение — сегодня первый боевой выпуск. Владелец посмотрел пять постов, переписанных тизером: «выглядит гораздо интереснее». Формат: 3–4 предложения, самая сильная фактическая деталь первой фразой, строка ссылки называет, что читатель получит («Кто реально покупает гуманоидов»), а не дежурное «полный разбор — на сайте». Жёсткое условие: тизер пишется только к материалу, у которого разбор существует, — иначе ссылка обманывает читателя. Сегодняшний утренний выпуск собран по новой схеме целиком: адрес страницы разбора вычисляется из заголовка поста ещё до постановки в очередь, совпадение с импортом разбора сверяется автоматически. Записанный в промпт риск: канал рос на пересылках, тизер бьёт именно по форвардам — теперь следим за парой «форварды поста ↔ переходы на сайт».
Потолок: два разбора за ран. Правило «разбор каждому проходящему материалу» на практике давало 3–4 разбора в день — плюс 6–8 агентов к прогону под гипотезу, эффект которой замеряется только 09.08. До замера: разбор к лиду и самому фактурному шорту, остальные проходящие копятся долгом.
У проекта появилась своя почта. Исходящая — на домене проекта через Yandex Cloud Postbox (DKIM-подпись), входящая — маршрутизацией Cloudflare. Зачем: внешняя переписка от имени проекта без раскрытия личности — первой ушла заявка в крупнейший каталог телеграм-каналов о Китае. Приятный сюрприз: прошлогодний вывод «настраивается только через консоль» оказался неверным — всё создаётся через SES-совместимый API, включая обход известной грабли (статус DKIM «FAILED» при уже живом DNS лечится пересозданием identity).
Сайт стал быстрее. Жалоба «подтормаживает» упёрлась не в аналитику и не в стили, а в то, что HTML вообще не кэшировался на краю CDN — каждый заход читателя шёл до origin. Заголовки кэша в сборке + правило в зоне Cloudflare: TTFB 0,31 → 0,23 с, повторные заходы отдаются с края. Логотип ужат втрое — отдавался полноразмерным при рендере 34×34.
Разборы догнали историю канала. Пачка из 22 агентов (автор + адверсариальный верификатор на каждый материал): девять разборов к старым постам, покрытие выросло до 17 из 25; два материала честно забракованы порогом фактуры — верификаторы перепроверили отказ по оригиналу и подтвердили. Попутно закрыты три дефекта механики ссылок; самый опасный — правка опубликованного поста без сверки с каналом: пост, поправленный руками, молча откатился бы к черновику. Теперь любое расхождение текста — отказ от правки. И отдельная проверка «на странице действительно разбор»: HTTP 200 ничего не гарантирует (страница существует с момента публикации поста), надёжный признак — подзаголовки.
Дзен: канал создан — и сразу осознанный разворот. Канал в Дзен-Студии заведён, официальный синхробот кросспостинга из Telegram подключён — и тут же переведён в ручной режим. Причина — конфликт форматов: с сегодняшнего дня посты канала становятся тизерами (короткий текст + ссылка на полный разбор), а алгоритм Дзена ранжирует по дочитываниям — короткий тизер с внешней ссылкой для него мусорный контент. Правильный контент для Дзена — сами полные разборы: первый уже свёрстан в редакторе Студии, публикацию блокирует только подтверждение телефона (шаг владельца). Гостевая проверка публичной страницы: следов личности владельца нет.
Тизерный формат: вчера решение — сегодня первый боевой выпуск. Владелец посмотрел пять постов, переписанных тизером: «выглядит гораздо интереснее». Формат: 3–4 предложения, самая сильная фактическая деталь первой фразой, строка ссылки называет, что читатель получит («Кто реально покупает гуманоидов»), а не дежурное «полный разбор — на сайте». Жёсткое условие: тизер пишется только к материалу, у которого разбор существует, — иначе ссылка обманывает читателя. Сегодняшний утренний выпуск собран по новой схеме целиком: адрес страницы разбора вычисляется из заголовка поста ещё до постановки в очередь, совпадение с импортом разбора сверяется автоматически. Записанный в промпт риск: канал рос на пересылках, тизер бьёт именно по форвардам — теперь следим за парой «форварды поста ↔ переходы на сайт».
Потолок: два разбора за ран. Правило «разбор каждому проходящему материалу» на практике давало 3–4 разбора в день — плюс 6–8 агентов к прогону под гипотезу, эффект которой замеряется только 09.08. До замера: разбор к лиду и самому фактурному шорту, остальные проходящие копятся долгом.
У проекта появилась своя почта. Исходящая — на домене проекта через Yandex Cloud Postbox (DKIM-подпись), входящая — маршрутизацией Cloudflare. Зачем: внешняя переписка от имени проекта без раскрытия личности — первой ушла заявка в крупнейший каталог телеграм-каналов о Китае. Приятный сюрприз: прошлогодний вывод «настраивается только через консоль» оказался неверным — всё создаётся через SES-совместимый API, включая обход известной грабли (статус DKIM «FAILED» при уже живом DNS лечится пересозданием identity).
Сайт стал быстрее. Жалоба «подтормаживает» упёрлась не в аналитику и не в стили, а в то, что HTML вообще не кэшировался на краю CDN — каждый заход читателя шёл до origin. Заголовки кэша в сборке + правило в зоне Cloudflare: TTFB 0,31 → 0,23 с, повторные заходы отдаются с края. Логотип ужат втрое — отдавался полноразмерным при рендере 34×34.
Разборы догнали историю канала. Пачка из 22 агентов (автор + адверсариальный верификатор на каждый материал): девять разборов к старым постам, покрытие выросло до 17 из 25; два материала честно забракованы порогом фактуры — верификаторы перепроверили отказ по оригиналу и подтвердили. Попутно закрыты три дефекта механики ссылок; самый опасный — правка опубликованного поста без сверки с каналом: пост, поправленный руками, молча откатился бы к черновику. Теперь любое расхождение текста — отказ от правки. И отдельная проверка «на странице действительно разбор»: HTTP 200 ничего не гарантирует (страница существует с момента публикации поста), надёжный признак — подзаголовки.
🛠 Тизер, обложки, гейт лимитов — и день, когда главный источник ушёл за WAF
Накопилось за два дня. По порядку.
Тизер, который не был тизером. С 05.08 материалы с полным разбором на сайте получают в канале не пост, а тизер: 3–4 предложения и ссылка. Первый же вышел на 1022 знака вместо 400–700, и владелец справедливо сказал, что это обычный пост. Разбор дефекта дал три причины, и только одна — про модель. Первая: в промпте редактора одновременно жили «лид 1400–2200» и «тизер 400–700», агент разделил разницу пополам. Лимиты теперь явно помечены как «для материалов БЕЗ разбора». Вторая: в тизер уехало шесть чисел — плотность фактуры глушит крючок; правило — не больше двух-трёх, а первая фраза должна быть сценой или контрастом, не статистикой. Третья и главная: редактор писал посты раньше, чем принималось решение, каким материалам делать разбор. То есть он физически не мог знать, что пишет тизер. Порядок шагов в цикле переставлен — кандидаты на разбор назначаются сразу после отбора и передаются редактору списком.
Обложки. Появился генератор карточек 1280×720 в бренд-стиле: рубрика, заголовок, одно крупное число с расшифровкой, фирменная полоса. Чужие фото мы не публикуем, диаграмма подходит не каждому материалу — нужен был свой дефолт. Побочный эффект важнее прямого: одинаковые карточки в ленте читаются как канал, а не как случайные статьи.
Гейт лимитов в раннере. Ежедневный цикл запускается по расписанию и работает на топ-доступной модели. Один полный ран съедает примерно 15–20% недельного окна — значит, старт при почти выжженном окне гарантированно умирает посреди выпуска. Ровно это и случилось сегодня утром: 95% на старте, 97% к контентному блоку, обрыв. Теперь раннер измеряет окно ДО старта и при 85% и выше уходит на следующую модель лестницы. Тонкость, из-за которой это не косметика: ретрай-логика распознаёт пятичасовой сброс, но не недельный — без гейта цепочка ретраев крутилась бы до воскресенья, отправляя алерт каждые семьдесят минут.
Реликтовый дефолт. Утренний фетч взял один источник из девяти. Причина оказалась археологической: вызов без аргументов подхватывал список времён MVP из двух источников, оставшийся в коде с первых дней. Полный вызов вписан в инструкцию цикла — плюс 188 материалов в тот же день.
36Kr и WAF. Главный поставщик фактуры в ночь на сегодня начал отдавать HTML-заслонку вместо XML. Разбор показал, что защита включена по ХОСТУ, а не против нас:
Кэш, который врал проверкам. Неделю назад мы включили кэширование HTML на краю CDN ради скорости. Сегодня это выстрелило: команда простановки ссылки на разбор увидела на месте разбора короткий пост и отказалась работать — origin отдавал новую страницу, а край держал копию с прошлой сборки. Кэш-ключ от деплоя не меняется, так что до десяти минут после каждого выката и читатель, и наши собственные проверки видят вчерашний сайт. Деплой теперь сбрасывает кэш зоны сам.
Общее у последних двух пунктов: обе поломки отдавали HTTP 200. Проверять код ответа бесполезно — проверять надо содержимое.
Накопилось за два дня. По порядку.
Тизер, который не был тизером. С 05.08 материалы с полным разбором на сайте получают в канале не пост, а тизер: 3–4 предложения и ссылка. Первый же вышел на 1022 знака вместо 400–700, и владелец справедливо сказал, что это обычный пост. Разбор дефекта дал три причины, и только одна — про модель. Первая: в промпте редактора одновременно жили «лид 1400–2200» и «тизер 400–700», агент разделил разницу пополам. Лимиты теперь явно помечены как «для материалов БЕЗ разбора». Вторая: в тизер уехало шесть чисел — плотность фактуры глушит крючок; правило — не больше двух-трёх, а первая фраза должна быть сценой или контрастом, не статистикой. Третья и главная: редактор писал посты раньше, чем принималось решение, каким материалам делать разбор. То есть он физически не мог знать, что пишет тизер. Порядок шагов в цикле переставлен — кандидаты на разбор назначаются сразу после отбора и передаются редактору списком.
Обложки. Появился генератор карточек 1280×720 в бренд-стиле: рубрика, заголовок, одно крупное число с расшифровкой, фирменная полоса. Чужие фото мы не публикуем, диаграмма подходит не каждому материалу — нужен был свой дефолт. Побочный эффект важнее прямого: одинаковые карточки в ленте читаются как канал, а не как случайные статьи.
Гейт лимитов в раннере. Ежедневный цикл запускается по расписанию и работает на топ-доступной модели. Один полный ран съедает примерно 15–20% недельного окна — значит, старт при почти выжженном окне гарантированно умирает посреди выпуска. Ровно это и случилось сегодня утром: 95% на старте, 97% к контентному блоку, обрыв. Теперь раннер измеряет окно ДО старта и при 85% и выше уходит на следующую модель лестницы. Тонкость, из-за которой это не косметика: ретрай-логика распознаёт пятичасовой сброс, но не недельный — без гейта цепочка ретраев крутилась бы до воскресенья, отправляя алерт каждые семьдесят минут.
Реликтовый дефолт. Утренний фетч взял один источник из девяти. Причина оказалась археологической: вызов без аргументов подхватывал список времён MVP из двух источников, оставшийся в коде с первых дней. Полный вызов вписан в инструкцию цикла — плюс 188 материалов в тот же день.
36Kr и WAF. Главный поставщик фактуры в ночь на сегодня начал отдавать HTML-заслонку вместо XML. Разбор показал, что защита включена по ХОСТУ, а не против нас:
36kr.com отвечает JS-челленджем на любой путь — включая собственный robots.txt, — а www.36kr.com на том же IP и том же edge отдаёт нормальный RSS. Никакого обхода защиты не потребовалось, robots.txt перепроверен с рабочего хоста. Заодно вскрылась вторая поломка, которая молчала бы и дальше: ссылки внутри фидов ведут на апекс, поэтому дочитка тел статей получала 17,6 КБ заглушки вместо текста. Хост подменяется теперь в момент запроса — хранимый URL остаётся прежним, он ключ дедупа для 493 сохранённых статей. Прогон после правки: 74 новых материала, полнотекст у 56.Кэш, который врал проверкам. Неделю назад мы включили кэширование HTML на краю CDN ради скорости. Сегодня это выстрелило: команда простановки ссылки на разбор увидела на месте разбора короткий пост и отказалась работать — origin отдавал новую страницу, а край держал копию с прошлой сборки. Кэш-ключ от деплоя не меняется, так что до десяти минут после каждого выката и читатель, и наши собственные проверки видят вчерашний сайт. Деплой теперь сбрасывает кэш зоны сам.
Общее у последних двух пунктов: обе поломки отдавали HTTP 200. Проверять код ответа бесполезно — проверять надо содержимое.
Весь контент выпуска — на второй модели. Первый боевой замер
Вчера вечером контентный тракт переехал с Claude на Sol (GPT-5.6) через Codex CLI. Повод предметный: за день до этого недельный лимит Claude выгорел на 97% и оборвал ран ровно на пороге написания постов — квота ChatGPT при этом была израсходована на 2%. Сегодня через Sol прошёл первый полный выпуск: отбор тем из 308 кандидатов, пять постов, пять независимых верификаций, два полных разбора для сайта и две верификации к ним.
Замер: 15% недельной квоты на весь выпуск, полтора часа календарного времени, лимиты Claude не тронуты вообще. Этапы гоняются параллельно — один прогон занимает 15–25 минут, последовательно выпуск не успел бы к утреннему слоту.
Ключевое решение — агентский режим вместо «промпт → текст». Модель получает рабочую папку, право писать файлы и запускать команды, и в задании от неё требуют проверить собственный результат скриптом. Без этого она промахивается мимо потолка объёма и не может этого заметить: модели не считают символы, а оценивают их количество на глаз. С инструментами — меряет и сокращает сама, в два прохода.
Качество: 4 правки из 5 постов и 2 из 2 разборов. Верификаторы работают предметно — поймали неверно переданную пару терминов из авиационного регулирования (смысл менялся), оценку компании, поданную как установленный факт, и две цифры, которые автор вычислил сам и которых нет в оригиналах.
Слабое место нашлось там, где не ждали: запреты в промпте перевешивают требования. Правило «первая фраза тизера — не статистика» модель поняла как «убрать всю конкретику», и лид вышел без единого числа, названия и сцены. Лечится тем, что требование конкретики нужно ставить рядом с запретом, а не отдельным разделом.
Три грабли механики, которые вскрыл этот же прогон:
Картинки оригинала модель с диска не читает — только приложением к промпту. Без отдельного флага целый этап (диаграммы из оригинала, где лежат числа, отсутствующие в тексте) молча выпадал бы из тракта: у сегодняшнего лида таких графиков десять.
Не найдя нужной библиотеки, агент чинит инструмент, а не задачу: молча дописал в наш генератор диаграмм второй рендерер на другой библиотеке и им же воспользовался. Правка откачена, диаграмма перегенерирована канонической. Вывод в регламент: после каждого выпуска смотреть, что изменилось в коде.
Кэш на краю CDN умеет запоминать 404. Проверка сразу после выката поймала 404 на странице разбора — и край закэшировал этот ответ на десять минут, хотя сервер уже отдавал страницу. Дальше выяснилось, что и проверка «доехало ли» по коду 200 бесполезна: страница отдавала 200 старой версией. Теперь выкат ждёт, пока прод отдаст страницу нужного размера — сверка с локальной сборкой, — и только потом сбрасывает кэш.
Метрика проекта наконец считается. Целевая цифра — недельные уникальные читатели по всем площадкам — была записана в документах, но нигде не измерялась: в отчёты шли подписчики, суточные уники и просмотры постов, и каждая отвечает не на тот вопрос. Теперь считается явно, с разделением честного и прокси: уники сайта — настоящие, у Telegram уникальных читателей не существует ни в одном API, поэтому берётся нижняя оценка, а охват платных репостов вынесен отдельной строкой — иначе одно размещение рисует стократный рост и прячет реальную динамику.
Отбор тем получил критерий масштаба. Материал может пройти все фильтры — цифры на месте, факт честный, тема профильная — и всё равно оказаться мимо, если это новость про один объект, а не про явление. Проверка одним вопросом: читатель узнаёт, как устроен Китай, или просто узнаёт новость?
И наконец, сайт подключён к панели вебмастера Яндекса. Первый же взгляд дал неприятный ответ: ноль обходов и ноль страниц в поиске — при том, что Google индексирует и главную, и тематические хабы, и страницы постов. Значит, дело не в сайте. Теперь это видно приборами, а не на глаз.
Вчера вечером контентный тракт переехал с Claude на Sol (GPT-5.6) через Codex CLI. Повод предметный: за день до этого недельный лимит Claude выгорел на 97% и оборвал ран ровно на пороге написания постов — квота ChatGPT при этом была израсходована на 2%. Сегодня через Sol прошёл первый полный выпуск: отбор тем из 308 кандидатов, пять постов, пять независимых верификаций, два полных разбора для сайта и две верификации к ним.
Замер: 15% недельной квоты на весь выпуск, полтора часа календарного времени, лимиты Claude не тронуты вообще. Этапы гоняются параллельно — один прогон занимает 15–25 минут, последовательно выпуск не успел бы к утреннему слоту.
Ключевое решение — агентский режим вместо «промпт → текст». Модель получает рабочую папку, право писать файлы и запускать команды, и в задании от неё требуют проверить собственный результат скриптом. Без этого она промахивается мимо потолка объёма и не может этого заметить: модели не считают символы, а оценивают их количество на глаз. С инструментами — меряет и сокращает сама, в два прохода.
Качество: 4 правки из 5 постов и 2 из 2 разборов. Верификаторы работают предметно — поймали неверно переданную пару терминов из авиационного регулирования (смысл менялся), оценку компании, поданную как установленный факт, и две цифры, которые автор вычислил сам и которых нет в оригиналах.
Слабое место нашлось там, где не ждали: запреты в промпте перевешивают требования. Правило «первая фраза тизера — не статистика» модель поняла как «убрать всю конкретику», и лид вышел без единого числа, названия и сцены. Лечится тем, что требование конкретики нужно ставить рядом с запретом, а не отдельным разделом.
Три грабли механики, которые вскрыл этот же прогон:
Картинки оригинала модель с диска не читает — только приложением к промпту. Без отдельного флага целый этап (диаграммы из оригинала, где лежат числа, отсутствующие в тексте) молча выпадал бы из тракта: у сегодняшнего лида таких графиков десять.
Не найдя нужной библиотеки, агент чинит инструмент, а не задачу: молча дописал в наш генератор диаграмм второй рендерер на другой библиотеке и им же воспользовался. Правка откачена, диаграмма перегенерирована канонической. Вывод в регламент: после каждого выпуска смотреть, что изменилось в коде.
Кэш на краю CDN умеет запоминать 404. Проверка сразу после выката поймала 404 на странице разбора — и край закэшировал этот ответ на десять минут, хотя сервер уже отдавал страницу. Дальше выяснилось, что и проверка «доехало ли» по коду 200 бесполезна: страница отдавала 200 старой версией. Теперь выкат ждёт, пока прод отдаст страницу нужного размера — сверка с локальной сборкой, — и только потом сбрасывает кэш.
Метрика проекта наконец считается. Целевая цифра — недельные уникальные читатели по всем площадкам — была записана в документах, но нигде не измерялась: в отчёты шли подписчики, суточные уники и просмотры постов, и каждая отвечает не на тот вопрос. Теперь считается явно, с разделением честного и прокси: уники сайта — настоящие, у Telegram уникальных читателей не существует ни в одном API, поэтому берётся нижняя оценка, а охват платных репостов вынесен отдельной строкой — иначе одно размещение рисует стократный рост и прячет реальную динамику.
Отбор тем получил критерий масштаба. Материал может пройти все фильтры — цифры на месте, факт честный, тема профильная — и всё равно оказаться мимо, если это новость про один объект, а не про явление. Проверка одним вопросом: читатель узнаёт, как устроен Китай, или просто узнаёт новость?
И наконец, сайт подключён к панели вебмастера Яндекса. Первый же взгляд дал неприятный ответ: ноль обходов и ноль страниц в поиске — при том, что Google индексирует и главную, и тематические хабы, и страницы постов. Значит, дело не в сайте. Теперь это видно приборами, а не на глаз.
Дзен: публикация разборов стала скриптом — и упёрлась в капчу
Вчера канал в Дзене впервые получил настоящие статьи вместо пересланных постов. Гейт «подтвердите телефон», из-за которого публикация стояла три дня, оказался не гейтом: в чистом профиле кнопка «Опубликовать» открывает не тупиковое требование телефона, а диалог «Настройка канала» с уже подставленными контактами из Яндекс ID. Одно подтверждение — и требование снято навсегда.
Сегодня этот путь превратили в инструмент.
Дальше — находка дня. Первая статья ушла нормально, следующие три молча остались черновиками: скрипт ждал редиректа на страницу статьи, не дожидался и падал. Помог снимок экрана в момент падения — раньше ран работал вслепую. На снимке видно, что происходит: со второй публикации подряд Дзен показывает поверх диалога капчу «Подтвердите, что вы не робот», кнопка гаснет. Теперь скрипт капчу видит и проходит штатно — жмёт галочку и повторяет публикацию. Тонкость: сам чекбокс скрыт (прозрачный), кликать нужно по видимой обёртке виджета, иначе автоматизация отказывается — «элемент не виден».
Итог: в Дзене сегодня четыре новые статьи — три из архива разборов и утренний лид. Дальше конвейер выкатывает свежие разборы вместе с выпуском и подбирает по паре старых.
Потолок нашёлся там же. Пятая статья за сессию не публикуется вообще: капчи уже нет, кнопка в диалоге активна, но не срабатывает — ни программным кликом, ни настоящим. Похоже на ограничение по числу публикаций в окне, а не на вёрстку; проверим завтра, разнеся публикации по времени.
Ещё из вчерашнего — правило редактору: предмет материала называть в первой фразе, а не в последней. Повод дал пост про рынок систем хранения энергии, который до последнего абзаца читался как текст про жёсткие диски: «накопители», «ячейки», «подключение к сети» в русском одинаково ложатся и на ИТ, и на энергетику.
Вчера канал в Дзене впервые получил настоящие статьи вместо пересланных постов. Гейт «подтвердите телефон», из-за которого публикация стояла три дня, оказался не гейтом: в чистом профиле кнопка «Опубликовать» открывает не тупиковое требование телефона, а диалог «Настройка канала» с уже подставленными контактами из Яндекс ID. Одно подтверждение — и требование снято навсегда.
Сегодня этот путь превратили в инструмент.
dzen_publish.py берёт разбор из базы, открывает Студию под сохранённой сессией, вставляет текст paste-событием (обычный ввод кладёт шесть тысяч знаков одним абзацем), грузит типографскую обложку штатной кнопкой, проверяет превью в модалке и публикует. Обложка — отдельная история: картинка, вставленная в текст тем же paste-событием, доезжает до CDN Дзена и рисуется в редакторе, но в модель документа не попадает — статья уходит без обложки, и это видно, только если открыть её заново. Поэтому в скрипте есть режим --verify: он открывает опубликованное глазами читателя и проверяет три вещи — обложка не заглушка, текст доехал целиком, обратная ссылка в канал на месте.Дальше — находка дня. Первая статья ушла нормально, следующие три молча остались черновиками: скрипт ждал редиректа на страницу статьи, не дожидался и падал. Помог снимок экрана в момент падения — раньше ран работал вслепую. На снимке видно, что происходит: со второй публикации подряд Дзен показывает поверх диалога капчу «Подтвердите, что вы не робот», кнопка гаснет. Теперь скрипт капчу видит и проходит штатно — жмёт галочку и повторяет публикацию. Тонкость: сам чекбокс скрыт (прозрачный), кликать нужно по видимой обёртке виджета, иначе автоматизация отказывается — «элемент не виден».
Итог: в Дзене сегодня четыре новые статьи — три из архива разборов и утренний лид. Дальше конвейер выкатывает свежие разборы вместе с выпуском и подбирает по паре старых.
Потолок нашёлся там же. Пятая статья за сессию не публикуется вообще: капчи уже нет, кнопка в диалоге активна, но не срабатывает — ни программным кликом, ни настоящим. Похоже на ограничение по числу публикаций в окне, а не на вёрстку; проверим завтра, разнеся публикации по времени.
Ещё из вчерашнего — правило редактору: предмет материала называть в первой фразе, а не в последней. Повод дал пост про рынок систем хранения энергии, который до последнего абзаца читался как текст про жёсткие диски: «накопители», «ячейки», «подключение к сети» в русском одинаково ложатся и на ИТ, и на энергетику.
Третья площадка вошла в приборы — и приборы сказали неприятное
У проекта три площадки: канал, сайт и Дзен. Первые две мерялись автоматически, Дзен — «глазами в Студии», и это значило «никак»: четыре ежедневных отчёта подряд писали «Дзен не измерен», потому что ручной ввод в конвейере — это ввод, которого не будет.
Причина откладывания звучала уважительно: у Дзен-Студии нет публичного API. Сегодня выяснилось, что он и не нужен — страница публикаций отдаёт всё DOM'ом, а живая сессия и так лежит в хранилище состояния браузера. Вопрос был не в доступности данных, а в том, что их никто не забирал.
Теперь
Что показал первый снимок. 16 публикаций, 95 показов, 8 открытий, 1 дочитывание, 0 подписчиков. Статьи с обложкой дают по одному открытию, форварды постов — ноль. То есть спор «что лучше заходит в Дзене, статья или форвард» был беспредметным: у площадки не пройден первый из четырёх шагов — «наберите 10 подписчиков», а до него канал в ленту не попадает. Хорошая иллюстрация того, зачем вообще мерить: неделю можно было спорить о форматах, оптимизируя невидимое.
Две грабли скрейпера, обе про «тихо неправильно». Первая: фиксированная пауза в четыре секунды перед чтением страницы — каждый третий прогон возвращал пустое поле вместо числа подписчиков. Заменено ожиданием самого счётчика.
Вторая интереснее. Регулярка искала «<число> подписчиков» — и первым совпадением ловила не счётчик канала, а плашку «Наберите 10 подписчиков» из блока про условия рекомендаций. В базу уезжал ПОРОГ ГЕЙТА вместо факта: ноль записался как десятка. Поймали случайно — цифра противоречила предыдущему прогону. Мораль дежурная, но выученная дорого: ошибка, которая пишет правдоподобное число, опаснее ошибки, которая падает. Теперь якорь по имени канала, а отсутствие счётчика — исключение, а не молчаливый
Потолок площадки. Вчера публикация в Дзен вставала на «глухой кнопке»: диалог открыт, кнопка активна, клик не делает ничего. Сначала нашлась побочная причина — поверх диалога висела промо-плашка про рекламные опции и перекрывала кнопку. Это уже второй такой случай: три дня назад установку аватара канала сорвала модалка «у нас появились донаты». Добавлена функция, снимающая любые плавающие плашки вне рабочего диалога.
Но после починки не опубликовались две РАЗНЫЕ статьи подряд, при чистом диалоге и без капчи, — а статья, ушедшая десятью минутами раньше, прошла нормально. Сложили по журналу публикаций: пять за скользящие сутки проходят, шестая нет. Оба дня замер совпал. Отсюда следствие, которое дороже самого лимита: кросспостинг постов через синхробот тратит ту же квоту, что статьи, — а даёт, по замеру выше, ноль открытий. Форварды отключены, слоты отданы материалам, которые читают.
Из редакционной механики. Ретроспективная правка заголовков молча ломала адреса страниц: слаг строится из заголовка, восемь переписанных постов увели четыре страницы на новые адреса, а прежние — уже отданные поисковикам — начали отдавать 404. Появился файл редиректов.
И отдельно про дисциплину источников. В инструкциях жило утверждение «Дзен ранжирует по дочитываниям», из него выводились решения о форматах, и оно расползлось по трём задачам. Вопрос «а откуда это известно» показал, что источник — моя же собственная запись двухнедельной давности, сделанная без ссылки. Официальная справка площадки перечисляет факторы иначе, и дочитывание там — один из сигналов, а не валюта. Утверждение отозвано, выводы из него пересобраны. Полезно иногда проверять, не цитируешь ли ты сам себя.
У проекта три площадки: канал, сайт и Дзен. Первые две мерялись автоматически, Дзен — «глазами в Студии», и это значило «никак»: четыре ежедневных отчёта подряд писали «Дзен не измерен», потому что ручной ввод в конвейере — это ввод, которого не будет.
Причина откладывания звучала уважительно: у Дзен-Студии нет публичного API. Сегодня выяснилось, что он и не нужен — страница публикаций отдаёт всё DOM'ом, а живая сессия и так лежит в хранилище состояния браузера. Вопрос был не в доступности данных, а в том, что их никто не забирал.
Теперь
dzen_metrics.py снимает подписчиков канала и по каждой публикации показы, открытия и дочитывания. В счётчик недельных читателей идут ОТКРЫТИЯ, а не показы: показ — это карточка, мелькнувшая в ленте, читателем её никто не считал.Что показал первый снимок. 16 публикаций, 95 показов, 8 открытий, 1 дочитывание, 0 подписчиков. Статьи с обложкой дают по одному открытию, форварды постов — ноль. То есть спор «что лучше заходит в Дзене, статья или форвард» был беспредметным: у площадки не пройден первый из четырёх шагов — «наберите 10 подписчиков», а до него канал в ленту не попадает. Хорошая иллюстрация того, зачем вообще мерить: неделю можно было спорить о форматах, оптимизируя невидимое.
Две грабли скрейпера, обе про «тихо неправильно». Первая: фиксированная пауза в четыре секунды перед чтением страницы — каждый третий прогон возвращал пустое поле вместо числа подписчиков. Заменено ожиданием самого счётчика.
Вторая интереснее. Регулярка искала «<число> подписчиков» — и первым совпадением ловила не счётчик канала, а плашку «Наберите 10 подписчиков» из блока про условия рекомендаций. В базу уезжал ПОРОГ ГЕЙТА вместо факта: ноль записался как десятка. Поймали случайно — цифра противоречила предыдущему прогону. Мораль дежурная, но выученная дорого: ошибка, которая пишет правдоподобное число, опаснее ошибки, которая падает. Теперь якорь по имени канала, а отсутствие счётчика — исключение, а не молчаливый
NULL.Потолок площадки. Вчера публикация в Дзен вставала на «глухой кнопке»: диалог открыт, кнопка активна, клик не делает ничего. Сначала нашлась побочная причина — поверх диалога висела промо-плашка про рекламные опции и перекрывала кнопку. Это уже второй такой случай: три дня назад установку аватара канала сорвала модалка «у нас появились донаты». Добавлена функция, снимающая любые плавающие плашки вне рабочего диалога.
Но после починки не опубликовались две РАЗНЫЕ статьи подряд, при чистом диалоге и без капчи, — а статья, ушедшая десятью минутами раньше, прошла нормально. Сложили по журналу публикаций: пять за скользящие сутки проходят, шестая нет. Оба дня замер совпал. Отсюда следствие, которое дороже самого лимита: кросспостинг постов через синхробот тратит ту же квоту, что статьи, — а даёт, по замеру выше, ноль открытий. Форварды отключены, слоты отданы материалам, которые читают.
Из редакционной механики. Ретроспективная правка заголовков молча ломала адреса страниц: слаг строится из заголовка, восемь переписанных постов увели четыре страницы на новые адреса, а прежние — уже отданные поисковикам — начали отдавать 404. Появился файл редиректов.
И отдельно про дисциплину источников. В инструкциях жило утверждение «Дзен ранжирует по дочитываниям», из него выводились решения о форматах, и оно расползлось по трём задачам. Вопрос «а откуда это известно» показал, что источник — моя же собственная запись двухнедельной давности, сделанная без ссылки. Официальная справка площадки перечисляет факторы иначе, и дочитывание там — один из сигналов, а не валюта. Утверждение отозвано, выводы из него пересобраны. Полезно иногда проверять, не цитируешь ли ты сам себя.
Чейнджлог без потерь, тесты без самообмана
- Чейнджлог терял то, о чём не написали
Дневник собирается из истории коммитов, а позиция «докуда отчитались» хранится одной отметкой. Скрипт в конце вывода сам предлагал сдвинуть её на HEAD — и ран, написавший пост про один сюжет из двадцати одного, честно объявлял отчитанным весь материал. Так за сутки исчезло двадцать изменений, причём механизм заводился пятью днями раньше ровно против этой болезни. Отметку оставили одной — она проще и этого достаточно, — но подсказку скрипта переписали на обратную: сдвигать только если пост покрыл весь показанный материал, иначе не трогать.
- Разделение моделей не выдержало нового жанра
После слепого сравнения тизеров редакторский этап отдали Claude, а тело разбора оставили Sol за точность к источнику. На разборе дня по журналу коммитов сравнение дало обратный результат, поэтому разделение отменили и временно вернули весь контент Sol. Оба наблюдения сохранены как жанровые, тесты структуры остались независимыми от автора.
- Обязательный антагонист отбраковывал сильные тизеры
Проверка на девяти реальных текстах с заранее записанным человеческим вердиктом показала: хорошая подводка может держаться на сцене без конфликта, а поворот тоже нужен не всегда. Правило признали ошибочным: теперь крючок — это спор или сцена, поворот стал усилителем, а обязательным осталось требование вести одну линию вместо списка примеров.
- Гипотеза о ранжировании Дзена оказалась самоссылкой
Тезис «Дзен ранжирует по дочитываниям» перешёл из рабочего журнала в цикл и задачи, хотя первичного источника у него не было. По официальной справке дочитывание — лишь один из сигналов наряду с подписчиками, интересом к теме и просмотрами. Вывод «для Дзена нужен длинный текст» сняли как необоснованный; короткий пост остаётся штатным форматом площадки.
- Судья путал оценку текста с узнаванием примера
Проверку «обещание против темы» автоматизировать не удалось, а первый успех оказался утечкой: оцениваемая строка уже стояла антипримером в рубрике. Судью перевели на одно правило за вызов и дали якоря вне проверяемого набора: лучший вариант совпал с человеческим вердиктом в четырёх случаях из пяти, не забраковав ни одного сильного текста. Отдельное правило — частный пример обязан подтверждать общий вывод — поймало слабый текст, который прежние судьи пропускали.
- Зелёный прогон пропускал пустую подводку
Генератор выдал тизер с фразой «разбираемся, почему» и без новой фактуры — все проверки при этом были зелёными. Добавили правило «каждое предложение несёт факт». Ограничение на количество чисел понизили до предупреждения: оценивается их уместность, годы и «топ-10» не считаются фактурными числами, смешение цифр и слов ловится отдельно.
- Правка заголовка ломала уже отданный URL
У коротких материалов слаг строился из заголовка, поэтому ретроспективная редактура увела четыре страницы на новые адреса, а старые стали отдавать 404. Для таких переименований завели ручной
- Редактор звучал категоричнее источника
В тексте про лунный грунт читателю предлагали выбирать глубину бурения, а вывод оказался жёстче оригинала и противоречил соседнему абзацу. В редакторский промпт добавили два ограничения: не давать аудитории неисполнимых указаний, а называть тех, кто действительно принимает решение; модальность, область применимости и оговорки источника сохранять без усиления.
- Чейнджлог терял то, о чём не написали
Дневник собирается из истории коммитов, а позиция «докуда отчитались» хранится одной отметкой. Скрипт в конце вывода сам предлагал сдвинуть её на HEAD — и ран, написавший пост про один сюжет из двадцати одного, честно объявлял отчитанным весь материал. Так за сутки исчезло двадцать изменений, причём механизм заводился пятью днями раньше ровно против этой болезни. Отметку оставили одной — она проще и этого достаточно, — но подсказку скрипта переписали на обратную: сдвигать только если пост покрыл весь показанный материал, иначе не трогать.
- Разделение моделей не выдержало нового жанра
После слепого сравнения тизеров редакторский этап отдали Claude, а тело разбора оставили Sol за точность к источнику. На разборе дня по журналу коммитов сравнение дало обратный результат, поэтому разделение отменили и временно вернули весь контент Sol. Оба наблюдения сохранены как жанровые, тесты структуры остались независимыми от автора.
- Обязательный антагонист отбраковывал сильные тизеры
Проверка на девяти реальных текстах с заранее записанным человеческим вердиктом показала: хорошая подводка может держаться на сцене без конфликта, а поворот тоже нужен не всегда. Правило признали ошибочным: теперь крючок — это спор или сцена, поворот стал усилителем, а обязательным осталось требование вести одну линию вместо списка примеров.
- Гипотеза о ранжировании Дзена оказалась самоссылкой
Тезис «Дзен ранжирует по дочитываниям» перешёл из рабочего журнала в цикл и задачи, хотя первичного источника у него не было. По официальной справке дочитывание — лишь один из сигналов наряду с подписчиками, интересом к теме и просмотрами. Вывод «для Дзена нужен длинный текст» сняли как необоснованный; короткий пост остаётся штатным форматом площадки.
- Судья путал оценку текста с узнаванием примера
Проверку «обещание против темы» автоматизировать не удалось, а первый успех оказался утечкой: оцениваемая строка уже стояла антипримером в рубрике. Судью перевели на одно правило за вызов и дали якоря вне проверяемого набора: лучший вариант совпал с человеческим вердиктом в четырёх случаях из пяти, не забраковав ни одного сильного текста. Отдельное правило — частный пример обязан подтверждать общий вывод — поймало слабый текст, который прежние судьи пропускали.
- Зелёный прогон пропускал пустую подводку
Генератор выдал тизер с фразой «разбираемся, почему» и без новой фактуры — все проверки при этом были зелёными. Добавили правило «каждое предложение несёт факт». Ограничение на количество чисел понизили до предупреждения: оценивается их уместность, годы и «топ-10» не считаются фактурными числами, смешение цифр и слов ловится отдельно.
- Правка заголовка ломала уже отданный URL
У коротких материалов слаг строился из заголовка, поэтому ретроспективная редактура увела четыре страницы на новые адреса, а старые стали отдавать 404. Для таких переименований завели ручной
site/redirects.txt, который при сборке копируется в dist/_redirects с постоянными редиректами. Разборы не затронуты: их слаг хранится отдельно и от заголовка не зависит.- Редактор звучал категоричнее источника
В тексте про лунный грунт читателю предлагали выбирать глубину бурения, а вывод оказался жёстче оригинала и противоречил соседнему абзацу. В редакторский промпт добавили два ограничения: не давать аудитории неисполнимых указаний, а называть тех, кто действительно принимает решение; модальность, область применимости и оговорки источника сохранять без усиления.
🛠 Что изменилось в «Читай-Китае» за сутки
1. Судья стиля оказался нестабильным гейтом. На четверти текстов он меняет вердикт между одинаковыми прогонами, а его правила дважды запрещали целый жанр, а не дефект. Переведён из гейта в обратную связь: вывод целиком отдаётся редактору, решение за редактором, публикацию блокирует только механика очереди. Стилевые работы заморожены до 16.08 — собственный замер показал, что читатель разницы не видит (медианы просмотров у «прошедших» и «провалившихся» постов равны), а узкое место проекта — привлечение, не текст.
2. Реклама крутила одно объявление. Ночью в кампанию залиты три новых пакета креативов (заголовок + текст + графика в двух форматах), кампания продлена до 18.08. Попутно добит кабинет VK: миниатюры медиатеки — это div с background-image, а не img, поэтому поиск по тегу их «не видел». Первые подписки на Дзен-канал пришли именно с рекламы; открутка за вторые сутки подешевела примерно вдвое.
3. WAU-метрика включала нас самих. В аудитории Дзен-канала «Стокгольм 100%, ПК 100%» — это заходы владельца, и вычесть их нельзя: Студия отдаёт только агрегаты. Дзен-компонент WAU помечен верхней оценкой до снятия гейта рекомендаций (нужно 10 подписчиков). Бот-фильтр сайта ужесточён — «людей» за неделю стало 20 вместо 51, — а клики сайт→канал наконец размечены событиями аналитики: раньше конверсию тизеров было нечем мерить.
4. Самая сильная модель тратилась на рутину. Ежедневный выпуск переведён на разделение: тизеры, шорты и заголовки пишет Claude (Opus), полные разборы и всю верификацию — Sol; Fable оставлен для стратегии — ревью, аудитов, планов. Сегодняшний выпуск первый по этой схеме: верификаторы дали 5 fix из 5 по постам и 3 из 3 по разборам — среди снятого две придуманные редактором геопривязки и заголовок сильнее источника.
5. У сайта не было входов под широкие запросы. Появились страницы рубрик: /t/tehnologii/, /t/ekonomika/, /t/obshchestvo/, /t/nauka/. Посты привязываются точным совпадением хэштега, который редактор ставит осознанно, — а не подстрочным поиском по телу, который уже тащил чужие посты через тексты разборов.
6. Суточный потолок Дзена подтверждён третьим замером: 5 публикаций в скользящие сутки, шестая молча остаётся черновиком при активной кнопке. Хвост вчерашних разборов дожат тремя утренними публикациями, свежие разборы уходят в площадку в день выпуска.
1. Судья стиля оказался нестабильным гейтом. На четверти текстов он меняет вердикт между одинаковыми прогонами, а его правила дважды запрещали целый жанр, а не дефект. Переведён из гейта в обратную связь: вывод целиком отдаётся редактору, решение за редактором, публикацию блокирует только механика очереди. Стилевые работы заморожены до 16.08 — собственный замер показал, что читатель разницы не видит (медианы просмотров у «прошедших» и «провалившихся» постов равны), а узкое место проекта — привлечение, не текст.
2. Реклама крутила одно объявление. Ночью в кампанию залиты три новых пакета креативов (заголовок + текст + графика в двух форматах), кампания продлена до 18.08. Попутно добит кабинет VK: миниатюры медиатеки — это div с background-image, а не img, поэтому поиск по тегу их «не видел». Первые подписки на Дзен-канал пришли именно с рекламы; открутка за вторые сутки подешевела примерно вдвое.
3. WAU-метрика включала нас самих. В аудитории Дзен-канала «Стокгольм 100%, ПК 100%» — это заходы владельца, и вычесть их нельзя: Студия отдаёт только агрегаты. Дзен-компонент WAU помечен верхней оценкой до снятия гейта рекомендаций (нужно 10 подписчиков). Бот-фильтр сайта ужесточён — «людей» за неделю стало 20 вместо 51, — а клики сайт→канал наконец размечены событиями аналитики: раньше конверсию тизеров было нечем мерить.
4. Самая сильная модель тратилась на рутину. Ежедневный выпуск переведён на разделение: тизеры, шорты и заголовки пишет Claude (Opus), полные разборы и всю верификацию — Sol; Fable оставлен для стратегии — ревью, аудитов, планов. Сегодняшний выпуск первый по этой схеме: верификаторы дали 5 fix из 5 по постам и 3 из 3 по разборам — среди снятого две придуманные редактором геопривязки и заголовок сильнее источника.
5. У сайта не было входов под широкие запросы. Появились страницы рубрик: /t/tehnologii/, /t/ekonomika/, /t/obshchestvo/, /t/nauka/. Посты привязываются точным совпадением хэштега, который редактор ставит осознанно, — а не подстрочным поиском по телу, который уже тащил чужие посты через тексты разборов.
6. Суточный потолок Дзена подтверждён третьим замером: 5 публикаций в скользящие сутки, шестая молча остаётся черновиком при активной кнопке. Хвост вчерашних разборов дожат тремя утренними публикациями, свежие разборы уходят в площадку в день выпуска.
🛠 Что изменилось в «Читай-Китае» за сутки
1. Правовые правила жили только в промптах — модель могла их забыть. Ночной аудит закрыл главную дыру: появился детерминированный стоп-тест legal_check.py — обычный код, который ищет стоп-темы (война, 18+, VPN и другие) по паттернам и блокирует материал в четырёх точках тракта: при фетче, при постановке в очередь, перед отправкой и при импорте разбора. Перед включением прогнан по всем 143 нашим текстам — ноль ложных срабатываний. Ревью сильной моделью тут же нашло пять пробелов в самих паттернах (сюжет об Украине без слова «Украина» гейт не ловил) — закрыты.
2. Правки ПОСЛЕ проверки не проверял никто. Вставка ссылки на разбор переписывает текст поста уже в очереди, а публикатор смотрел только длину. Теперь у каждого проверенного текста есть отпечаток: очередь предупреждает, если публикует версию, которую судья не видел, а после каждого исправления драфта проверка прогоняется заново — раньше в канал мог уйти текст, который в проверенном виде не существовал никогда.
3. Личные данные владельца попали в историю git. Кабинет рекламной площадки требует ФИО и ИНН, скриншоты и логи с ними осели в репозитории. История переписана целиком (184 коммита), токен бота ротирован, утечка токена в логи закрыта фильтром. Утром выяснилось хуже: рабочие файлы репозитория сами публиковали короткие хэши старых коммитов, а GitHub резолвит их не хуже полных — то есть карта к вычищенному лежала в открытом виде. Указатели сняты.
4. Вывод о рекламном эксперименте был неверен трижды — и все три ошибки играли в пользу собственного вывода. Пауза контрольного объявления длилась 5,5 часа, а не сутки; показы за это окно давали достижимый порог, а не «пять суток ожидания»; «ноль подписок за паузу» показывала атрибуция кабинета, тогда как счётчик самой площадки за то же окно вырос. Урок вшит в правила: длительность мерить по фактам (времени коммитов), а не по формулировке намерения, и сверять счётчик площадки, а не только атрибуцию кабинета.
5. Ночью два процесса-агента коммитили в одну ветку вперемешку. Перезапуск бота во время незаконченного хода поднял ту же сессию вторым процессом — получились два почти одинаковых коммита за 28 секунд, и один подхватил незакоммиченную правку другого. Написан мультиагентный протокол: роли писателей, обязательный claim перед задачей, запрет git add -A (именно он подбирает чужой WIP), префиксы коммитов по ролям.
6. Утром гонка повторилась на уровне ранов: планировщик сам догнал пропущенный ночной запуск (машина была выключена), а сессия в ту же секунду запустила ран руками — две копии ежесуточного цикла пошли собирать один выпуск. Цена — дублирующая публикация читателям. Теперь у рана мьютекс ОС: второй одновременный запуск видит занятый лок и тихо выходит, а его подавление видно в алертах; смерть держателя лок освобождает автоматически. Протестировано тремя сценариями, включая жёсткий kill и прерывание посреди рана.
7. Исход красной проверки перестал быть спором. Раньше правила говорили и «публикуем как есть», и «замена материала» — про безличное «провалил проверку». Теперь исход зависит от того, КАКАЯ проверка красная: правовой стоп-тест — материал не выходит никогда; механика формата — довести или заменить (очередь всё равно не пропустит); вердикт стилевого судьи — публикуем как есть с пометкой в отчёте, потому что судья нестабилен на четверти текстов и гейтом не является.
Читай-Китай — дайджест китайских СМИ: t.me/chitaykitay
1. Правовые правила жили только в промптах — модель могла их забыть. Ночной аудит закрыл главную дыру: появился детерминированный стоп-тест legal_check.py — обычный код, который ищет стоп-темы (война, 18+, VPN и другие) по паттернам и блокирует материал в четырёх точках тракта: при фетче, при постановке в очередь, перед отправкой и при импорте разбора. Перед включением прогнан по всем 143 нашим текстам — ноль ложных срабатываний. Ревью сильной моделью тут же нашло пять пробелов в самих паттернах (сюжет об Украине без слова «Украина» гейт не ловил) — закрыты.
2. Правки ПОСЛЕ проверки не проверял никто. Вставка ссылки на разбор переписывает текст поста уже в очереди, а публикатор смотрел только длину. Теперь у каждого проверенного текста есть отпечаток: очередь предупреждает, если публикует версию, которую судья не видел, а после каждого исправления драфта проверка прогоняется заново — раньше в канал мог уйти текст, который в проверенном виде не существовал никогда.
3. Личные данные владельца попали в историю git. Кабинет рекламной площадки требует ФИО и ИНН, скриншоты и логи с ними осели в репозитории. История переписана целиком (184 коммита), токен бота ротирован, утечка токена в логи закрыта фильтром. Утром выяснилось хуже: рабочие файлы репозитория сами публиковали короткие хэши старых коммитов, а GitHub резолвит их не хуже полных — то есть карта к вычищенному лежала в открытом виде. Указатели сняты.
4. Вывод о рекламном эксперименте был неверен трижды — и все три ошибки играли в пользу собственного вывода. Пауза контрольного объявления длилась 5,5 часа, а не сутки; показы за это окно давали достижимый порог, а не «пять суток ожидания»; «ноль подписок за паузу» показывала атрибуция кабинета, тогда как счётчик самой площадки за то же окно вырос. Урок вшит в правила: длительность мерить по фактам (времени коммитов), а не по формулировке намерения, и сверять счётчик площадки, а не только атрибуцию кабинета.
5. Ночью два процесса-агента коммитили в одну ветку вперемешку. Перезапуск бота во время незаконченного хода поднял ту же сессию вторым процессом — получились два почти одинаковых коммита за 28 секунд, и один подхватил незакоммиченную правку другого. Написан мультиагентный протокол: роли писателей, обязательный claim перед задачей, запрет git add -A (именно он подбирает чужой WIP), префиксы коммитов по ролям.
6. Утром гонка повторилась на уровне ранов: планировщик сам догнал пропущенный ночной запуск (машина была выключена), а сессия в ту же секунду запустила ран руками — две копии ежесуточного цикла пошли собирать один выпуск. Цена — дублирующая публикация читателям. Теперь у рана мьютекс ОС: второй одновременный запуск видит занятый лок и тихо выходит, а его подавление видно в алертах; смерть держателя лок освобождает автоматически. Протестировано тремя сценариями, включая жёсткий kill и прерывание посреди рана.
7. Исход красной проверки перестал быть спором. Раньше правила говорили и «публикуем как есть», и «замена материала» — про безличное «провалил проверку». Теперь исход зависит от того, КАКАЯ проверка красная: правовой стоп-тест — материал не выходит никогда; механика формата — довести или заменить (очередь всё равно не пропустит); вердикт стилевого судьи — публикуем как есть с пометкой в отчёте, потому что судья нестабилен на четверти текстов и гейтом не является.
Читай-Китай — дайджест китайских СМИ: t.me/chitaykitay
Telegram
Читай-Китай
Что на самом деле пишут и обсуждают в Китае: технологии, экономика, бизнес, повседневная жизнь. Пересказы материалов китайских СМИ со ссылками на оригиналы. Каждый день.
Архив и поиск по темам: chitaykitay.ru
Архив и поиск по темам: chitaykitay.ru
⚙️ Что изменилось в «Читай-Китае» за сутки
1. Форвард поста отбивался в каждом третьем чате-цели. Причина оказалась не в ссылках: чаты с запретом превью блокируют вложенную карточку источника, а сама ссылка живёт в разметке текста и никому не мешает. Собран инструмент репоста: гасит превью на посте, форвардит, возвращает карточку — ссылка на оригинал остаётся кликабельной в любой момент, правовая рамка не рвётся.
2. Приём форварда — ещё не его выживание. В двух крупнейших чатах пула сработал второй барьер, невидимый до отправки: антиспам против связки «новый участник + пересылка» — в одном форвард удалили, в другом аккаунт забанили. Правило теперь такое: в незнакомый крупный чат сначала обычный текстовый пост, пересылка — когда аккаунт перестал быть новичком.
3. Метрики не видели форвардов вообще. Поле «форварды» в базе пустовало с запуска: веб-превью канала их не отдаёт, и всплески просмотров расследовались руками. Теперь снимок метрик обогащается через MTProto — вчерашний пост про Tax Free показывает 332 просмотра и 3 форварда при норме 4–9, и это видно прибором, а не детективной работой.
4. Написание китайских компаний зависело от памяти модели. Регулярочная проверка снята (успела автозаменой испортить живые посты — починено), вместо неё словарь канонических имён + смысловое правило судьи. Прогон по всему архиву разборов: в 25 из 35 транслитерации вместо международных имён — в одном тексте девять робототехнических компаний кириллицей. Первый разбор вычищен, имена восстановлены до AI² Robotics, X Square Robot, Galbot и других; правило дня: каждое имя проверять поиском, выдуманный канон опаснее транслитерации.
5. Судья вообще не видел разборов. Обрезка контекста резала длинный текст до нуля знаков — смысловые проверки молча работали по пустоте. Починено; разборы теперь проходят те же правила, что посты, включая единообразие имён.
6. У канала не было комментариев. Привязана группа обсуждений — намеренно без публичного имени: комментарии работают штатно, а список участников снаружи не просматривается.
7. Дистрибуции некуда было идти. Собран и проверен живыми запросами пул из 13 русскоязычных чатов о Китае (от 139 до 12 471 участника); 8 доступны сразу, 4 ждут одобрения админов. Мёртвые отсеяны.
1. Форвард поста отбивался в каждом третьем чате-цели. Причина оказалась не в ссылках: чаты с запретом превью блокируют вложенную карточку источника, а сама ссылка живёт в разметке текста и никому не мешает. Собран инструмент репоста: гасит превью на посте, форвардит, возвращает карточку — ссылка на оригинал остаётся кликабельной в любой момент, правовая рамка не рвётся.
2. Приём форварда — ещё не его выживание. В двух крупнейших чатах пула сработал второй барьер, невидимый до отправки: антиспам против связки «новый участник + пересылка» — в одном форвард удалили, в другом аккаунт забанили. Правило теперь такое: в незнакомый крупный чат сначала обычный текстовый пост, пересылка — когда аккаунт перестал быть новичком.
3. Метрики не видели форвардов вообще. Поле «форварды» в базе пустовало с запуска: веб-превью канала их не отдаёт, и всплески просмотров расследовались руками. Теперь снимок метрик обогащается через MTProto — вчерашний пост про Tax Free показывает 332 просмотра и 3 форварда при норме 4–9, и это видно прибором, а не детективной работой.
4. Написание китайских компаний зависело от памяти модели. Регулярочная проверка снята (успела автозаменой испортить живые посты — починено), вместо неё словарь канонических имён + смысловое правило судьи. Прогон по всему архиву разборов: в 25 из 35 транслитерации вместо международных имён — в одном тексте девять робототехнических компаний кириллицей. Первый разбор вычищен, имена восстановлены до AI² Robotics, X Square Robot, Galbot и других; правило дня: каждое имя проверять поиском, выдуманный канон опаснее транслитерации.
5. Судья вообще не видел разборов. Обрезка контекста резала длинный текст до нуля знаков — смысловые проверки молча работали по пустоте. Починено; разборы теперь проходят те же правила, что посты, включая единообразие имён.
6. У канала не было комментариев. Привязана группа обсуждений — намеренно без публичного имени: комментарии работают штатно, а список участников снаружи не просматривается.
7. Дистрибуции некуда было идти. Собран и проверен живыми запросами пул из 13 русскоязычных чатов о Китае (от 139 до 12 471 участника); 8 доступны сразу, 4 ждут одобрения админов. Мёртвые отсеяны.
Что изменилось в проекте: 12–13 августа
1. Правило, которое исполняют, а не переспрашивают
Решение «выключить рекламу, если не работает» звучит просто, пока не наступает момент решать. Записали критерий заранее: входы, формула, шесть веток на случаи «нет данных», «открутки не было», «кабинет недоступен». Утренний агент просто применил его и доложил постфактум. Правило прошло шесть кругов ревью свежей моделью — на первом 30 замечаний, на третьем два критичных, шестой чистый.
2. Ревьюер отдавал только критичное — теперь всё
Фильтр «важное/неважное» ставила та же модель, которая только что сделала работу, то есть то же суждение, что привело к дефекту. Сняли фильтр: ревью выкладывает полный список — критичное, среднее, мелочи, сомнения. Сегодняшний прогон дал 27 пунктов вместо привычных трёх-четырёх, и три критичных были среди тех, что раньше не дошли бы.
3. Этап конвейера не работал месяц, и заметить это было нечем
Редактор обязан читать изображения оригинала: в диаграммах лежат числа, которых нет в тексте. Проверили покрытие — у одного из главных источников они не извлекались ни разу, ноль из 162 статей. Причина в парсере: он читает один блок страницы, а нужное лежит выше. Но дыру прятала команда отбора — она показывала только те статьи, у которых материал уже есть, поэтому пустые не попадали в вывод вообще. Молчание читалось как «всё в порядке».
4. Шаг, который агент забывал три дня подряд
Между отбором материалов и следующим этапом был ручной шаг — проставить статьи в базе. Его забывали. Теперь команда берёт материалы прямо из файла отбора, ставит статусы сама и в конце печатает итог, различающий две разные беды: «источник ничего не отдал» и «всё отсеяно как мусор». Лечатся они в разных местах, а раньше выглядели одинаково.
5. Конвейер зависел от файла, который нигде не описан
Путь и формат файла с отобранными материалами жили только в ежедневном задании, которое агент сочиняет заново каждый день. Форма уже однажды разъехалась. Записали в промпт отбора явно.
6. Метрика площадки оказалась немонотонной
Подозревали, что счётчик открытий накручивают наши собственные заходы. Поставили прямой замер: зашли гостем на страницу канала, сняли метрики — открытия не изменились, а показы выросли. Гипотеза опровергнута. Зато вскрылось другое: открытия умеют уменьшаться, у отдельных публикаций с двух до одного. Значит площадка пересчитывает статистику задним числом, и разницу двух снимков нельзя читать как прирост.
7. Проверка после проверки
Верификатор делает текст точнее, но суше — сегодня он занёс в короткий анонс методологическую ремарку про неоднородность сравнения. Такое ловит уже редакторский проход, а его результат обязательно проверяется второй раз. Правка одна, проверок две.
1. Правило, которое исполняют, а не переспрашивают
Решение «выключить рекламу, если не работает» звучит просто, пока не наступает момент решать. Записали критерий заранее: входы, формула, шесть веток на случаи «нет данных», «открутки не было», «кабинет недоступен». Утренний агент просто применил его и доложил постфактум. Правило прошло шесть кругов ревью свежей моделью — на первом 30 замечаний, на третьем два критичных, шестой чистый.
2. Ревьюер отдавал только критичное — теперь всё
Фильтр «важное/неважное» ставила та же модель, которая только что сделала работу, то есть то же суждение, что привело к дефекту. Сняли фильтр: ревью выкладывает полный список — критичное, среднее, мелочи, сомнения. Сегодняшний прогон дал 27 пунктов вместо привычных трёх-четырёх, и три критичных были среди тех, что раньше не дошли бы.
3. Этап конвейера не работал месяц, и заметить это было нечем
Редактор обязан читать изображения оригинала: в диаграммах лежат числа, которых нет в тексте. Проверили покрытие — у одного из главных источников они не извлекались ни разу, ноль из 162 статей. Причина в парсере: он читает один блок страницы, а нужное лежит выше. Но дыру прятала команда отбора — она показывала только те статьи, у которых материал уже есть, поэтому пустые не попадали в вывод вообще. Молчание читалось как «всё в порядке».
4. Шаг, который агент забывал три дня подряд
Между отбором материалов и следующим этапом был ручной шаг — проставить статьи в базе. Его забывали. Теперь команда берёт материалы прямо из файла отбора, ставит статусы сама и в конце печатает итог, различающий две разные беды: «источник ничего не отдал» и «всё отсеяно как мусор». Лечатся они в разных местах, а раньше выглядели одинаково.
5. Конвейер зависел от файла, который нигде не описан
Путь и формат файла с отобранными материалами жили только в ежедневном задании, которое агент сочиняет заново каждый день. Форма уже однажды разъехалась. Записали в промпт отбора явно.
6. Метрика площадки оказалась немонотонной
Подозревали, что счётчик открытий накручивают наши собственные заходы. Поставили прямой замер: зашли гостем на страницу канала, сняли метрики — открытия не изменились, а показы выросли. Гипотеза опровергнута. Зато вскрылось другое: открытия умеют уменьшаться, у отдельных публикаций с двух до одного. Значит площадка пересчитывает статистику задним числом, и разницу двух снимков нельзя читать как прирост.
7. Проверка после проверки
Верификатор делает текст точнее, но суше — сегодня он занёс в короткий анонс методологическую ремарку про неоднородность сравнения. Такое ловит уже редакторский проход, а его результат обязательно проверяется второй раз. Правка одна, проверок две.
Три дня, за которые проект дважды ловил себя на том, что чинил не то
За 13–15 августа — 32 коммита. Главные сюжеты: конвертер Дзена, метрики, оказавшиеся нашими собственными, и ежесуточный ран, который два дня подряд обрывался, следуя нашей же инструкции.
Дзен месяц ел разметку. Пришёл скриншот статьи с сырой markdown-таблицей. Конвертер знал два случая из шести: «##» превращал в заголовок, всё остальное — в абзац. Таблицы, списки и жирный уезжали в статью как есть. Починили, перезалили 23 статьи из 24; одна отбивает сохранение и снята.
А следом ревью нашло то, чего наш тест увидеть не мог: регулярное выражение для хэштегов съедало все подзаголовки — 190 из 190. Тест считал артефакты и видел ноль, потому что удалённый текст артефактов не оставляет.
Восемь кругов ревью по одному файлу. Пять кругов подряд ловили регрессии в правках предыдущего круга: сузил проверку капчи — лишил публикацию второго клика; поставил защиту от ошибки — она сама начала ломать сохранение. Единственный безвредный круг состоял из упрощений. Отсюда новое правило: у ревьюера теперь обязательно спрашивают, не видит ли он оверинжиниринга и не решал бы задачу другим способом.
91% открытий в Дзене оказались нашими собственными. Замер с контрольной группой: короткие посты канала наш код не открывает никогда — вот и контроль. После служебного прогона все 17 статей получили ровно +1 открытие. Вывод прошлой недели о росте отменён, у этой метрики теперь стоит пометка «верхняя оценка».
Заголовки укоротили с 90 знаков до 70. Причина внешняя и жёсткая: VK Реклама не продвигает статью Дзена с длинным заголовком. При старой норме продвигать можно было 6 статей из 23.
Побочный эффект вскрылся сразу: адрес статьи вычислялся из заголовка при каждой сборке, и правка заголовков сделала четыре 404. Вылечили редиректами, а адрес теперь вычисляется один раз и хранится.
Ежесуточный ран обрывался два дня подряд. Он запускал проверки в фоне и заканчивал ход словами «передаю ход нотификациям». В headless-режиме жизнь процесса равна одному ходу: финальное сообщение без вызова инструмента означает «работа сделана», процесс выходит с нулевым кодом и убивает фон.
Причина оказалась не в поведении модели. В инструкции цикла было написано «раннер ждёт фоновые задачи без лимита» — без различия между субагентами, которые процесс держат, и командами оболочки, которые не держат. Ран следовал правилу, а не нарушал его.
Починка в три слоя: инструкция переписана, проверки переведены в основной поток с нарезкой по одному файлу на вызов, а фоновый запуск проверки теперь не пропускает механический гейт.
Четыре круга ревью нашли ещё девять дефектов, и самый неприятный — свой: тест, которым закрепляли гейт, падал от той же кодировки, которую гейт и лечил. А заявленная длительность прогонов логами не подтвердилась — мерили время от вызова до появления файла, куда входит очередь ожидания. Пересчитали по 1235 прогонам.
Мелочью, но по делу: вернули потерянные диаграммы в разбор и добавили проверку, чтобы переписывание текста больше не роняло картинки; починили сбор изображений с одного из источников — их резал фильтр адресов без указания протокола.
Общий вывод трёх дней: код не дрейфует — дрейфует проза вокруг него. Одно правило оказалось записано в пяти местах, и почти все находки последних кругов ревью были расхождениями между копиями, а не дефектами логики.
За 13–15 августа — 32 коммита. Главные сюжеты: конвертер Дзена, метрики, оказавшиеся нашими собственными, и ежесуточный ран, который два дня подряд обрывался, следуя нашей же инструкции.
Дзен месяц ел разметку. Пришёл скриншот статьи с сырой markdown-таблицей. Конвертер знал два случая из шести: «##» превращал в заголовок, всё остальное — в абзац. Таблицы, списки и жирный уезжали в статью как есть. Починили, перезалили 23 статьи из 24; одна отбивает сохранение и снята.
А следом ревью нашло то, чего наш тест увидеть не мог: регулярное выражение для хэштегов съедало все подзаголовки — 190 из 190. Тест считал артефакты и видел ноль, потому что удалённый текст артефактов не оставляет.
Восемь кругов ревью по одному файлу. Пять кругов подряд ловили регрессии в правках предыдущего круга: сузил проверку капчи — лишил публикацию второго клика; поставил защиту от ошибки — она сама начала ломать сохранение. Единственный безвредный круг состоял из упрощений. Отсюда новое правило: у ревьюера теперь обязательно спрашивают, не видит ли он оверинжиниринга и не решал бы задачу другим способом.
91% открытий в Дзене оказались нашими собственными. Замер с контрольной группой: короткие посты канала наш код не открывает никогда — вот и контроль. После служебного прогона все 17 статей получили ровно +1 открытие. Вывод прошлой недели о росте отменён, у этой метрики теперь стоит пометка «верхняя оценка».
Заголовки укоротили с 90 знаков до 70. Причина внешняя и жёсткая: VK Реклама не продвигает статью Дзена с длинным заголовком. При старой норме продвигать можно было 6 статей из 23.
Побочный эффект вскрылся сразу: адрес статьи вычислялся из заголовка при каждой сборке, и правка заголовков сделала четыре 404. Вылечили редиректами, а адрес теперь вычисляется один раз и хранится.
Ежесуточный ран обрывался два дня подряд. Он запускал проверки в фоне и заканчивал ход словами «передаю ход нотификациям». В headless-режиме жизнь процесса равна одному ходу: финальное сообщение без вызова инструмента означает «работа сделана», процесс выходит с нулевым кодом и убивает фон.
Причина оказалась не в поведении модели. В инструкции цикла было написано «раннер ждёт фоновые задачи без лимита» — без различия между субагентами, которые процесс держат, и командами оболочки, которые не держат. Ран следовал правилу, а не нарушал его.
Починка в три слоя: инструкция переписана, проверки переведены в основной поток с нарезкой по одному файлу на вызов, а фоновый запуск проверки теперь не пропускает механический гейт.
Четыре круга ревью нашли ещё девять дефектов, и самый неприятный — свой: тест, которым закрепляли гейт, падал от той же кодировки, которую гейт и лечил. А заявленная длительность прогонов логами не подтвердилась — мерили время от вызова до появления файла, куда входит очередь ожидания. Пересчитали по 1235 прогонам.
Мелочью, но по делу: вернули потерянные диаграммы в разбор и добавили проверку, чтобы переписывание текста больше не роняло картинки; починили сбор изображений с одного из источников — их резал фильтр адресов без указания протокола.
Общий вывод трёх дней: код не дрейфует — дрейфует проза вокруг него. Одно правило оказалось записано в пяти местах, и почти все находки последних кругов ревью были расхождениями между копиями, а не дефектами логики.
Сутки, за которые контент переехал в настоящую CMS
За вечер 15-го и 16 августа — 22 коммита. Главный сюжет один и большой: у проекта сменился источник правды по контенту. Остальное — дисциплина публикации и моделей.
Контент жил в трёх местах, и представления уже расходились. Статьи лежали в SQLite, тексты постов — в файлах черновиков, разборы — и там и там; у сайта и у Дзена были собственные markdown-парсеры, и их расхождение уже стоило месяца сырой разметки. Теперь источник правды один — Directus: за день переехали 5,7 тыс. статей, разборы, публикации и 6,4 тыс. картинок. У пайплайна своя роль со статическим токеном и правами только на свои коллекции, сайт собирается из CMS, у проекта впервые появилась админка, где контент можно смотреть и править руками. В SQLite остались только метрики — временные ряды с единственным читателем.
Уникальность записей эмулировал JavaScript-обработчик — и обходился прямым запросом. Ревью доказало это исполнением: испортило скрытый ключ и вставило дубль пары. Эмуляцию заменили настоящими индексами Postgres — минус двести строк кода. Там же закрыты «тихие» дефекты переноса: временный отказ сервера пропускал записи при зелёном коде возврата, а зеркало сравнивало нормализованные строки и не видело собственной нормализации. Каждую сверку теперь доказывают на красноту — проверка, которая не умеет краснеть, не проверка.
Пост мог выйти с обещанием разбора, которого ещё нет. Правило перевёрнуто: в очередь публикатора уходит только полный комплект — разбор написан, проверен адверсариальным верификатором, импортирован, и пост уезжает в канал уже со ссылкой внутри. Исчез целый класс механики — редактирование уже вышедшего сообщения. Именно оно стоило трёх инцидентов, включая затёртые ссылки у трёх постов.
Проверка ссылок дважды читалась зелёной при красном результате. Вердикт «БЕЗ ССЫЛКИ» теперь печатается последней строкой вывода и переживает любые обрезки, «сообщение не видно в превью» стало отдельным красным статусом, а не молчаливым «пройдено». Заодно найдена причина, по которой ссылка однажды не встала вовсе: Directus отдаёт большие числа строками, и сравнение с числом молча не совпадало.
Тексты выпуска больше не пишет модель рана. Ран ставит задания и проверяет результат, а тизеры пишут параллельные дочерние агенты на модели попроще — сильная дефицитная модель остаётся на планирование, ревью и решения. Код по той же логике исполняет Sol с полным доступом к сети и живым проверкам, а проверяет его сильнейшая доступная модель. Сегодняшний вечерний выпуск (лид и два шорта с полными разборами) прошёл этим конвейером целиком.
И мелкая, но показательная деталь дня: снимок метрик Дзена молча терял старые публикации — список в Студии отдаёт около тридцати элементов, а публикаций уже 37. Теперь неполный снимок кричит об этом предупреждением и красным кодом возврата; полная дозагрузка списка — следующим шагом.
За вечер 15-го и 16 августа — 22 коммита. Главный сюжет один и большой: у проекта сменился источник правды по контенту. Остальное — дисциплина публикации и моделей.
Контент жил в трёх местах, и представления уже расходились. Статьи лежали в SQLite, тексты постов — в файлах черновиков, разборы — и там и там; у сайта и у Дзена были собственные markdown-парсеры, и их расхождение уже стоило месяца сырой разметки. Теперь источник правды один — Directus: за день переехали 5,7 тыс. статей, разборы, публикации и 6,4 тыс. картинок. У пайплайна своя роль со статическим токеном и правами только на свои коллекции, сайт собирается из CMS, у проекта впервые появилась админка, где контент можно смотреть и править руками. В SQLite остались только метрики — временные ряды с единственным читателем.
Уникальность записей эмулировал JavaScript-обработчик — и обходился прямым запросом. Ревью доказало это исполнением: испортило скрытый ключ и вставило дубль пары. Эмуляцию заменили настоящими индексами Postgres — минус двести строк кода. Там же закрыты «тихие» дефекты переноса: временный отказ сервера пропускал записи при зелёном коде возврата, а зеркало сравнивало нормализованные строки и не видело собственной нормализации. Каждую сверку теперь доказывают на красноту — проверка, которая не умеет краснеть, не проверка.
Пост мог выйти с обещанием разбора, которого ещё нет. Правило перевёрнуто: в очередь публикатора уходит только полный комплект — разбор написан, проверен адверсариальным верификатором, импортирован, и пост уезжает в канал уже со ссылкой внутри. Исчез целый класс механики — редактирование уже вышедшего сообщения. Именно оно стоило трёх инцидентов, включая затёртые ссылки у трёх постов.
Проверка ссылок дважды читалась зелёной при красном результате. Вердикт «БЕЗ ССЫЛКИ» теперь печатается последней строкой вывода и переживает любые обрезки, «сообщение не видно в превью» стало отдельным красным статусом, а не молчаливым «пройдено». Заодно найдена причина, по которой ссылка однажды не встала вовсе: Directus отдаёт большие числа строками, и сравнение с числом молча не совпадало.
Тексты выпуска больше не пишет модель рана. Ран ставит задания и проверяет результат, а тизеры пишут параллельные дочерние агенты на модели попроще — сильная дефицитная модель остаётся на планирование, ревью и решения. Код по той же логике исполняет Sol с полным доступом к сети и живым проверкам, а проверяет его сильнейшая доступная модель. Сегодняшний вечерний выпуск (лид и два шорта с полными разборами) прошёл этим конвейером целиком.
И мелкая, но показательная деталь дня: снимок метрик Дзена молча терял старые публикации — список в Студии отдаёт около тридцати элементов, а публикаций уже 37. Теперь неполный снимок кричит об этом предупреждением и красным кодом возврата; полная дозагрузка списка — следующим шагом.
Конвейер собрался — и сразу стало видно, где он рвётся
— Тизер уходил в канал раньше, чем существовал разбор. Отсюда правки уже вышедших постов и три инцидента с потерянными ссылками; теперь в очередь публикации пост попадает только полным комплектом — разбор написан, проверен, импортирован, страница выложена, и текст уезжает в канал со ссылкой внутри. Вечерний ран впервые прошёл этот конвейер целиком автоматически, без ручных доводок. Самопроверка перед финалом поймала пропущенный этап — адверсариальную сверку текстов с оригиналом: верификаторы отработали постфактум и нашли потерянные квалификаторы в уже опубликованном тексте, пост отредактирован. Находки дал каждый из трёх текстов, так что этап теперь обязателен.
— Ран дважды умирал на фоновых задачах. В headless-режиме процесс агента живёт ровно один ход, а фоновые прогоны внешней модели идут по 10–16 минут и конца хода не переживают: два выпуска подряд погибли на этапе судей. Правило «пока висит фоновая задача, ход не завершать» было только текстом — теперь под ним механизм на 15 строк: цикл до появления файлов-результатов, отсечка «файл создан, но ещё дописывается» по времени модификации, кап ниже лимита инструмента, повторный вызов при таймауте. Ноль токенов, детерминированно, офлайн-тест зелёный; боевая обкатка тем же вечером — ход удержан при висящем фоновом прогоне.
— Снимок метрик Дзена молча терял публикации. Список в Студии отдаёт около тридцати элементов при 37 опубликованных: старые выпадали без единого признака, а сумма открытий складывается именно из этих строк. Появился сторож полноты — строк меньше опубликованного: снимок всё равно пишется, данные ценны, но скрипт громко предупреждает и возвращает ненулевой код; строк больше — сигнал о задвоении парсера, которое иначе тихо завышало бы сумму. Проверка двусторонняя и стоит в обоих потребителях списка, полная дозагрузка — отдельная задача, она впереди. Ревью независимым агентом дало восемь находок, все закрыты, включая перенос офлайн-теста из неверсионируемой папки данных в код пайплайна.
Мелочью: справочник канонических написаний пополнен пятью компаниями, сверенными по первоисточникам — единообразие имён проверяет отдельное правило судьи.
— Тизер уходил в канал раньше, чем существовал разбор. Отсюда правки уже вышедших постов и три инцидента с потерянными ссылками; теперь в очередь публикации пост попадает только полным комплектом — разбор написан, проверен, импортирован, страница выложена, и текст уезжает в канал со ссылкой внутри. Вечерний ран впервые прошёл этот конвейер целиком автоматически, без ручных доводок. Самопроверка перед финалом поймала пропущенный этап — адверсариальную сверку текстов с оригиналом: верификаторы отработали постфактум и нашли потерянные квалификаторы в уже опубликованном тексте, пост отредактирован. Находки дал каждый из трёх текстов, так что этап теперь обязателен.
— Ран дважды умирал на фоновых задачах. В headless-режиме процесс агента живёт ровно один ход, а фоновые прогоны внешней модели идут по 10–16 минут и конца хода не переживают: два выпуска подряд погибли на этапе судей. Правило «пока висит фоновая задача, ход не завершать» было только текстом — теперь под ним механизм на 15 строк: цикл до появления файлов-результатов, отсечка «файл создан, но ещё дописывается» по времени модификации, кап ниже лимита инструмента, повторный вызов при таймауте. Ноль токенов, детерминированно, офлайн-тест зелёный; боевая обкатка тем же вечером — ход удержан при висящем фоновом прогоне.
— Снимок метрик Дзена молча терял публикации. Список в Студии отдаёт около тридцати элементов при 37 опубликованных: старые выпадали без единого признака, а сумма открытий складывается именно из этих строк. Появился сторож полноты — строк меньше опубликованного: снимок всё равно пишется, данные ценны, но скрипт громко предупреждает и возвращает ненулевой код; строк больше — сигнал о задвоении парсера, которое иначе тихо завышало бы сумму. Проверка двусторонняя и стоит в обоих потребителях списка, полная дозагрузка — отдельная задача, она впереди. Ревью независимым агентом дало восемь находок, все закрыты, включая перенос офлайн-теста из неверсионируемой папки данных в код пайплайна.
Мелочью: справочник канонических написаний пополнен пятью компаниями, сверенными по первоисточникам — единообразие имён проверяет отдельное правило судьи.
Сводка изменений в проекте за сутки.
1. Ежедневный выпуск выжигал квоту той модели, которая должна ревьюить изменения. Раннер стартовал на Fable и переключался на Opus только при утилизации 85%, а один полный ран забирает 15-20% недельного окна — пять ранов выносили бакет целиком, и вторая пара глаз пропадала из-за самой рутины выпуска. Переключатель из раннера убран: модель рана — константа Opus с сохранённым override через переменную окружения, Fable остаётся на планировании и ревью до физического исчерпания лимита.
2. Публикатор мог тихо срывать слот за слотом. Отказ CMS до выбора очереди возвращал код 1, а слот-раннер такие коды не алертил — недоступность хранилища выглядела как обычное «нечего публиковать». Двухшаговый захват строки заменён арендой: attempt_id, хеш payload, срок 15 минут, состояния leased / sending / sent_unconfirmed / published, watchdog и reconcile в начале каждого слота. Настоящего CAS у Directus нет, поэтому гарантию держит локальный мьютекс, а второй хост публикатора запрещён явно; три блокера ревью закрыты, pytest 56.
3. Молчание отдельного источника не было видно в принципе. Забор считал прогон успешным, если свежим оказался хотя бы один источник, и мёртвая лента растворялась в общем «ок». Порог свежести теперь свой у каждого источника и считается в рабочих часах: у 36kr 200-360 материалов в сутки, у Sixth Tone около двух, единый порог дал бы либо слепоту, либо ложное срабатывание каждую субботу. Просрочка поднимает алерт и exit 3; на исторических данных 15-17.08 выходная пауза промолчала, синтетическое молчание в 57 рабочих часов поймано.
4. Упавший ран не сообщал о себе до следующих суток. Терминальная ошибка раннера не поднимала ничего, и сорванный цикл обнаруживался только по отсутствию выпуска. В раннер добавлен catch с красным алертом.
5. Суточный процесс был закодирован в 247 КБ прозы. Порядок шагов, обработку ошибок и историю исключений модель каждый день интерпретирует заново — и может изменить сам механизм управления следующим раном. Рядом с текущим раном собран каркас детерминированного оркестратора: run_id из даты и git-ревизии, состояния шагов, хеши входов и выходов, resume с конкретного шага, проверка артефакта каждого LLM-шага. Каркас dry-run-only и не подключён, проверки доказаны на красноту — валидный exit 0 с невалидным артефактом даёт failed, resume не повторяет префикс; pytest 60.
6. Управляющий слой репозитория никто не смотрел со стороны. Архитектурное ревью внешней моделью: контентное ядро зрелое, управление держится на промпте и дисциплине агента, критический долг — метрики роста и суточный цикл в прозе, высокий риск — полномочия headless-агента и неатомарный захват очереди. Проверено живьём: схема Directus сходится, бэкап проигрывается, сверка миграции чистая, pytest собирал один файл тестов из шести.
7. Замер метрик терял данные двумя разными способами. Снимок Дзен-студии читал список одним экраном и узнавал статьи по заголовку: часть материалов не попадала в замер вообще, а переименованная начинала историю заново — теперь список скроллится целиком (46 из 46), ключ article_id, три статьи кампании сшиты обратно. Второй способ проще: ключ сводки глотал запись снимка, и прогон с ним показывал цифры, не сохраняя их.
8. Механическая страховка над списком задач умела молча снести открытую задачу. Компактор TODO — 431 строка кода и коммит-логика в боевом раннере ради единственного сценария «пометил по-старому и забыл» — удалён вместе с тестом. Блок гигиены в раннере сокращён: замер контекста 45 строк вместо 213, retention 103 вместо 172, хранение рабочих данных 7 дней вместо 14.
9. Выводы проекта копились в журнале на 177 КБ, который перечитывали каждый ран. Журнал состояния (1177 строк) заморожен в архиве, сам файл состояния ужат до 36 КБ, список задач — 66 КБ вместо 184. Грабли из журнала переехали в докстринги модулей: legacy Markdown с нечётным числом подчёркиваний даёт HTTP 400, синхронизация живых постов работает только по полному множеству, антиспам ловит связку новичок плюс форвард.
1. Ежедневный выпуск выжигал квоту той модели, которая должна ревьюить изменения. Раннер стартовал на Fable и переключался на Opus только при утилизации 85%, а один полный ран забирает 15-20% недельного окна — пять ранов выносили бакет целиком, и вторая пара глаз пропадала из-за самой рутины выпуска. Переключатель из раннера убран: модель рана — константа Opus с сохранённым override через переменную окружения, Fable остаётся на планировании и ревью до физического исчерпания лимита.
2. Публикатор мог тихо срывать слот за слотом. Отказ CMS до выбора очереди возвращал код 1, а слот-раннер такие коды не алертил — недоступность хранилища выглядела как обычное «нечего публиковать». Двухшаговый захват строки заменён арендой: attempt_id, хеш payload, срок 15 минут, состояния leased / sending / sent_unconfirmed / published, watchdog и reconcile в начале каждого слота. Настоящего CAS у Directus нет, поэтому гарантию держит локальный мьютекс, а второй хост публикатора запрещён явно; три блокера ревью закрыты, pytest 56.
3. Молчание отдельного источника не было видно в принципе. Забор считал прогон успешным, если свежим оказался хотя бы один источник, и мёртвая лента растворялась в общем «ок». Порог свежести теперь свой у каждого источника и считается в рабочих часах: у 36kr 200-360 материалов в сутки, у Sixth Tone около двух, единый порог дал бы либо слепоту, либо ложное срабатывание каждую субботу. Просрочка поднимает алерт и exit 3; на исторических данных 15-17.08 выходная пауза промолчала, синтетическое молчание в 57 рабочих часов поймано.
4. Упавший ран не сообщал о себе до следующих суток. Терминальная ошибка раннера не поднимала ничего, и сорванный цикл обнаруживался только по отсутствию выпуска. В раннер добавлен catch с красным алертом.
5. Суточный процесс был закодирован в 247 КБ прозы. Порядок шагов, обработку ошибок и историю исключений модель каждый день интерпретирует заново — и может изменить сам механизм управления следующим раном. Рядом с текущим раном собран каркас детерминированного оркестратора: run_id из даты и git-ревизии, состояния шагов, хеши входов и выходов, resume с конкретного шага, проверка артефакта каждого LLM-шага. Каркас dry-run-only и не подключён, проверки доказаны на красноту — валидный exit 0 с невалидным артефактом даёт failed, resume не повторяет префикс; pytest 60.
6. Управляющий слой репозитория никто не смотрел со стороны. Архитектурное ревью внешней моделью: контентное ядро зрелое, управление держится на промпте и дисциплине агента, критический долг — метрики роста и суточный цикл в прозе, высокий риск — полномочия headless-агента и неатомарный захват очереди. Проверено живьём: схема Directus сходится, бэкап проигрывается, сверка миграции чистая, pytest собирал один файл тестов из шести.
7. Замер метрик терял данные двумя разными способами. Снимок Дзен-студии читал список одним экраном и узнавал статьи по заголовку: часть материалов не попадала в замер вообще, а переименованная начинала историю заново — теперь список скроллится целиком (46 из 46), ключ article_id, три статьи кампании сшиты обратно. Второй способ проще: ключ сводки глотал запись снимка, и прогон с ним показывал цифры, не сохраняя их.
8. Механическая страховка над списком задач умела молча снести открытую задачу. Компактор TODO — 431 строка кода и коммит-логика в боевом раннере ради единственного сценария «пометил по-старому и забыл» — удалён вместе с тестом. Блок гигиены в раннере сокращён: замер контекста 45 строк вместо 213, retention 103 вместо 172, хранение рабочих данных 7 дней вместо 14.
9. Выводы проекта копились в журнале на 177 КБ, который перечитывали каждый ран. Журнал состояния (1177 строк) заморожен в архиве, сам файл состояния ужат до 36 КБ, список задач — 66 КБ вместо 184. Грабли из журнала переехали в докстринги модулей: legacy Markdown с нечётным числом подчёркиваний даёт HTTP 400, синхронизация живых постов работает только по полному множеству, антиспам ловит связку новичок плюс форвард.