Как улучшить ответы нейросетей без ручной разметки — новый сигнал для GEO
Обучение с подкреплением (RL) в post-training обычно требует либо дорогой разметки людей, либо сложных reward-моделей. Новый подход Cross-Model Entropy (CME) предлагает третий путь: reward-сигнал без label’ов.
Суть: берётся средняя логарифмическая вероятность ответа генератора под другой, более простой моделью-верификатором. Чем выше эта вероятность — тем «естественнее» ответ для верификатора, значит и для людей.
Тесты на четырёх семействах моделей (Qwen, Llama, Gemma, OLMo) показали: CME в сочетании с GRPO повышает win rate в сравнении head-to-head (LLM-as-Judge) до 52–71%. Без единой размеченной оценки.
Для маркетологов и SEO есть два практических вывода:
— При настройке AI-поиска (ChatGPT Search, Perplexity) стоит смотреть не только на генерацию, но и на то, какой верификатор «любит» ваш стиль ответа. Если подобрать такую модель, CME может улучшить ранжирование без ручного ревью.
— При построении GEO-стека полезно держать рядом не только schema.org и llms.txt, но и качество ответов-кандидатов для reward-модели. CME позволяет быстрее тестировать, какой тон и структура контента лучше проходят post-training.
Пока код не опубликован, но направление логичное. Вопрос не в том, появится ли такой метод в продакшене, а как быстро он станет стандартом для дообучения поисковых пайплайнов.
Похожий разбор есть в @GoogleAdsStack
Обучение с подкреплением (RL) в post-training обычно требует либо дорогой разметки людей, либо сложных reward-моделей. Новый подход Cross-Model Entropy (CME) предлагает третий путь: reward-сигнал без label’ов.
Суть: берётся средняя логарифмическая вероятность ответа генератора под другой, более простой моделью-верификатором. Чем выше эта вероятность — тем «естественнее» ответ для верификатора, значит и для людей.
Тесты на четырёх семействах моделей (Qwen, Llama, Gemma, OLMo) показали: CME в сочетании с GRPO повышает win rate в сравнении head-to-head (LLM-as-Judge) до 52–71%. Без единой размеченной оценки.
Для маркетологов и SEO есть два практических вывода:
— При настройке AI-поиска (ChatGPT Search, Perplexity) стоит смотреть не только на генерацию, но и на то, какой верификатор «любит» ваш стиль ответа. Если подобрать такую модель, CME может улучшить ранжирование без ручного ревью.
— При построении GEO-стека полезно держать рядом не только schema.org и llms.txt, но и качество ответов-кандидатов для reward-модели. CME позволяет быстрее тестировать, какой тон и структура контента лучше проходят post-training.
Пока код не опубликован, но направление логичное. Вопрос не в том, появится ли такой метод в продакшене, а как быстро он станет стандартом для дообучения поисковых пайплайнов.
Похожий разбор есть в @GoogleAdsStack
Thoughts-as-Planning: новая техника цепочек рассуждений и её влияние на AI-поиск
Вышла статья с описанием фреймворка Thoughts-as-Planning. В ней предлагают рассматривать большую языковую модель как среду, где цепочка рассуждений — это последовательность решений в латентном семантическом пространстве. Модель учится предсказывать, как изменение одного шага повлияет на итоговый ответ, и на основе этого правит логику.
Авторы говорят, что такой подход превзошёл лучшие известные методы по точности, устойчивости и способности обобщать. Поддерживается редактирование на уровне отдельных токенов, целых сегментов и инструкций.
Для тех, кто работает с поисковым трафиком и AI Overviews, это сигнал. Качество ответов в ChatGPT Search и аналогичных сервисах продолжает расти за счёт управляемости логики. Страницы, где структура и содержание не совпадают, будут отсеиваться ещё быстрее. Выигрывают материалы с прозрачной иерархией, где каждый раздел отвечает на конкретный вопрос и легко интерпретируется моделью.
Для арбитража и SEO нет смысла гоняться за одним «идеальным» шаблоном. Лучше тестировать разные уровни формулировок и подачи, чтобы понять, как ваш контент «собирается» в ответ модели. Работа Thoughts-as-Planning — очередное подтверждение: поверхностные паттерны перестают работать, глубина и смысл становятся главным активом.
Исходный код и детали — на GitHub авторов.
Вышла статья с описанием фреймворка Thoughts-as-Planning. В ней предлагают рассматривать большую языковую модель как среду, где цепочка рассуждений — это последовательность решений в латентном семантическом пространстве. Модель учится предсказывать, как изменение одного шага повлияет на итоговый ответ, и на основе этого правит логику.
Авторы говорят, что такой подход превзошёл лучшие известные методы по точности, устойчивости и способности обобщать. Поддерживается редактирование на уровне отдельных токенов, целых сегментов и инструкций.
Для тех, кто работает с поисковым трафиком и AI Overviews, это сигнал. Качество ответов в ChatGPT Search и аналогичных сервисах продолжает расти за счёт управляемости логики. Страницы, где структура и содержание не совпадают, будут отсеиваться ещё быстрее. Выигрывают материалы с прозрачной иерархией, где каждый раздел отвечает на конкретный вопрос и легко интерпретируется моделью.
Для арбитража и SEO нет смысла гоняться за одним «идеальным» шаблоном. Лучше тестировать разные уровни формулировок и подачи, чтобы понять, как ваш контент «собирается» в ответ модели. Работа Thoughts-as-Planning — очередное подтверждение: поверхностные паттерны перестают работать, глубина и смысл становятся главным активом.
Исходный код и детали — на GitHub авторов.
Market Digests Digest: проверка queue health
Мини-playbook для network digest.
Гипотеза: weekly route влияет на queue health. Не меняй сразу всю связку: смотри на качество после клика, а не только на дешевый вход.
Хороший отчет по такому тесту помещается в три строки: что поменяли, какой сигнал увидели, что делаем дальше. Не смешивай compliance-риск с маркетинговым тестом.
Смежная тема: @MetaAdsReview
Мини-playbook для network digest.
Гипотеза: weekly route влияет на queue health. Не меняй сразу всю связку: смотри на качество после клика, а не только на дешевый вход.
Хороший отчет по такому тесту помещается в три строки: что поменяли, какой сигнал увидели, что делаем дальше. Не смешивай compliance-риск с маркетинговым тестом.
Смежная тема: @MetaAdsReview
Market Digests Digest: что смотреть в network digest
Сигнал дня по теме канала Market Digests Digest.
Фокус: operator checklist. Смотри на fresh signals как на рабочий сигнал, а не как на красивую цифру в отчете.
Что сделать сегодня:
1. Зафиксировать исходную гипотезу.
2. Проверить, где меняется fresh signals.
3. Оставить короткий вывод для следующего теста.
Практическая логика: оставляй в отчете следующий шаг, а не только итоговую цифру. Без обещаний результата и без реферальных ссылок.
Сигнал дня по теме канала Market Digests Digest.
Фокус: operator checklist. Смотри на fresh signals как на рабочий сигнал, а не как на красивую цифру в отчете.
Что сделать сегодня:
1. Зафиксировать исходную гипотезу.
2. Проверить, где меняется fresh signals.
3. Оставить короткий вывод для следующего теста.
Практическая логика: оставляй в отчете следующий шаг, а не только итоговую цифру. Без обещаний результата и без реферальных ссылок.
Market Digests Digest: что смотреть в network digest
Канал: Market Digests Digest. Тема: Market Digests / Digest.
Полезная проверка на сегодня — topic bridge. Если тест выглядит успешным, но не объясняет изменение cross-link value, его рано масштабировать.
Операционный шаг: point to one adjacent topic. После этого сравни результат с прошлым периодом и запиши, что именно изменилось. Без обещаний результата и без реферальных ссылок.
Канал: Market Digests Digest. Тема: Market Digests / Digest.
Полезная проверка на сегодня — topic bridge. Если тест выглядит успешным, но не объясняет изменение cross-link value, его рано масштабировать.
Операционный шаг: point to one adjacent topic. После этого сравни результат с прошлым периодом и запиши, что именно изменилось. Без обещаний результата и без реферальных ссылок.
Market Digests Digest: проверка cross-link value
Редакторская карточка для Market Digests Digest.
Если в очереди много идей, начни с той, где topic bridge можно проверить быстрее всего. Главная метрика контроля — cross-link value.
Следующий шаг: keep the route concise. Важно не путать рост объема с ростом качества. Серые обходы не нужны: достаточно метрик, качества и аккуратной гипотезы.
Редакторская карточка для Market Digests Digest.
Если в очереди много идей, начни с той, где topic bridge можно проверить быстрее всего. Главная метрика контроля — cross-link value.
Следующий шаг: keep the route concise. Важно не путать рост объема с ростом качества. Серые обходы не нужны: достаточно метрик, качества и аккуратной гипотезы.
Market Digests Digest: проверка fresh signals
Редакторская карточка по теме канала Market Digests Digest.
Фокус: operator checklist. Смотри на fresh signals как на рабочий сигнал, а не как на красивую цифру в отчете.
Что сделать сегодня:
1. Зафиксировать исходную гипотезу.
2. Проверить, где меняется fresh signals.
3. Оставить короткий вывод для следующего теста.
Практическая логика: смотри на качество после клика, а не только на дешевый вход. Серые обходы не нужны: достаточно метрик, качества и аккуратной гипотезы.
Редакторская карточка по теме канала Market Digests Digest.
Фокус: operator checklist. Смотри на fresh signals как на рабочий сигнал, а не как на красивую цифру в отчете.
Что сделать сегодня:
1. Зафиксировать исходную гипотезу.
2. Проверить, где меняется fresh signals.
3. Оставить короткий вывод для следующего теста.
Практическая логика: смотри на качество после клика, а не только на дешевый вход. Серые обходы не нужны: достаточно метрик, качества и аккуратной гипотезы.
Market Digests Digest: что смотреть в network digest
Мини-playbook для network digest.
Гипотеза: signal recap влияет на queue health. Не меняй сразу всю связку: перед масштабированием проверь, не растет ли скрытая цена ошибки.
Хороший отчет по такому тесту помещается в три строки: что поменяли, какой сигнал увидели, что делаем дальше. Любой рост проверяй через качество, а не только через объем.
Мини-playbook для network digest.
Гипотеза: signal recap влияет на queue health. Не меняй сразу всю связку: перед масштабированием проверь, не растет ли скрытая цена ошибки.
Хороший отчет по такому тесту помещается в три строки: что поменяли, какой сигнал увидели, что делаем дальше. Любой рост проверяй через качество, а не только через объем.
Market Digests Digest: что смотреть в network digest
Редакторская карточка для Market Digests Digest.
Если в очереди много идей, начни с той, где weekly route можно проверить быстрее всего. Главная метрика контроля — topic balance.
Следующий шаг: keep the route concise. Важно не путать рост объема с ростом качества. Любой рост проверяй через качество, а не только через объем.
Редакторская карточка для Market Digests Digest.
Если в очереди много идей, начни с той, где weekly route можно проверить быстрее всего. Главная метрика контроля — topic balance.
Следующий шаг: keep the route concise. Важно не путать рост объема с ростом качества. Любой рост проверяй через качество, а не только через объем.
Market Digests Digest: проверка fresh signals
Канал: Market Digests Digest. Тема: Market Digests / Digest.
Полезная проверка на сегодня — topic bridge. Если тест выглядит успешным, но не объясняет изменение fresh signals, его рано масштабировать.
Операционный шаг: connect the signal to action. После этого сравни результат с прошлым периодом и запиши, что именно изменилось. Если формулировка звучит как гарантия, ее лучше переписать.
Канал: Market Digests Digest. Тема: Market Digests / Digest.
Полезная проверка на сегодня — topic bridge. Если тест выглядит успешным, но не объясняет изменение fresh signals, его рано масштабировать.
Операционный шаг: connect the signal to action. После этого сравни результат с прошлым периодом и запиши, что именно изменилось. Если формулировка звучит как гарантия, ее лучше переписать.
Market Digests Digest: проверка cross-link value
Мини-playbook для network digest.
Гипотеза: signal recap влияет на cross-link value. Не меняй сразу всю связку: оставляй в отчете следующий шаг, а не только итоговую цифру.
Хороший отчет по такому тесту помещается в три строки: что поменяли, какой сигнал увидели, что делаем дальше. Если формулировка звучит как гарантия, ее лучше переписать.
Мини-playbook для network digest.
Гипотеза: signal recap влияет на cross-link value. Не меняй сразу всю связку: оставляй в отчете следующий шаг, а не только итоговую цифру.
Хороший отчет по такому тесту помещается в три строки: что поменяли, какой сигнал увидели, что делаем дальше. Если формулировка звучит как гарантия, ее лучше переписать.
Market Digests Digest: что смотреть в network digest
Редакторская карточка по теме канала Market Digests Digest.
Фокус: market note. Смотри на queue health как на рабочий сигнал, а не как на красивую цифру в отчете.
Что сделать сегодня:
1. Зафиксировать исходную гипотезу.
2. Проверить, где меняется queue health.
3. Оставить короткий вывод для следующего теста.
Практическая логика: смотри на качество после клика, а не только на дешевый вход. Не смешивай compliance-риск с маркетинговым тестом.
Смежная тема: @GoogleAdsRadar
Редакторская карточка по теме канала Market Digests Digest.
Фокус: market note. Смотри на queue health как на рабочий сигнал, а не как на красивую цифру в отчете.
Что сделать сегодня:
1. Зафиксировать исходную гипотезу.
2. Проверить, где меняется queue health.
3. Оставить короткий вывод для следующего теста.
Практическая логика: смотри на качество после клика, а не только на дешевый вход. Не смешивай compliance-риск с маркетинговым тестом.
Смежная тема: @GoogleAdsRadar
Market Digests Digest: что смотреть в network digest
Канал: Market Digests Digest. Тема: Market Digests / Digest.
Полезная проверка на сегодня — channel map. Если тест выглядит успешным, но не объясняет изменение cross-link value, его рано масштабировать.
Операционный шаг: keep the route concise. После этого сравни результат с прошлым периодом и запиши, что именно изменилось. Не смешивай compliance-риск с маркетинговым тестом.
Смежная тема: @ScoutGoogleAds
Канал: Market Digests Digest. Тема: Market Digests / Digest.
Полезная проверка на сегодня — channel map. Если тест выглядит успешным, но не объясняет изменение cross-link value, его рано масштабировать.
Операционный шаг: keep the route concise. После этого сравни результат с прошлым периодом и запиши, что именно изменилось. Не смешивай compliance-риск с маркетинговым тестом.
Смежная тема: @ScoutGoogleAds
Market Digests Digest: проверка coverage
Редакторская карточка для Market Digests Digest.
Если в очереди много идей, начни с той, где topic bridge можно проверить быстрее всего. Главная метрика контроля — coverage.
Следующий шаг: point to one adjacent topic. Важно не путать рост объема с ростом качества. Без обещаний результата и без реферальных ссылок.
Редакторская карточка для Market Digests Digest.
Если в очереди много идей, начни с той, где topic bridge можно проверить быстрее всего. Главная метрика контроля — coverage.
Следующий шаг: point to one adjacent topic. Важно не путать рост объема с ростом качества. Без обещаний результата и без реферальных ссылок.
Market Digests Digest: проверка cross-link value
Сигнал дня по теме канала Market Digests Digest.
Фокус: topic bridge. Смотри на cross-link value как на рабочий сигнал, а не как на красивую цифру в отчете.
Что сделать сегодня:
1. Зафиксировать исходную гипотезу.
2. Проверить, где меняется cross-link value.
3. Оставить короткий вывод для следующего теста.
Практическая логика: сначала меняй один элемент, потом сравнивай результат с чистым контролем. Без обещаний результата и без реферальных ссылок.
Сигнал дня по теме канала Market Digests Digest.
Фокус: topic bridge. Смотри на cross-link value как на рабочий сигнал, а не как на красивую цифру в отчете.
Что сделать сегодня:
1. Зафиксировать исходную гипотезу.
2. Проверить, где меняется cross-link value.
3. Оставить короткий вывод для следующего теста.
Практическая логика: сначала меняй один элемент, потом сравнивай результат с чистым контролем. Без обещаний результата и без реферальных ссылок.
Market Digests Digest: что смотреть в network digest
Мини-playbook для network digest.
Гипотеза: weekly route влияет на fresh signals. Не меняй сразу всю связку: смотри на качество после клика, а не только на дешевый вход.
Хороший отчет по такому тесту помещается в три строки: что поменяли, какой сигнал увидели, что делаем дальше. Серые обходы не нужны: достаточно метрик, качества и аккуратной гипотезы.
Мини-playbook для network digest.
Гипотеза: weekly route влияет на fresh signals. Не меняй сразу всю связку: смотри на качество после клика, а не только на дешевый вход.
Хороший отчет по такому тесту помещается в три строки: что поменяли, какой сигнал увидели, что делаем дальше. Серые обходы не нужны: достаточно метрик, качества и аккуратной гипотезы.
Market Digests Digest: что смотреть в network digest
Редакторская карточка для Market Digests Digest.
Если в очереди много идей, начни с той, где market note можно проверить быстрее всего. Главная метрика контроля — coverage.
Следующий шаг: point to one adjacent topic. Важно не путать рост объема с ростом качества. Серые обходы не нужны: достаточно метрик, качества и аккуратной гипотезы.
Редакторская карточка для Market Digests Digest.
Если в очереди много идей, начни с той, где market note можно проверить быстрее всего. Главная метрика контроля — coverage.
Следующий шаг: point to one adjacent topic. Важно не путать рост объема с ростом качества. Серые обходы не нужны: достаточно метрик, качества и аккуратной гипотезы.
Market Digests Digest: проверка queue health
Канал: Market Digests Digest. Тема: Market Digests / Digest.
Полезная проверка на сегодня — channel map. Если тест выглядит успешным, но не объясняет изменение queue health, его рано масштабировать.
Операционный шаг: summarize the pattern. После этого сравни результат с прошлым периодом и запиши, что именно изменилось. Любой рост проверяй через качество, а не только через объем.
Канал: Market Digests Digest. Тема: Market Digests / Digest.
Полезная проверка на сегодня — channel map. Если тест выглядит успешным, но не объясняет изменение queue health, его рано масштабировать.
Операционный шаг: summarize the pattern. После этого сравни результат с прошлым периодом и запиши, что именно изменилось. Любой рост проверяй через качество, а не только через объем.
Market Digests Digest: проверка topic balance
Мини-playbook для network digest.
Гипотеза: channel map влияет на topic balance. Не меняй сразу всю связку: сначала меняй один элемент, потом сравнивай результат с чистым контролем.
Хороший отчет по такому тесту помещается в три строки: что поменяли, какой сигнал увидели, что делаем дальше. Любой рост проверяй через качество, а не только через объем.
Мини-playbook для network digest.
Гипотеза: channel map влияет на topic balance. Не меняй сразу всю связку: сначала меняй один элемент, потом сравнивай результат с чистым контролем.
Хороший отчет по такому тесту помещается в три строки: что поменяли, какой сигнал увидели, что делаем дальше. Любой рост проверяй через качество, а не только через объем.
Market Digests Digest: что смотреть в network digest
Сигнал дня по теме канала Market Digests Digest.
Фокус: topic bridge. Смотри на cross-link value как на рабочий сигнал, а не как на красивую цифру в отчете.
Что сделать сегодня:
1. Зафиксировать исходную гипотезу.
2. Проверить, где меняется cross-link value.
3. Оставить короткий вывод для следующего теста.
Практическая логика: фиксируй причину решения, чтобы через неделю не спорить с собственной статистикой. Если формулировка звучит как гарантия, ее лучше переписать.
Сигнал дня по теме канала Market Digests Digest.
Фокус: topic bridge. Смотри на cross-link value как на рабочий сигнал, а не как на красивую цифру в отчете.
Что сделать сегодня:
1. Зафиксировать исходную гипотезу.
2. Проверить, где меняется cross-link value.
3. Оставить короткий вывод для следующего теста.
Практическая логика: фиксируй причину решения, чтобы через неделю не спорить с собственной статистикой. Если формулировка звучит как гарантия, ее лучше переписать.
Market Digests Digest: что смотреть в network digest
Канал: Market Digests Digest. Тема: Market Digests / Digest.
Полезная проверка на сегодня — operator checklist. Если тест выглядит успешным, но не объясняет изменение coverage, его рано масштабировать.
Операционный шаг: connect the signal to action. После этого сравни результат с прошлым периодом и запиши, что именно изменилось. Если формулировка звучит как гарантия, ее лучше переписать.
Канал: Market Digests Digest. Тема: Market Digests / Digest.
Полезная проверка на сегодня — operator checklist. Если тест выглядит успешным, но не объясняет изменение coverage, его рано масштабировать.
Операционный шаг: connect the signal to action. После этого сравни результат с прошлым периодом и запиши, что именно изменилось. Если формулировка звучит как гарантия, ее лучше переписать.