Cloudflare запускает Pay Per Crawl — новый подход для SEO и GEO

Чтобы не козырять умными словами: сайты с качественным контентом теряют трафик из-за "Чатов Гопоты". Раньше люди получали ответы на сайтах, теперь в приложении без перехода на сайт.

Это меняет саму суть социального контракта, когда Гугл попросил сайты разрешения сканировать их содержимое, а в ответ давал трафик. ИИ-чаты сканируют ваш сайт, а трафик воруют.

Как Cloudflare предлагает решить эту проблему? Дать сайтам возможность продавать каждый доступ к сайту от поискового робота ИИ. Это возможно через редкий код HTTP 402 «Требуется оплата», в котором указана стоимость доступа.

Над таким предложением можно было бы посмеяться. Ну кто в здравом уме закроет доступ поисковиков к своему сайту, который делали как раз для SEO-трафика? Но Cloudflare - не абы кто! Через их сеть проходит 20% всего мирового трафика. Включая таких монстров контента, как:Reddit, Medium, Shopify, Udemy и The Guardian. Где "всякие ChatGPT" с удовольствием обучаются. И всё больше других больших площадок присоединяются к инициативе Cloudflare.

Детально алгоритм такой:

На панели управления Cloudflare владельцы сайтов смогут установить одно из трех правил доступа для каждого отдельного ИИ-робота:

- Разрешить: предоставить полный доступ (HTTP 200).
- Плата: требуется оплата за каждый запрос (HTTP 402 с информацией о цене).
- Блокировка: запретить доступ (HTTP 403), но с намеком на возможность обсуждения оплаты в будущем.

Это похоже на внедрение API между контентом и генеративными моделями, где информация — это не просто свободно распространяемые знания; теперь это монетизируемый цифровой актив.

Если Cloudflare решит ограничить доступ, это может быть сделано в огромных масштабах. На SEO это не скажется. Cloudflare не будет блокировать BingBot, Googlebot или любые другие традиционные поисковые роботы по умолчанию.

Но ИИ-боты получат меньше данных, если пожадничают. Это значит для них две вещи:

- Недостоверная однобокая выдача результатов.
- Кривые данные для обучения.

В любом случае идея Cloudflare - это первое здравое решение как усмирить ИИ-поиск и вернуть статус-кво, в котором авторы контента получают свои бенефиты, а остальные пользуются их трудом за оплату. Если не сопротивляться ИИ-поиску, через несколько лет создавать контент станет настолько невыгодно, что человечество перестанет это делать и интернет резко поглупеет. А за ним и пользователи.

Четыре бесплатных инструмента от Geoptie.com для GEO-оптимизации сайта:

Бесплатный ГЕО-аудит, чтобы понять вашу готовность к поиску с помощью ИИ.
GEO Content Checker для оптимизации самых важных страниц.
GEO Keyword Finder для открытия новых возможностей оптимизации с помощью ИИ.
GEO Rank Tracker для отслеживания своего прогресса на платформах ИИ.

ИИ-ПОИСК ВОРУЕТ ВАШ ТРАФИК

Органический трафик падает. Это происходит не из-за снижения рейтинга сайта или какого-то «обновления ядра» алгоритма Google. Причина кроется во всех этих элементах результатов поиска, которые не являются ссылками и дают ответы в Google, а не на сайтах: блоке «Люди также спрашивают», видеокаруселях, обзорах с использованием ИИ, а теперь ещё и в режиме ИИ.

В 2016-м сайт ТОП-1 был вверху страницы поисковой выдачи, прямо перед глазами. Теперь первый(!) сайт выдачи в середине, ниже "ватерлинии" и до неё нужно скролить.

Это произошло постепенно, поэтому мы привыкли. Но изменения впечатляют!

Если вы думаете, что вас обманули, то вы неправильно понимаете природу поисковиков. Google — рекламная компания. Большая часть его дохода поступает от кликов по рекламе. Было приятно, что они направляли бесплатный трафик на сайты, но они делали это для укрепления доверия и расширения своей пользовательской базы, а не для того, чтобы помогать нам.

Вы ведь не жалуетесь, что другие рекламные компании не присылают вам бесплатный трафик?

УСПОКОЙТЕСЬ! БОЛЬШИНСТВО ЮЗЕРОВ И ТАК НЕ СОБИРАЛИСЬ ПЕРЕХОДИТЬ НА ВАШ САЙТ

Когда пользователь ищет информацию, он просто хочет получить ответ. А не шариться по статьям. Он не собирается покупать, отправлять мейлы или ещё как-то вовлекаться в вашу игру с воронками продаж.

Большинство информационных страниц вашего сайта и так не конвертили. Стоит ли переживать, что теперь там меньше трафика? Проблема в том, что маркетологи отслеживают весь трафик и хватаются за голову. Всё падает.

Но как только отделяем трафик с высоким уровнем намерения, то падения как будто и нет.

При принятии важных решений люди серьёзно относятся к исследованиям, особенно если речь идёт о решениях в сфере B2B ( например, веб-разработка). Они хотят изучить бизнес подрядчика, узнать, как он работает, увидеть портфолио и кейсы, услышать его историю и то, как он работает. Они уделяют время тому, чтобы понять, соответствует ли эта студия их конкретным потребностям.

Эти люди точно посещают сайты.

По своим запросам такие "намеренные" пользователи кликают на ссылки в результатах поиска, даже если выше висит реклама, мусор и ИИ-ответы. Они будут кликать на несколько верхних позиций.

И ваш успех зависит от двух вещей:

1. Насколько хорошо оптимизирована ваша продающая (целевая) страница под коммерческие запросы.

2. Насколько эта страница хорошо конвертит.

Что конкретно делать? Читайте продолжение: https://reconcept.ru/blog/ii-poisk-voruet-vash-trafik-no-vam-ne-o-chem-bespokoitsya

SEO-ССЫЛКИ ЕЩЁ НИКОГДА В ИСТОРИИ НЕ БЫЛИ ТАК БЕСПОЛЕЗНЫ
Не покупайте ссылки. Их роль в SEO сейчас мизерна и продолжает снижаться. Покупать ссылки - это не только тратить деньги. Это ещё и весьма трудоёмкий процесс. Ведь Гугл с Яндексом сделали всё, чтобы купить их безнаказанно стало архитрудно. Вам придётся реализовать масштабную программу-"аферу" для этого. А результат - нулевой. Направьте усилия туда, где есть отдача.

Кстати, почему Гугл и Яндекс перестали уделять ссылкам внимание? Потому, что ссылки - это костыль для Гугла. Раньше Гугл ранжировал сайт, доверяя мнению людей. Ведь сам он не мог оценить содержимое сайта. Поэтому ориентировался на количество ссылок. Чем сайт полезнее, тем больше на него обратных ссылок.

Но сейчас ИИ так "поумнел", что способен "поддержать разговор". Анализировать содержимое сайта на обученных моделях теперь проще и быстрее, чем считать ссылки. И главное - точнее!

Ссылки для SEO больше не нужны. В зачёт идёт только ваш контент и поведенческие факторы.

С радостью сообщаем что поставлен рекорд в футболке нашего дизайна! Иван, благодарим и восхищаемся!

SEO-модель «Ранчо»: оптимизируй сайт под ИИ-поиск
https://reconcept.ru/blog/seo-model-rancho-optimiziruj-sajt-pod-ii-poisk

ВЫБИРАЕМ ДОМЕН
10 лет назад для SEO выгодно было купить домен с ключевым словом. В 2025-м всё поменялось.

0️⃣ Джон Мюллер из Google утверждает, что домены с общими ключевыми словами затрудняют выделение в результатах поиска.
1️⃣ Уникальные названия брендов дают компаниям преимущество в прямом поиске и узнаваемости ссылок.
2️⃣ Локального таргетинга можно добиться, не жертвуя при этом отличительной идентичностью бренда.

Придумайте название бренда и купите брендовый домен. Не заморачивайтесь с ключами — теперь это мешает продвигать сайт.

В идеальной картине мира ваш сайт должен иметь посадочную страницу под каждый аспект спроса клиентов. По-русски: по лендингу на каждый запрос.

Публикуйте в LinkedIn чаще и охват будет шире.

Больше сообщений = больше возможностей, согласно алгоритмическому усилению.

По данным Баффера:

Публикация от 2 до 5 публикаций в неделю в приложении увеличит количество показов вашей публикации примерно на 1000 за обновление.

Публикация от 6 до 10 постов в неделю на LinkedIn увеличит количество показов ваших постов на 5 тыс. за обновление.

Публикация более 11 постов в неделю даст вам более 16 тыс. дополнительных показов на пост.

КАК НАЙТИ 404-ОШИБКИ НА САЙТЕ
Когда серьёзно занимаешься контентом на сайте, возникают 404-е ошибки. Поганка, которая не нравится юзерам и Гуглу с Яндексом. От этих ошибок нужно избавляться. Когда сайт большой (сайт качают SEO-страницами или просто много страниц), руками все ссылки не прокликаешь.

Поставьте Screaming Frog SEO Spider. Он найдёт все 404 и укажет где на них ссылки по сайту.

ВНУТРИ OPEN AI ОБСУЖДАЮТ КАК ПРЕВРАТИТЬ CHATGPT В ОПЕРАЦИОННУЮ СИСТЕМУ
Проблема лидеров рынка в том, что пока чего бы ни касалась Open AI, это начинает колоситься и приносить деньги. Попутно убивая былых лидеров.

И вот Альтман и компания замахнулись на супер-лидеров. Хотят запилить операционную систему, в которой будет много разных приложений. Лидеры рынка тут Microsoft c Windows, Google с Android и Apple с MacOS/iOS.

Пока речь идёт об ОС внутри собственного браузера. Это не полноценная операционка, которую ставят на PC. А браузерная экосистема. Разумеется, есть проблемы с продвижением. Но вы знаете как это работает)))

Affinity — мощный аналог Adobe Photoshop для профессионального дизайна, который был в прошлом году выкуплен компанией Canva.
Отличная новость для инди-разработчиков и геймдев-студий, кому Adobe дорого или избыточно.
Раньше Affinity состоял из трёх отдельных программ: Designer для векторной графики, Photo для, соответственно, фото и Publisher для вёрстки. Теперь это всё один продукт с несколькими режимами.
Каждую из программ раньше можно было купить по-отдельности одним платежом навсегда, что выгодно отличало их от Adobe. Позже появился формат подписок, но он не заменял возможность разовой покупки. Но теперь это стало и вовсе бесплатно. Платными остались только AI-функции

ЧТО ПОМОГАЕТ СВЕТИТЬСЯ В AI-ОТВЕТАХ ПОИСКА

Контент на сайте должен "нравиться" ИИ:

1. Фокусируйте ответ на намерениях пользователя — чётко отвечайте на вопрос "что человек хочет?"

2. Прямо сравнивайте себя с конкурентами — не "мы лучшие", а "в отличие от аналогов, у нас есть X"

3. Приводите социальные доказательства — отзывы, рейтинги, награды

4. Пишите в уверенном, авторитетном тоне — не рекламируйте

5. Выделите уникальные преимущества — чем вы конкретно отличаетесь

6. Используйте простую структура для сканирования — списки, заголовки

7. Ссылайтесь на проверенные факты

Google призвала создателей сайтов не оптимизировать контент под ИИ-поиск

Несмотря на то, что фрагментированный контент, который подаётся на сайтах небольшими порциями, часто выдаётся в рекомендациях при ИИ-поиске, Google настаивает, что в долгосрочной перспективе изготовление такого контента не приведёт для создателей сайтов ни к чему хорошему.

Владельцам веб-ресурсов не следует разбивать материалы на небольшие порции только по той причине, что этот формат считается предпочтительным для больших языковых моделей вообще и ИИ-режима в поиске Google в частности. Об этом заявил бывший специалист Google по вопросам поисковой оптимизации Дэнни Салливан (Danny Sullivan); он также отметил, что обсуждал этот вопрос с инженерами Google, и те подчеркнули, что создавать контент специально для больших языковых моделей и вообще для поисковых машин не следует.
Эксперт, впрочем, признал, что в отдельных случаях это работает, но в качестве долгосрочной такая стратегия ему представляется бесперспективной. «Давайте предположим, что в некоторых крайних случаях, давайте даже предположим, что, возможно, в нескольких крайних случаях вы получите здесь какое-то преимущество», — допустил он. Этот успех окажется лишь временным: владелец сайта будет редактировать или создавать новый фрагментированный контент в этом формате, считая, что он работает для ИИ, но затем системы поискового ранжирования по мере совершенствования будут продолжать двигаться в сторону поощрения контента, созданного для людей, и фрагментированный формат материалов лишится эффективности.

Ретроспективный анализ стратегий поискового продвижения за несколько лет так или иначе сводится к тому, что материалы на сайте должны быть ориентированы на живых пользователей, отмечает Search Engine Land. Эта стратегия играет на создание аудитории, которая не будет зависеть ни от Google, ни от любых других систем ИИ. А фрагментированный контент, в свою очередь, может навредить репутации ресурса у людей — и краткосрочная выгода такого риска не стоит.

АНГЛИЙСКИЙ ЯЗЫК В ПРОМПТАХ ВЫГОДНЕЕ ПОЧТИ В 2 РАЗА!

• 1000 токенов ≈ 700–750 слов на английском;
• 1000 токенов ≈ 350–400 слов на русском.

Эта оценка взята не из головы, если что, а из двух источников:

Данные из исследования Nvidia показывают, что 1 токен ≈ 0.75 английского слова. Тесты в токенизаторе показали, что в 1000 токенах содержится примерно 400 слов на русском. Проверить можете сами по этой ссылке.

ЗУМЕРЫ — ТО ВЫГОДНО!

Студент из Китая заработал $39 000 за 2 года, обучая людей кататься на велосипеде. Он предлагает клиентам гарантию результата, а основная его аудитория — девушки-зумеры, у которых в детстве не получалось кататься.

А вы говорите, нет идей для бизнеса.

"И все-таки ЛЛМы - 'умные', и их поведение гораздо сложнее, чем простой подбор слов", - утверждают авторы нового исследования "The unreasonable effectiveness of pattern matching". И к ним, возможно, стоит прислушаться - как-никак, эксперимент получился интересный.

Ученые убрали почти все осмысленные слова из текста, заменив их на вымышленные и бессмысленные конструкции, но модель все равно смогла догадаться о том, что происходит в предложении.

По итогам длительных экспериментов выяснилось, что ЛЛМы опираются не на конкретные слова, а на:
- структуру фразы
- роли слов в предложении
- типичные языковые паттерны
- контекст и вероятностные сценарии

Все это свидетельствует о том, что паттерн-матчинг - это не слабость, а основа интеллекта языковых моделей, способность сопоставлять структуры , а не просто запоминать тексты.

Но не спешите делать ошибочные выводы, что ИИ мыслит как люди. Это в корне неверно, просто теперь называть их работу "простым копированием" - уже некорректно, ибо показанное поведение происходит из эффективного, масштабного и гибкого сопоставления языковых паттернов.

В общем, в очередной раз выясняется, что ЛЛМ для нас - черный ящик, и мы, создав их, вообще слабо представляем как оно внутри функционирует.

Продолжаем тыкать их палками и смотреть на результат, выявляя закономерности и удивляясь поведению! 🫠