Split Test Street
73 subscribers
21 photos
10 links
Real tests run by real operators this week — what we shipped, what won, what flopped, and the exact change you can steal today.
Download Telegram
Day 11: my big swing lost 18%. Worth it.

I rebuilt the whole hero. New angle, new image, new CTA, new social proof block. Total gut rewrite.

It got smoked. Down 18%. Embarrassing.

But here's why I'm not mad: that one test taught me more than ten safe tweaks. The new angle was the killer — I isolated it after, and the angle alone was the thing tanking trust.

Now I know that angle is poison for this audience. That's data I'd never get from testing button shades.

Big swings have a worse hit rate but a higher ceiling AND they teach you the boundaries fast. Run a few on purpose.

— Allocate ~20% of your tests to bold swings
— Expect most to lose. Mine the losers for why.

Go schedule one reckless big-swing test this month. Report back.
My winner was fake. Blame returning visitors.

Day 6: new nav design, +14% engagement. Looked legit.

Then I segmented new vs returning. New visitors: flat. Returning visitors: +40%.

That's the novelty effect. Your regulars notice the change, poke at it because it's new and shiny, and inflate your numbers. It fades in a week or two.

The real test of any UI change is how NEW visitors react — they have no 'ooh what's different' bias.

Now for any design test I segment by new vs returning, and I weight new-visitor behavior way heavier for permanent decisions.

— Segment your current test: new vs returning
— If the win is all in returning users, wait it out

Go split your test results by visitor type. Report back.
This week: I deleted a form field and made money

Lead-gen form for an offer. Five fields: name, email, phone, company, budget.

I tested killing the phone field. Just gone.

Result: form completions +23%, lead quality basically unchanged when sales followed up. The phone field was scaring people off and adding almost nothing.

Rule of thumb I trust now: every field you add is a tax on completion. Phone and 'company size' are the worst offenders for friction.

The trick is testing field removal one at a time so you know exactly which one was the anchor.

— Count the fields on your highest-value form
— Pick the most invasive one (phone, budget, job title)

Go test the version with that field removed. Report back.
Day 3: vague social proof beat the big number

Counterintuitive one.

Variant A: 'Join 50,000+ users.'
Variant B: 'Join 2,847 marketers this month.'

I bet hard on A. Bigger number, bigger flex.

B won. +11% signups.

Why: 50,000 is a round, suspiciously clean brag — it reads like marketing. 2,847 is oddly specific and recent, so it reads like a real live count. And 'marketers' matched the visitor's identity better than generic 'users.'

Specific and recent beats big and round. Believability converts harder than scale.

— Look at your social proof line
— If it's a round number with a plus sign, it might read as fake

Go test an oddly-specific, recent, identity-matched number against your round brag. Report back.
I ran a test that could NEVER have won. 40 days wasted.

Painful one. I tested a tiny CTA tweak on a page that gets ~300 conversions a month.

Forty days in: 'no significant difference.' Of course not.

Here's what I skipped: I never calculated the minimum detectable effect. With my traffic, that test could only ever detect a 20%+ swing. A small CTA tweak realistically moves 2-3%. It was statistically impossible to ever read.

Low-traffic pages can only detect BIG changes. On them, stop testing micro-tweaks — test radically different versions, or don't test at all and just use judgment.

— Check your monthly conversions on the test page
— Under ~1,000? Only test big, bold variants

Go run an MDE check before your next test. Kill it if the math says no. Report back.
Neighbor spotlight: @inbox_oneoone. They go deep on Email marketing — the kind of channel you actually keep notifications on for.
Forwarded from Потрачено! Клуб спящих бизнесменов!
This media is not supported in your browser
VIEW IN TELEGRAM
🚀 aff.top — вся индустрия арбитража в одном месте
🧠 Блог про арбитраж и ИИ — как нейросети меняют залив и антифрод
🚨 База спамеров — ежедневно собираем спамеров и ведём рейтинг
🛠 70+ инструментов — от клоаки до антифрод-чека
🎬 1000+ видео — весь YouTube про трафик в одной ленте
👤 2400+ персон — байеры и фаундеры с контактами напрямую
Без регистрации, без платных «премиумов».
👇 Подписывайся на канал
This media is not supported in your browser
VIEW IN TELEGRAM
Алиса AI будет конкурировать с Google AI Studio

Яндекс разворачивает экосистему AI-агентов на базе Алисы с доступом сначала для компаний, затем для всех. Агенты уже работают в Яндекс Такси и Лавке, скоро появятся в браузере и студии разработки. Платформа интегрирует стандартные функции — заказ такси, покупки, анализ данных. Алиса AI показывает неплохие результаты: менее известна, чем конкуренты, поэтому предлагает щедрые лимиты на видеогенерацию и работу с контентом. Яндекс планирует внедрить…

➡️ Читайте на сайте: https://aff.top/blog/alisa-ai-budet-konkurirovat-s-google-ai-studio

🧠 Ещё больше инсайтов → в канале AFF.top
This media is not supported in your browser
VIEW IN TELEGRAM
В Zennoposter добавили ИИ-помощник

Zennolab добавил в Zennoposter встроенный ИИ-кубик с доступом к четырём моделям (Gemini, DeepSeek, Claude, ChatGPT) — 50 бесплатных запросов в сутки. Есть режимы Assistant (чтение) и Agent (автоматическое создание скриптов), плюс новый GET-запрос по API. Нейросети хорошо справляются с регистрацией, постингом, фармингом аккаунтов и простым кодированием, но требуют проверки при парсинге динамических сайтов и диагностике ошибок. В связке с Zennoobr…

➡️ Читайте на сайте: https://aff.top/blog/v-zennoposter-dobavili-ii-pomoschnik

🧠 Ещё больше инсайтов → в канале AFF.top
Day 5: my winning test taught me nothing

I changed the headline, the image, AND the CTA all at once. Variant B won +17%. Great!

Except... which part won? No idea. I changed three things. The lift could've come from any of them, or one win masking one loss.

Now I can't reuse the insight anywhere else because I don't know what the insight IS.

The discipline: change ONE thing per test if you want a learning you can carry to other pages. Change many things only when you just want the page better and don't care why.

Know which game you're playing before you build the variant.

— Look at your current variant
— Count how many things differ from control

Go rebuild it to isolate ONE variable if you want a reusable lesson. Report back.
This media is not supported in your browser
VIEW IN TELEGRAM
Новую Google reCapcha прошли статичной картинкой

Google выпустил обновленную reCAPTCHA, требующую движений рук для прохождения, но система оказалась уязвима к обходу. Достаточно транслировать статичное изображение с нужным жестом через виртуальную камеру с помощью простого Python-скрипта, чтобы нейросеть пропустила пользователя. Это создает серьёзный риск для сайтов: защита от ботов, позиционировавшаяся как прорыв, на деле не работает. Баг остается актуальным и позволяет спамерам легко автомат…

➡️ Читайте на сайте: https://aff.top/blog/novuiu-google-recapcha-proshli-statichnoi-kartinkoi

🧠 Ещё больше инсайтов → в канале AFF.top
Forwarded from AFF.TOP
This media is not supported in your browser
VIEW IN TELEGRAM
DeepSeek представит последнюю версию v4

DeepSeek выпустит v4 в середине июля с новой моделью ценообразования API: токены подорожают в 2 раза в часы пиковой нагрузки (09:00–12:00 и 14:00–18:00 по пекинскому времени). Компания планирует уведомлять пользователей по почте за 24 часа до изменения тарифов. Проблема с ошибками «server busy» останется, но обойдётся дороже — это может существенно повлиять на экономику проектов, которые активно используют API DeepSeek для автоматизации и масшта…

➡️ Читайте на сайте: https://aff.top/blog/deepseek-predstavit-posledniuiu-versiiu-v4

🧠 Ещё больше инсайтов → в канале AFF.top
30% of my test traffic wasn't human

Day 7: a test that made no sense. Numbers all over the place, conversion rate weirdly low on both sides.

Dug into the logs. Bots. Scrapers, headless crawlers, a competitor's monitoring tool, all getting bucketed into my test and never converting. They diluted everything and added pure noise.

On a smaller offer page, bot traffic can be 20-40% of hits. It doesn't bias toward A or B, but it inflates your sample with zeros and slows your time-to-significance to a crawl.

Fix: filter known bots and direct-no-referrer junk BEFORE bucketing.

— Check what % of your test traffic converts at literally 0
— Cross-ref with your bot/crawler logs

Go add a bot filter before your test bucketing. Report back.
Forwarded from AFF.TOP
This media is not supported in your browser
VIEW IN TELEGRAM
Anthropic выпустили Sonnet 5

30 июня вышла Claude Sonnet 5 — новая версия позиционируется как самая агентная в линейке и приближается к флагманской Opus 4.8. Модель лучше справляется со сложными многоуровневыми задачами, устойчива к вредоносным запросам и не генерирует эксплойты. Sonnet 5 доступна на Free-тарифе, но тестирование показало скромные улучшения: хотя работает лучше Sonnet 4.6, её обгоняют конкуренты, включая китайские модели, которые дешевле через API при лучшей…

➡️ Читайте на сайте: https://aff.top/blog/anthropic-vypustili-sonnet-5

🧠 Ещё больше инсайтов → в канале AFF.top
Forwarded from AFF.TOP
This media is not supported in your browser
VIEW IN TELEGRAM
Clickstar прекращает работу

Clickstar закрывается. Легендарная пуш-сеть прекращает закуп трафика с 1 августа, полная остановка — 20 августа.

Сетка работала почти 8 лет и была одним из лучших источников качественного трафика на Россию и СНГ. Сейчас пуш-трафик стал слишком ботовым из-за гугловских банов на скрипты сбора.

Что это означает для арбитражников — разбираемся в ста…

➡️ Читайте на сайте: https://aff.top/blog/clickstar-prekraschaet-rabotu

🧠 Ещё больше инсайтов → в канале AFF.top
My best winner from last year is now a loser

Gut punch. I had a hero that won +21% eight months ago. Shipped it, moved on, never looked back.

This week I re-tested it against a fresh idea. The old champion LOST by 9%.

What happened: the market moved. The angle that felt fresh last year is now what every competitor copied. The winner decayed into the baseline.

Winners aren't permanent. Audiences habituate, competitors clone, context shifts. A win is a snapshot, not a monument.

Now I re-challenge my top 'permanent' winners every 6-9 months. Half still hold. Half have rotted.

— Find your oldest shipped 'winner'
— Ask: when did I last challenge it?

Go re-test your stalest winning variant against a fresh challenger. Report back.
Forwarded from AFF.TOP
This media is not supported in your browser
VIEW IN TELEGRAM
Facebook запретил рекламу онлайн-казино Mr Vegas

Британский ASA запретил рекламу казино Mr Vegas из-за «слишком милых» мультяшных животных в креативах — регулятор счёл, что такой стиль привлекает детей, в том числе через Facebook. Рекламодатель запустил кампанию в феврале, бан вышел в июле. Логика регулятора вызывает вопросы: дети неплатёжеспособны, а таргетировать их на гемблинг бессмысленно.

➡️ Читайте на сайте: https://aff.top/blog/facebook-zapretil-reklamu-onlain-kazino-mr-vegas

🧠 Ещё больше инсайтов → в канале AFF.top