#пьяный_снегирь update

Вам почему-то нравится такой формат, поэтому расскажу какие успехи с проектом пьяный_снегирь.

Сделал внутреннюю страницу, уже не на заглушках, а прям рабочая версия.

Процентов на 90 готовы страницы с детальной информацией по мобильным операторам в каждом регионе, какие у них коды, диапазоны и т.д. Пожинаю плоды того, что разложил данные в реляционном виде, а не просто скопипастил.

Немного поковырялся с "рейтингом" номера. У конкурентов везде идет оценка от 1 до 5. Я хз в чем разница между оценкой 3.2 и 2.3, поэтому решил, что юзеру будет приятнее решение в лоб: плохой это номер или нет. Как это выглядит можно глянуть на макете в одном из прошлых постов.

Написал хитрую, но банальную, логику преобразования числового рейтинга в такой "простой" вид, на основе оценки из сырых данных + анализа текста отзывов для этого номера.

Вчера запустил скрипт сборки данных и их загрузки в БД. Загружу 500к номеров в базу на этой неделе. Остальное буду постепенно добавлять после запуска.

И напоследок останутся работы по SEO: пройтись по всем типам страниц, написать шаблонный текст, продумать шаблоны для title, description, h1, сделать перелинковку и т.д.

Хочу успеть запуститься в этом году.

#пьяный_снегирь

Подарочек под елочку

Пару месяцев назад покупал домен для проекта #пьяный_снегирь . Купил на beget и оставил болтаться.

Сегодня получил новогодний подарочек под елочку в виде редиректа на клубичку. Какого дед мороза тут происходит, подумал я?

Пошел искать концы и понял, что оставил домен без привязки DNS к какому-либо серверу. Был план арендовать свежий сервак и уже потом связать все это дело вместе, но не судьба.

Полагаю, что не составляет особого труда проделать подобную манипуляцию, вопрос только в том, как программно находить такие домены.

P.S. Подарочек олицетворяет весь 2022 год. У вас были планы, но вот вам новые, с голой жопой на экране.

Это дело даже успело залезть в индекс гугла.


Пошел регать новый домен.

Всех с наступающим Новым годом!

Не буду еще раз рассказывать, каким непростым был этот год, вы и сами знаете.

Несмотря на весь пиздец, который произошел в 2022 (а, где-то и из-за него) во многих сферах в этом году удалось шагнуть сильно вперед. Так далеко, что аж сам в шоке.

Я желаю каждому из вас в следующем году прыгнуть выше своей головы. Но самое главное, желаю вам сохранить свое психологическое и физическое здоровье.

Хочу поблагодарить вас, подписчиков, что нашли интересным этот канал. В 2023 году вас станет больше, а я продолжу делать свои эксперименты и делиться ими с вами. В голове уже намечены большие планы и темы, которые, я уверен, вам будут интересны.

Всем добра и мира! Feliz Ano Novo! 🎄

Как настроить сайты для спокойного отпуска

Подзабил на канал и сайты. Постепенно возвращаюсь.

Впервые за очень долгое время, (может и вовсе впервые) ездил в отпуск без ноута. Полный отдых и отключка от дел.

У меня 4 арендованых сервера, 1 чисто под БД, лямбды в Aws, десяток сайтов, пара сервисов, настроенный мониторинг. в общем, зоопарк.

Зная свой уровень удачи. У меня что-то обязательно грохнется ровно в тот момент, когда я вступлю на порог самолета. (это не шутка, со мной такое бывало не раз).

В общем нужно иметь инструменты управления зверюшками в этом зоопарке. Особенно когда я без рабочего ноута.

Для себя пока пришел к такой схеме:

- облепился мониторингами (это давно уже). оповещения приходят в телегу
- поставил себе на планшет и телефон Termius. Приложуха позволяет ходить на сервера по ssh. Не супер удобно, но бесплатно и хватает для быстрого реагирования.

Для мониторинга использую https://github.com/louislam/uptime-kuma и https://uptimerobot.com/. Зачем сразу два?

Решил сэкономить на отдельном сервере для мониторинга. (очевидно нет смысла вешать селф хостед мониторинг на одном сервере с вашими сайтами, т. к. если грохнется сервер, мониторинг вам об этом не скажет). Поэтому 2 инструмента - мониторинг на мониторинг: )

Нужно ли написать подробнее, как я слежу за сайтами? или ссылок на инструменты достаточно?

Дашборд Uptime Kuma

Пару дней назад зарелизил #пьяный_снегирь. 🍾

Изначально предполагалось, что я буду описывать весь процесс по ходу дела.

Понял, что описывать прям подробно это дело затратное. Делаешь, описываешь, редактируешь, смена контекста, короче стопит процесс.

Поэтому напишу мысли, идеи и принципы, которым я следую в процессе подобной разработки.

А пока история.

Как Яндекс задудосил новый сайт

Спустя 2 часа после публикации пьяного снегиря упали половина сайтов, вообще не относящихся к делу. Ситуация странная, начал копаться, дошел до того, что грохнулся сервер, где крутится БД.

===
Немного контекста.

У меня выделен отдельный сервер, где развернут Postgresql.

Когда нагрузка была небольшая, а сайтов мало - бд и сайты были на одной тачке. Со временем стало тесновато, решил оптимизироваться.

Вынес БД отдельно, добавил ресурсов. Большая часть сайтов теперь ходит в одно центральное место, никто никому не мешает. Кстати, скорость выполнения sql запросов выросла в 3 раза.

Как можно догадаться, в этой архитектуре есть один большой минус. Если лежит центральное звено - лежат все сайты.
===

Возвращаясь к вновь опубликованному сайту, тут оказалась как раз такая ситуация.

Судя по логам, спустя пару часов работы, сайт начал получать сотни запросов в минуту. Я немного приофигел от того, когда увидел, что в UserAgent записан YandexBot и его вариации.

Естественно, подумал, что кто-то просто прикрывается Яндексом. Сделал обратный запрос по ip - реально домены Яндекса.

Запросы идут на страницы, которых не существуют. Но тематика моя...

Тут я совсем выпал. В логах 200к запросов на страницы, которых не существует.

Заглянул в вебархив и все стало на свои места. Домен с историей, сайт той же тематики, был заброшен в прошлом году.

Этот момент я, конечно, забыл проверить перед регистрацией, но получилось забавно.

Т.е. Яндекс увидел, что старый сайт ожил и решил сделать переобход известных ему страниц (но в индексе и в панели вебмастера их нет).

Короче. Все эти левые запросы шли прямиком в приложуху, которая каждый раз создавала коннект к базе.

Решил это дело перехватом и редиректом на 404 на уровне nginx.

Нагрузка спала. Наблюдаю ситуацию.

Вообще прикол, конечно, с доменами. Первый "отжали", второй дудосит Яндекс. Вход в нишу считаю успешным.

Кстати, десяток страниц уже в индексе. Гугл пока отстает

Больше всего жалею, что сделал мало проектов. Я много лет занимаюсь сайтами, но раньше я много смотрел, что делают другие и мало делал сам.
 
Сделал один сайт и ждешь пока он начнет показывать результаты. Сейчас так не работает.
 
2022 год научил меня диверсификации во всем. В том числе и в сайтах.
 
Нужно делать проекты используя разные подходы, целясь под разные ПС и ГЕО. Есть проект под гугл? Сделай под яндекс. Монетизируешь только контекстом? Уход адсенса, добрый вечер.  
 
Примерно в конце 2020 года я непроизвольно пришел к тому, что мне нужно выстраивать конвейер по созданию новых сайтов. Закончил один, идешь делать другой.

Я веду шортлист ниш и сервисов, которые планирую сделать, поэтому всегда знаю, что буду делать дальше, вопрос только приоритета и выбора.
 
Как искать ниши? Позвольте себе искать и открывать новое. Перспективные ниши, сетки сайтов, все это я нахожу вообще случайно. Просто ищу что-то в интернете. Зацепился взгляд, пробил посещаемость, конкуренцию, нишу, записал и пошел дальше. Главное сразу записывать.
 
Само собой в этом списке куча мусора. Прохожусь по нему периодически и беспощадно удаляю откровенный бред. В моменте идея кажется прикольной, некоторое время спустя - смешной. Но в этом списке закопан мой будущий доход.
 
Короче, делайте сайты. Много небольших. Берите масштабом и все будет.
 
Пьяный снегирь набирается сил, а я пока стартую 3 других проекта.

ChatGPT в SEO

Не буду писать очередной пост с восхищением о Chat GPT. Машинное обучение — это следующий виток развития технологий, но это был и будет только лишь инструмент в руках/под контролем специалиста.
 
Для себя я нашел такое применение чат гпт.
 
В пьяном снегире впервые использовал на практике этот инструмент и сэкономил кучу времени и сил при создании служебных страниц, типа «о проекте», написании шаблонного сео текста (например, текст на основной странице сайта – с отзывом о номере – целиком сгенерирован), генерация тайтлов, дескрипшнов.
 
Естественно, сгенерированный текст слегка правится под приличный вид, НО это настолько мелочь, по сравнению с тем, что ты сидишь и выдумываешь с нуля историю о том какой прекрасный у тебя сайт.
 
Пока что это мой максимум. Никак больше не использую его в работе. Видел разные расширения для хрома по сеошке, но пока не нашел лично для себя применения.

Расскажите, что прикольного вы реально уже сейчас делаете с chat gpt? Очень интересно.
 
Кстати, на скринах можете заметить, как я уважительно обращаюсь к модели. Если ИИ захватит человечество, то я хотя бы буду числится приличным человеком в их базе.

OpenAI API != ChatGPT

На днях сравнил результаты, что выдает ChatGPT и что выдает апишка от OpenAI (модель text-davinci-003). Если что, это то самое api, что все вставляют в гугл шитс для генерации контента.

Не знаю, ожидаемо или нет, но ответы на один и тот же запрос получил разные.

Мог бы предоставить пруф в виде скрина сравнения, но я истратил все лимиты на запросы, так что проверьте сами 🙂

В целом может быть и не принципиально, ну разные ответы, да и ладно. Но конкретно в моем случае результаты от ChatGPT были значительно качественнее (запросы, связанные с обогащением/дополнением уже существующего контента).

Принимая во внимание это и то, что я истратил все лимиты в OpenAI API, планирую написать автоматизацию на selenium, попарсить ответы ChatGPT из браузера.

Для моего нового сайта потребуется что-то в районе 50к запросов, но есть сомнения по лимитам)

Дайте знать, если хотите, чтобы выложил код скрипта в опенсорс

AIPRM: Лучшее SEO расширение для ChatGPT

Удивлен, что мало кто из украино/русско язычных seo каналов (из тех за которыми я слежу) не написал о крутом расширении для Google Chrome - AIPRM.

Расширение уже попало в сердца западных сеошников, но лично мне пока на практике не сильно пригодилось. НО, это не значит, что не пригодится вам. Штука действительно умная и мощная.

Умеет определять интент поисковых запросов, кластеризовать, генерировать FAQ секции и т.д. Из того, что прям удивило

- построение SILO структуры на основе маркера
- генерация контент плана
- Page Quality Rating, а именно анализ E-E-A-T факторов. Дает оценку указанной вами странице, и по пунктам, что нужно улучшить.

Попробуйте сами https://chrome.google.com/webstore/detail/aiprm-for-chatgpt/ojnbohmppadfgpejeebfnmnknjdlckgj

Помешательство вокруг слитых исходников Яндекса с поисковыми факторами как по мне сильно переоценено.

Может я чего-то не понимаю.

Поделитесь, пожалуйста, что реально полезного, лично вы, смогли вынести из полученных данных?

Залог успеха в сайтах на парсинге - правильно выбранная ниша

Как писал выше - у меня есть шортлист идей для ниш и сайтов на копипасте и генеренке, которые планирую взять в работу. 

Решил, что буду делиться некоторыми такими нишами с вами. 

Рук не хватит сделать все, а для кого-то это будет хорошей возможностью войти в такой формат сайтов.  

Естественно, не ждите, что буду палить самый сок. Но без откровенного мусора, типа ниш с картинками (может кому-то и норм, но не мой формат).

Чтобы сделать процесс чуть интерактивнее и полезнее для канала - буду публиковать новую нишу каждые +100 подписчиков на канале. Начнем с 200 и далее 300, 400 и т.д.

Ниша №1 для старта в сайтах на копипасте и парсинге

Начинаем с простенького, сложность и емкость трафика будет увеличиваться с каждым разом.

Автомобильные коды регионов России

Пример сайта: nomerrus.ru

Элементарная тематика в плане формата контента.
Пример сайта, где не нужно заморачиваться с уникальностью, т.к. ниша не предполагает наличие уникальной информации (сайты справочники).

Конкуренты со слабым ссылочным и с паршивым дизайном из 2000х.

Трафика немного, но и затраты на создание будут минимальными. Идеально для старта.

Монетизация в РСЯ. Можно поэксперементировать со сливом на автомобильные партнерки в формате CPA.

Ниша №2 для старта в сайтах на копипасте и парсинге

Эволюция ютуб дорвеев: что где находится в автомобиле.

Примеры:
https://gdechtouauto.ru/
https://gdenahoditsia.ru/
https://gde-v-mashine.ru/
https://chinchinarem.ru/

Судя по дизайну сайтов, в нише 1-2-3 человека.

Трафик идет на страницы с "вопросами", все остальные страницы/категории/группировки служат чисто для перелинковки.

Принцип создания достаточно прост. Когда только обратил на них внимание, все было еще проще. Сейчас вижу, что структуру/шаблон трафиковых страниц чуть улучшили, добавили больше текста.

В общем случае структура страницы:

<h1>с вопросом/запросом</h1>
<p>Сгенерированный шаблонный текст с ключом. Как бы вводная часть, по сути никакой пользы не несет, просто сеошный текст.</p>
<Видео с ютуба>
<Комментарии>Комментарии - солянка из рандомных сообщений с авто форумов. Просто выпарсили сообщения с форумов и рандомно замешали в статью. Никакой пользы не несет, исключительно для обьема текста на странице.


Собирается это все по частям.

1) База запросов. Собирается один раз для всей сетки. (вопросные запросы крупных автомобильных сайтов/форумов)
2) Для каждого запроса идем в поиск YouTube по API и сохраняем video_id (по нему потом вставляется видео на страницу) первого попавшегося видео.
3) генерим шаблонный текст (самым простым способом)
4) делаем рандомный селект рандомного числа комментариев из заранее подготовленной базы
5) публикуем на сайте

По крайней мере так было еще пару месяцев назад. Сейчас вижу, что контента чуть добавили, но суть осталась та же.

Работа проделана хорошая, видно подходили со знанием дела.

Живет это дело исключительно за счет нч нк ключей. Пользователь приходит с проблемой и решает ее только если ответ есть в видео, все остальное пользы не несет.

Если заходить прям в эту же нишу, то за вас большую часть работы уже сделали:
- запросы есть, уже даже разбитые по категориям
- комментарии есть (парсим все, но миксуем так же рандомно)
- видео я бы собрал свои, отдельно, это не сложно

Запомните принцип и подумайте, в каких еще нишах это можно применить.