🛠 Как починить парсеры Вордстата после обновления дизайна
Яндекс Вордстат обновил дизайн, а старую версию оставил на old.wordstat.yandex.ru. Это привело к тому, что множество программ для парсинга, перестали работать. Рассказываю, как можно почиинить их💡
Вот краткая инструкция, подробности можете спросить у ГПТ:
1) Установка MITMProxy: mitmproxy.org.
2) Создание скрипта перенаправления: Далее, создаем
3) Запуск прокси-сервера: Используем команду
4) Настройка SSL: Для работы с HTTPS трафиком, MITMProxy использует свой сертификат, который должен быть установлен на вашем устройстве. Для этого после запуска MITMProxy, откройте mitm.it в браузере, находясь в той же сети, что и прокси и следуйте инструкциям.
5) Настройка программы: В программе, которая требует доступа к Вордстату, настраиваем соединение через прокси по адресу 127.0.0.1:8080 (по умолчанию)
📝 Дополнительно: Если вы покупаете где-то прокси, проверьте возможность настройки такого редиректа через службу поддержки.
Яндекс Вордстат обновил дизайн, а старую версию оставил на old.wordstat.yandex.ru. Это привело к тому, что множество программ для парсинга, перестали работать. Рассказываю, как можно почиинить их💡
Вот краткая инструкция, подробности можете спросить у ГПТ:
1) Установка MITMProxy: mitmproxy.org.
2) Создание скрипта перенаправления: Далее, создаем
redirect.pyс кодом для перенаправления запросов:
from mitmproxy import http
def request(flow: http.HTTPFlow) -> None:
if flow.request.pretty_host == "wordstat.yandex.ru":
flow.request.host = "old.wordstat.yandex.ru"
3) Запуск прокси-сервера: Используем команду
mitmweb -s redirect.pyдля запуска прокси-сервера с нашим скриптом.
4) Настройка SSL: Для работы с HTTPS трафиком, MITMProxy использует свой сертификат, который должен быть установлен на вашем устройстве. Для этого после запуска MITMProxy, откройте mitm.it в браузере, находясь в той же сети, что и прокси и следуйте инструкциям.
5) Настройка программы: В программе, которая требует доступа к Вордстату, настраиваем соединение через прокси по адресу 127.0.0.1:8080 (по умолчанию)
📝 Дополнительно: Если вы покупаете где-то прокси, проверьте возможность настройки такого редиректа через службу поддержки.
🚀 Выложил первую версию плагина для Хрома, для сбора статистики ключевых фраз из Wordcraft (Yandex Webmaster)
👀 Для начала работы после установки плагина зайдите на https://webmaster.yandex.ru/site/wordcraft/ чтобы плагин подхватил связь с апи, потом вебмастер можно закрывать и пользоваться только плагином
Пробуйте, пишите обратную связь
👉 https://chromewebstore.google.com/detail/ywm-wordcraft-pro/beidominilnaoodhdmlgkebdopmhhnfd
👀 Для начала работы после установки плагина зайдите на https://webmaster.yandex.ru/site/wordcraft/ чтобы плагин подхватил связь с апи, потом вебмастер можно закрывать и пользоваться только плагином
Пробуйте, пишите обратную связь
👉 https://chromewebstore.google.com/detail/ywm-wordcraft-pro/beidominilnaoodhdmlgkebdopmhhnfd
Google
Ассистент YWM Wordcraft Pro – статистика поисковых запросов - Chrome Web Store
Ассистент для подбора ключевых фраз с помощью YWM Wordcraft. Статистика поисковых запросов, как в вордстате
👍1
— А ты сайтами занимаешься? pinned «🚀 Выложил первую версию плагина для Хрома, для сбора статистики ключевых фраз из Wordcraft (Yandex Webmaster) 👀 Для начала работы после установки плагина зайдите на https://webmaster.yandex.ru/site/wordcraft/ чтобы плагин подхватил связь с апи, потом вебмастер…»
Как я использую API OpenAI
Интересно стало чекнуть частотку по брендам. Выгрузил 12к брендов.
Проблема: некоторые бренды имеют слишком длинные названия, которые ищут по другому. Некоторые бренды написаны на английском, но их ищут на русском языке.
Попросил чатгпт сделать Python скрипт, который я запускаю в браузере через Google Colab. Основная функция с промптом выглядит вот так:
На английском, потому что так в 2 раза дешевле. Можно было бы еще сэкономить, если в одном запросе обрабатывать бренды пачками штук по 50, но сейчас апи дешевый, поэтому сойдет и так.
Обработка 1к брендов выходит за 7 рублей. На входе список брендов, на выходе его варианты написания.
Интересно стало чекнуть частотку по брендам. Выгрузил 12к брендов.
Проблема: некоторые бренды имеют слишком длинные названия, которые ищут по другому. Некоторые бренды написаны на английском, но их ищут на русском языке.
Попросил чатгпт сделать Python скрипт, который я запускаю в браузере через Google Colab. Основная функция с промптом выглядит вот так:
client = OpenAI(api_key=api_key)
def query_brand(brand):
chat_completion = client.chat.completions.create(
messages=[
{
"role": "system",
"content": "You are to identify the most popular ways brands are written for a Russian-speaking audience. People may search for the brand in Russian or English, with or without spaces, and may only write part of the word for multi-word brands. Only provide a list of 1-4 variations of the brand's writing, each variation on a new line, without any brackets or additional text."
},
{
"role": "user",
"content": f"What are the various ways to write the brand {brand} in Russian and English? List each variation on a new line."
}
],
model="gpt-3.5-turbo",
)
return chat_completion
На английском, потому что так в 2 раза дешевле. Можно было бы еще сэкономить, если в одном запросе обрабатывать бренды пачками штук по 50, но сейчас апи дешевый, поэтому сойдет и так.
Обработка 1к брендов выходит за 7 рублей. На входе список брендов, на выходе его варианты написания.
Привем всем! Расширением воспользовались уже 400+ человек. Всем спасибо за подписки, репосты и комментарии, это приятно видеть :-)
Выпустил небольшое, но полезное обновление: фильтры для ключевых слов по конкурентности, показам и кликам.
https://chromewebstore.google.com/detail/beidominilnaoodhdmlgkebdopmhhnfd
Нужно ли вам похожее расширение для вордстата? Чтобы по ключевому слову получать сразу всю пагинацию, добавлять фразы в избранное и делать выгрузки?
Выпустил небольшое, но полезное обновление: фильтры для ключевых слов по конкурентности, показам и кликам.
https://chromewebstore.google.com/detail/beidominilnaoodhdmlgkebdopmhhnfd
Нужно ли вам похожее расширение для вордстата? Чтобы по ключевому слову получать сразу всю пагинацию, добавлять фразы в избранное и делать выгрузки?
🔥8
Немного покопался в Hamster Kombat, получилось сделать автофарм монеток без входа в игру и автосоздание таблички по самым выгодным карточкам. Может оформить в виде расширения🤔
🔥2😁1🤝1
✨Восстановил работу плагина Wordcraft PRO, Яндекс немного поменял API
https://chromewebstore.google.com/detail/%D0%B0%D1%81%D1%81%D0%B8%D1%81%D1%82%D0%B5%D0%BD%D1%82-ywm-wordcraft-p/beidominilnaoodhdmlgkebdopmhhnfd
https://chromewebstore.google.com/detail/%D0%B0%D1%81%D1%81%D0%B8%D1%81%D1%82%D0%B5%D0%BD%D1%82-ywm-wordcraft-p/beidominilnaoodhdmlgkebdopmhhnfd
Google
Ассистент YWM Wordcraft Pro – статистика поисковых запросов - Chrome Web Store
Ассистент для подбора ключевых фраз с помощью YWM Wordcraft. Статистика поисковых запросов, как в вордстате
🔥5