🔍 RDAP-инструмент для проверки доменов !
Уже месяц как официально Whois перестали поддерживаться. Если вы где-то проверяете с помощью whois - это или поддержка старого API или данные получают с помощью RDAP и отдают вам.


🧠 Всё работает через официальный протокол RDAP, с выбором сервера на основе зоны домена (например, .com, .org и т.д.).

💡 Этот Python-скрипт дает возможность получить:

✅ Статус домена
📅 Даты регистрации и истечения
👥 Контакты и организации
🌐 DNS-серверы
📄 Примечания и источник данных (RDAP-ссылка)

Зачем это нужно - можно переделать под чекер времени до дропа, юзать для своих PBN или для перехвата освобождающихся доменов.
Ссылка на Гитхаб

🕷Получение карты XML и парсинг по полученным ссылкам.
Иногда нужно получить все ссылки конкурента (которые должны индексироваться) и спарсить какие то данные. Пример демонстрирует получение xml карты и реализацию однопоточного парсинга (заготовка).

Код на Python который:

🧨Загружает все ссылки из sitemap.xml ;

🧨Проверяет код ответа каждой страницы (200, 404, и т.д.);

🧨Автоматически открывает каждую ссылку через Selenium;

🧨Извлекает заголовок страницы (<title>) - сделано для демонстрации, парсить можно все что угодно;

Позволяет настроить свой User-Agent и задержку между запросами (для некоторых сайтов которые жестко следят за юзерагентом);

Отображает процесс работы: сколько осталось, сколько прошло времени ⏱️;

После завершения — позволяет скачать все результаты в CSV.

По традиции ссылка с исходным кодом на гитхаб.

Новый Яндекс Wordstat API - используем с помощью скрипта на Python.

Парсим до 2000 ключей за 1 запрос. Можно спарсить все ключи по запросу из Wordstat , для этого установите рекурсивный сбор побольше (ограничение от Яндекса в сутки 1000 запросов).

Перед запуском устанавливаем библиотеки:

pip install streamlit requests pandas

Подробнее о подключении.
Структура запросов в справке Яндекса.

В исходник вставьте свой Яндекс OAuth, вот подробнее о его получении.
Руководство от нуля до получение API.
Ссылка на исходник (Гитхаб).

Скрипт для мониторинга доменов в Google Sheets:

— Добавляешь любые URL в вкладку Add domains, нажимаешь Extract — скрипт извлекает чистые домены.
💫 Проверяет RDAP/WHOIS и автоматически распределяет по вкладкам: Redemption, <30d, >30d.
💫 Показывает фазу домена, ориентировочную дату дропа и сколько дней осталось.
💫 Ведет аудит во вкладке logs, добавляет Wayback-ссылку на каждый домен.
💫 Есть кнопки Recheck для каждого бакета, дубликаты убираются автоматически.
💫 Работает «из коробки» — без API-ключей.

Ссылка

Генерирует семантическую вселенную ключевых слов на основе модели EAV (Entity-Attribute-Value / Сущность-Атрибут-Значение), которую можно использовать как в SEO, так и в GEO рабочих процессах.

Как это может помочь вашей SEO + GEO стратегии:

Упорядочивает запросы вокруг сущностей, атрибутов и переменных.

Стройте тематические карты, которые легче перепрофилировать в наборы данных для RAG (Retrieval-Augmented Generation), контент-брифы или внутренние базы знаний.

Определяйте, какие интенты (информационные, коммерческие, транзакционные) требуют лучшего покрытия для AI-обзоров и генеративных функций поисковой выдачи (SERP).

Создавайте структурированные входные данные для масштабируемого производства контента (программное SEO, лендинги, FAQ, тематические хабы).

Сравнивайте семантическое покрытие по продуктам, услугам или рынкам, чтобы увидеть, где генеративные системы могут «галлюцинировать» или заполнять пробелы контентом конкурентов.

Оригинал поста

Github

Аудит EEAT через Screaming Frog + ИИ

При высокой конкуренции слабый контент = потеря трафика. Проверять тысячи страниц вручную не вариант — решает связка Screaming Frog + OpenAI API.

🛠 Ключевые настройки
• Импорт библиотеки промптов (JSON через Download Prompts Config)
• В Extraction включить Store HTML render — иначе API не отработает
• Сканировать только важные URL (блог, ключевые лендинги), чтобы не тратить API-бюджет

🔍 Что оценивает ИИ (1–10)
• Авторство и экспертиза
• Качество источников и цитирования
• Content Effort (уникальность, глубина)
• Оригинальность
• Интент страницы (helpful-first vs SEO-first)

📊 Результат
Экспорт в Google Sheets → средние баллы по критериям → сразу видно, где контент не проходит по E-E-A-T.

Ссылка на статью и промпт.

Обновление скрипта для проверки дат регистрации доменов. Незаменимый инструмент для поиска и перехвата дропов, построения PBN сеток.

📄 Формат входного файла — .txt, по одному домену на строку (возможны с http(s)://, www. — они будут автоматически обработаны).
Результаты в таблице + возможность скачать CSV-файл с полной информацией (смотри скрины)

🔍 Для каждого домена определяет:

Регистратора (если доступен)
Дату регистрации
Дату истечения делегирования
Последнюю дату изменения
Статус
Свободен ли домен
Ссылку на RDAP-источник
Статус обработки запроса

🚀 Возможности:
Можно проверять 10К доменов!

Автоматическое определение RDAP-сервера на основе зоны домена реестров gTLD (.com, .org, и др.) Не проверяет региональные домены (ru, ua, su, fr, pl и другие)

Теперь работает без установки питона, можно запустить в браузере.
Линк на Colab.

После запуска выбираем txt файл с списком доменов.
Сканирование.
Файл автоматически скачивается после выполнения в csv формате.

Backlink Checker для обратных ссылок в Google Sheets.

Что умеет скрипт:
- берет из вкладки Input: Link to post, Target URL, опциональный Anchor;
- проверяет страницу:
- HTTP-код;
- допускается ли к индексации (robots.txt, meta robots, X-Robots-Tag);
- ищет бэклинк на Target URL:
- сохраняет найденный URL и анкор;
- фиксирует nofollow, ugc, sponsored;
- подтягивает для домена страницы NS и A записи;
- на вкладке Patterns группирует домены:
- по NS-серверам;
- по IP;
- по конкретным Link (found) и Anchor (found).

Есть два режима проверки: Browser и Bot (пользовательский агент можно переключать в сайдбаре).

Кнопками в панели можно:
- запустить проверку со 2-й строки;
- продолжить с первого пустого статуса;
- проверить только пустые;
- перепроверить строки с ❌ No;
- обновить все результаты;
- проанализировать NS / IP паттерны.

Удобно, когда нужно держать под контролем кучу ссылок, видеть, что еще индексируется, а где уже нет, и ловить сетки на одних и тех же NS/IP.

Ссылка

Парсер поисковых подсказок Google через API с экспортом в CSV.
Поддерживает английский, русский, украинский и другие языки.

У Гугла есть недокументированное API поисковых подсказок, которое появилось на заре использования AJAX запросов в браузерах Хром и Фирефокс.

Я его использую для расширения семантики, а в некоторых случаях и для уточнения поискового интента запроса или кластера.

Первый сервис

Второй сервис отличается от первого автоматическим сбором группы запросов за счет подстановки первых букв после ключа.

Второй сервис

Оба сервиса сделаны на html + js , можете скачать себе и допилить под свои нужды. Помните что Гугл может забанить доступ к API по ip.

Если вы никогда не работали с подсказками - я залил на Хабр статью "Как использовать API поисковых подсказок Google".

🚀 Автоматизируем поиск новых ключей через GSC API

Каждый месяц (или чаще) SEO-специалисту важно понимать: по каким новым запросам начали ранжироваться страницы. В стандартном интерфейсе Google Search Console сравнивать списки запросов за два периода «на лету» крайне неудобно.

🛠 Что умеет скрипт:
Сравнение периодов: автоматически берет данные за прошлый и позапрошлый месяцы (можно настроить вручную и указать текущий, но учитывайте что данные с задержкой 1-7 дней).


💡 Зачем это нужно?
Поиск точек роста: Видим новые «хвосты», под которые можно дооптимизировать контент.

Быстро находим страницы, которые начали цеплять релевантный (или не очень) трафик или показы после обновлений.



🔧 Как запустить:
Положить рядом файл credentials.json от вашего Google Service Account. Тут как его получить.

Установить зависимости: pip install streamlit pandas google-api-python-client.

Ссылка Github

#SEO #GSC #Python #Automation