🔥 Полезные библиотеки Python

MetadataParser — Python-библиотека, которая вытащит всё о сайте по одной ссылке!

👀 описание страницы;
👀 ключевые слова;
👀 местоположение;
👀 изображения;
👀 авторов и другое полезное добро.

Устанавливается в один клик:

pip install metadata_parser

♎️ GitHub/Инструкция с примерами кода

#python #soft #code #github

💻 user-scanner — инструмент OSINT-разведки по email и нику

Если тебе нужно понять, где светится человек, с чего начать цифровой профиль и как быстро собрать первичную картину — вот инструмент.

Сканер проверяет:
🖱 зарегистрирован ли конкретный email на популярных платформах.
🖱 занят ли конкретный username в соцсетях, dev-сервисах, creator-площадках.
🖱 существует ли уникальный ник в экосистеме GitHub/Reddit/Twitter/Instagram* и д.р.

* Принадлежит корпорации Meta, которая признана в РФ экстремистской.

Что умеет
✅Email & Username OSINT в одном инструменте.
✅Режимы: email-scan, username-scan, username-only.
✅Категории платформ (dev/social/creator и т.д.) + выбор конкретного модуля.
✅Массовое сканирование из файла.
✅Перестановки username (wildcard-вариации).
✅Вывод: консоль / JSON / CSV.
✅Поддержка прокси с ротацией + предвалидация.
✅Автообновление через PyPI.

🚀 Быстрый старт

python -m venv .venv
source .venv/bin/activate
python -m pip install --upgrade pip
pip install user-scanner

▶️ Базовое использование

# Проверка одного email, получаешь карту регистрации email по платформам.

user-scanner -e john_doe@gmail.com

# Проверка одного username. Получаешь список сайтов, где ник уже занят.

user-scanner -u john_doe

# Поиск только по GitHub:

user-scanner -u john_doe -m github

🔗 Работа через прокси

user-scanner -u john_doe -P proxies.txt --validate-proxies

Почему это полезно в OSINT
🟢 Построение цифрового профиля
🟢 Проверка бренда
🟢 Информационная безопасность
🟢 Расследования

Это базовая техника цифровой разведки.

⚠️ Информация предоставлена исключительно с целью ознакомления. И побуждает обратить внимание на проблемы в безопасности.

♎️ GitHub/Инструкция

#python #soft #github

🔊 telegram-automated-db-backup — полезный Python скрипт для ежедневного дампа MySQL и отправки архива в Telegram(в любой чат, группу или избранное)

Идеально, если:
✅держишь сервер/проект на MySQL/MariaDB,
✅хочешь “бэкап каждый день и чтобы он сам приезжал в мессенджер”,
✅не хочешь настраивать облака/хранилища на старте.

🚛 Установка:

sudo apt install python3 python3-pip zip mysql-client
pip3 install pyrogram tgcrypto

Настройка
➡️В Telegram забираем chat_id, username, api_id и api_hash.
➡️Доступ к БД: заполням креды MySQL и параметры архивирования: mysql_username/mysql_password,
базы (world_db, char_db, auth_db) как пример.
➡️Настройки ZIP: zip_password, zip_name.

▶️ Запуск:

python3 bak.py

Можно автоматизировать запуск по расписанию используя cron:

crontab -e
0 0 * * * cd ~/root/path/project/; python3 bak.py

А также создавать дамп любой таблицы по отдельности, а не целым архивом используя готовый скрипт bak-per-table.py

♎️ GitHub/Инструкция

#python #soft #github

🙂 Клонировать любой голос за пару секунд? Легко.

Voicebox — локальная нейросеть для клонирования речи. По сути, бесплатная альтернатива ElevenLabs, только без подписок и ограничений.

🔊 Настоящий “голосовой фотошоп”:
загружаешь короткий фрагмент аудио — получаешь полноценный клон голоса.

Что умеет:
➡️ Создаёт копию голоса по небольшому аудиофайлу.
➡️ Озвучивает любой текст выбранным голосом.
➡️ Позволяет собирать диалоги и подкасты из нескольких голосов.
➡️ Записывает и расшифровывает аудио.
➡️ Работает полностью локально — все файлы и проекты остаются у тебя на ПК.

Можно озвучивать видео, презентации, ролики для соцсетей, мемы или даже создавать фейковые интервью.

♎️ GitHub/Инструкция

#python #soft #github

💻 Scrapling — парсим весь интернет в один клик

Не просто ещё одна Python-библиотека для парсинга страниц. Это — адаптивная экосистема, которая не ломается от первого же апдейта сайта и умеет самостоятельно находить ваши данные, даже если структура DOM поменялась.

🚫 Забудьте про бесконечный ребейз селекторов, бессмысленные переписывания парсеров и костыли на продакшене.

Scrapling — это:
✔️ Python-фреймворк от одного запроса до масштабного краулера.
✔️ Адаптивный парсер, который «понимает» изменения DOM.
✔️ Мощный набор инструментов для обхода анти-бота и динамического контента.
✔️ Библиотека, которую можно запустить в пару строк кода и она работает.

⚙️ Простая установка:

pip install scrapling

😰 Минимальный пример на Python

from scrapling.fetchers import StealthyFetcher

page = StealthyFetcher.fetch("https://example.com", headless=True)
titles = page.css(".post-title", adaptive=True).getall()
print(titles)

🪄 Адаптивные селекторы

Scrapling может обучить ваш парсер тому, как выглядят нужные элементы, и повторно находить их, даже если сайт их перемещает или перестраивает.

🕸 Обход анти-ботов и динамики

Умеет обходить защиту сайтов (например, Cloudflare Turnstile) из коробки, а также загружать страницы через полноценный браузер (Playwright).

⚡️ Spider-фреймворк с паузами/возобновлением

Может работать как полноценный краулер с:
* параллельными сессиями
* автоматической ротацией прокси
* возможностью паузы и продолжения
* статистикой в реальном времени — и всё это без тонны кода.

♎️ GitHub/Инструкция

#python #soft #github

💻 Antidetect Tools — полный арсенал для анонимного серфинга.

Если ты хоть раз сталкивался с антибот-системами или жёсткими проверками сайтов, то знаешь: обычных прокси или квн* будет маловато.

Здесь нужны настоящие инструменты антидетекта, которые маскируют твои действия под человека.

В этом репозитории собраны лучшие ресурсы:

🖥 Anti-detect браузеры — меняй отпечатки как перчатки.
📚 Библиотеки для антидетекта — интеграция прямо в код.
👊 Humanizing — эмуляция реального поведения.
🔐 Капча-решатели — обходи самые надоедливые проверки.
📲 SMS-сервисы для подтверждений.
🌍 Прокси для смены IP.
⚡️ Практические советы по антидетекту.

🔗 Репозиторий

Must-have подборка для ресёрча, тестирования и повышения приватности.

Сохраняй, чтобы не потерять 💾

#soft #github #pentest

📦 PDF-Extract-Kit — инструмент, который превращает хаотичные PDF в аккуратные структурированные данные.

🧾 Вытаскивает таблицы в нормальный табличный формат.
🔢 Отдельно извлекает цифры, поля, блоки.
📝 Парсит текст с сохранением структуры.
📊 Работает даже с «кривыми» сканами и сложной вёрсткой.
🧠 Понимает layout документа, а не просто OCR-ит его.

По сути — превращает PDF в чистые JSON / структурированные данные для дальнейшей обработки.

Где пригодится:

🟢Студенты
Быстро вытаскивают таблицы, цитаты и списки литературы из научных статей.
🟢Офис/фриланс
Счета, договоры, акты, анкеты — вместо ручного копирования получаешь структурированные данные.
🟢Аналитика
Можно автоматически забирать цифры из отчётов и загружать в свои системы.

💬 Прогнал через модель и получил чистую структуру.

⬇️ Сохраняем и пробуем

#python #soft #github

⚡️ Fara-7B — компактную агентная модель от Microsoft, которая не просто «болтает», а управляет браузером как человек.

Это не чат-бот.
Это Computer Use Agent.

🖱 Что умеет:

➡️ Видит веб-страницу визуально.
➡️ Скроллит.
➡️ Кликает по координатам.
➡️ Вводит текст.
➡️ Выполняет многошаговые задачи.

Без accessibility tree, без костылей, без отдельного парсинга DOM — модель работает через визуальное восприятие интерфейса!


💻 Можно автоматизировать:

💬 Поиск и резюмирование информации.
💬 Заполнение форм.
💬 Покупки и сравнение цен.
💬 Бронирование билетов и ресторанов.
💬 Поиск вакансий и недвижимости.

По сути — это автономный браузерный ассистент.

🟢Установка:

git clone https://github.com/microsoft/fara.git
cd fara

🟢Создаёшь окружение:

python3 -m venv .venv
source .venv/bin/activate
pip install -e .[vllm]
playwright install

🟢Запускаешь модель:

vllm serve "microsoft/Fara-7B" --port 5000 --dtype auto

🟢И тестируешь:

fara-cli --task "whats the weather in new york now"

Можно подключить к Magentic-UI и управлять через графический интерфейс.

⚠️ На Windows лучше использовать WSL2.
⚠️ Если не хватает памяти — добавь --tensor-parallel-size 2.

♎️ GitHub/Инструкция

#python #soft #github

📞 pytgcalls — библиотека для работы с голосовыми чатами Telegram через Python

Позволяет управлять звонками и голосовыми чатами от имени бота или юзербота и легко встраивать эти функции в свои проекты.

Работает с популярными MTProto-клиентами:
Pyrogram, Telethon и Hydrogram, поэтому можно использовать любую удобную основу.

Что умеет:
🟢подключаться к голосовым чатам в группах и каналах,
🟢заходить в чат от имени пользователя или канала,
🟢управлять звуком — включать/выключать микрофон,
🟢ставить воспроизведение на паузу и возобновлять,
🟢запускать и останавливать аудио,
🟢регулировать громкость.

😰 Простой пример использования

from pytgcalls import PyTgCalls
from pytgcalls import idle
...
chat_id = -1001185324811
app = PyTgCalls(client)
app.start()
app.play(
    chat_id,
    'http://docs.evostream.com/sample_content/assets/sintel1m720p.mp4',
)
idle()

Также есть готовые сборки для:
🍏 macOS,
🐧Linux,
🪟 Windows,

что упрощает установку и запуск на разных платформах.

♎️ GitHub/Инструкция

#python #soft #github

💀 Инструмент для OSINT-разведки, который собирает данные из десятков открытых источников

Проект Master OSINT Toolkit — Python-набор инструментов для проведения расследований по открытым данным. Создан как удобный инструмент для исследований и помогает автоматизировать поиск информации в интернете.

Инструмент объединяет несколько направлений разведки в одном интерфейсе.

🔎 Анализ изображений и геолокации
💬 извлечение GPS-координат из EXIF-метаданных фотографий,
💬 поиск локаций через карты и спутниковые сервисы,
💬 обратный поиск изображений через поисковые системы.

📱 Поиск по социальным сетям
💬 проверка никнейма на десятках платформ,
💬 поиск информации о телефонных номерах (оператор, тип связи и другие данные).

🗳 Анализ электронной почты
💬 проверка адресов на утечки через сервис HaveIBeenPwned,
💬 верификация почты через сервисы вроде Hunter и Epieos.

🌐 Исследование доменов и IP
💬 получение WHOIS-информации,
💬 просмотр DNS-записей,
💬 поиск поддоменов,
💬 определение геолокации IP-адреса и проверка по чёрным спискам.

🖥 Архивы сайтов
💬 доступ к сохранённым версиям страниц через Wayback Machine.

🧩 Анализ сайтов
💬 сбор метаданных веб-страниц,
💬 извлечение различных объектов из сайтов.

Установка:

python3 -m venv venv
source venv/bin/activate

pip install requests beautifulsoup4 waybackpy spacy phonenumbers exifread tldextract python-whois dnspython
python -m spacy download en_core_web_sm

Запуск:

python master_osint.py

👨‍💻 По сути это универсальный набор инструментов, который объединяет несколько популярных методов разведки — от анализа изображений до проверки утечек данных — в одном месте.

♎️ GitHub/Инструкция

⚠️ Информация предоставлена исключительно с целью ознакомления. И побуждает обратить внимание на проблемы в безопасности.

😁 Админ | 📲 Max

#python #soft #github

📸 restorePhotos — ИИ-сервис, который умеет восстанавливать старые и повреждённые фотографии с лицами.

Работает на базе модели GFPGAN, которая специально обучена реконструировать человеческие лица на снимках.

Что делает нейросеть:
🟢дорисовывает недостающие детали лица,
🟢убирает шум и артефакты,
🟢повышает резкость,
🟢восстанавливает размытые или повреждённые портреты.

В результате старые снимки буквально получают вторую жизнь.

⚙️ Пользоваться очень просто:
1. Загружаете старую фотографию.
2. Нейросеть анализирует лицо на изображении.
3. Через несколько секунд получаете восстановленную версию.

Проект полностью открытый. При желании можно развернуть локально на своём компьютере.

Инструмент отлично подходит для:
💬 восстановления семейных архивов,
💬 улучшения старых портретов,
💬 обработки размытых или повреждённых фото.

👉 Сохраняем и пробуем бесплатно ТУТ

😁 Лайв | 📲 Max

#soft #nn #нейросеть #github

💻 Wi-Fi превратили в радар: на GitHub выложили систему, которая «видит» людей через стены и даже считывает пульс

RuView — необычный open-source проект. Система, которая использует обычные Wi-Fi-сигналы как сенсор для отслеживания людей в помещении.

Алгоритм анализирует отражения Wi-Fi-сигналов от человеческого тела и по изменению этих волн восстанавливает то, что происходит в комнате — даже если человека не видно напрямую.

Что умеет система:
💬 отслеживает 17 ключевых точек позы тел;
💬 фиксирует дыхание (примерно 6–30 вдохов в минуту);
💬 измеряет пульс на расстоянии (около 40–120 BPM);
💬 может обнаруживать людей через стены, мебель и завалы на дистанции до ~5 метров;
💬 поддерживает отслеживание нескольких человек одновременно.

⚙️ Работает это так: Wi-Fi-сигналы отражаются от тела человека и немного меняются из-за:
🟢микродвижений,
🟢дыхания
🟢или сердцебиения.
Алгоритм анализирует эти изменения и восстанавливает модель происходящего в пространстве.

Кроме экспериментов, у технологии есть и практическое применение: например, поиск людей под завалами после катастроф, когда нужно определить, есть ли признаки жизни и где именно находится человек.

Проект полностью open-source, код доступен на GitHub.

♎️ GitHub/Инструкция

#soft #github