AI-Trader — open-source платформа для трейдинга, где торговые идеи, сигналы и стратегии создают AI-агенты.
Проект позволяет подключать разных агентов, публиковать торговые сигналы, обсуждать стратегии, копировать сделки топовых участников и синхронизировать их с брокерами.
Внутри:
#python #soft #github
Please open Telegram to view this post
VIEW IN TELEGRAM
1👍20🔥8❤3🤯1
#python #soft #github
Please open Telegram to view this post
VIEW IN TELEGRAM
👍25🔥8❤4🤯1
Пока одни вручную копируют контакты, цены и объявления, другие за минуты собирают тысячи записей, анализируют рынок, ищут клиентов, мониторят конкурентов и строят сервисы, которые сами приносят деньги.
Настоящий комбайн для AI. Превращает практически любой сайт в чистый Markdown или структурированный JSON, умеет искать, скрейпить и взаимодействовать с веб-страницами. Отлично подходит для RAG, LLM и AI-агентов.
Современный Python-краулер, который сразу подготавливает страницы для LLM. Получаете чистый Markdown без лишнего HTML и рекламы — идеально для AI-проектов и больших пайплайнов.
AI-агент, который сам управляет браузером: кликает, авторизуется, заполняет формы, переходит по страницам и собирает нужную информацию через интерфейс сайта.
Production-фреймворк для серьёзного парсинга. Очереди, ретраи, прокси, браузерная автоматизация, сохранение результатов и масштабирование «из коробки».
Классика Python-парсинга, которая до сих пор остаётся одним из лучших инструментов для создания быстрых и надёжных краулеров.
Фреймворк, рассчитанный на более устойчивый парсинг сайтов, которые регулярно меняют свою HTML-разметку.
Позволяет полностью управлять Android-смартфоном с компьютера. Полезен, если нужные данные доступны только через мобильное приложение.
Показываете пример нужных данных — библиотека сама пытается определить шаблон и найти аналогичные элементы на странице. Отличный вариант для быстрого старта.
Специальная версия curl, которая имитирует сетевой профиль популярных браузеров. Полезна для тестирования совместимости и работы с сайтами, чувствительными к отпечатку клиента.
Если сайт полностью построен на JavaScript, без современного браузерного движка уже никуда. Playwright остаётся одним из самых популярных инструментов для автоматизации браузера и сбора данных с динамических сайтов.
#soft #github #python
Please open Telegram to view this post
VIEW IN TELEGRAM
1🔥46❤21👍11
Aliens Eye — мощный open-source набор утилит, который помогает собирать информацию из открытых источников и автоматизировать десятки задач по поиску данных.
Инструмент пригодится:
#python #soft #github
Please open Telegram to view this post
VIEW IN TELEGRAM
👍27🔥9❤4
This media is not supported in your browser
VIEW IN TELEGRAM
PokieTicker — настоящий индекс страха! Инструмент, который помогает понять, почему акции растут или падают, объединяя графики, новости и машинное обучение.
Возможности:
#python #soft #github
Please open Telegram to view this post
VIEW IN TELEGRAM
👍47❤13🔥10
CAPTCHA Solver — интересный open-source проект, который предлагает трёхуровневый подход для работы с CAPTCHA при автоматизации браузера.
Внутри:
Есть бесплатный режим. Сохраняем, пригодится!
#python #soft #github
Please open Telegram to view this post
VIEW IN TELEGRAM
1👍21❤11🔥6
В отличие от обычного OCR:
Идеально для тех, кто загружает документы в ChatGPT, Claude, строит RAG, базы знаний или просто устал копировать текст из PDF вручную.
pip install -U mineru
mineru input.pdf -o output/
На выходе получите:
Сохраняем. Один из самых полезных инструментов для работы с документами и ИИ за последнее время.
#python #soft #github
Please open Telegram to view this post
VIEW IN TELEGRAM
👍38❤11🔥9
Полный арсенал для пентеста и аудита безопасности, аккуратно разложенный по категориям — от разведки до финального отчёта.
🕵️ Разведка
Инструменты, которые показывают, какие данные о вас, доменах и компаниях уже лежат в открытом доступе.
🧨 Сканеры уязвимостей
Проверяют сайты, API и сервера на дыры — от банальных misconfig до серьёзных проблем безопасности.
⚔️ Пентест-инструменты
Эмуляция атак, чтобы понять, где система «сыпется» под давлением.
📡 Анализ Wi-Fi и сетей
Проверка сетей на возможность перехвата трафика и несанкционированного доступа.
🧠 Digital Forensics
Вытаскивание удалённых файлов, метаданных и цифровых следов.
🚀 Стресс-тестирование
Нагрузка на сервисы и сайты, чтобы проверить их предел прочности.
🔍 Перехват и анализ трафика
Смотрим, какие данные реально гуляют по сети.
🔐 Тестирование паролей
Проверка устойчивости к брутфорсу и слабым комбинациям.
🌐 Анализ веб-приложений
Поиск скрытых директорий, уязвимых эндпоинтов и багов в коде.
🧩 Реверс-инжиниринг
Разбор программ «по косточкам», чтобы понять их внутреннюю механику.
🎣 Социальная инженерия
Тестирование человеческого фактора.
Must-have закладка — сохраняем!
#github #soft
Please open Telegram to view this post
VIEW IN TELEGRAM
👍21🔥8❤3
Приложение полностью оффлайн — без серверов и телеметрии. Опциональный движок peer-to-peer синхронизации позволяет устройствам обмениваться заметками напрямую по локальной сети.
python3.11 -m venv .venv
source .venv/bin/activate
pip install -r requirements.txt
./run.sh
#python #soft #github
Please open Telegram to view this post
VIEW IN TELEGRAM
👍25🔥13❤1🤯1😱1
Автоматически имитирует поведение реального браузера, маскирует TLS-отпечаток, поддерживает прокси и сразу предоставляет удобные инструменты для парсинга HTML.
requests — менять код практически не нужно.Сам извлекает:
* заголовок страницы;
* описание;
* автора;
* ссылки;
* изображения;
* email;
* HTML-таблицы;
* номера телефонов и д.р.
pip install stealth_requests
Обычный GET-запрос:
import stealth_requests as requests
resp = requests.get("https://example.com")
print(resp.status_code)
print(resp.text)
Использование сессии:
from stealth_requests import StealthSession
with StealthSession() as session:
resp = session.get("https://example.com")
Получить метаданные страницы:
print(resp.meta.title)
print(resp.meta.description)
print(resp.meta.author)
Получить все ссылки:
print(resp.links)
Получить email-адреса:
print(resp.emails)
Конвертировать страницу в Markdown:
markdown = resp.markdown()
Асинхронные запросы:
from stealth_requests import AsyncStealthSession
async with AsyncStealthSession() as session:
resp = await session.get("https://example.com")
requests: минимум изменений в коде, встроенная маскировка под браузер и множество полезных инструментов для работы с HTML «из коробки».#python #soft #github
Please open Telegram to view this post
VIEW IN TELEGRAM
❤26👍15🔥7🤯1
С графическим интерфейсом и Telegram-ботом. Многопоточный сбор данных о товарах и продавцах.
— /start, /status, /settings — бот принимает команды
— Настраиваешь, парсишь, смотришь результат в Excel
— Всё логируется, всё под контролем
— E-commerce аналитиков
— Поставщиков
— Реселлеров
— Исследователей маркетплейсов
— И просто фанатов автоматизации
git clone https://github.com/NurjahonErgashevMe/ozon-parser
cd ozon-parser
pip install -r requirements.txt
GUI интерфейс:
python main.py
Только Telegram бот:
python bot.py
Парсинг из командной строки:
python app.py
#python #github #soft
Please open Telegram to view this post
VIEW IN TELEGRAM
👍17🔥6❤3