🔥 Полезные библиотеки Python

Awesome-Crawler — подборка модулей и ресурсов для скрапинга/парсинга данных на Python и других языках.

🐍 Подборка по Python

⚙️ GitHub/Инструкция

[Мир Кодов

📈 12 Python-библиотек и API для финансов, инвестиций и алготрейдинга:

yfinance — доступ к акциям, крипте, опционам (Yahoo Finance).
pandas-datareader — исторические и макроданные.
IBApi — официальный API Interactive Brokers.
Alpha Vantage — бесплатный API для котировок и крипты.
Nasdaq Data Link — миллионы датасетов.
Twelve Data — 100к+ тикеров: акции, FX, ETF.
Polygon.io — реальные и исторические данные.
Tradier API — торговля и аналитика.
alpaca-py — стриминг, торговля, портфели.
Finnhub — REST + WebSocket для рынков.
marketstack — 170к+ тикеров, данные за 30 лет.
Tiingo — котировки EOD + рыночные новости.

👍 Незаменимо для финансового анализа и трейд-ботов.

GitHub, ссылки и доки в исходнике.
Сохраняй — пригодится!

#Python #Финансы #AlgoTrading

Мир Кодов

🌐 Google Maps Scraper — Python-скрипт для парсинга данных о компаниях: название, адрес, телефон, сайт, отзывы, рейтинг, доставка, самовывоз. Результат — CSV-таблица.

Применение:
📈 Поиск лидов
🎯 Настройка рекламы
📊 Анализ рынка
📞 База контактов
🤖 Интеграция с CRM и AI

Соберите все автосервисы, магазины, кафе или отели в любом городе за минуты.

Установка:
```git clone https://github.com/zohaibbashir/Google-Maps-Scrapper.git
cd google-maps-scraper
pip install -r requirements.txt
playwright install```

▶️ Пример:
```python main.py -s "Turkish Restaurants in Toronto Canada" -t 20 -o toronto_turkish_restaurants.csv --append```

♎️ GitHub: https://github.com/zohaibbashir/Google-Maps-Scrapper

#Python #Parser #Marketing
Мир Кодов

😰 Python-шпаргалка: модуль datetime для работы с датой и временем.

📅 Основные коды форматирования:
%a — сокр. день (Mon), %A — полный (Monday)
%b — сокр. месяц (Jan), %B — полный (January)
%d — день (01–31), %m — месяц (01–12), %y — год (23), %Y — год (2023)
%H — часы (00–23), %I — 12-часовы (01–12), %M — минуты, %S — секунды (до 61 😉)
%f — микросекунды, %p — AM/PM, %z — смещение UTC, %Z — часовой пояс
%j — день года (001–366), %U/%W — неделя от воскресенья/понедельника

Примеры:
from datetime import datetime
now = datetime.now()
now.strftime("%A, %d %B %Y") → Wednesday, 03 September 2025
"%a, %d.%m.%y" → Wed, 03.09.25
"%H:%M:%S" → 12:45:30, "%I:%M %p" → 12:45 PM

👍 Сохрани на память!

#Python #Datetime #МирКодов
Мир Кодов

💻 Stealth-Requests — Python-библиотека, маскирующая запросы под Chrome или Safari. Скрывает TLS-отпечаток, обходит детекцию, работает с прокси и AsyncIO.

⚡️ Практическая замена requests: минимум правок в коде.
🛡 Обходит блокировки 429, 503 — автоматически повторяет запросы.
🔄 Извлекает из HTML: заголовок, описание, автора, ссылки, изображения, email, таблицы, телефоны.

🧠 Конвертирует HTML в Markdown, даёт доступ к BeautifulSoup и lxml.
🚀 Установка: `pip install stealth_requests`

▶️ Пример:
```python
import stealth_requests as requests
resp = requests.get("https://example.com")
print(resp.meta.title, resp.emails)
```

Асинхронно:
```python
async with AsyncStealthSession() as session:
resp = await session.get("https://example.com")
```

👉 Для парсинга, скрейпинга и мониторинга — без детекции.
GitHub: https://github.com/jpjacobpadilla/Stealth-Requests
😳 Лайф | 📲 Зеркало Max

#Python #Parsing #Automation
https://t.me/pythonpentestertoday
Мир Кодов

🔥 Парсим Ozon

Ozon-parser — инструмент для быстрого сбора данных с GUI и Telegram-ботом.

📦 Возможности:
— До 10 000 товаров из любой категории
— Артикулы, названия, цены
— Данные о продавцах: ИНН, рейтинг, объём
— Многопоточность — в разы быстрее
— Экспорт в Excel/JSON + отправка в Telegram

⌨️ Управление: /start, /status, /settings — через бота или GUI

💬 Для: e-commerce аналитиков, поставщиков, реселлеров, исследователей, автоматизаторов

🚀 Запуск за пару кликов

⚙️ Установка:
git clone https://github.com/NurjahonErgashevMe/ozon-parser
cd ozon-parser
pip install -r requirements.txt

▶️ Запуск:
GUI: python main.py
Бот: python bot.py
CLI: python app.py

📲 Выбирай: бот, GUI или CLI. Собирай данные быстро.

🔗 GitHub и инструкция: https://github.com/NurjahonErgashevMe/ozon-parser
👇 Готовый архив

Лайф | Зеркало Max

#Ozon #парсер #Python

Мир Кодов

🛡 TLG_JoinCaptchaBot — защита от спам-ботов в Telegram.

Для админов чатов: автоматическая капча для новых участников. Не прошёл — выгнали. Поддержка изображений, настройка времени, сложности и языков.

🔍 Возможности:
➡️ Капча при входе
➡️ Выход при провале
➡️ Настройка под себя

🟢 Открытый исходник (GPL-3.0)
🟢 Работает на вашем сервере
🟢 Простая настройка

⚙️ Подключение:
1. Клонируй репо:
`git clone https://github.com/J-Rios/TLG_JoinCaptchaBot.git`
2. Установи:
`pip install -r requirements.txt`
3. Настрой переменные и запускай.

⚠️ В эпоху спама — верификация обязательна. Это простой и рабочий способ защитить чат.

5️⃣ Подробности: https://github.com/J-Rios/TLG_JoinCaptchaBot
👇 Код бота — в закрепе

#Telegram #Безопасность #Python
Мир Кодов

🔍 Holehe — open-source инструмент на Python для цифровых расследований. По email выявляет аккаунты в Twitter, Instagram* и 120+ сервисах. Использует функцию «забыл пароль» — без уведомлений.

Выдача в JSON, CLI, интеграция с Maltego. Есть данные вроде телефонов.

⚙️ Установка: `pip3 install holehe`
▶️ Пример: `holehe test@gmail.com`

😰 На Python:
```
import trio, httpx
from holehe.modules... import snapchat
async def main():
email = "test@gmail.com"
out = []
client = httpx.AsyncClient()
await snapchat(email, client, out)
print(out)
await client.aclose()
trio.run(main)
```

💻 Полезен аналитикам, кибердетективам, специалистам по безопасности.

*Принадлежит Meta (в РФ признана экстремистской).

⚙️ [GitHub/Инструкция](https://github.com/megadose/holehe)
😳 [Лайф](https://t.me/akagodlike) | 📲 [Зеркало Max](https://max.ru/python2day)

#OSINT #Python #кибербезопасность
Мир Кодов

⛏ Freqtrade — бесплатный open-source бот на Python для криптовалют. Работает на Binance, Bybit, OKX и др., управляется через Telegram или веб.

🔹 Поддержка топ-бирж
🔹 Управление: Telegram, веб-интерфейс
🔹 Бэктестинг, визуализация, ML-оптимизация
🔹 FreqAI — прогнозирование и адаптация

⚙️ Установка:
1. Клонируйте: git clone https://github.com/freqtrade/freqtrade.git
2. Перейдите: cd freqtrade
3. Установите Docker
4. Соберите: docker-compose build
5. Создайте: ./freqtrade create-userdir --userdir user_data
6. Конфиг: ./freqtrade new-config --config user_data/config.json
7. Запуск: docker-compose run --rm freqtrade trade --config user_data/config.json --dry-run

📈 Тестируйте стратегии. Подходит новичкам и профи.

☠️ Только обучение. Авторы не несут ответственности.
GitHub: https://github.com/freqtrade/freqtrade
😳 Лайф | 📲 Зеркало Max

#Freqtrade #Криптобот #Python
Мир Кодов

💀 SearchPhone — Python-инструмент для OSINT по телефону. За один запуск проверяет утечки, нормализует номер, определяет страну, оператора, часовой пояс, ищет в Google, DuckDuckGo, GitHub, соцсетях. Поддерживает Hudson Rock — без API-ключа. Данные сохраняются в JSON и PDF.

⚙️ Установка:
git clone https://github.com/HackUnderway/SearchPhone.git
cd SearchPhone
pip install -r requirements.txt

Конфиг:
cp example.env .env
nano .env

Ключи:
NUMVERIFY_KEY=...
SERPAPI_KEY=...
GITHUB_TOKEN=...

▶️ Запуск:
python3 search_phone.py

Введите номер — получите полный отчёт. Работает на Windows и Linux.

🔗 GitHub: https://github.com/HackUnderway/SearchPhone
🔥 Один скрипт — вся информация из десятков источников.

#OSINT #Python #SearchPhone
Мир Кодов

📈 Smart Money Concepts — open-source для алгоритмического трейдинга на Python.

Автоматически находит:
🟢 блоки ордеров,
🟢 зоны ликвидности,
🟢 Fair Value Gaps,
🟢 swing-экстремумы,
🟢 пробои (BOS) и смену динамики (CHoCH).

📊 Вместо ручной разметки — анализ графика и данные для стратегий, скринеров и ботов.

Ищет: FVG, Order Blocks, Liquidity, Swing High/Low, BOS, CHoCH, уровни с других таймфреймов, сессии (London, NY, Tokyo), откаты.

Установка:
pip install smartmoneyconcepts

Использование:
from smartmoneyconcepts import smc

Создавайте стратегии на pandas.

🔥 Для тех, кто использует Python в трейдинге (крипта, форекс, алготрейдинг). Данные вместо ручной работы — фильтруйте, тестируйте, применяйте.

⚠️ Не гарантия прибыли. Не используйте как единственный источник решений!

🔗 GitHub: https://github.com/joshyattridge/smart-money-concepts

#алготрейдинг #Python #трейдинг
Мир Кодов

⚡️ Linecast — погодная станция, карта и планетарий в терминале. Open-source, без API, с графикой и мышью.

🌦 linecast weather — погода, воздух, оповещения (45 стран).
☀️ linecast sunshine — Солнце, рассветы, закаты.
🌙 linecast moon — фазы Луны, восход/заход.
✨ linecast sky — 8404 звезды, созвездия, планеты. До 117 000 при зуме.
🌊 linecast tides — приливы и отливы.
🌧 linecast radar — анимация осадков, температуры, ветра, спутники.
🗺 linecast maps — улицы, рельеф, поиск, маршруты. На зуме — глобус с дня/ночи и облаками.

Работает на Python 3.10+, без зависимостей. Поддержка Windows, Linux, macOS, 20 языков и тем терминала.

⚙️ Установка: pip install linecast
▶️ Без установки: uvx linecast weather
♎️ GitHub/Инструкция

Мир Кодов
#Python #CLI #OpenSource