💻 WaterCrawl — это веб-платформа, предназначенная для извлечения и структурирования данных с веб-страниц с целью последующего использования в системах обработки естественного языка (LLM).

Предоставляет API и инструменты для интеграции с различными языковыми моделями, такими как OpenAI, LangChain, Ollama и другими.

Основные возможности:
🔵Веб-скрейпинг и краулинг
🔵Интеграция с LLM (OpenAI, LangChain, Ollama и др.)
🔵Поддержка различных языков программирования (Python, TypeScript, Go, PHP и др.)
🔵Docker и самодеплоймент
🔵Интерфейсы и интеграции с платформами и сервисами (n8n, Dify и др.)

📱 Репозиторий

➡️Справочник Программиста. Подписаться

🔥 cattrs – это гибкая библиотека для сериализации и валидации данных в Python.

Отвечает за преобразование неструктурированных данных (например, словарей) в структурированные объекты (например, экземпляры классов attrs или dataclasses) и обратно, обеспечивая при этом удобство, надёжность и контроль валидации.

Основные особенности:
⏺Рекурсивное ненаструктурирование с возможностью кастомизации
⏺Рекурсивное структурирование на основе аннотаций типов, включая сложные типы и Union
⏺Встроенные конвертеры для популярных форматов (JSON, msgpack, cbor2, BSON, YAML и др.)
⏺Использование объектов Converter и хуков для гибкой настройки
⏺Отделение правил конвертации от моделей данных
⏺Лёгкий и предсказуемый дизайн с опорой на стандартный Python
⏺Поддержка Union-типов и TypedDict с возможностью продвинутой настройки

➡️Установка: pip install cattrs

📱 Репозиторий
⚙️ Документация

➡️Справочник Программиста. Подписаться

📱 AutoChatScript — это проект на Python, который автоматизирует взаимодействие с веб-версией ChatGPT, используя библиотеку PyAutoGUI.

Вместо прямых API-вызовов он симулирует действия пользователя в виде движений мыши, кликов, ввода с клавиатуры и считывания экрана, что позволяет ему работать без обратного анализа сетевых запросов или установки расширений для браузера.

Основные возможности:
🔵Автоматическая инициализация элементов управления
🔵Создание нового диалога
🔵Отправка сообщений
🔵Переработка сообщений
🔵Изменение и редактирование текста
🔵Возможность расширения под другие чат-сайты

📱 Репозиторий

➡️Справочник Программиста. Подписаться

⚒️ transfunctions — это Python-библиотека, предназначенная для устранения дублирования кода при работе с синхронными, асинхронными и генераторными функциями.

Позволяет создавать универсальные шаблоны функций, которые могут быть адаптированы под различные типы вызова, уменьшая необходимость писать отдельный код для каждого случая.

Основные особенности:
🔵Поддержка синхронных, асинхронных и генераторных функций на основе одного шаблона
🔵Использование контекстных менеджеров sync_context, async_context, generator_context
🔵Генерация функций на основе абстрактного синтаксического дерева (AST)
🔵Возможность создания «суперфункций», вызываемых как синхронные, асинхронные или генераторные
🔵Поддержка типизации и использование маркеров

➡️Установка: pip install transfunctions

📱 Репозиторий

➡️Справочник Программиста. Подписаться

👩‍💻 netmiko — это Python-библиотека для упрощённой автоматизации сетевых устройств через SSH.

Расширяет возможности стандартного paramiko, предоставляя удобный интерфейс для взаимодействия с роутерами, свичами и другими сетевыми устройствами разных производителей.

Основные возможности:
🔵Поддержка множества вендоров: Cisco, Juniper, HP, Dell, Huawei, Arista и др.
🔵Упрощённая работа с SSH-сессиями и отправкой команд.
🔵Автоматическая обработка подсказок CLI.
🔵Поддержка отправки конфигураций и выполнения скриптов.
🔵Возможность массового подключения к устройствам.

➡️Установка: pip install netmiko

📱 Репозиторий
⚙️ Документация
✅ Примеры

➡️Справочник Программиста. Подписаться

🤖 colorcodebot — это простой Telegram-бот, предназначенный для создания красивых изображений с подсветкой синтаксиса из фрагментов кода.

Основные функции бота:
⏺Преобразование моноширинного кода в изображение с подсветкой синтаксиса
⏺Автоматическое определение языка программирования
⏺Работа как в групповых чатах, так и в личных сообщениях
⏺Поддержка пересылки кода боту для генерации изображения

Основные библиотеки:
✅pyTelegramBotAPI
✅guesslang

📱 Репозиторий

➡️Справочник Программиста. Подписаться

🔤 guesslang — это инструмент на Python, предназначенный для определения языка программирования исходного кода.

Использует модель глубокого обучения, обученную на большом количестве исходных кодов, и может точно классифицировать код на 54 различных языках.

Основные возможности:
🔵Поддержка 54 языков программирования, включая Python, Java, JavaScript, C++, Go, Rust и другие.
🔵Точная классификация исходного кода с вероятностью более 90%.
🔵Поддержка командной строки для анализа кода из файлов или строк.
🔵Вывод вероятностей для каждого возможного языка, позволяя оценить степень уверенности модели.
🔵Интеграция с редакторами кода, такими как Visual Studio Code, для автоматического определения языка при вставке кода.
🔵Предоставление предобученной модели, совместимой с TensorFlow, для локального использования.
🔵Поддержка кроссплатформенности, включая Windows, macOS и Linux.

➡️Установка: pip install guesslang

📱 Репозиторий
⚙️ Документация

➡️Справочник Программиста. Подписаться

🚀 Pyngo — это библиотека, предоставляющая поддержку моделей Pydantic в проектах на Django и Django-REST-Framework.

Помогает легко интегрировать валидацию и сериализацию через Pydantic.

Основные особенности:
⏺Использование Pydantic для определения моделей в проектах Django
⏺Генерация OpenAPI-параметров из Pydantic-моделей
⏺Преобразование QueryDict в Pydantic-модель
⏺Передача деталей ошибок Pydantic в формат DRF

➡️Установка: pip install pyngo

📱 Репозиторий

➡️Справочник Программиста. Подписаться

🤖 telegram-bot-template — это шаблон для создания масштабируемого Telegram-бота с обширной инфраструктурной поддержкой.

Основные функции бота:
⏺Admin Panel на базе Flask-Admin + AdminLTE
⏺Система продуктовой аналитики: интеграция с Amplitude, Posthog или Google Analytics
⏺Система мониторинга производительности
⏺Система отслеживания ошибок
⏺Полная поддержка Docker и Docker Compose
⏺Экспорт всех пользователей в форматы .csv, .xlsx, .json, yaml через панель администратора
⏺CI-пайплайн, включая git-хуки и GitHub Actions
⏺Использование SQLAlchemy V2 для работы с БД
⏺Миграции базы данных через Alembic
⏺Кэширование запросов с помощью декораторов
⏺Валидация данных через Pydantic V2

Основные библиотеки:
✅aiogram
✅flask-admin
✅asyncpg
✅sqlalchemy
✅Redis

📱 Репозиторий

➡️Справочник Программиста. Подписаться

✍️ bolt-python - это официальный фреймворк от Slack для создания приложений на Python.

Предоставляет удобные инструменты для работы с Slack API и позволяет быстро разрабатывать ботов, приложения и рабочие процессы.

Основные особенности:
🔵Поддержка всех типов взаимодействий Slack (сообщения, события, модальные окна, команды)
🔵Встроенная веб-сервер для обработки запросов от Slack
🔵Простое создание middleware для обработки запросов
🔵Автоматическая проверка подлинности запросов от Slack
🔵Поддержка Socket Mode для работы без публичного эндпоинта
🔵Интеграция с популярными веб-фреймворками (Flask, Django, FastAPI)
🔵Встроенная система ошибок и логирования
🔵Поддержка OAuth flow для установки приложения
🔵Автоматический парсинг и валидация payload от Slack

➡️Установка: pip install slack_bolt

📱 Репозиторий
⚙️ Документация

➡️Справочник Программиста. Подписаться

🌐 safir — это Python-библиотека, предназначенная для упрощённой разработки сервисов на базе FastAPI, которые запускаются в Kubernetes-кластерах Phalanx — таких как Rubin Science Platform и Roundtable.

Основные особенности safir:
🔵Быстрое создание серверов на FastAPI в Kubernetes
🔵Шаблон для старта новых сервисов
🔵Поддержка асинхронного HTTP-клиента
🔵Структурированные метаданные приложения на Pydantic
🔵Поддержка метрик и централизованной диагностики
🔵Работа с Redis-очередями
🔵Интеграция логирования

➡️Установка: pip install safir

📱 Репозиторий
⚙️ Документация

➡️Справочник Программиста. Подписаться

🔥 msgspec — это высокопроизводительная библиотека для сериализации и валидации данных в Python, с встроенной поддержкой форматов JSON, MessagePack, YAML и TOML.

Основные особенности:
⏺Высокая скорость кодирования и декодирования данных
⏺Поддержка JSON, MessagePack, YAML и TOML
⏺Поддержка встроенных типов Python с возможностью расширения
⏺Валидация данных с использованием аннотаций типов
⏺Тип Struct для быстрых структурированных данных
⏺Отсутствие обязательных зависимостей
⏺Производительность значительно выше, чем у pydantic, cattrs и mashumaro

➡️Установка: pip install msgspec

📱 Репозиторий
⚙️ Документация

➡️Справочник Программиста. Подписаться

🖥 Всех С Днём Программиста!

🔥 LangExtract — это открытая Python-библиотека от Google, предназначенная для извлечения структурированной информации из неструктурированных текстов с использованием больших языковых моделей, таких как Gemini.

Позволяет преобразовывать клинические заметки, юридические документы, отчёты и другие тексты в структурированные данные, сохраняя точную привязку к исходному контексту.

Основные возможности:
⏺Точная привязка к источнику
⏺Надёжная структура данных
⏺Оптимизация для длинных документов
⏺Интерактивная визуализация
⏺Гибкая поддержка LLM
⏺Адаптивность к различным областям
⏺Использование знаний модели

➡️Установка: pip install langextract

📱 Репозиторий

➡️Справочник Программиста. Подписаться

🖼 AlbumentationsX — это Python-библиотека для обработки и улучшения изображений с помощью разных трансформаций (например, обрезка, переворот, изменение яркости).

Быстрая, удобная и легко интегрируется с PyTorch и TensorFlow.

Основные особенности:
🔵Поддержка всех типов данных: RGB, градации серого, маски, ограничивающие рамки и ключевые точки
🔵Более 70 высококачественных трансформаций, включая случайные обрезки, перевороты, изменения яркости и контраста
🔵Высокая производительность и ускорение аугментаций
🔵Совместимость с PyTorch, TensorFlow и другими фреймворками
🔵Простота использования с единым интерфейсом для всех типов данных

➡️Установка: pip install albumentationsx

📱 Репозиторий
⚙️ Документация

➡️Справочник Программиста. Подписаться

🤖 telegram-notifier — это проект Telegram-бота, который автоматически отправляет уведомления в Telegram при создании новых issues в вашем GitHub-репозитории.

Основные возможности
⏺Автоматическая отправка уведомлений: бот присылает сообщение в указанный чат или канал сразу после создания нового issue.
⏺Структурированное оформление: уведомления включают заголовок, описание и метки (labels) в виде хештегов.
⏺Простая интеграция с GitHub Actions: достаточно добавить несколько строк в workflow-файл для автоматической работы.

Основные библиотеки:
✅sulguk
✅requests

📱 Репозиторий

➡️Справочник Программиста. Подписаться

🌐 niquests — это современная HTTP-библиотека для Python, позиционируемая как улучшенная «drop-in replacement» для библиотеки Requests, в которой исправлены/расширены функции, давно не развивавшейся Requests.

Основные возможности:
🔵Поддержка HTTP/1.1, HTTP/2 и HTTP/3
🔵Асинхронная работа
🔵HTTP/2 мультиплексирование и lazy-ответы
🔵Поддержка DNS over HTTPS, DNS over QUIC, DNS over TLS и DNS over UDP
🔵Использование системного хранилища сертификатов вместо certifi
🔵Проверка отзыва сертификатов (OCSP, CRL)
🔵Работа с сессиями, cookies, keep-alive и connection pooling
🔵Алгоритм happy eyeballs для выбора соединения
🔵Поддержка SOCKS-прокси
🔵Интеграция с WebSocket

➡️Установка: pip install niquests

📱 Репозиторий
⚙️ Документация

➡️Справочник Программиста. Подписаться

🤖 learnflow-ai — это проект Telegram-бота для генерации и редактирования учебных материалов, который умеет превращать текст или даже рукописные заметки в структурированные учебные блоки: теорию, пояснения и проверочные вопросы.

Основные возможности:
⏺Распознавание рукописного текста (OCR) прямо из фото и превращение его в конспект.
⏺Генерация учебных материалов по любой теме с вопросами и ответами.
⏺Возможность редактировать и улучшать результат в диалоге.
⏺Поддержка мультимодальных команд: текст, изображения и т. д.
⏺Интеграция с LangGraph для гибкого построения workflow.
⏺Контейнеризация (Docker) и удобный запуск локально или в облаке.

Основные библиотеки:
✅aiogram
✅langchain
✅Pillow
✅FastAPI
✅sqlalchemy

📱 Репозиторий

➡️Справочник Программиста. Подписаться

💻 client_python — это официальная библиотека Prometheus для инструментирования приложений на Python, предоставляющая средства для сбора метрик и экспонирования их через HTTP-endpoint, чтобы Prometheus-сервер мог их опрашивать.

Основные возможности:
🔵Сбор метрик в Python-приложениях
🔵Экспонирование метрик через HTTP-endpoint для опроса Prometheus
🔵Интеграция с веб-фреймворками (Flask, FastAPI, Django)
🔵Поддержка мультипроцессного режима (например, для Gunicorn)
🔵Динамические метрики через callback-функции и custom collectors
🔵Возможность отключения автоматических метрик
🔵Парсинг и генерация формата метрик Prometheus
🔵Экспорт метрик через Pushgateway, файл-collector и мосты к Graphite

➡️Установка: pip install prometheus-client

📱 Репозиторий
⚙️ Документация

➡️Справочник Программиста. Подписаться