MetadataParser — это модуль Python для извлечения метаданных из веб-документов.
Для парсинга требуется BeautifulSoup. Для получения удаленных документов требуется Requests. Для парсинга доменов используется tldextract, но его можно отключить, задав переменную среды.
Этот проект используется в продакшене уже много лет и успешно обработал миллиарды документов.
🐱 GitHub
Для парсинга требуется BeautifulSoup. Для получения удаленных документов требуется Requests. Для парсинга доменов используется tldextract, но его можно отключить, задав переменную среды.
Этот проект используется в продакшене уже много лет и успешно обработал миллиарды документов.
Please open Telegram to view this post
VIEW IN TELEGRAM
🤔8😢3🤣2
Telegram-automated-db-backup — скрипт Python для автоматического резервного копирования базы данных с использованием Telegram в качестве облачного хранилища
🐱 GitHub
Please open Telegram to view this post
VIEW IN TELEGRAM
🤣27🔥9❤7
Media is too big
VIEW IN TELEGRAM
Two Claps Open — откройте Chrome (или любой файл / приложение), просто дважды хлопнув в ладоши
🐱 GitHub
Please open Telegram to view this post
VIEW IN TELEGRAM
🤣61❤7😢4
Scrapling — это фреймворк для веб-скрапинга на Python, который объединяет в одной библиотеке быстрые HTTP-запросы, скрытые браузеры, мощный парсинг и параллельное сканирование.
Скрапируйте статические страницы, рендерите JavaScript, взаимодействуйте с веб-сайтами и извлекайте данные из API-вызовов. Создавайте краулеры с возможностью повторного использования сессий, ротацией прокси, автоматическими повторными попытками, паузой/возобновлением и встроенным экспортом данных.
Используйте его из Python, терминала или своего ИИ-агента через сервер MCP и агентский навык. Scrapling охватывает весь процесс парсинга — от извлечения нескольких полей до сбора данных со всего сайта в виде чистого Markdown.
🐱 GitHub
Скрапируйте статические страницы, рендерите JavaScript, взаимодействуйте с веб-сайтами и извлекайте данные из API-вызовов. Создавайте краулеры с возможностью повторного использования сессий, ротацией прокси, автоматическими повторными попытками, паузой/возобновлением и встроенным экспортом данных.
Используйте его из Python, терминала или своего ИИ-агента через сервер MCP и агентский навык. Scrapling охватывает весь процесс парсинга — от извлечения нескольких полей до сбора данных со всего сайта в виде чистого Markdown.
Please open Telegram to view this post
VIEW IN TELEGRAM
🔥14🤣3😢2
PDF-Extract-Kit — комплексный инструментарий для высококачественного извлечения содержимого в формате PDF
🐱 GitHub
Please open Telegram to view this post
VIEW IN TELEGRAM
🤣7🤔3😢2
Please open Telegram to view this post
VIEW IN TELEGRAM
🤔16🔥4🤓2
Deep-Live-Cam — замена лиц в реальном времени и создание дипфейков одним щелчком мыши с использованием всего одного изображения
🐱 GitHub
Please open Telegram to view this post
VIEW IN TELEGRAM
Please open Telegram to view this post
VIEW IN TELEGRAM
❤16😢4🤓1