🕷️ WEB CRAWLER 2.0: Парсим сайты в JSON/CSV за минуты

Новый open-source инструмент для автоматизации сбора данных с веб-страниц. Работает через простой CLI или Python API. Идеально подходит для анализа данных, SEO-аудитов и ML-задач!

🔑 Основные возможности:
▪️ Экспорт в LLM-дружественные форматы: JSON Lines и CSV
▪️ Гибкий парсинг: текст, заголовки, ссылки или кастомные CSS-селекторы
▪️ Масштабирование: асинхронные запросы с контролем скорости
▪️ Обход защиты: рандомные User-Agent и поддержка прокси

📦 Установка:

pip install website-crawler

💡 Пример сбора всех ссылок с сайта:

from website_crawler import Crawler

crawler = Crawler(
    start_url="https://example.com",
    max_depth=2,
    output_format="json"
)
crawler.run()

🚀 Фишки:
▪️ Автоопределение sitemap.xml
▪️ Фильтрация по домену и MIME-типам
▪️ Автоконвертация относительных URL в абсолютные

GitHub-репозиторий с подробной документацией и примерами. Инструмент активно развивается: в дорожной карте интеграция с Scrapy и расширение API для сложных сценариев.

💡 Совет: Используйте параметр max_depth, чтобы избежать бесконечного зацикливания на больших сайтах!

👉 Подписаться

🖥️➕🪑 ВОЗМОЖНОСТЬ ЗАПУСКАТЬ НЕСКОЛЬКО ПОЛЬЗОВАТЕЛЬСКИХ СЕССИЙ НА ОДНОМ ПК

Специальный PowerShell-скрипт позволяет подключать несколько независимых рабочих столов к одному компьютеру с Windows через RDP. Это идеальное решение для создания многопользовательской среды без покупки дополнительного железа!

▪️ Автоматическая генерация RDP-файлов
Скрипт сам создаёт готовые файлы подключения для каждого пользователя. Никакой ручной настройки!

▪️ Функция быстрого исправления RDP
Опция Fix RDP мгновенно исправляет типовые ошибки конфигурации удалённого доступа.

▪️ Масштабируемость
Количество сессий ограничено только мощностью ПК (процессор, ОЗУ, видеокарта). Тестируйте на своём железе!

Поддерживается проброс устройств:
▪️ Аудио
▪️ Принтеры
▪️ USB-девайсы
▪️ Буфер обмена

GitHub-репозиторий: тут

Технические детали 🔧
▪️ Автоматическое создание учётных записей пользователей
▪️ Требуется PowerShell 5.1+
▪️ В репозитории есть инструкция по ручной настройке проброса устройств
▪️ Лицензия: MIT

👉 Подписаться

💎 Ваш GitHub-профиль может стать произведением искусства!

🔥 Что такое GitFiti?
Это скрипт, который создаёт fake commits по расписанию, рисуя на вашей публичной графике любые узоры: логотипы, надписи, картинки.

🎨 Почему это круто?
✅ Сразу привлекает внимание рекрутеров и коллег.
✅ Прокачивает ваш персональный бренд в IT.
✅ Это просто весело и необычно! Идеально для портфолио или в качестве оригинального подарка другу-разработчику. 🎁

🚀 Хотите попробовать?
Всё просто: клонируйте репозиторий, настройте шаблон и запустите скрипт!

Ссылка на инструмент: GitFiti на GitHub

📁💥 EventDrop: Файлы с самоуничтожением и шифрованием

Новый open-source инструмент для безопасного обмена конфиденциальными данными. Полный контроль над временем жизни файлов и аудитом доступа.

🔸 AES-256 шифрование — файлы защищены как при передаче, так и в хранилище
🔸 Гибкие настройки — лимит скачиваний, срок действия (от 10 минут до 7 дней)
🔸 Метрики в реальном времени — отслеживание количества скачиваний и IP-адресов
🔸 REST API — интеграция с любыми приложениями

Технологический стек:

# Пример создания сессии для файла
from eventdrop import create_session

response = create_session(
    file_path = "invoice.pdf",
    max_downloads = 3,
    expire_hours = 24
)

Реализована автоматическая очистка «мусора» через cron-задачи. Поддерживается Docker-развёртывание для быстрого запуска.

Исходный код и документация

🚨 Важно: файлы удаляются безвозвратно после истечения срока или достижения лимита скачиваний.

💡 Безопасность и удобство в одном решении — даже временные файлы заслуживают защиты.

👉 Подписаться

🤖 VS Code расширение, которое оскорбляет за AI-код!

AI Copy & Paste Detector - забавное VS Code расширение, которое отслеживает, когда вы вставляете код, сгенерированный искусственным интеллектом, и выдает за это... оскорбления!

🔥 Что делает расширение

Это расширение работает в реальном времени и анализирует код сразу после вставки в VS Code. Оно использует предобученную модель трансформера roberta-base-openai-detector для определения вероятности того, что код был сгенерирован AI или написан человеком.

🎯 Цель проекта

Это чисто развлекательный проект для повышения осведомленности о том, как много AI-кода мы на самом деле используем.

GitHub: https://github.com/Tbence132545/Ai-copypaste-insult

Расширение доступно в VS Code Marketplace под именем "AI copy & paste insults" от издателя bence132.

Идеальный инструмент для тех, кто хочет добавить немного юмора в процесс разработки и напомнить себе о том, как часто мы полагаемся на AI! 🚀

☕️ Голосовое управление кофемашиной: как взломали офисный аппарат без модификаций

Разработчики создали прошивку, которая превращает голосовые команды в управление кофемашиной через USB-порт. Никаких изменений в аппаратной части или ПО самого устройства — только плата STM32WB55 Nucleo и магия embedded-систем!

▫️ Как это работает
✅ Микрофон INMP441 улавливает голосовые команды («Эспрессо», «Двойная порция»)
✅ STM32 обрабатывает запросы через ML-модель с точностью до 95%
✅ Плата эмулирует касания экрана кофемашины, отправляя USB HID-пакеты

▫️ Суперсилы системы
✅ Распознаёт 15+ команд даже в условиях офисного шума
✅ Совместима с Nespresso, DeLonghi и другими популярными брендами
✅ Работает автономно — не требуется подключение к компьютеру

Проект взорвал хайп на Hackaday и Hackster благодаря нестандартному применению HID-протокола.

🔧 Открытый код и схемы сборки доступны в репозитории.

Теперь главный вопрос: когда роботы-бариста заменят людей? 🤖☕

👉 Подписаться

🌐🚀 Автоматический парсинг сайтов: новый инструмент для разработчиков

Website-Crawler — мощный open-source инструмент для сбора данных с веб-ресурсов. Поддерживает экспорт в JSON/CSV, глубокий обход сайтов и гибкую фильтрацию контента. Идеален для аналитики, обучения моделей ИИ и интеграции в проекты!

🔸 Ключевые возможности:
▫️ Полный краулинг: автоматический рекурсивный обход всех страниц, включая вложенные разделы.
▫️ Структурированный вывод: данные сохраняются в форматах, которые легко использовать в LLM-моделях или базах данных.
▫️ Фильтрация контента: можно собирать только текст, ссылки, метатеги или изображения — никакого мусора!
▫️ Контроль скорости: настройка задержки между запросами для имитации «человеческого» поведения.

🔸 Технические детали:
▫️ Запуск через CLI или Python API — подходит для любых сценариев использования.
▫️ Поддержка прокси и кастомизация User-Agent для обхода блокировок.
▫️ Парсинг динамических страниц через интеграцию с Playwright (SPA, JS-рендеринг).

Пример команды для быстрого старта:

  
website-crawler --url example.com --output data.json --max-pages 100  

➡️ Репозиторий проекта: GitHub

👉 Подписаться

🚀 Открытая POS-система для ресторанов: все фичи в одном решении

Публичный репозиторий Zikiro_FYR предлагает бесплатное POS-приложение с поддержкой офлайн-режима, аналитикой и гибкой настройкой.

▪️ Основной функционал:
🔸 Работа без интернета (данные синхронизируются при восстановлении связи)
🔸 Управление заказами, инвентарём и сотрудниками
🔸 Генерация отчётов по продажам и статистике

▪️ Техническая база:
🔸 Frontend: Flutter (кроссплатформенная разработка)
🔸 Backend: Node.js + Express
🔸 База данных: MongoDB

▪️ Установка:
1️⃣ Клонировать репозиторий
2️⃣ Настроить .env файл
3️⃣ Запустить сервер и мобильное приложение

Лицензия MIT разрешает свободное использование и модификацию кода. Проект активно развивается: в планах — интеграция с платежными системами и доработка интерфейса.


GitHub | Документация

👉 Подписаться

🚀 Свой сервис коротких ссылок за 5 минут: кастомные URL на Cloudflare

Платформа 4ev.link позволяет создавать короткие ссылки с произвольным slug без аренды домена и сервера. Решение построено на стеке Next.js, TypeScript + Tailwind с подключением к базе данных через Drizzle ORM — идеально для быстрого старта!

Как это работает:
🔹 Хостинг на Cloudflare Workers (бесплатный тариф — до 100 тыс. запросов/день).
🔹 Поддержка любых символов в короткой ссылке: например, /github → 4ev.link/gh.
🔹 Автоматическое удаление URL, которые не использовались более 30 дней.

🚀 Инструкция по запуску:
1️⃣ Установите зависимости:

 
npm install  

2️⃣ Настройте переменные окружения (API-ключ Cloudflare, параметры базы данных).
3️⃣ Запустите деплой:

 
npm run deploy  

🔥 Преимущества:
✅ Нет рекламы и скрытых трекеров.
✅ Гибкая кастомизация интерфейса под ваш бренд.
✅ Поддержка PostgreSQL и SQLite для разных сценариев работы.

🔗 Исходный код и документация: GitHub-репозиторий.

P.S. Для работы потребуется минимальная настройка Cloudflare Worker и таблиц в базе данных. Решение отлично подходит для личных проектов, микросервисов или стартапов!


👉 Подписаться

🚀 XNum 0.8: Конвертер систем счисления с поддержкой 1024 символов и Unicode

Новая версия Python-библиотеки для работы с нестандартными системами счисления! Теперь вы можете конвертировать числа между системами с базисом до 1024 и использовать Unicode-символы, включая эмодзи! 🌟

▫️ Главные фишки версии 0.8
▫️ Поддержка кастомных алфавитов (примеры: 🟥🟩🟦 или «а-яё»)
▫️ Три метода конвертации: стандартный, с дополнением и для дробных чисел
▫️ Работа с отрицательными числами и нулём
▫️ Оптимизация для больших чисел (обработка 10^6 знаков за 0.01 сек)

Пример кода

from xnum import XNum

xn = XNum(alphabet="👑💎⚡")  # Создаём систему счисления из эмодзи
print(xn.to_decimal("👑💎⚡"))  # Вывод: 15 (аналог двоичного 1111)

▫️ Для кого полезно?
▫️ Разработка криптографических систем
▫️ Генерация уникальных ID с нестандартной кодировкой
▫️ Обработка данных с особым представлением

GitHub: Xnum Repository

👉 Подписаться

🔥 RubiKit: МОДУЛЬНАЯ РЕВОЛЮЦИЯ ДЛЯ ANARCHY ONLINE
✨ Легендарная MMORPG получает второе дыхание! В открытый доступ вышла система плагинов, которая перезагружает геймплей 23-летней игры.

🔸 Ключевые возможности:
🔸 Автопилот — автоматическая прокачка, заточка снаряжения и управление инвентарём
🔸 Кастомизация интерфейса — создание уникальных HUD-элементов через XML-шаблоны
🔸 Защита от читов — встроенный античит с шифрованием сетевых данных
🔸 Открытый код — возможность разработки собных модулей на C#

🧩 Совместимость:
🔸 Бесшовная интеграция с популярными модами вроде YetAnotherAnotherExporter
🔸 Поддержка сторонних расширенй через API-интерфейсы

🔒 Технические требования:
🔸 Обязательна установка .NET Framework 4.8
🔸 Подключение через C#-библиотеку:

var rubi = new RubiKit(configPath);  
rubi.InitializeModules();  

🚀 Что нового?
За последний месяц разработчики добавили поддержку свежих игровых патчей, оптимизировали работу с памятью и исправили 15+ багов.

🔗 Репозиторий на GitHub: тык

(Для настоящих фанатов ретро-гейминга — обязателен к установке! 💻🎮)

👉 Подписаться

🚀 Больше не нужно копировать .env-файлы! Новый инструмент для работы с переменными окружения

Каждый разработчик сталкивался с проблемой дублирования .env-файлов при запуске проектов. Envyron решает это раз и навсегда! Это инструмент для одноразовой настройки окружения с возможностью повторного использования.

💡 Как это работает?
▪️ Шаблоны на автомате — создайте базовый шаблон с переменными и используйте его в новых проектах.
▪️ Синхронизация изменений — правки в шаблоне автоматически применяются ко всем подключённым проектам.
▪️ Поддержка популярных технологий — Next.js, Docker, Dotenv и другие (документация на GitHub).

🌐 Что внутри?
▪️ Демо-версия с примерами настройки: Видеообзор.
▪️ Готовые конфиги для сред development, staging и production.

🛠 Как попробовать?
Инструмент уже доступен для тестирования: Официальный сайт.

👉 Подписаться

📚 Storytel в десктопе: неофициальный кроссплатформенный плеер

Для поклонников Storytel, которые мечтали о настольной версии сервиса, появилось решение! 🔥 Неофициальный десктоп-плеер теперь доступен для Windows, macOS, Linux, а также в виде веб-приложения. Больше не нужно зависеть от мобильного устройства!

🔍 Технологии и особенности:
▪️ Electron + React — кроссплатформенная сборка для всех ОС
▪️ Нативный интерфейс с горячими клавишами для удобного управления
▪️ Полная синхронизация прогресса с мобильными приложениями Storytel
▪️ Автоматическая смена темы (тёмная/светлая) под настройки системы

Интересно: в веб-версии реализован оффлайнFor-mode через Service Workers 📶 — аудиокниги можно слушать даже без открытой вкладки браузера!

🚀 Ссылки и детали:
Скачать приложение или поучаствовать в разработке можно в GitHub-репозитории. Проект полностью бесплатный, но требует активной подписки на Storytel.

⚠️ Важно: приложение не связано официально со Storytel AB. Используйте на свой риск и проверяйте обновления!

👉 Подписаться

🌐 НЕОБЫЧНОЕ ВЕБ-РАДИО ДЛЯ ПРОГРАММИСТОВ: ТРЕКИ, КОМАНДЫ И ОТКРЫТЫЙ КОД

Сервис Radio Unheard объединяет нишевые радиостанции и современные технологии. 🎶 Здесь можно слушать редкие музыкальные жанры, управлять эфиром голосом и создавать уникальные плейлисты.

🔹 Уникальные разделы
▫️ Электроника с элементами ASMR
▫️ Саундтреки из документалок о космосе 🚀
▫️ Ретро-волны 30-х годов 📻

🔹 Функционал
🎙️ Голосовой поиск треков (например, «Play ambient noise»)
📂 Загрузка собственных аудиодорожек
💻 API для интеграции с другими приложениями

Исходный код проекта открыт в репозитории. Это отличная возможность изучить работу с Web Audio API и системами распознавания речи.

Особого внимания заслуживает раздел «Coding Focus» — здесь собраны плейлисты с бинауральными ритмами 🧠 и подкастами о разработке, которые звучат на фоне шума библиотек или кафе. ☕

🚀 Лайфхак: Используйте команду «Play coding jazz» — микс джаза и ambient-звуков для максимальной концентрации!

👉 Подписаться

⚡️🔥 MergeSVG: Забудьте о ручном склеивании SVG!

Устали вручную выравнивать иконки в Figma или прописывать SVG-сетки? Open-source инструмент MergeSVG сделает это за вас! Автоматизация рутины, поддержка сложных структур и минимум команд — ваш новый стандарт работы.

▪️ 4 формата композиции: ряды, колонки, сетки, карусели
▪️ CLI + API для интеграции в любые проекты
▪️ Гибкие настройки отступов и выравнивания
▪️ Экспорт в чистый SVG или React-компонент

✨ Простая установка через npm:

npm install -g mergesvg

✨ Создаём сетку 3x2 за секунды:

mergesvg -i ./icons -o combined.svg -t grid -w 3

Команда сгенерирует аккуратный SVG-файл, не рискуя «поджечь» ваш проект 🔥

Результат: идеально выровненные иконки в одном файле. Гибкие настройки под любые требования! Исходный код и документация доступны в GitHub-репозитории.

👉 Подписаться

🤖 Проект для Hacktoberfest: Автоматизация инвестиций с помощью ИИ

На GitHub появился open-source репозиторий с AI-роботом для пассивных инвестиций 🚀. Проект написан на Python с использованием LangGraph и участвует в Hacktoberfest-2024.

Технологии под капотом:
▫️ ML-алгоритмы для прогнозирования рынка
▫️ Интеграция с OpenAI для анализа финансовых новостей
▫️ Автоматическая оптимизация портфеля

Ссылка на репозиторий уже содержит базовые инструменты для анализа рисков и генерации отчётов 📊.

💡 Проект идеально подходит тем, кто хочет глубже погрузиться в мир финансов и машинного обучения. 💸

👉 Подписаться

🚀 NVIDIA GPU Dashboard: мониторинг видеокарт в реальном времени

Устали от команды nvidia-smi и локального контроля? 🤯 Новый веб-дашборд открывает возможность удалённого мониторинга GPU через браузер — удобно, быстро, без головной боли!

▪️ Ключевые возможности:
▪️ Работа с несколькими видеокартами одновременно
▪️ Просмотр температуры, загрузки и памяти в реальном времени
▪️ Лёгкая интеграция через Python-скрипт (Flask + NVIDIA Management Library)
▪️ Открытый исходный код — кастомизация под любые задачи!

🔗 Ссылка на GitHub: gpu-hot

💡 Где пригодится?
Идеально для ML-инженеров и исследователей: мониторинг серверов, анализ нагрузки во время экспериментов, оптимизация ресурсов. Всё в одном месте!

🚀 PIPESHUB: ОТКРЫТЫЙ AI-АГЕНТ ДЛЯ РАБОТЫ С ДАННЫМИ

Ключевые особенности:
🔹 Умный поиск с «мозгами»
Advanced Agentic RAG + Knowledge Graphs анализирует даже неструктурированные данные и выдает ответы с точными ссылками на источники. Никаких галлюцинаций — только проверенные факты.

🔹 Свобода выбора моделей
Поддержка любых LLM (Claude, GPT, Gemini, Ollama) и локальных embedding-моделей. Не нравится модель? Замените её на свою за пару кликов!

🔹 30+ встроенных интеграций
Google Drive, Slack, Jira, Notion, Outlook и даже локальные файлы. Скоро добавим: MS Teams и ServiceNow.

🔹 Безопасность на первом месте
Доступ к документам контролируется исходными правами. Ваши данные под надёжным замком 🔒

Чем удивляет?
✅ Полная открытость кода — никаких скрытых алгоритмов или «чёрных ящиков».
✅ Агентный подход — аналитика на основе графов знаний вместо примитивного поиска.
✅ Гибкость настроек — создавайте кастомные AI-воркфлоуы без единой строчки кода.

Поддерживаемые форматы:
📍 PDF (включая сканированные)
📍 DOCX и таблицы
📍 Презентации
📍 Изображения
📍 HTML
Платформа «проглотит» даже самые сложные файлы!

🔗 Репозиторий на GitHub

👉 Подписаться

🚀 УСКОРЕННЫЙ ПОИСК ЗАВИСИМОСТЕЙ PYTHON-ПАКЕТОВ

Сервис PyPIPlus мгновенно находит все зависимости для пакетов Python. Введите название — получите полную карту связей без лишних шагов.

▪️ Как это работает?
🔹 Вводите имя пакета в поисковую строку.
🔹 Система сканирует PyPI и выводит вложенные зависимости до последнего уровня.
🔹 Никаких регистраций, рекламы или скрытых условий.

▪️ Зачем это нужно?
🔹 Ускоряет развёртывание пакетов на изолированных серверах.
🔹 Позволяет выявить «тяжёлые» зависимости перед внедрением в проект.
🔹 Избавляет от ручного копания в метаданных — экономия часов работы.

(Реальный пример: пакет с 20+ скрытыми зависимостями, которые незаметно добавляют 100+ библиотек в ваш проект… 😱)

Попробуйте PyPIPlus — откройте «тёмную сторону» ваших любимых пакетов. 😉

Проверьте, например, pandas или tensorflow — их «хвосты» вас точно удивят! 🕵️♂️

👉 Подписаться

🚀 HST Windows Utility: Швейцарский нож для оптимизации ПК под капотом

Мощный инструмент для тонкой настройки Windows с открытым исходным кодом. Автоматизирует десятки операций — от очистки системы до улучшения безопасности. Не требует рутинных действий!

▫️ Полная очистка системы: удаляет временные файлы, логи и неудаляемые мусорные приложения
▫️ Антивирусный скрининг: поиск руткитов, шифровальщиков и скрытых угроз в режиме реального времени
▫️ Winget Integration: установка и обновление программ через консоль одной командой
▫️ Твики безопасности: блокировка телеметрии, деактивация ненужных служб и портов
▫️ Восстановление ОС: откат драйверов, сброс настроек сети до заводских

🔍 Режимы работы:
▫️ Express — базовая оптимизация за 2 минуты (для новичков)
▫️ Advanced — ручная настройка 50+ параметров (для продвинутых пользователей)

🌟 Для разработчиков: все скрипты открыты для кастомизации в официальном репозитории. Можно адаптировать под любые задачи!

🚨 Важно:
▫️ Написано на PowerShell 7 (требует включения политики выполнения скриптов)
▫️ Совместимо с Windows 10/11
▫️ Требуются права администратора

💡 Факт: после использования утилиты 73% тестировщиков отметили увеличение скорости работы ПК (по данным GitHub-трекера).

👉 Подписаться

🧙‍♂️ Arkyv Engine: ретро-MUD с AI и Next.js

Открытый движок для создания текстовых многопользовательских вселенных — смесь ностальгии по «Ну, погоди!» и современных возможностей ChatGPT.

⚡️ Фишки движка:
🔹 Real-time multiplayer — взаимодействуйте с игроками в реальном времени через текстовый интерфейс.
🔹 Визуальный редактор миров — создавайте локации в стиле mindmap без единой строчки кода.
🔹 AI NPC — NPC на GPT-4, которым можно задать любое поведение (например, «гном-алкоголик с манией величия»).

🛠️ Тех-стек:
🔹 Next.js 14 + TypeScript — для скорости и масштабируемости.
🔹 Supabase — хранение данных и аутентификация «из коробки».
🔹 Vercel — бесплатный хостинг с моментальным деплоем.

(Представьте World of Warcraft из 90-х, но в браузере и без гигабайтных обновлений.)

🚀 Стартовать легко: хватит базового JavaScript. В репозитории есть примеры и подробная Wiki:
GitHub: SeloSlav/arkyv-engine

👉 Подписаться