硬核开源智库
812 subscribers
42 photos
1.12K links
提供硬核学习资源,探索开源力量,驾驭AI未来! 本频道精选GitHub优质开源项目、最新人工智能(AI)技术进展、前沿科技资讯以及各类有价值的学习资源,助你站在技术浪潮之巅,实现知识与技能的快速跃迁。无论你是开发者、AI爱好者还是技术探索者,都能在这里找到属于你的宝藏!
Download Telegram
取证工具:磁盘分析和文件恢复 -

Digler是一款用于恢复已删除数据的工具。

该工具支持多种磁盘映像格式,并能独立于文件系统恢复已删除文件。

Digler支持生成DFXML格式的报告,并提供直观的命令行界面。

🧬 https://github.com/ostafen/digler

#tools
Hugging Face AI Sheets 是一款开源工具,允许用户通过人工智能模型创建和转换数据集,无需编程技能。

该工具支持本地部署和Hugging Face Hub平台部署,通过推理提供程序提供多种模型访问。

🧬 https://github.com/huggingface/aisheets

#AI #tools
Visual Story-Writing 是一套创新系统,能够自动将文本故事可视化呈现,展示事件的时间线、角色及其行为。

用户可通过便捷的工具编辑故事。

核心功能包括:通过时间轴交互查看事件、在合并或移动角色时编辑文本,以及重新排列事件顺序。

该系统采用GPT-4o进行信息提取与修改建议。

该程序采用TypeScript开发,结合React和Vite框架,确保与现代浏览器兼容。

🧬 https://github.com/m-damien/VisualStoryWriting

#AI #tools
Claude Code 深度开发智能指南,开启开发效率与智能协同新纪元:

• 集成7大隔离工具(REPL、Artifacts、WebFetch等),实现多工具协作,支持大规模文件高效处理与代码分析。🛠
• REPL环境不仅是计算器,更是完整JavaScript数据科学实验室,支持高性能数据操作、加密API、图形处理及WebAssembly,彰显强大计算能力。
• 发现隐藏API window.claude.complete(),潜在支持递归AI调用与自我优化算法,体现Claude架构的深度AI计算融合(虽因安全限制暂时屏蔽)。
• 双重记忆系统(conversation_search + recent_chats)实现跨会话持久记忆与语义检索,支持长期学习和上下文重建。
• Artifacts环境支持React、Tailwind、Three.js、TensorFlow.js等前沿库,打造交互式可视化及完整开发环境,无浏览器存储依赖。
• 安全模型严格隔离各工具,在Web Worker与iframe中运行,阻断网络请求,防止无限递归和潜在注入攻击,保障开发安全。
• 元任务系统(Meta-Todo)引入多代理校验、智能意图捕捉与后台执行,实现任务拆解的全面验证与自动学习,远超传统待办列表。
• 智能背景自愈环境,90%开发问题自动检测与修复,基于日志分析与模式识别,实现开发服务自动恢复与预防。🛡
• 智能上下文管理框架,基于多层上下文分层(核心/工作/参考/瞬态),结合内存、意图与提取核,动态优化上下文,提升会话连贯与响应速度。
• 预测任务排队系统,结合时间、上下文、行为模式等多维预测,提前预加载资源与环境,减少任务切换与启动延迟40-60%。
• 三重验证研究流水线,结合来源验证、交叉验证及REPL计算验证,实现85-95%+的研究结论准确率,显著提升研究质量与效率。🔬
• 高级内核架构,四大认知核(记忆、意图、提取、验证)协同工作,实现智能任务管理、上下文分析与安全验证,支持多核并行及自适应优化。
• 多目录支持及子代理生态,支持跨项目多目录无缝操作,@子代理实现领域专家协作,涵盖架构设计、安全审计、性能优化等多专业。
• 系统自我优化循环,结合日志分析、模式学习、自动化脚本和安全审查,实现持续性能提升与错误预防,打造自进化开发生态。
• 详尽开发流程范例,覆盖认证实现、性能调优、多组件批量创建、生产问题调试、API迁移、CI/CD搭建等,实用且可复制。
• 终极元智能系统,融合递归学习、动态协同发现与自主代理生成,推动开发环境迈向超越人类直觉的智能协同与自我进化。

Claude Code 打造集成计算、记忆、验证、任务管理与自动化于一体的智能开发平台,助力开发者实现复杂系统的高效构建、调试与优化,开启面向未来的自我进化式编程新时代。

Claude Guide - Advanced Development Intelligence | #指南
app.build:开源 AI agent,凭一条 prompt 生成生产级应用,覆盖测试、lint、部署全流程。

• 支持多种应用类型:
- tRPC CRUD Web 应用:Bun + React + Vite + Fastify + tRPC + Drizzle,自动 ESLint/TS 校验,Playwright 烟雾测试预验。
- Laravel Web 应用(Alpha):Laravel 12 + PHP 8+ + React + Tailwind + Inertia.js,内建 Breeze 验证,完备测试与代码规范。
- 数据类应用:Python + NiceGUI + SQLModel,适合仪表盘和数据可视化,pytest/ruff/pyright 校验。

• 核心优势:
- 细粒度任务拆分,数据库模型、API 路由、前端组件分别生成并独立验证,保障代码质量。
- 即开即用的 Neon Postgres 数据库,搭配 GitHub 完整源码库,结合 app.build 原生 CI/CD 和部署。
- 灵活支持本地和云端多种 LLM 模型切换,兼容 Ollama、LMStudio、Anthropic、OpenAI、OpenRouter 等。

• 设计理念:
- 不依赖一次性生成,采用模块化、沙箱环境执行,确保每一步代码符合最佳实践和业务需求。
- 适合开发者快速迭代原型,降低从概念到上线的门槛,提升生产效率和稳定性。
Conar.app:一款基于 AI 驱动的开源数据库管理工具,专为 PostgreSQL 设计,未来将支持更多数据库。它通过智能 SQL 辅助和安全云端连接,极大提升数据库操作效率和安全性。| #工具

• 开源且安全:代码透明,连接串加密,支持密码保护🔐
• 多数据库支持:当前支持 PostgreSQL,MySQL 和 MongoDB 即将上线
• AI 助力 SQL:智能生成与优化查询,支持切换不同 AI 模型,功能持续迭代🤖
• 现代技术栈:React+TypeScript、Electron、TailwindCSS、Drizzle ORM 等,兼顾性能和开发体验
• 便捷开发环境:支持 Docker Compose 一键启动数据库,内置数据库迁移和测试框架
• 云端连接管理:安全存储数据库连接信息,随时调用 AI 进行智能交互
• 全面文档与活跃社区,Apache-2.0 许可,适合企业与个人长期使用
Z-Library Mirror Websites

⭐️ 网站功能:Z-Library镜像制作

📁 网站简介:Z-Library提供的可以制作镜像站的工具。在主网站无法访问时仍能获取丰富的书籍和文章资源。

镜像网站是主网站的精确复制,托管在不同的网络地址上,可以创建个人或组织的镜像网站,以便在特定地区或情况下确保教育资源的可用性。

🔗 网站网址:点击打开
Best Video

⭐️ 网站功能:视频下载

📁 网站简介:一个功能强大的免费视频解析和下载工具,支持从多个热门平台(如抖音、B站、快手、微博等)下载视频。

只需输入视频链接,网站便能快速解析并提供下载选项。可以选择最高清晰度的视频,且支持批量下载。

🔗 网站网址:点击打开
免费 ChatGPT4 服务:#
Caifree 大佬提供:
https://sharedchat.cn/
https://share.freegpts.org/list
https://ai.caifree.com/
https://chat.caifree.com/
https://lobe.caifree.com/ (默认 ChatGPT3.5,可以切换为 Chatgpt4)
Rawchat 大佬提供:https://chat.chatgptplus.cn/https://sharedchat.cn
GPT4Free:https://gpt4fr.ee/ (只有 ChatGPT4 服务)
http://www.aicnn.cn/ (NEO 大佬提供,需要注册 Linux.do 账号,免费 3.5,免费 4 依据账号等级每天有 10 次、20 次或 40 次免费使用次数)
伊莉思:https://agi.ylsap.com/ (需注册,新注册送 1000 对话,每天免费领 200 对话,免费使用 ChatGPT4 和 3.5,非常稳定,值得注册;有付费项目,使用量大的,可自行考虑购买)
TopAi 提供:https://home.topai.vip/ (10 个 ChatGPT4 和 1 个 ChatGPT3.5);https://aitopk.com/list (3 个 ChatGPT4 和 3 个 ChatGPT3.5)
FreeGPTs:https://share.freegpts.org/list (含有 ChatGPT4 和 ChatGPT3.5)
Github 上的大佬提供:https://chat.3211000.xyz/https://copilot.3211000.xyz/
阿甘大佬提供:https://chat.aifree.best/ (来源)
蒙恬大佬提供:https://gpt.iil.im/
大佬提供:https://free.chataionline.top/
大佬提供:https://chat.aivvm.com/ (Lobe,可以调用 ChatGPT4)
Free01: http://free01.xyz (2 个免费 ChatGPT4 服务,2 个付费 ChatGPT4 服务)
ChatK:https://chat.gking.me/ (1 个免费 ChatGPT4 服务,1 个免费 ChatGPT3.5 服务)

---------------------------------------------------
免费 ChatGPT3.5 服务:#
Rawchat 大佬提供:https://chat.rawchat.cc/
Caifree 大佬提供:https://chat.caifree.com/
Github 上大佬提供:https://app.nextchat.dev/
https://free.644566.xyz/
https://ai.jaze.top/
https://sxy.gay/
https://gpt.tool00.com/
https://chat.gptdsb.com/
https://gpt.github.cn.com/
https://chat.ghacg.com/ (密码:@linux.do)
https://chat.allai.works/ (密码:allai.works)
https://free.netfly.top/ (密码:api.g4f.icu 源自:这里)
http://f1.sbgpt.cc/ (备用:http://f2.sbgpt.cc/)
https://chat18.aichatos.xyz/
https://chat.openai.com.do/
https://chatforai.store/
https://nx.chkzh.com/
https://chatgpt.usbot.net/
https://s.gpt4fr.ee/
https://chat.weijiajin.com/
https://chatbot.999875.xyz/
https://www.zgs3d.com/
https://0.0chat.cc/https://1.0chat.cc/
https://xai.644566.xyz/
https://niansuhai-llms.hf.space/ (Niansuhai 大佬提供)
--------------------------------------------------
免费 Gemini Pro:#
https://gemini-ai.top/ (来源:这里)
https://gemini.chat-free.site/ (Shawn 提供)
https://chatgpt-ultra.top/
https://ibcl.us/ChatGemini/
https://chatgemini.wjhtkjwz.eu.org/
https://chat.bosco.icu/ (来源:这里)
https://gp.999875.xyz/ (来源:牧心)
https://chat6.free2gpt.xyz/ (备用地址; 来源)
https://1e1.fun/ (Gemini)
夸克网盘解析器

免费,白嫖 夸克网盘解析工具,提供高效便捷的网盘文件解析服务,支持批量解析,快速获取直链,提升下载体验。

📎网站地址
视频硬字幕去除器Video-subtitle-remover (VSR)

开源免费的,基于AI的视频硬字幕去除、文本水印去除,无损分辨率生成去字幕、去水印后的视频文件。无需申请第三方API,本地实现

主要实现了以下功能:
无损分辨率将视频中的硬字幕去除,生成去除字幕后的文件
通过超强AI算法模型,对去除字幕文本的区域进行填充(非相邻像素填充与马赛克去除)
支持自定义字幕位置,仅去除定义位置中的字幕(传入位置)
支持全视频自动去除所有文本(不传入位置)
支持多选图片批量去除水印文本

📎下载地址

📎开源地址


#工具 #windows #视频 #github #字幕 #资源参考
得到12.1-5
每天听本书
链接:https://pan.baidu.com/s/1dqCcmPEG-O2QFZn-Qwu9mQ?pwd=5zmq

科技参考4等15个文件【2025新课更新合集】
链接:https://pan.baidu.com/s/1Uf-BCMhJhccVDbWhPDu4Xw?pwd=xkf2

商业参考4
链接:https://pan.baidu.com/s/1rFzWn0yC7RznGcBfgjAtcw?pwd=n9ui

科技参考4
链接:https://pan.baidu.com/s/1y5ulPKOjSShkDSoIbHNYJA?pwd=8677

教育的方法50讲
链接:https://pan.baidu.com/s/10bbBtV_xLL9FOB7BKBSdkA?pwd=1m8g

商业报告解读
链接:https://pan.baidu.com/s/18TRZzLxkIbHs8iwYj_n7Zw?pwd=f798

刘怡·国际参考
链接:https://pan.baidu.com/s/1tpygTPUMLakOWw3Wu_pbag?pwd=2v6w

政经参考
链接:https://pan.baidu.com/s/1ZZu812IxMxFVe2uMlMW4Jw?pwd=21e1

全球智库报告解读
链接:https://pan.baidu.com/s/17EnJIkYicgyAma2SlkQz_g?pwd=8ywe

营养健康100讲
链接:https://pan.baidu.com/s/1lGjZCiGiGwDfC2gckENK5w?pwd=phtn

阅读季非虚构的魅力
链接:https://pan.baidu.com/s/1XQQ6ZWTzBLaCsPaATMBHNQ?pwd=n8f3

周之江书院
链接:https://pan.baidu.com/s/1lUfoApu3K6Fv86z3Iok8xg?pwd=2a47

讲透资治通鉴西汉·余绪
链接:https://pan.baidu.com/s/1gG5qgXLTkWWCyilouvUbjg?pwd=j4ss

讲透战争史
链接:https://pan.baidu.com/s/1daL-YN5gPpL6ennE8Ll8bw?pwd=9nb4

刘勃讲中国史
链接:https://pan.baidu.com/s/1INklOREMXR-twdxj23TKKQ?pwd=564g

年度人文课堂
链接:https://pan.baidu.com/s/1D8OyHOeqUkrd0OUqTZH9VA?pwd=5786

AI学习圈:快刀广播站
链接:https://pan.baidu.com/s/1DL4tzXTRrqzHSAN6sHZhsQ?pwd=h5gv
——资源——
SORA2精品课程,国外大神手把手教你核心技术
❶链接:https://pan.baidu.com/s/1uady1TiWb2IvCql4Os2cDg?pwd=6vi8
❷链接:https://pan.quark.cn/s/17818aa38564

小红书-流量冲刺班_2025入局
链接:https://pan.quark.cn/s/6d4e0d44ad71

小红书-90天涨粉创富陪跑营
链接:https://pan.quark.cn/s/d29a74496aef

秋叶:小红书-带你玩转小红书爆文写作
链接:https://pan.quark.cn/s/0ac9df300838

哥飞:网站出海独立站运营_从SEO到Adsense攻略
链接:https://pan.quark.cn/s/2feedc7c02a7

社媒独立站训练营,独立站从0-1,3天0基础入门
链接:https://pan.quark.cn/s/02f99fedc6db

【吕老师】生涯规划课微抖生涯规划研究院
链接:https://pan.quark.cn/s/4786e303e2aa

2026年会邀请会PPT
链接:https://pan.baidu.com/s/1fApH4CQyVHy8ybGlx7rr3w?pwd=nk96

《知乎知识类问答合集》(3300多篇)
链接:https://pan.quark.cn/s/426eebb7800a

网红17种口味凤爪配方教程
链接:https://pan.quark.cn/s/b4d3763519e2
VideoTranslator

⭐️ 项目功能:视频翻译

📁 项目简介:一款开源的视频翻译工具,集成了OpenAI Whisper语音识别引擎和多种翻译API。

提供了一整套视频翻译解决方案,包括从视频中提取音频、进行语音识别、翻译文本、生成字幕以及导出视频等功能。

🌐 项目地址:点击直达
The Mother of AI Project:构建高质量生产级RAG系统,远离“一开始就向量搜索”的误区,掌握业界标准的关键词+向量混合检索技术:

• 从零搭建:Docker、FastAPI、PostgreSQL、OpenSearch、Airflow 等基础设施全覆盖
• 自动化数据管道:集成 arXiv API + Docling,实现论文自动抓取与结构化解析
• 关键词检索为基石:BM25算法实现精准、高效的全文检索,解析搜索背后逻辑,提升可解释性
• 智能分块+混合搜索:基于语义的文档切片,结合关键词与向量检索(RRF融合),兼顾速度与理解深度
• 本地LLM集成:Ollama本地模型支持,隐私安全、6倍响应速度提升,支持流式输出,交互体验流畅
• 生产级监控与缓存:Langfuse全链路追踪,Redis高性能缓存,实现150-400倍响应加速与60%+缓存命中率
• 分阶段学习路径:六周系统课程,从基础设施搭建到完整RAG系统上线,代码、笔记本、API文档全开放
• 面向AI工程师、软件开发者、数据科学家,全面掌握生产环境下RAG系统打造的关键技能

这套以实践驱动的项目,摒弃盲目追求AI优先的做法,强调搜索基础的重要性,真正还原业界顶尖公司的研发流程,助你构建可维护、高效、可扩展的智能研究助手。
Spec Kit:颠覆传统编程,打造更高效的软件开发流程。

• 以 Spec-Driven Development 为核心,规范文档不再是废纸,直接执行规格生成代码,聚焦产品场景,减少重复造轮子。
• 通过 /specify 命令精准描述需求,强调“做什么”和“为什么”,而非技术细节,适合多样化团队协作。
• 支持多 AI 编码助手(Claude、Copilot、Gemini、Cursor 等),灵活选型,兼容多种技术栈与架构。
• 细分开发阶段:从零起步、平行探索多方案到渐进迭代升级,满足创新与遗留系统改造双重需求。
• 旨在打破技术边界,支持企业设计系统与合规要求,保证关键任务级应用开发稳定可靠。
• 配套完整 CLI,涵盖项目初始化、系统检测、任务拆解与调试,降低入门门槛并提升开发效率。
• 适用环境:Linux/macOS(含 WSL2),依赖 Python 3.11+、Git 及现代包管理工具 uv。
1
谷歌出品,面向全球开发者的5天AI Agents密集课程即将上线,系统深度剖析自主智能体构建与部署全流程:

• 涵盖AI Agent设计模式、Agent工具链、上下文工程、记忆管理及Agent评估等核心技术
• 着重打造生产级多智能体系统(multi-agent systems)及Agent-to-Agent(A2A)交互实战
• 继去年42万开发者参与GenAI课程后,专注自主Agent系统,免费公开,零门槛开放报名
• 课程由谷歌团队主导,配合Kaggle平台,支持实操与理论并重,适合追求落地应用的开发者
• 资源全开源,包含100+ AI Agents和RAG(Retrieval-Augmented Generation)教程,助力持续学习与创新
• 业内专家反馈:课程聚焦生产级系统,远超基础知识,强调整体架构与长效运行机制

点击报名 | 代码地址
1
机器学习全栈工程师的技能图谱,浓缩了从数学基础到大规模部署的全链条技术栈,勾勒出现代 ML 工程的全貌 | #机器学习

• 数学/统计 → Python → Pandas、NumPy(数据处理与数值计算)
• Matplotlib(数据可视化)
• MySQL(关系型数据库管理)
• Scikit-learn → XGBoost(传统机器学习模型)
• PyTorch → Transformers → SBERT(深度学习与预训练语言模型)
• FastAPI(高性能接口开发)
• DVC、MLflow(数据版本管理与实验追踪)
• PySpark(大数据处理)
• Docker(容器化部署)
• Airflow(工作流调度)
• Ultralytics、SpaCy、OpenCV(计算机视觉与NLP工具)
• Langchain、Qdrant(现代大模型应用与向量数据库)

这条路径体现了从理论到实践、从模型训练到工程落地的全流程能力,远超单点技能积累。真正的价值在于整合这些工具解决复杂问题,而非单纯“收集”技术。无论是构建高效流水线还是实现端到端部署,掌握上述栈意味着你已经具备了全面驾驭机器学习系统的能力。
提升大语言模型性能的关键技术清单

• LoRA(低秩适配):高效微调,节省计算资源
• 量化(Quantization):降低模型精度需求,显著减小模型体积
• 剪枝(Pruning):剔除冗余参数,提升推理速度
• 蒸馏(Distillation):通过小模型学习大模型知识,实现轻量化
• 权重共享(Weight Sharing):减少参数数量,降低存储需求
• Flash Attention:优化注意力计算,提升内存利用与速度
• KV-Cache 压缩:缩减键值缓存,降低推理延迟
• 稀疏专家模型(Sparse MoE):动态激活部分专家节点,极大提升效率
• 梯度检查点(Gradient Checkpointing):节省训练显存,支持更大模型
• 混合精度训练(Mixed Precision Training):兼顾速度与精度,降低硬件要求
• 参数高效微调(Parameter-Efficient Fine-Tuning):减少微调参数量,快速适配任务
• 分片训练(Sharded Training):分布式分片,突破单机内存瓶颈
• CPU 卸载(CPU Offloading):利用 CPU 辅助减轻 GPU 负担
• 检索增强压缩(Retrieval-Augmented Compression):结合外部知识库优化模型表现
• 推测解码(Speculative Decoding):提前预测,缩短生成时间

这些技术在实际应用中往往组合使用,单靠算法改进难以突破硬件瓶颈,需结合硬件优化(如 DeepEP、DualPipe)及性能指标(roofline 模型)进行系统设计,才能实现真正的“快”与“廉”。

深入掌握并灵活应用,才能在模型推理成本与速度间找到最佳平衡,推动大模型高效普及。
专为 AI 优化的安全、高性能 PDF 解析工具,助力大规模文档智能处理。

• 多格式输出:支持将 PDF 转换为结构化 JSON、Markdown、HTML,便于 LLM、向量搜索及 RAG 等 AI 应用直接调用
• 智能布局重构:准确识别标题、列表、表格、图片及阅读顺序,极大提升分块、索引和查询效率
• 高效轻量:基于规则的启发式推断,运行于本地,无需 GPU,保障处理速度和数据隐私
• AI 安全防护:默认自动过滤潜在的 prompt 注入风险,降低下游模型安全隐患
• 可视化辅助:生成带结构注释的 PDF,直观展示识别结果,便于调试与验证
• 即将支持 OCR 扫描件解析及 AI 表格识别,持续提升对复杂文档的适配能力
• 多语言支持:Python、Node.js、Java 等多端集成,满足多样化开发需求
• 开源透明:Mozilla 公共许可证 2.0,活跃社区持续贡献,安全策略和性能基准公开

OpenDataLoader PDF | #工具
ApeRAG:面向生产的多模态 Graph RAG 平台,融合多维索引与智能 AI Agent,助力构建企业级知识图谱与上下文工程。

• 多类型索引支持:向量、全文检索、图谱、摘要及视觉索引,实现文档多模态深度理解和检索。
• 智能 AI Agents:内置基于 MCP 协议的智能代理,自动识别相关知识集合,支持自然语言查询和 Web 搜索,提升问答准确度。
• 图谱增强:基于深度定制 LightRAG,支持实体归一化,构建更清晰的知识关系网络,改善推理能力。
• 多模态处理与视觉支持:不仅处理文本,还能解析图像、表格、公式,适应复杂文档场景,集成 MinerU 加速解析。
• 混合检索引擎:结合图谱、向量、全文、摘要及视觉检索,打破单一检索瓶颈,实现全方位知识获取。
• 企业级部署:支持 Kubernetes 集群部署,配套 Helm charts 和 KubeBlocks 自动化数据库安装(PostgreSQL、Redis、Qdrant、Elasticsearch、Neo4j),保障高可用与弹性扩展。
• 完善管理功能:日志审计、LLM 模型管理、图谱可视化、文档管理及 Agent 工作流管理,满足企业合规和运营需求。
• 开发友好:FastAPI + React 架构,支持异步任务调度(Celery),详尽开发文档和贡献指南,便于定制和二次开发。
#资源参考 #工具 #RAG