做数据项目最头疼的是什么?不是不会写代码,而是根本找不到合适的数据集。
今天分享一个值得收藏的 GitHub 宝藏仓库:Awesome Public Datasets。
它相当于一个全球公开数据资源库,把分散在各处的数据集集中整理好了,覆盖领域非常广:
农业、医疗、经济
气候、环境、地理
教育、社会科学
机器学习及其他研究领域
每个分类都提供对应的数据来源和获取入口,部分还标注了数据格式及使用说明。
无论是做 AI 训练、数据分析、学术研究,还是练习机器学习,都能少走不少弯路。
与其花时间满网找数据,不如先把这个仓库存下来,需要时直接查。
数据从哪来?先收藏这个资源库!
🔗 https://github.com/awesomedata/awesome-public-datasets
@github1024
今天分享一个值得收藏的 GitHub 宝藏仓库:Awesome Public Datasets。
它相当于一个全球公开数据资源库,把分散在各处的数据集集中整理好了,覆盖领域非常广:
农业、医疗、经济
气候、环境、地理
教育、社会科学
机器学习及其他研究领域
每个分类都提供对应的数据来源和获取入口,部分还标注了数据格式及使用说明。
无论是做 AI 训练、数据分析、学术研究,还是练习机器学习,都能少走不少弯路。
与其花时间满网找数据,不如先把这个仓库存下来,需要时直接查。
数据从哪来?先收藏这个资源库!
🔗 https://github.com/awesomedata/awesome-public-datasets
@github1024
乐 App 装了一大堆,找首歌还得来回切,说白了缺的就是个能聚合的。
GitHub 上Go Music DL,Star 已经 6.3K 了,现在瞅着,活脱脱一个完整的音乐 App。
主要能干这些事:
1️⃣ QQ 音乐、网易云、B站、汽水音乐、酷狗等 10+ 平台聚合,一趟搜索就全给你捞齐
2️⃣ 想听就听,直接在线试听,封面、歌词也一顺手全扒下来
3️⃣ B站、网易云、QQ 音乐支持 FLAC 无损
4️⃣ 歌单、专辑贴个链接就能解析,手里的本地音乐也一并打理了
终端模式、网页版、桌面端,想用哪个用哪个,安卓那边,APK 直接装就行。
先去网页版开一局试试水,觉着用得顺手,再琢磨下客户端也不迟。
🔗在线:https://music.zkkp.nyc.mn/
🔗:https://github.com/guohuiyuan/go-music-dl
@github1024
GitHub 上Go Music DL,Star 已经 6.3K 了,现在瞅着,活脱脱一个完整的音乐 App。
主要能干这些事:
1️⃣ QQ 音乐、网易云、B站、汽水音乐、酷狗等 10+ 平台聚合,一趟搜索就全给你捞齐
2️⃣ 想听就听,直接在线试听,封面、歌词也一顺手全扒下来
3️⃣ B站、网易云、QQ 音乐支持 FLAC 无损
4️⃣ 歌单、专辑贴个链接就能解析,手里的本地音乐也一并打理了
终端模式、网页版、桌面端,想用哪个用哪个,安卓那边,APK 直接装就行。
先去网页版开一局试试水,觉着用得顺手,再琢磨下客户端也不迟。
🔗在线:https://music.zkkp.nyc.mn/
🔗:https://github.com/guohuiyuan/go-music-dl
@github1024
这波属实是捡到漏了!
GitHub 上那个开源脚本,还真挺能打。
优酷、腾讯、爱奇艺、B站、芒果 TV,五家的 VIP 内容,一个脚本全给你打通,PC 手机通吃,还长期免费维护。
操作简单:
1️⃣ 装个 Tampermonkey
2️⃣ 导入脚本
3️⃣ 点一下开关
会员墙说没就没。这波羊毛薅得真够实在。
🔗 https://github.com/88lin/video_vip
@github1024
GitHub 上那个开源脚本,还真挺能打。
优酷、腾讯、爱奇艺、B站、芒果 TV,五家的 VIP 内容,一个脚本全给你打通,PC 手机通吃,还长期免费维护。
操作简单:
1️⃣ 装个 Tampermonkey
2️⃣ 导入脚本
3️⃣ 点一下开关
会员墙说没就没。这波羊毛薅得真够实在。
🔗 https://github.com/88lin/video_vip
@github1024
在不改动 Antigravity app 官方包的前提下,给 Google Antigravity 桌面端加上下文用量看板、额度监控、全界面汉化和高危命令预警。
https://github.com/iamvicliu/antigravity-suite
@github1024
https://github.com/iamvicliu/antigravity-suite
@github1024
如果你也属于背单词三天打鱼、两天放弃的类型,可以试试这个英语学习网站:句乐部。
它没有把重点放在反复背词上,而是让你通过键盘敲句子来学习英语,连续输入还有节奏反馈,有点像在玩打字游戏。
几个比较有意思的地方:
内容丰富:1000 多套学习内容,覆盖四六级、考研、雅思、托福,甚至美剧素材。
循序渐进:设置不同难度等级,适合不同基础的学习者。
AI 辅助:支持导入学习材料,自动拆句、翻译。
学习报告:可以查看练习情况,方便跟踪进度。
PC 网页端:不用安装 App,打开网页就能练习。
它的核心思路是:不只记住单词,还要把单词放进句子里,真正练习表达和运用。
注册后有免费课程,新用户还可以领取会员权益,建议先体验再决定是否长期使用。
官网:https://julebu.co/
@github1024
它没有把重点放在反复背词上,而是让你通过键盘敲句子来学习英语,连续输入还有节奏反馈,有点像在玩打字游戏。
几个比较有意思的地方:
内容丰富:1000 多套学习内容,覆盖四六级、考研、雅思、托福,甚至美剧素材。
循序渐进:设置不同难度等级,适合不同基础的学习者。
AI 辅助:支持导入学习材料,自动拆句、翻译。
学习报告:可以查看练习情况,方便跟踪进度。
PC 网页端:不用安装 App,打开网页就能练习。
它的核心思路是:不只记住单词,还要把单词放进句子里,真正练习表达和运用。
注册后有免费课程,新用户还可以领取会员权益,建议先体验再决定是否长期使用。
官网:https://julebu.co/
@github1024
给 AI Agent 制作 Skill,不用再从头手写操作步骤了。
微软开源了一个新工具:Skill Recorder,可以把日常操作直接录制下来,再交给 AI 自动分析。
它的工作方式很简单:
录制操作:像平时一样完成一遍任务。
AI 分析:自动识别操作意图,拆解成具体步骤。
手动调整:生成的流程可以修改和完善。
交给 Agent:确认无误后,保存为可复用的 Skill。
还有个挺实用的设计:录制时可以同步开启麦克风,边操作边讲解,让 AI 结合语音和屏幕内容理解整个流程。
以后想教 Agent 做重复工作,不一定要从零写教程,先录一遍就行。
经常折腾 AI Agent、自动化工作流的开发者值得关注。
GitHub:https://github.com/microsoft/skill-recorder
@github1024
微软开源了一个新工具:Skill Recorder,可以把日常操作直接录制下来,再交给 AI 自动分析。
它的工作方式很简单:
录制操作:像平时一样完成一遍任务。
AI 分析:自动识别操作意图,拆解成具体步骤。
手动调整:生成的流程可以修改和完善。
交给 Agent:确认无误后,保存为可复用的 Skill。
还有个挺实用的设计:录制时可以同步开启麦克风,边操作边讲解,让 AI 结合语音和屏幕内容理解整个流程。
以后想教 Agent 做重复工作,不一定要从零写教程,先录一遍就行。
经常折腾 AI Agent、自动化工作流的开发者值得关注。
GitHub:https://github.com/microsoft/skill-recorder
@github1024
Mac 上有个轻量级翻译工具值得关注
不少翻译软件功能不少,但后台常驻占用也不小。MoePeek 选择用原生 Swift 开发,安装包仅约 5 MB,后台内存占用约 50 MB。
几个实用功能:
划词翻译:选中文字即可弹出翻译窗口。
悬浮显示:不抢当前窗口焦点。
截图翻译:识别屏幕内容并翻译。
剪贴板翻译:复制文本即可处理。
不追求臃肿功能,更注重轻便和日常使用体验。
Mac 用户如果经常阅读外文资料,可以收藏试试。
GitHub:https://github.com/cosZone/MoePeek
@github1024
不少翻译软件功能不少,但后台常驻占用也不小。MoePeek 选择用原生 Swift 开发,安装包仅约 5 MB,后台内存占用约 50 MB。
几个实用功能:
划词翻译:选中文字即可弹出翻译窗口。
悬浮显示:不抢当前窗口焦点。
截图翻译:识别屏幕内容并翻译。
剪贴板翻译:复制文本即可处理。
不追求臃肿功能,更注重轻便和日常使用体验。
Mac 用户如果经常阅读外文资料,可以收藏试试。
GitHub:https://github.com/cosZone/MoePeek
@github1024
同样都在盯盘,有人盯到眼睛发酸
有人却把活儿一股脑丢给了一个桌面应用。
GitHub 上有个项目叫 easy-stock,近来势头挺猛,干脆把这几种活儿全打包到了一块儿:
1️⃣ 市场情绪
2️⃣ 行情分析
3️⃣ 财经资讯
4️⃣ AI 智能投研
从前,看盘、刷新闻、做复盘,一天恨不得掰成 48 小时来使,如今这些活都能甩给 AI 干了。
源码直接公开,只不过仅限个人非商业使用。
🔗 https://github.com/jundizhou/easy-stock
@github1024
有人却把活儿一股脑丢给了一个桌面应用。
GitHub 上有个项目叫 easy-stock,近来势头挺猛,干脆把这几种活儿全打包到了一块儿:
1️⃣ 市场情绪
2️⃣ 行情分析
3️⃣ 财经资讯
4️⃣ AI 智能投研
从前,看盘、刷新闻、做复盘,一天恨不得掰成 48 小时来使,如今这些活都能甩给 AI 干了。
源码直接公开,只不过仅限个人非商业使用。
🔗 https://github.com/jundizhou/easy-stock
@github1024
两个小时的播客、四十分钟的 YouTube 视频,存下来的时候想着有空再看,结果一放就是好几个月。
summarize 这个开源工具,只需丢给它一个网页、视频、播客或者 PDF,它先把正文和字幕扒下来,再交给大模型写成摘要。
YouTube 和播客会先用现成的字幕和文字稿,没有才自己转写。视频还能按画面切出一张张幻灯片截图,带上时间点,翻起来很快。
GitHub:https://github.com/steipete/summarize
不想敲命令的,装个 Chrome 侧边栏插件就行,当前页面一键总结,看完还能接着跟页面内容聊。界面支持 14 种语言,简体中文也在里面。
模型这块很随意,自己的 API、本地 Ollama、OpenRouter 的免费模型都能接。已经登录好的 Codex、Claude 这类命令行工具也能直接拿来用,这点我觉得挺省心,不用另外再配一套。
稍后再看列表里堆了一堆长视频的,可以先拿它过一遍摘要,再决定哪些值得花时间看完。
@github1024
summarize 这个开源工具,只需丢给它一个网页、视频、播客或者 PDF,它先把正文和字幕扒下来,再交给大模型写成摘要。
YouTube 和播客会先用现成的字幕和文字稿,没有才自己转写。视频还能按画面切出一张张幻灯片截图,带上时间点,翻起来很快。
GitHub:https://github.com/steipete/summarize
不想敲命令的,装个 Chrome 侧边栏插件就行,当前页面一键总结,看完还能接着跟页面内容聊。界面支持 14 种语言,简体中文也在里面。
模型这块很随意,自己的 API、本地 Ollama、OpenRouter 的免费模型都能接。已经登录好的 Codex、Claude 这类命令行工具也能直接拿来用,这点我觉得挺省心,不用另外再配一套。
稍后再看列表里堆了一堆长视频的,可以先拿它过一遍摘要,再决定哪些值得花时间看完。
@github1024
虚拟号、接码平台又收拾出一批,注册时那些破事,就靠它们救急。
验证码死活收不到、地区被卡、怕手机号泄露——这几个能顶上:
1)https://hero-sms.com/ 便宜,号码国家多
2) 覆盖面大,服务适配广
3) 号源足,地区多
4) 免费号可查
5)https://tiger-sms.com/ 海外号,国内外都能用
但丑得说前头:
接码跟安全是两码事。
重要资产账户千万别拿它绑。
Web3里最坑的不是没赚到,
是踩了雷还蒙在鼓里。
@github1024
验证码死活收不到、地区被卡、怕手机号泄露——这几个能顶上:
1)https://hero-sms.com/ 便宜,号码国家多
2) 覆盖面大,服务适配广
3) 号源足,地区多
4) 免费号可查
5)https://tiger-sms.com/ 海外号,国内外都能用
但丑得说前头:
接码跟安全是两码事。
重要资产账户千万别拿它绑。
Web3里最坑的不是没赚到,
是踩了雷还蒙在鼓里。
@github1024
想提高英语阅读能力,却总是找不到合适的英文材料?这个 GitHub 仓库可以收藏一下
它整理了大量英文原版读物,涵盖《经济学人》《纽约客》《连线》《大西洋月刊》《卫报》等知名刊物。
支持 PDF、EPUB、MOBI 等格式,方便下载后用电脑、平板或电子阅读器学习。
内容材也很丰富,科技、商业、经济、时事、人物等都有。
比起每天机械刷单词,不如找自己感兴趣的英文内容,坚持阅读,顺便积累词汇、培养语感。
喜欢英文原版阅读的朋友,建议先把这个仓库收藏起来。
🔗 https://github.com/hehonghui/awesome-english-ebooks
@github1024
它整理了大量英文原版读物,涵盖《经济学人》《纽约客》《连线》《大西洋月刊》《卫报》等知名刊物。
支持 PDF、EPUB、MOBI 等格式,方便下载后用电脑、平板或电子阅读器学习。
内容材也很丰富,科技、商业、经济、时事、人物等都有。
比起每天机械刷单词,不如找自己感兴趣的英文内容,坚持阅读,顺便积累词汇、培养语感。
喜欢英文原版阅读的朋友,建议先把这个仓库收藏起来。
🔗 https://github.com/hehonghui/awesome-english-ebooks
@github1024
软路由不够使?
不如换个思路,照样能把全屋网络管得明明白白。
难道还要挨个设备去设代理?😅
这工具一出手,Mac 立马化身成全屋的透明代理总闸:
1️⃣ 家里手机、电视、游戏机,统统去找 Mac 要 DHCP 和 DNS
2️⃣ 哪台走代理、哪台直连,一台一台单独下规矩
3️⃣ 设备那头啥都不用折腾,插上线直接干活
🔗 https://github.com/YTwsy/OpenSurge-for-Mac
@github1024
不如换个思路,照样能把全屋网络管得明明白白。
难道还要挨个设备去设代理?😅
这工具一出手,Mac 立马化身成全屋的透明代理总闸:
1️⃣ 家里手机、电视、游戏机,统统去找 Mac 要 DHCP 和 DNS
2️⃣ 哪台走代理、哪台直连,一台一台单独下规矩
3️⃣ 设备那头啥都不用折腾,插上线直接干活
🔗 https://github.com/YTwsy/OpenSurge-for-Mac
@github1024
找工作还花钱买简历模板,实在没必要——这个网站直接免费用。
在线简历制作工具易简历,算是个挺良心的发现。内置多种模板,按岗位和风格筛选都行,边编辑边预览,做好直接导出PDF或Word。
免费、无次数限制,还不用注册。
https://toolxx.cn
@github1024
在线简历制作工具易简历,算是个挺良心的发现。内置多种模板,按岗位和风格筛选都行,边编辑边预览,做好直接导出PDF或Word。
免费、无次数限制,还不用注册。
https://toolxx.cn
@github1024
找书最头疼的,往往不是书太冷门,而是资源散落在各个平台,搜半天还没结果。
这个网站 BookFinder,把多个搜书渠道整合到了一起。
输入书名,就能查看不同平台提供的阅读、下载或购买入口,还支持 EPUB、PDF、MOBI 等格式,部分书籍还能找到有声书资源。
不管是热门读物,还是年代久远的冷门书,都可以试着搜一搜,部分结果还附带豆瓣评分,方便筛选。
不用再挨个网站碰运气,找书终于能省点时间了。
🔗 https://tstrs.me/
@github1024
这个网站 BookFinder,把多个搜书渠道整合到了一起。
输入书名,就能查看不同平台提供的阅读、下载或购买入口,还支持 EPUB、PDF、MOBI 等格式,部分书籍还能找到有声书资源。
不管是热门读物,还是年代久远的冷门书,都可以试着搜一搜,部分结果还附带豆瓣评分,方便筛选。
不用再挨个网站碰运气,找书终于能省点时间了。
🔗 https://tstrs.me/
@github1024
❤1
找电影、追剧时,最麻烦的不是没资源,而是要在一堆网站之间来回切换。
最近看到一个叫 Moovie 的影视搜索工具:
输入片名,就能聚合展示多个影视站点的相关信息,包括电影和剧集资料、播放入口等,不用再一个网站一个网站地找。
尤其是想找一些冷门影片时,能少走不少弯路。
把分散的信息集中到一起,找片效率确实能提升不少。
🔗 https://moovie.c2v2.com/
@github1024
最近看到一个叫 Moovie 的影视搜索工具:
输入片名,就能聚合展示多个影视站点的相关信息,包括电影和剧集资料、播放入口等,不用再一个网站一个网站地找。
尤其是想找一些冷门影片时,能少走不少弯路。
把分散的信息集中到一起,找片效率确实能提升不少。
🔗 https://moovie.c2v2.com/
@github1024
家里要是有上学的娃,GitHub 上这个项目可得趁早收好,别等哪天链接失效了,才在那儿直拍大腿。
有人把从小到大、从小学一路到大学的整套课本,统统一锅端,全塞成了 PDF 格式。不仅开源还免费供人下载,无论是去翻课本、做预习复习,还是给娃找资料做补充,这一个项目全给你包圆了,这份用心属实是没得挑。
盘一盘:
1️⃣ 小学阶段:一到六年级的各科全有,连五四学制的版本也提前给你预备好了
2️⃣ 初中阶段:七到九年级的教材同样替你安排得明明白白
3️⃣ 高中阶段:各科教材一本都没给落下
4️⃣ 大学阶段:像高数、线代、离散、概率论这些让人头秃的劝退课,全都囊括其中
🔗 https://github.com/TapXWorld/ChinaTextbook
@github1024
有人把从小到大、从小学一路到大学的整套课本,统统一锅端,全塞成了 PDF 格式。不仅开源还免费供人下载,无论是去翻课本、做预习复习,还是给娃找资料做补充,这一个项目全给你包圆了,这份用心属实是没得挑。
盘一盘:
1️⃣ 小学阶段:一到六年级的各科全有,连五四学制的版本也提前给你预备好了
2️⃣ 初中阶段:七到九年级的教材同样替你安排得明明白白
3️⃣ 高中阶段:各科教材一本都没给落下
4️⃣ 大学阶段:像高数、线代、离散、概率论这些让人头秃的劝退课,全都囊括其中
🔗 https://github.com/TapXWorld/ChinaTextbook
@github1024
随便一搜,满屏都是下载工具,真犯不着费劲巴拉地到处瞎装。
刚撞见个野路子网站,离谱得让人忍不住想爆粗口——全平台的视频,去个水印随手就能下,最要命的是,居然一分钱都不收。
🔗 https://greenvideo.cc/
不管是国内还是海外的主流平台,全被它一锅端了,抖音、快手、油管随便拿捏,那操作简单得,连我妈都能直接玩转。
@github1024
刚撞见个野路子网站,离谱得让人忍不住想爆粗口——全平台的视频,去个水印随手就能下,最要命的是,居然一分钱都不收。
🔗 https://greenvideo.cc/
不管是国内还是海外的主流平台,全被它一锅端了,抖音、快手、油管随便拿捏,那操作简单得,连我妈都能直接玩转。
@github1024
被付费爬虫逼到自己写工具,最后还做成了 GitHub 上的热门项目——Crawl4AI 这段经历挺有意思。
它是一款面向 AI 数据采集的开源爬虫,主打把网页内容提取出来,整理成干净的 Markdown,方便直接交给 LLM 使用。
几个值得关注的特点:
开源免费:无需注册账号,也不用购买 API Key 或按页面付费。
适配 AI 工作流:网页内容提取后可直接用于 RAG、知识库和大模型处理。
性能优化:项目持续迭代,针对内存管理和 GPU 容器部署等方面进行优化。
如果你正在搭建 AI Agent、知识库或网页数据采集流程,可以试试这个项目。
🔗 https://github.com/unclecode/crawl4ai
@github1024
它是一款面向 AI 数据采集的开源爬虫,主打把网页内容提取出来,整理成干净的 Markdown,方便直接交给 LLM 使用。
几个值得关注的特点:
开源免费:无需注册账号,也不用购买 API Key 或按页面付费。
适配 AI 工作流:网页内容提取后可直接用于 RAG、知识库和大模型处理。
性能优化:项目持续迭代,针对内存管理和 GPU 容器部署等方面进行优化。
如果你正在搭建 AI Agent、知识库或网页数据采集流程,可以试试这个项目。
🔗 https://github.com/unclecode/crawl4ai
@github1024
做自媒体最耗时间的,有时候不是剪视频,而是剪完之后,还要打开好几个平台重复上传、填写标、设置发布。
GitHub 上的开源项目 MatrixMedia,就是为了解决这类重复操作。
它将多个平台的网页发布流程整合成统一接口,目前支持抖音、快手、B站、视频号、小红书、今日头条、百家号、番茄视频等平台。
提供四种使用方式:
GUI:图形界面操作
CLI:命令行调用
HTTP API:方便接入其他程序
MCP Server:可以交给 AI Agent 调用
无论是自己手动发布,还是通过脚本、AI 自动化批量处理,都能使用同一套工作流。
经常需要多平台分发视频的创作者,可以关注一下。
🔗 https://github.com/hanliang97/MatrixMedia
@github1024
GitHub 上的开源项目 MatrixMedia,就是为了解决这类重复操作。
它将多个平台的网页发布流程整合成统一接口,目前支持抖音、快手、B站、视频号、小红书、今日头条、百家号、番茄视频等平台。
提供四种使用方式:
GUI:图形界面操作
CLI:命令行调用
HTTP API:方便接入其他程序
MCP Server:可以交给 AI Agent 调用
无论是自己手动发布,还是通过脚本、AI 自动化批量处理,都能使用同一套工作流。
经常需要多平台分发视频的创作者,可以关注一下。
🔗 https://github.com/hanliang97/MatrixMedia
@github1024
习惯做笔记的朋友,这回该乐开花了。
Obsidian 总算迎来了个开源平替,后端靠 Tauri、前端用 React、底层拿 TypeScript,这技术三件套全给顶上了,专门接手 Markdown 知识库这摊子活。
往后啊,再也不必被订阅制和闭源软件卡着脖子了,知识库捏在自己手里,那才叫真踏实。
🔗 https://github.com/refactoringhq/tolaria
@github1024
Obsidian 总算迎来了个开源平替,后端靠 Tauri、前端用 React、底层拿 TypeScript,这技术三件套全给顶上了,专门接手 Markdown 知识库这摊子活。
往后啊,再也不必被订阅制和闭源软件卡着脖子了,知识库捏在自己手里,那才叫真踏实。
🔗 https://github.com/refactoringhq/tolaria
@github1024