FnOl9TgD5sn5v_mCWd1N-tBW-LScv3.jpg
1.1 MB
#程序员
这条动态,目的是为了让你学会自己做一个类似于 ChatPDF的 ChatDocs 类产品所需要的核心技术,让你参加@瓦恁 发起的#AIHackathon 更有竞争力。
大概2月中旬吧,我就搞清楚这里的流程了,也就是理论上那时候就可以做个 ChatDocs 了,当时觉得没多少人知道这个,属于秘籍,就只给几个小伙伴分享了。
现在这个几乎成为公开的秘密了,就索性让更多人知道这里的技术要点。
gpt 的知识库只更新到了2021年,如果你要让它回答一些知识库没有的问题,很多时候他就瞎编了。
new bing 的方案是每次先用搜索引擎找到最相关的一些资料,提供给 gpt ,再让 gpt 总结归纳来回答你的问题。
我们也可以这么做。
但因为每次请求的 token 有数量限制,所以不可能一次性把资料全发过去,那么你就需要自建一个搜索引擎。加我微信 qiayue 了解更多。
但又不能用传统的全文搜索引擎,因为仅靠字符串匹配的话,会丢失信息。
这时候就要用到向量搜索引擎了,简单说,通过向量搜索引擎,可以找出向量距离近的文本,这就间接实现了语义搜索。拿搜索出来的文本片段组合后跟着问题一起发给 gpt ,就能得到回答了。
有任何问题,都可以在评论区问我。
这条动态,目的是为了让你学会自己做一个类似于 ChatPDF的 ChatDocs 类产品所需要的核心技术,让你参加@瓦恁 发起的#AIHackathon 更有竞争力。
大概2月中旬吧,我就搞清楚这里的流程了,也就是理论上那时候就可以做个 ChatDocs 了,当时觉得没多少人知道这个,属于秘籍,就只给几个小伙伴分享了。
现在这个几乎成为公开的秘密了,就索性让更多人知道这里的技术要点。
gpt 的知识库只更新到了2021年,如果你要让它回答一些知识库没有的问题,很多时候他就瞎编了。
new bing 的方案是每次先用搜索引擎找到最相关的一些资料,提供给 gpt ,再让 gpt 总结归纳来回答你的问题。
我们也可以这么做。
但因为每次请求的 token 有数量限制,所以不可能一次性把资料全发过去,那么你就需要自建一个搜索引擎。加我微信 qiayue 了解更多。
但又不能用传统的全文搜索引擎,因为仅靠字符串匹配的话,会丢失信息。
这时候就要用到向量搜索引擎了,简单说,通过向量搜索引擎,可以找出向量距离近的文本,这就间接实现了语义搜索。拿搜索出来的文本片段组合后跟着问题一起发给 gpt ,就能得到回答了。
有任何问题,都可以在评论区问我。
💩6👍1
#产品经理
工作日的早上再发一波。用chatgpt做了一个辅助生成SQL的小工具。希望对正在学习或者不会SQL,但是工作中想自己取数的同学有帮助。
【使用方法】:输入“表结构+取数需求”,一键输出取数用的SQL(建议在PC上使用)
【使用地址】:https://www.sqlkiller.com/
ps:有任何反馈欢迎交流。
#AIHackathon
工作日的早上再发一波。用chatgpt做了一个辅助生成SQL的小工具。希望对正在学习或者不会SQL,但是工作中想自己取数的同学有帮助。
【使用方法】:输入“表结构+取数需求”,一键输出取数用的SQL(建议在PC上使用)
【使用地址】:https://www.sqlkiller.com/
ps:有任何反馈欢迎交流。
#AIHackathon
👍4
#产品经理
SQLkiller几经波折终于迭代到2.0了,支持结构化录入&保存表结构。希望能帮到需要搞SQL的小伙伴
【使用方法】:输入“表结构+取数需求”,一键输出取数用的SQL(建议在PC上使用)
【使用地址】:https://www.sqlkiller.com/
ps:蹲一个服务端小伙伴,一起探索自然语言数据分析。
#AIHackathon
SQLkiller几经波折终于迭代到2.0了,支持结构化录入&保存表结构。希望能帮到需要搞SQL的小伙伴
【使用方法】:输入“表结构+取数需求”,一键输出取数用的SQL(建议在PC上使用)
【使用地址】:https://www.sqlkiller.com/
ps:蹲一个服务端小伙伴,一起探索自然语言数据分析。
#AIHackathon
#程序员
#AIHackathon 灵魂回响队直播记录贴
Day1
- 11:30 整理完任务和分工,开发时间剩下3/4
- 13:30发现技术方案不可行,被迫砍掉某个精彩功能(˃ ⌑ ˂ഃ )
- 14:49酒店房间里午睡醒来,油然一股孤独感,打开微信发现程序员们在努力干活,孤独感没了
- 15:43自部署的模型准备完毕(但发现用不上…亏了)
- 16:38 数据集准备完毕(我这两个月居然写了几十万字了)
- 19:47 对着PPT,头脑一片空白,灵感好像和晚饭一起被消化了( ‾᷄ ‾ )
- 20:42 PPT画完了,去看看做饼的程序员进度如何ヽ(•̀ω•́ )ゝ
Day 2
- 00:10 第一个核心流程跑通,开始验收
- 00:45 糟了,Bug涌现了!
- 01:58 妈的洗洗睡不管了
- 09:06 起床了,开干,昨晚梦到我在台上说李姐万岁
- 10:32改参数改得研发不耐烦,于是人生第一次创建了postman接口
- 16:36 中间面了两个试,拿到一个口头offer,现在开始Prompt工程师模式
- 17:21 昨天放弃的那个功能找到变通方式了!上他
#AIHackathon 灵魂回响队直播记录贴
Day1
- 11:30 整理完任务和分工,开发时间剩下3/4
- 13:30发现技术方案不可行,被迫砍掉某个精彩功能(˃ ⌑ ˂ഃ )
- 14:49酒店房间里午睡醒来,油然一股孤独感,打开微信发现程序员们在努力干活,孤独感没了
- 15:43自部署的模型准备完毕(但发现用不上…亏了)
- 16:38 数据集准备完毕(我这两个月居然写了几十万字了)
- 19:47 对着PPT,头脑一片空白,灵感好像和晚饭一起被消化了( ‾᷄ ‾ )
- 20:42 PPT画完了,去看看做饼的程序员进度如何ヽ(•̀ω•́ )ゝ
Day 2
- 00:10 第一个核心流程跑通,开始验收
- 00:45 糟了,Bug涌现了!
- 01:58 妈的洗洗睡不管了
- 09:06 起床了,开干,昨晚梦到我在台上说李姐万岁
- 10:32改参数改得研发不耐烦,于是人生第一次创建了postman接口
- 16:36 中间面了两个试,拿到一个口头offer,现在开始Prompt工程师模式
- 17:21 昨天放弃的那个功能找到变通方式了!上他
#AIHackathon 感觉古典时代的程序员黑客松是让大家比赛谁先从零造出来一辆自行车;
AI时代的黑客松是先发给每个人一个发动机 然后看谁造出来的车坐起来比较舒服了
CoPilot这题出的特别好,但看多了就在想,当所有人的copilot都是同一个AI,到底是GPT在当CoPilot,还是人类在当GPT的copilot...
AI时代的黑客松是先发给每个人一个发动机 然后看谁造出来的车坐起来比较舒服了
CoPilot这题出的特别好,但看多了就在想,当所有人的copilot都是同一个AI,到底是GPT在当CoPilot,还是人类在当GPT的copilot...
👍3