今天看了@Clara998泽佳 北京站视频的分享里有一点说新词也可以监控大站的sitemap,我觉得是个好思路,有这个想法了,就立马行动起来
- 需求预期:
监控大站sitemap,每天定时通过飞书推动最新关键词(保证了实时性)
- 技术设计
1. 如何监控指定网站的sitemap -> 本地 JSON 文件存储网站名和对应sitemap URL映射关系
2. diff过程 -> 当天网站A的sitemap保存到cloudflare KV数据库,通过日期找到昨日数据进行diff(sitemap数据存kv)
3. 得到diff差异,格式化后发送飞书
4. 定时任务用的是vercel的crons,配置在vercel.json
虽然我今晚实现了这个mvp想法,但总感觉有几个考虑到了,但还不知道怎么实现问题:
1. kv数据如何每隔一周清理掉之前没用的
2. 新增要监控的网站时,不知道会不会有bug🤷
3. kv数据库可能不太好,nosql可能不太适合这种业务场景。总感觉,我总感觉这个需求可能关系型数据库更合适🤔
- 需求预期:
监控大站sitemap,每天定时通过飞书推动最新关键词(保证了实时性)
- 技术设计
1. 如何监控指定网站的sitemap -> 本地 JSON 文件存储网站名和对应sitemap URL映射关系
2. diff过程 -> 当天网站A的sitemap保存到cloudflare KV数据库,通过日期找到昨日数据进行diff(sitemap数据存kv)
3. 得到diff差异,格式化后发送飞书
4. 定时任务用的是vercel的crons,配置在vercel.json
虽然我今晚实现了这个mvp想法,但总感觉有几个考虑到了,但还不知道怎么实现问题:
1. kv数据如何每隔一周清理掉之前没用的
2. 新增要监控的网站时,不知道会不会有bug🤷
3. kv数据库可能不太好,nosql可能不太适合这种业务场景。总感觉,我总感觉这个需求可能关系型数据库更合适🤔
❤3
想做一个写信的app,然后缺一个研发和一个设计
以及,自己勉强可以承担产品和运营的工作,但肯定会被同事吐槽说,你还是别开一个新的支线任务了哈哈哈哈哈哈哈
打算隔一段时间就问一问有没有人感兴趣,万一呢
以及,自己勉强可以承担产品和运营的工作,但肯定会被同事吐槽说,你还是别开一个新的支线任务了哈哈哈哈哈哈哈
打算隔一段时间就问一问有没有人感兴趣,万一呢
两性知识
两性相关高质量内容分享,等两性知识科普、性爱姿势、性经验分享、啪啪小技巧分享等。
https://t.me/liangxing365
精品短片区 #NFSW
分享精品短片,好片子能让人心情愉悦!
https://t.me/wudao1024
欲女新经美图合集
https://t.me/jiepai2021
成人小说推荐🔞
https://t.me/crxstj2023
颜值即正义视频区
https://t.me/yanzhi202
写真花絮系列
https://t.me/xiezhenhuaxu
美女写真套图
https://t.me/beautyggg
#频道互推 #NFSW
两性相关高质量内容分享,等两性知识科普、性爱姿势、性经验分享、啪啪小技巧分享等。
https://t.me/liangxing365
精品短片区 #NFSW
分享精品短片,好片子能让人心情愉悦!
https://t.me/wudao1024
欲女新经美图合集
https://t.me/jiepai2021
成人小说推荐🔞
https://t.me/crxstj2023
颜值即正义视频区
https://t.me/yanzhi202
写真花絮系列
https://t.me/xiezhenhuaxu
美女写真套图
https://t.me/beautyggg
#频道互推 #NFSW
Telegram
两性知识
两性相关高质量内容分享,等两性知识科普、性爱姿势、性经验分享、啪啪小技巧分享等。推合作广:@jingpinshipin_bot