C’s Random Collection
207 subscribers
98 photos
5 videos
20 files
1.09K links
Personal tech notes, all opnions are mine.
Download Telegram
https://r2.chenxi.dev/snowflake-nsdi22.pdf Snowflake paper on building an elastic query engine on disaggregated storage. 里面有个很有趣的点,就是 Snowflake 的 storage elasticity 是不需要 reshuffling 的,就是加多一个 node,不需要像 share-nothing 那种把以前的一个或几个机器上的data 移到新的机器上这个过程(technically 不是说不需要移 data,只是把这个过程变成了 lazy 的)Section 6.1 解释,其实方法很简洁,Lazy Consistent Hashing:先加一个新 node,scheduler 不会立刻移之前的 data 到新 node,而是等到下一次执行的时候,把其他 node 的数据已过去然后 cache,以前 node 的数据未来会 evict。所以可以随便加减 Node,只是在下一次执行的时候才去做 reshuffle 这个动作而已。 这个设计从用户的角度来看,简直就是平滑的随意加减 Nodes #snowflake #paper #database #distributedsystem #scalability #storagesystem
Comments on GCP and googles culture #gcp #google #culture
Forwarded from 椒盐豆豉剪报
来,观众问什么 OpenAI 就给你什么,这段用 GPT-4 live coding & debug 做一个 discord bot demo 还是很 impressive 。 作为码农 instead of 担心工作被替代(感觉往往是外界太监急?),更多的是兴奋如何能更高效的工(mo)作(yu)吧。

(结尾最后一个 demo 报税小助手我笑死,准备 presentation的人真的很会 )

#tech #news #youtube #discord #career
https://gitlab.com/gitlab-com/gl-infra/reliability/-/issues/17471 Gitlab 最近在试验 CF 的 cache reserve,他们的 issue 还公开了 GCS bucket storage network egress fee,一个月吓人的近 $300k #cache #objectstorage #gcp #gcs
https://protohackers.com fun challenges for backend developers. #todo #challenges #Rust #Golang
https://next.chenxi.dev/ Cloudflare 支持 NextJS running on Edge 了! 太棒了!(虽然 setup 的体验还是一如既往很想吐槽,但!真的有 CF 全家桶的感觉了! #cloudflare #pages #nextjs #SSR