The unstructured library provides open-source components for ingesting and pre-processing images and text documents, such as PDFs, HTML, Word docs, and many more.
https://github.com/Unstructured-IO/unstructured
https://github.com/Unstructured-IO/unstructured
GitHub
GitHub - Unstructured-IO/unstructured: Convert documents to structured data effortlessly. Unstructured is open-source ETL solution…
Convert documents to structured data effortlessly. Unstructured is open-source ETL solution for transforming complex documents into clean, structured formats for language models. Visit our website...
这位 Oliver Aalami 医生在手术中使用 Apple Vision Pro,并给予了极高的评价
https://fxtwitter.com/draalami/status/1756070252884979744
https://fxtwitter.com/draalami/status/1756070252884979744
FxTwitter / FixupX - Media 3 / 3
Oliver Aalami (@DrAalami)
My first impressions of @Apple Vision Pro in Surgery for a small low risk vein closure procedure.
Summary: the virtual screen clarity and hands free capabilities ARE the killer features of Vision Pro. The passthrough sharpness leaves a lot to be desired…
Summary: the virtual screen clarity and hands free capabilities ARE the killer features of Vision Pro. The passthrough sharpness leaves a lot to be desired…
Forwarded from 海拉拉
有后端经验的同学,可以自己写一些API放到RapidAPI上,纯后端和部署,不需要任何前端经验。收费、流量控制、API Key这些基础功能完全交给RapidAPI。
https://www.v2ex.com/t/1015246
https://www.v2ex.com/t/1015246
V2EX
做的单词翻译 API 收到第一个付费订阅了! 20 美刀! - V2EX
程序员 - @ggggz - 因为自己需要做的一个 API ,写完后挂到 RapidAPI 上。有个用户一直在用免费的 1000 个请求额度,昨天用完后就直接订阅了,开心~这里不知道怎么上传图片,放上 Rapid
DPS Build
开始用 Linear 管理项目进度,比 Jira 好用多了。 感觉这些年被 Jira 折磨的痛苦都被抵消了。快把 Jira 干翻! https://linear.app
CleanShot 2024-03-04 at 19.06.09@2x.png
168 KB
Linear 这是把细节做到了极致:
发篇 blog,他们为两种主题分别准备了对应的插图。不仔细看根本看不出来,我恰好在 Readwise Reader 里阅读这篇文章,所以发现了这个细节。
https://linear.app/blog/rethinking-the-startup-mvp-building-a-competitive-product
发篇 blog,他们为两种主题分别准备了对应的插图。不仔细看根本看不出来,我恰好在 Readwise Reader 里阅读这篇文章,所以发现了这个细节。
https://linear.app/blog/rethinking-the-startup-mvp-building-a-competitive-product
Forwarded from DPS Main
Daily Productive Sharing 928 - Infrastructure of OpenAI
随着 ChatGPT 的流行,OpenAI 面临的工程挑战也越来越多。Gergely Orosz 邀请了 OpenAI 的应用工程主管 Evan Morikawa 介绍了他们的最佳实践,其中不少与传统的最佳实践完全不一样:
1 向 ChatGPT 提问后,系统会把提问拆解成 token,然后转换成 embedding,乘以模型的权重之后,然后获得预测值;
2 ChatGPT 底层使用 transformer 架构,使用了 self-attention 机制,又一个致命问题,就是 self-attention 的计算是呈平方增长的;
3 他们将预测问题当作一个 QKV 的模型来处理,Q 指用户的输入,K是用来输出预测值的输入,V 是预测值,其中 K 和 V 可以被缓存,而 Q 无法被缓存;
4 先在最大的硬件瓶颈在于显存大小,即使最先进的 GPU - H100 也有显存瓶颈,而它的架构设计早就在多年前就确定了,短时间也无法更改;
5 当然显卡是跟广义上的短缺问题,好在他们有微软 Azure 的支持,所以可以调用一切闲置的显卡资源。这也就意味着,从第一天开始,他们的服务器调度设计就是全球调度;
6 因为最大的计算瓶颈在于显卡,所以服务器的物理位置就没那么重要,edge computing 在这里也就无所谈起了;
7 监测 GPU 使用率其实没有多少用,因为 GPU 的计算机制和 CPU 完全不一样,看这个使用率只能告诉我们 GPU 是否在计算,无法提供更多细节。
https://letters.acacess.com/daily-productive-sharing-928/
随着 ChatGPT 的流行,OpenAI 面临的工程挑战也越来越多。Gergely Orosz 邀请了 OpenAI 的应用工程主管 Evan Morikawa 介绍了他们的最佳实践,其中不少与传统的最佳实践完全不一样:
1 向 ChatGPT 提问后,系统会把提问拆解成 token,然后转换成 embedding,乘以模型的权重之后,然后获得预测值;
2 ChatGPT 底层使用 transformer 架构,使用了 self-attention 机制,又一个致命问题,就是 self-attention 的计算是呈平方增长的;
3 他们将预测问题当作一个 QKV 的模型来处理,Q 指用户的输入,K是用来输出预测值的输入,V 是预测值,其中 K 和 V 可以被缓存,而 Q 无法被缓存;
4 先在最大的硬件瓶颈在于显存大小,即使最先进的 GPU - H100 也有显存瓶颈,而它的架构设计早就在多年前就确定了,短时间也无法更改;
5 当然显卡是跟广义上的短缺问题,好在他们有微软 Azure 的支持,所以可以调用一切闲置的显卡资源。这也就意味着,从第一天开始,他们的服务器调度设计就是全球调度;
6 因为最大的计算瓶颈在于显卡,所以服务器的物理位置就没那么重要,edge computing 在这里也就无所谈起了;
7 监测 GPU 使用率其实没有多少用,因为 GPU 的计算机制和 CPU 完全不一样,看这个使用率只能告诉我们 GPU 是否在计算,无法提供更多细节。
https://letters.acacess.com/daily-productive-sharing-928/
👍1
Forwarded from DPS Main
非常细致地介绍了如何将 Mac mini 作为服务器使用:
1. 作为文件服务器 SMB
2. 作为 Time machine 备份服务器
3. 作为内容缓存服务器
4. 作为家庭娱乐中心
5. 作为 AirPlay 的中枢
https://www.youtube.com/watch?v=CITHNloGlnU
1. 作为文件服务器 SMB
2. 作为 Time machine 备份服务器
3. 作为内容缓存服务器
4. 作为家庭娱乐中心
5. 作为 AirPlay 的中枢
https://www.youtube.com/watch?v=CITHNloGlnU
YouTube
「黑貓」把 M2 Mac mini 用作家用伺服器 | 入門教程 + 體驗感受
把 Mac mini 用於個人和家用伺服器(Home Server)是什麼感受?在本視頻我將上手一隻全新的基礎版本 M2 Mac mini 並將其部署為家庭伺服器。不僅是檔案共享和媒體中心,更進一步探索 Mac 作為伺服器的獨特優勢,包括時間機器(Time Machine)、內容緩存和 AirPlay 智慧音箱等等,並讓它初步代替一部分網絡 DHCP 工具、生產力和創意工作流程。
「贊助貓糧」ATV+/Netflix/ChatGPT 合租,還有 Spotify/HBO+ 等合租車。特別奉上 10% off…
「贊助貓糧」ATV+/Netflix/ChatGPT 合租,還有 Spotify/HBO+ 等合租車。特別奉上 10% off…
👍1
Forwarded from DPS Main
使用 Apple TV 4K 作为旁理由
看了这个视频之后,手痒买了台翻新的 Apple TV 4K,然后设置了旁路由。
视频里用的是 Surge,我用 Shadowrocket 也可以,非常简单:
1. 打开手机上的 Shadowrocket,找到下面的 Data 页面;
2. 在 Apple TV 上下载 Shadowrocket,然后在顶部右侧找到三个矩形的图标,按照提示和 iOS app 配对即可;
3. 接下来 Shadowrocket 会把你手机里的配置同步到 Apple TV 上,这样就可以了;
4. 其余的配置参考下面这个视频
https://youtu.be/1WzhoxdwpeQ
看了这个视频之后,手痒买了台翻新的 Apple TV 4K,然后设置了旁路由。
视频里用的是 Surge,我用 Shadowrocket 也可以,非常简单:
1. 打开手机上的 Shadowrocket,找到下面的 Data 页面;
2. 在 Apple TV 上下载 Shadowrocket,然后在顶部右侧找到三个矩形的图标,按照提示和 iOS app 配对即可;
3. 接下来 Shadowrocket 会把你手机里的配置同步到 Apple TV 上,这样就可以了;
4. 其余的配置参考下面这个视频
https://youtu.be/1WzhoxdwpeQ
👍1
Grant Sanderson 是 3Blue1Brown 的创造者,为了节目里的动画,他特地写了一个 Pyhon 库 Manim
https://github.com/3b1b/manim
https://github.com/3b1b/videos
https://github.com/3b1b/manim
https://github.com/3b1b/videos
GitHub
GitHub - 3b1b/manim: Animation engine for explanatory math videos
Animation engine for explanatory math videos. Contribute to 3b1b/manim development by creating an account on GitHub.