《ChatGPT & C.AI 产品分析和发散 》
发现最近几位朋友都在思考差不多的主题，其中一篇比较深度的思考
一些比较赞同的点：
个人助理很难做，基本是在比拼模型能力
CUI 很多场景的适用性不佳
CAI总共300w访问，App总下载才760w
NPC 本身是一种可消费内容
https://whjlnspmd6.feishu.cn/wiki/MidvwkPbwiCvFsksbokcj7hGnbh
发现最近几位朋友都在思考差不多的主题，其中一篇比较深度的思考
一些比较赞同的点：
个人助理很难做，基本是在比拼模型能力
CUI 很多场景的适用性不佳
CAI总共300w访问，App总下载才760w
NPC 本身是一种可消费内容
https://whjlnspmd6.feishu.cn/wiki/MidvwkPbwiCvFsksbokcj7hGnbh
近期看的最神奇的网站。
ChatGPT 从0到一百万用户只用了5天。
这个网站从0到一百万用户只用了11天。
这个网站有什么核心技术吗？
似乎并没有，它只是用了 ChatGPT API，支持用户自己编写 Prompt。
甚至和套壳App一样，需要用户自带 API。
它增长太快，服务器数次被冲击到宕机。上线不到一个月就遭受了严重的ddos攻击。甚至还遭到了 OpenAI 的疯狂封号。
这些都阻止不了真实的、强烈的用户需求。
https://quail.ink/orange/p/fastest-growing-site-after-chatgpt
ChatGPT 从0到一百万用户只用了5天。
这个网站从0到一百万用户只用了11天。
这个网站有什么核心技术吗？
似乎并没有，它只是用了 ChatGPT API，支持用户自己编写 Prompt。
甚至和套壳App一样，需要用户自带 API。
它增长太快，服务器数次被冲击到宕机。上线不到一个月就遭受了严重的ddos攻击。甚至还遭到了 OpenAI 的疯狂封号。
这些都阻止不了真实的、强烈的用户需求。
https://quail.ink/orange/p/fastest-growing-site-after-chatgpt
quail.ink
ChatGPT 之后增长最快的 AI 网站 | 橘子汽水铺 by orange.ai
近期看的最神奇的网站。ChatGPT 从0到一百万用户只用了5天。这个网站从0到一百万用户只用了11天。这个网站有什么核心技术吗？似乎并没有，它只是用了 ChatGPT API，支持用户自己编写 Prompt。甚至和套壳App一样，需要用户自带 API。
lostinthemiddle.pdf
785.4 KB
Lost in the Middle: How Language Models Use Long Contexts
Moe+instruction.pdf
675.8 KB
Mixture-of-Experts Meets Instruction Tuning:
A Winning Combination for Large Language Models
A Winning Combination for Large Language Models
Meta发布了CM3Leon（chameleon），并宣传在文生图领域达到了 SOTA。
和其他图像普遍使用的扩散型模型不同，CM3Leon基于Transformer，使其计算和训练都更为高效。
最大的模型有 70 亿个参数，2倍于 Dalle2。
通过指令调优，还支持通过文本编辑图像。
https://ai.meta.com/blog/generative-ai-text-images-cm3leon/
和其他图像普遍使用的扩散型模型不同，CM3Leon基于Transformer，使其计算和训练都更为高效。
最大的模型有 70 亿个参数，2倍于 Dalle2。
通过指令调优，还支持通过文本编辑图像。
https://ai.meta.com/blog/generative-ai-text-images-cm3leon/
Meta AI
Introducing CM3leon, a more efficient, state-of-the-art generative model for text and images
Today, we’re showcasing CM3leon (pronounced like “chameleon”), a single foundation model that does both text-to-image and image-to-text generation.
Meta 发布了新一代的可商用的开源大语言模型 Llama2，虽然依然不如 ChatGPT 3.5 的水平（特别是code），但是吊打其他开源模型了，真的卷王！
不光开源了模型，还写了一篇76的paper，把各种细节都讲的清清楚楚，相比 OpenAI，这是真的开放！强烈建议大家去阅读，下载地址：
https://ai.meta.com/research/publications/llama-2-open-foundation-and-fine-tuned-chat-models/
不光开源了模型，还写了一篇76的paper，把各种细节都讲的清清楚楚，相比 OpenAI，这是真的开放！强烈建议大家去阅读，下载地址：
https://ai.meta.com/research/publications/llama-2-open-foundation-and-fine-tuned-chat-models/
可能很多重度用户跟我一样都感觉到 ChatGPT 最近几个月变傻了一些。还真是这样， 这篇论文最近半年对 GPT3.5 和 GPT4 的研究发现： GPT4 年初生成的代码 52% 概率可以直接执行，而现在大幅下降到 10% 。对素数的识别准确率从 97.6% 骤降到了 2.4% https://arxiv.org/pdf/2307.09009.pdf
来源 https://twitter.com/quinn_leng/status/1681513871549558786
来源 https://twitter.com/quinn_leng/status/1681513871549558786
X (formerly Twitter)
Quinn Leng (@quinn_leng) on X
可能很多重度用户跟我一样都感觉到 ChatGPT 最近几个月变傻了一些。还真是这样， 这篇论文最近半年对 GPT3.5 和 GPT4 的研究发现： GPT4 年初生成的代码 52% 概率可以直接执行，而现在大幅下降到 10% 。对素数的识别准确率从 97.6% 骤降到了 2.4% https://t.co/Ipq5sGOurs
最近国内的投资人和很多团队几乎都达成共识， RLHF 不重要，SFT 就够了。
现在 Llama2 的论文说 RLHF 非常非常重要。
Llama2 是第三个用 RLHF 比较成功，并把能力推到 Chatgpt 3.5 水平的模型。
这是用实力打脸啊。
期待看到下周的「新共识」了。
😄https://twitter.com/oran_ge/status/1681793774685659136
现在 Llama2 的论文说 RLHF 非常非常重要。
Llama2 是第三个用 RLHF 比较成功，并把能力推到 Chatgpt 3.5 水平的模型。
这是用实力打脸啊。
期待看到下周的「新共识」了。
😄https://twitter.com/oran_ge/status/1681793774685659136
Twitter
最近国内的投资人和很多团队几乎都达成共识， RLHF 不重要，SFT 就够了。
现在 Llama2 的论文说 RLHF 非常非常重要。
Llama2 是第三个用 RLHF 比较成功，并把能力推到 Chatgpt 3.5 水平的模型。
这是用实力打脸啊。
期待看到下周的「新共识」了。
😄
现在 Llama2 的论文说 RLHF 非常非常重要。
Llama2 是第三个用 RLHF 比较成功，并把能力推到 Chatgpt 3.5 水平的模型。
这是用实力打脸啊。
期待看到下周的「新共识」了。
😄
Stack Overflow 在 ChatGPT 出来之后网站流量骤降，当时官方非常反对AI。
现在，他们推出了 Overflow AI，主动利用自己的数据来做AI，推出了一系列的工具：
- Vscode 插件，让你在工作流中获取需要的知识
- Slack 集成，在 Slack 中随时获得解答
- 通过 AI 快速构建企业知识库
https://stackoverflow.blog/2023/07/27/announcing-overflowai/
现在，他们推出了 Overflow AI，主动利用自己的数据来做AI，推出了一系列的工具：
- Vscode 插件，让你在工作流中获取需要的知识
- Slack 集成，在 Slack 中随时获得解答
- 通过 AI 快速构建企业知识库
https://stackoverflow.blog/2023/07/27/announcing-overflowai/
Stack Overflow Blog
Announcing OverflowAI
Let’s highlight the new features and products we announced today from the stage of WeAreDevelopers.
ChatGPT重磅上新！教练、营养师人格任你选，自定义指令秒变「高级个人AI助理」 https://mp.weixin.qq.com/s/0MC6952PviGPFIra7_5MBg
Weixin Official Accounts Platform
ChatGPT重磅上新！教练、营养师人格任你选，自定义指令秒变「高级个人AI助理」
YouTube 官方在实验的 AI 功能，值得期待
- AI 总结视频内容，目前最大的场景，第三方插件危
- AI 为教育类视频生成配套测试题
- AI 配音工具
https://support.google.com/youtube/thread/18138167
- AI 总结视频内容，目前最大的场景，第三方插件危
- AI 为教育类视频生成配套测试题
- AI 配音工具
https://support.google.com/youtube/thread/18138167