Apache Spark 4.2 发布
Apache Spark 4.2 正式发布，此次更新并非例行维护，而是标志着其从通用大数据引擎向 AI 原生数据平台的核心转型。新版专为 AI 开发者痛点设计：新增 Metric Views 语义层，允许将业务指标定义为可重用目录对象，消除多版本真相，为 AI 模型提供一致、可信的数据基础；原生支持向量相似性计算，提供距离函数和 NEAREST BY 操作符，可直接在 Spark SQL 中执行嵌入向量搜索与相似性连接，简化 RAG 和语义搜索应用开发；同时强化实时 Python 流处理，简化变更数据捕获。这些特性将特征工程、实时信号、向量存储与治理统一在单一引擎下，降低 AI 基础设施复杂度，提升数据管道可靠性。对于已使用 Spark 进行特征工程的团队，可立即获得更快的 PySpark 流水线和更易用的实时流能力。 #ApacheSpark #Spark42 #AI #数据平台 #向量搜索 #特征工程 #实时流 #开源 #大数据
Apache Spark 4.2 正式发布，此次更新并非例行维护，而是标志着其从通用大数据引擎向 AI 原生数据平台的核心转型。新版专为 AI 开发者痛点设计：新增 Metric Views 语义层，允许将业务指标定义为可重用目录对象，消除多版本真相，为 AI 模型提供一致、可信的数据基础；原生支持向量相似性计算，提供距离函数和 NEAREST BY 操作符，可直接在 Spark SQL 中执行嵌入向量搜索与相似性连接，简化 RAG 和语义搜索应用开发；同时强化实时 Python 流处理，简化变更数据捕获。这些特性将特征工程、实时信号、向量存储与治理统一在单一引擎下，降低 AI 基础设施复杂度，提升数据管道可靠性。对于已使用 Spark 进行特征工程的团队，可立即获得更快的 PySpark 流水线和更易用的实时流能力。 #ApacheSpark #Spark42 #AI #数据平台 #向量搜索 #特征工程 #实时流 #开源 #大数据
从层级到智能
红杉资本（Sequoia）指出，速度是初创企业成功的最佳预测指标。多数公司仅将AI视为效率工具，但少数企业正利用AI从根本上改变协作方式。Block公司展示了如何重新思考组织设计，将AI转化为复合竞争优势。文章追溯了组织层级的历史：罗马军队通过嵌套层级解决大规模协调问题（8人帐篷→80人百人队→480人大队→5000人军团）；普鲁士军队在拿破仑战争后创建总参谋制度，引入专业参谋军官作为信息路由和决策支持的中层管理；19世纪美国铁路公司借鉴军事组织理念，发明了最早的职业经理人和公司层级结构。如今，AI可能终结传统的“管理跨度”限制，使信息传递和决策不再依赖层层上报。红杉认为，那些敢于用AI重构组织的公司将获得巨大速度优势。 #红杉资本 #AI #组织架构 #管理变革 #科技趋势 #Block #JackDorsey #RoelofBotha #企业创新
红杉资本（Sequoia）指出，速度是初创企业成功的最佳预测指标。多数公司仅将AI视为效率工具，但少数企业正利用AI从根本上改变协作方式。Block公司展示了如何重新思考组织设计，将AI转化为复合竞争优势。文章追溯了组织层级的历史：罗马军队通过嵌套层级解决大规模协调问题（8人帐篷→80人百人队→480人大队→5000人军团）；普鲁士军队在拿破仑战争后创建总参谋制度，引入专业参谋军官作为信息路由和决策支持的中层管理；19世纪美国铁路公司借鉴军事组织理念，发明了最早的职业经理人和公司层级结构。如今，AI可能终结传统的“管理跨度”限制，使信息传递和决策不再依赖层层上报。红杉认为，那些敢于用AI重构组织的公司将获得巨大速度优势。 #红杉资本 #AI #组织架构 #管理变革 #科技趋势 #Block #JackDorsey #RoelofBotha #企业创新
Jack Dorsey 推出 Buzz：集成聊天、AI代理与Git托管的开源工作空间
Block 创始人 Jack Dorsey 于7月21日宣布发布开源工作空间 Buzz，旨在将员工、AI代理、对话和代码仓库统一在单一身份体系下，以减少对 Slack 和 GitHub 的依赖。Buzz 基于自托管的 Nostr 中继，所有消息、工作流事件、代码操作均以加密签名形式存储，人类和 AI 代理共享相同的身份结构（包括密钥对、频道成员资格和审计轨迹）。代理可作为正式成员参与代码审查、提交补丁、运行工作流、编辑共享画板等任务，而非传统聊天机器人。Buzz 内置软件锻造功能，可将功能分支直接转换为频道，使补丁、CI结果、审核评论与合并决策保存在同一记录中，实现仓库、讨论和历史的统一搜索。当前支持频道、线程、私信、共享画板、搜索、审计日志及 YAML 工作流，并提供桌面应用。虽然目前采用集中式中继架构，但组织可自行部署中继以掌控数据，体现了 Dorsey 对开放协议和去中心化理念的坚持。 #JackDorsey #Buzz #AI代理 #开源 #Nostr #团队协作 #Git #去中心化 #科技新闻
Block 创始人 Jack Dorsey 于7月21日宣布发布开源工作空间 Buzz，旨在将员工、AI代理、对话和代码仓库统一在单一身份体系下，以减少对 Slack 和 GitHub 的依赖。Buzz 基于自托管的 Nostr 中继，所有消息、工作流事件、代码操作均以加密签名形式存储，人类和 AI 代理共享相同的身份结构（包括密钥对、频道成员资格和审计轨迹）。代理可作为正式成员参与代码审查、提交补丁、运行工作流、编辑共享画板等任务，而非传统聊天机器人。Buzz 内置软件锻造功能，可将功能分支直接转换为频道，使补丁、CI结果、审核评论与合并决策保存在同一记录中，实现仓库、讨论和历史的统一搜索。当前支持频道、线程、私信、共享画板、搜索、审计日志及 YAML 工作流，并提供桌面应用。虽然目前采用集中式中继架构，但组织可自行部署中继以掌控数据，体现了 Dorsey 对开放协议和去中心化理念的坚持。 #JackDorsey #Buzz #AI代理 #开源 #Nostr #团队协作 #Git #去中心化 #科技新闻
不要把LLM放在MCP服务器后面
一位技术专家近日撰文警告，将大语言模型（LLM）放置在MCP（模型上下文协议）服务器之后是一种反模式。作者分享亲身经历：使用某知名供应商的CLI工具时，该工具本质上将MCP服务器封装在内，当作者通过Claude Code调用查询简单数据时，本应几百毫秒完成的操作，却因工具背后隐藏的推理循环而等待了数十秒。作者指出，MCP协议的本意是让代理客户端能够查询数据并为模型提供上下文，而非在两个模型之间建立通信。将另一个LLM或代理放在MCP服务器内，不仅打破了协议的设计初衷，还导致严重延迟。尽管业界已出现A2A、ACP等专门用于模型间通信的协议，但许多人仍在错误地构建“MCP代理”。作者呼吁开发者停止这种嵌套式的反模式架构。 #MCP #LLM #AI代理 #反模式 #技术实践 #架构设计 #延迟优化
一位技术专家近日撰文警告，将大语言模型（LLM）放置在MCP（模型上下文协议）服务器之后是一种反模式。作者分享亲身经历：使用某知名供应商的CLI工具时，该工具本质上将MCP服务器封装在内，当作者通过Claude Code调用查询简单数据时，本应几百毫秒完成的操作，却因工具背后隐藏的推理循环而等待了数十秒。作者指出，MCP协议的本意是让代理客户端能够查询数据并为模型提供上下文，而非在两个模型之间建立通信。将另一个LLM或代理放在MCP服务器内，不仅打破了协议的设计初衷，还导致严重延迟。尽管业界已出现A2A、ACP等专门用于模型间通信的协议，但许多人仍在错误地构建“MCP代理”。作者呼吁开发者停止这种嵌套式的反模式架构。 #MCP #LLM #AI代理 #反模式 #技术实践 #架构设计 #延迟优化
一个网页工具帮你检测电脑能运行哪些AI模型
近日，一款名为“你的设备 vs SOTA AI”的网页工具引发关注。该工具可自动检测用户设备的硬件配置（包括RAM、CPU核心数、GPU等级），并评估其本地运行AI模型的能力。根据硬件水平，工具将模型分为小型（1-3B参数）、中型（7-13B）、大型（70B）及顶级SOTA（1T+参数）四个等级，并给出用户当前可顺畅运行的模型层级。例如，一台8GB内存、8核CPU、集成显卡的Linux PC仅能运行1-3B参数的小模型，但通过量化技术也可尝试中型模型。该工具参考了GPT-4o、Claude 3.5等知名模型，为普通用户提供了直观的本地AI部署参考，有助于降低大模型应用门槛。 #AI模型 #硬件检测 #本地部署 #开源工具 #科技新闻 #机器学习 #大模型 #量化 #模型对比
近日，一款名为“你的设备 vs SOTA AI”的网页工具引发关注。该工具可自动检测用户设备的硬件配置（包括RAM、CPU核心数、GPU等级），并评估其本地运行AI模型的能力。根据硬件水平，工具将模型分为小型（1-3B参数）、中型（7-13B）、大型（70B）及顶级SOTA（1T+参数）四个等级，并给出用户当前可顺畅运行的模型层级。例如，一台8GB内存、8核CPU、集成显卡的Linux PC仅能运行1-3B参数的小模型，但通过量化技术也可尝试中型模型。该工具参考了GPT-4o、Claude 3.5等知名模型，为普通用户提供了直观的本地AI部署参考，有助于降低大模型应用门槛。 #AI模型 #硬件检测 #本地部署 #开源工具 #科技新闻 #机器学习 #大模型 #量化 #模型对比