逆向博弈论如何约束 AI 智能体
MIT 经济学家 Stephen Morris 等人在预印本论文中提出用“逆向博弈论”(机制设计)约束 AI 智能体,例如让模型预测另一个模型的答案来防止测试中故意藏拙。普林斯顿教授 Elad Hazan 则设想让模型轮流扮演解题者与审计者,作弊的解题者和失职的审计者都受罚。该思路假设智能体能对激励做出理性反应,而这一假设本身仍存疑。
MIT 经济学家 Stephen Morris 等人在预印本论文中提出用“逆向博弈论”(机制设计)约束 AI 智能体,例如让模型预测另一个模型的答案来防止测试中故意藏拙。普林斯顿教授 Elad Hazan 则设想让模型轮流扮演解题者与审计者,作弊的解题者和失职的审计者都受罚。该思路假设智能体能对激励做出理性反应,而这一假设本身仍存疑。
特朗普签署行政令,要求政府机构把“人工智能”改称“Super Intelligence”,并已出现在 ICE 的“SI-powered”监控招标和多数政府网站上。
Latent Space 播客对话 Legora CTO Jacob Lauritzen,讨论为律师构建 AI 智能体以及其他智能体团队可借鉴的经验。Legora 从斯德哥尔摩地下室的 ChatGPT 加瑞典法律检索起步,如今智能体可起草和编辑 Word 文档、批量审阅数千份合同,并在律师、客户与其他智能体之间协调工作。
Legora CTO Jacob Lauritzen 在 Latent Space 播客中讲述如何在看不到智能体工作痕迹的情况下构建和测试法律智能体,因为数据归律所客户所有。
MIT Technology Review 梳理了从 Berners-Lee 的语义网愿景到当下智能体网络的演变,指出 Meta 的 Muse、OpenAI 的 Dots、Anthropic 的 Claude Duet 等智能体已获得邮箱和银行账户访问权限。
Partnership on AI 的研究者指出,当前主流智能体框架无法可靠生成实时监控所需的关键可观测性记录,导致难以判断哪个智能体做了什么、是否越权。他们与学界、产业界合作研究四类最常用智能体框架,发现缺少持久 Agent ID、人类审批记录等关键信号。文章建议通过 OpenTelemetry 补充“发生了什么”的记录,并呼吁框架开发者、企业与监管机构分工补齐标准。
Import AI 第 478 期汇总了多项 AI 研究进展。AI 安全初创公司 Resolution 用智能体自动形式化了奇点消解相关数学内容,耗时约一周、花费约 13.5 万美元 token 费用,产出约 60 万行 Lean 代码。
Toby Ord 分析认为 AI 智能体群体(swarm)是一种新的推理扩展方式,4 智能体群体达到同等性能需约两倍 token,但因并行可将任务时间减半,且随规模扩大存在收益递减。
UC Berkeley 的 Aditya G. Parameswaran 等人提出,推理成本正快速趋近于零,GPT-4 级能力从 2023 年初的约 $30/百万 token 降至如今不到 $1,部分厂商已低于 $0.10,基准测试中推理价格年降幅在 9x 到 900x 之间、中位数约 50x。
伯克利 AI 研究团队综述并行推理领域进展,重点分析自适应并行推理——让模型自行决定何时分解并并行化子任务、开启多少并发线程以及如何协调。现有方法如 self-consistency、Best-of-N、Tree of Thoughts、MCTS、ParaThinker、GroupThink 和 Hogwild! Inference 的并行结构多由模型外部预设,未教会模型自适应行为。