战略与预测方向关注先进 AI 带来的长期问题,包括 AI 发展时间线、地缘政治竞争,以及后 AGI 时代的制度走向。随着能力快速提升,人们往往在信息有限、缺乏充分实证或广泛共识的情况下作出关键决定。应对这些挑战需要结构化预测、情景分析、地缘政治建模和宏观战略思维。
本方向聚焦宏观战略:理解向先进 AI 过渡的过程、机构与社会如何适应高能力 AI 系统,以及今天采取哪些行动最有助于改善长期结果。有些研究流侧重结构化预测,尤其是对 AI 能力、发展时间线、算力和经济影响开展定量研究;另一些则侧重情景分析与建模,研究前沿实验室动态、地缘政治竞争、国家行为、转型情景和桌面推演。
这些预测与模型可用于分析有哪些政策选项能够影响 AGI 或后 AGI 时代的发展轨迹、这些选项的成本与收益,以及今天的选择如何扩大或缩小未来决策者可用的选项范围。本方向可能研究先进 AI 将如何、为何、何时及在何地推动工业生产、军事战术和科学研究迅速变化,以及这些变化对地缘政治、民主和资本主义产生的次级影响。
本方向的学员需要能够在不确定条件下进行推断、提出概率性判断,并清晰撰写证据有限的问题。跨学科研究经验或兴趣很有帮助,因为许多问题都涉及社会某个领域的变化如何影响其他领域。以往的优秀申请者来自预测研究、经济学、历史、哲学、政治学、国际关系、计算机科学、安全研究和定量社会科学等领域。
我们会根据契合度为学员匹配导师,并规划项目,使其在项目结束前产出具体成果,例如预测报告、情景分析、政策备忘录、战略分析和同行评审研究。本方向的成果面向实验室战略与政策团队、AISI 工作人员、国家安全分析人员、长期决策相关的资助方和政策制定者,以及更广泛的预测、治理和 AI 安全社区。
我们欢迎围绕 AI 预测、治理与战略开展指导项目。我们希望通过提出具体情景、探索不同的发展路径与可能世界、预测未来走向,并讨论如何应对风险,改善人们思考 AI 风险时所依据的信息与讨论环境。我们相信,提供更好的未来分析资源,有助于推动更好的结果。
我们每周都会开会,了解进展并讨论下一步计划。两次会议之间,我们也会通过 Slack 持续沟通研究进展、项目待办事项等。
最重要的特质包括:
我们会与学员一起讨论项目构想。
我们希望将公共选择理论等用于分析大规模能动性与权力动态的工具,推广到机器智能能够与人类竞争的情境中。
我们欢迎各种背景的申请者。理想人选可能类似 Robin Hanson 或 David Friedman:既能熟练运用经济学等领域的分析工具,又深入了解人类历史、制度,以及人口、文化、国家和各类组织演变所承受的压力。
本研究流关注先进 AI 可能促成的新型高风险生物技术,并研究随着相关能力出现,何时能有效应对风险、何时风险会变得紧迫。
通常每周安排一次半小时的一对一会面,如有需要,也可以延长会面时间或临时加开会议。我会经常查看 Slack,简单问题通常会在一天内回复。两次会面之间,我也愿意阅读草稿并异步提供书面反馈。
优先考虑:
我会先了解学员感兴趣的方向,再从我想提出的几个主题中,和学员共同选定一个大方向。随后我们会一起把项目范围界定清楚,确保问题聚焦且定义明确;我会结合对可行性和价值的判断提供建议。之后由学员主导推进,我们再根据进展调整。
随着政府采用越来越强大的 AI,我的研究方向关注如何保留制衡机制。学员将探讨国会如何监督因 AI 而加速运作的行政部门(例如借助保护隐私的 AI 审计工具),以及如何为政府采用 AI 勾勒积极可行的愿景。项目通常会形成公开报告,有时也会直接与政策制定者及其他相关人士交流。
本研究方向致力于寻找可行的政策和技术干预措施,缓解人类逐步失去自主权的风险,重点关注经济层面的自主权丧失和“智能诅咒”。潜在项目包括:
我们每周会与学员分别进行两次 30 分钟的一对一交流,每位导师各一次。我们会积极使用 Slack(问题随时发来即可),也可以临时安排简短通话。我们希望学员每周至少准备一项研究成果,供导师反馈。
我们欢迎不同背景的申请者。以下要求仅供参考,并非穷尽所有可能。
必备条件:
我们会提供三个感兴趣的备选项目,但并不局限于这些想法。申请过程中,我们会请潜在学员:(a) 结合个人兴趣,将这些提案细化为更具体的问题;或 (b) 提出自己的项目。
我们希望学员带着内在动力,选择符合上述主题的切入点;我们认为,本研究方向中最好的成果会来自自主开展研究、并具备良好研究判断力的学员。不过,项目仍需获得导师认可;如果研究范围偏离目标领域,我们也可能要求学员调整方向。
MATS 项目是一项为期 10 周的研究奖学金计划,旨在培养和支持从事 AI 对齐、透明度和安全研究的新兴研究者。学员将与世界一流的导师合作,获得专门的研究管理支持,并加入位于伯克利、致力于推动安全、可靠 AI 发展的活跃社群。项目提供必要的架构、资源和指导,帮助学员产出有影响力的研究成果,并开启长期的 AI 安全职业生涯。
MATS 导师来自 AI 安全、对齐、治理、领域建设和系统安全等多个方向,都是各自领域的资深研究者。导师包括学界人士、业界研究人员及独立专家。他们会指导学员开展研究、提供反馈,并支持学员成长为研究者。导师的专业领域涵盖:
查看 往届及现任导师
关键日期
申请:
主项目将于 9 月 28 日至 12 月 4 日进行,获选学员的延展阶段将于 12 月开始。
MATS 欢迎来自不同学术和专业背景的申请者:从机器学习、数学和计算机科学,到政策、经济学、物理学、认知科学、生物学和公共卫生;也欢迎没有传统研究背景的创业者、运营人员和领域建设者。主要要求是对 AI 安全有强烈的贡献意愿,并展现出技术能力、研究潜力或相关运营经验。有 AI 安全相关经验会有所帮助,但并非必要条件。