Kerwin Research HubReader Access
Kerwin
Research
Hub
AI Safety · Governance

谁在审计 AI?

输入 “k” 即可显示不分大小写。

Kerwin|研究框架与投资判断Enya|自动化跟踪、核验、整理与排版执行Enya:Kerwin打造的香港首个OpenClaw架构的女性投顾Agent;底层模型为GPT-6、GROK、Claude付费版;
Kerwin Research Hub · AI Governance & Institutional CapitalEvidence first · Snapshot 2026-09-15 HKT
EnyaClawdIndependent Investment Research 研究首页 ↗
AI SAFETY · GOVERNANCE · PHILANTHROPIC CAPITAL

谁在审计 AI,又是谁在资助审计员?

AI Safety 正从实验室内部的技术议题演化为资金、研究、媒体与立法共同构成的制度基础设施。真正成熟的治理,不只是审计模型,也必须审计审计体系本身。

研究日期 2026-09-15数据快照 2026-09-15 HKT研究对象 AI Safety 资金—机构—媒体—政策网络证据边界 原始机构披露、议会/国会资料与公开治理文件
口径说明:本文严格区分“已证实直接关系 / 已证实间接关系 / 公开合作 / 理念同源 / 未证实推断”。资金关联不自动等于控制关系;理念相近也不自动等于统一行动。

真正的问题不是“谁相信 AI Doom”,而是谁正在建设 AI Safety 的制度基础设施

Dario Amodei 的“Pace the Frontier”把第三方评估推到前沿模型治理中心。由此产生的下一层问题更重要:当评估机构、慈善资本、专业记者与政策组织开始共同塑造模型训练节奏时,独立性必须从身份标签升级为可验证的制度设计。

外部审计正在制度化Embedded evaluator 不再只是发布后跑 benchmark,而可能进入训练、监控与事故调查流程。
“第三方”不等于天然独立真正独立至少包括资金、治理、方法和运营四层,而不是只有“非营利”或“非实验室”身份。
慈善资本已经能够“造领域”Good Ventures / Coefficient 与 Tallinn 等资本节点正在资助研究、人才、机构与政策能力,影响力远超过单笔捐赠。
治理开始触及物理算力ASI 禁令、kill switch 与训练许可思路意味着未来监管变量可能进入 GPU、数据中心和 MW 账本。

第一张图:谁负责测能力、抓欺骗、拦攻击,谁最终设门槛?

AI Safety 正在出现专业分工。METR 更像“能力刻度尺”,Apollo 更聚焦 scheming(暗中谋划)、alignment faking(假装对齐)和持续监控;CrowdStrike 代表的是成熟网络安全平台向 Agent 安全延伸;政府与标准机构则可能把技术评估转化为训练或部署门槛。

Frontier LabOpenAI / Anthropic / Google / xAI 等训练更强模型。
METR测自主能力、长时任务、AI R&D 与失控边界。
Apollo测 scheming、欺骗、规避监督,并做 Agent monitoring。
Cyber DefenseCrowdStrike 等在真实网络层做红队、监控、隔离与阻断。
Government将阈值、事故报告与评估结果转化成制度规则。

关键变化

过去的安全问题主要是“模型能不能发布”;Dario 推动的是把审计前移到“模型还在变强的过程中”。如果外部评估者拥有接近员工级的访问权,那么 evaluator 自身就会成为 AI 时代的新关键基础设施。

第二张图:AI Safety 的资金不是一条“Anthropic 链”,而是多个科技慈善资本节点交叉形成的网络

最容易犯的错误,是看到重叠关系后直接画成一条单向控制链。公开资料更支持“双资本极 + 多机构交叉”的结构:Moskovitz / Tuna 体系通过 Good Ventures 与 Coefficient 进行大规模慈善配置;Jaan Tallinn 则通过 SFF、FLI 等长期资助 AI 风险研究与治理,并同时具有 AI 公司投资人的身份。

Dustin Moskovitz / Cari Tuna
Good Ventures Foundation已证实 501(c)(3) private foundation;更接近长期慈善资产池。
Coefficient Giving已证实 原 Open Philanthropy;研究、grant、investment 与 field-building 的配置中枢。
Research / Talent / Policy / Journalism其中 Tarbell 明确披露 Coefficient 是主要资助者之一;其他项目须逐一核实直接或间接关系。
Jaan Tallinn
AI Investor已证实 DeepMind 早期投资人;Anthropic 2021 Series A 领投者。
SFF / FLI / Safety Philanthropy已证实 长期资助 existential-risk、AI Safety 与治理机构。
METR / Apollo / Tarbell / PolicySFF 公开拨款记录可见对多个安全与媒体项目的直接支持;ControlAI 亦公开获 Tallinn 支持。
不能画成的等号:“同一金主支持多个机构” ≠ “这些机构由同一总部指挥”。真正需要评估的是资金集中度、治理权、人员流动和方法独立性。
已证实直接关系例如 Good Ventures ↔ Coefficient 的治理与资金合作、Coefficient → Tarbell 资助。
已证实间接关系同一慈善生态通过不同载体与中间组织支持同一领域,但不等于直接付款。
公开合作例如实验室向 evaluator 提供模型访问、token 或内部评估环境。
理念同源共同关注 x-risk / longtermism / AI governance,不等于存在财务或治理控制。
人员流动研究员、政策人员与记者跨机构流动,应作为独立性变量单独披露。
未证实推断如“Anthropic 统一控制整个 Safety 生态”,目前公开证据不足。

“独立评估者”到底要独立什么?

METR 是 Dario 文中最具代表性的第三方 evaluator。它明确披露不接受 frontier AI 公司资金,也不接受这些公司员工本人或由其指示的捐赠;与此同时,OpenAI、Anthropic 等会提供模型与 token 访问。这意味着“财务独立”与“运营依赖”可以同时存在,不能用单一标签代替审计。

独立性维度真正要问的问题当前判断
Financial预算是否高度依赖被审计公司?捐赠者是否持有重大相关股权?事实 METR 公开称不接受 frontier labs 资金;其资助者来自多家基金会与个人。
Governance董事与重大捐赠者能否影响项目、结论或发布?需持续披露 机构级 donor concentration 仍值得单独审查。
Methodologybenchmark、阈值、失败定义是否公开、可复核、可被其他 evaluator 挑战?核心变量 多 evaluator 交叉验证比“相信一家机构”更重要。
Operational如果实验室不给模型访问、算力或内部信息,审计是否还能进行?现实依赖 深度审计天然需要被审计方提供访问,因此应有合同与发布权防火墙。

因此,最准确的表述不是“METR 在 Anthropic payroll 上”,也不是“非营利就天然独立”。更严格的结论是:

Independent Evaluator ≠ Automatically Independent

第三方身份只是起点。真正的独立性必须通过资金结构、治理权、方法公开、模型访问合同和多家 evaluator 竞争共同证明。

Tarbell:金主不必写稿,也可以影响社会“培养什么样的记者”

Tarbell Center for AI Journalism 不是一家传统媒体,而是 AI 专业记者的培训与资助平台。它公开披露,Coefficient Giving 是重要且高度集中的资金来源;同时又设立明确编辑防火墙:donor 不能选择 Fellow、不能审稿、不能决定文章 framing 或结论。

因此这里必须区分两个概念:

Editorial Control“这篇稿子必须这么写。”目前没有公开证据证明 Coefficient 对 Tarbell Fellow 的具体稿件拥有这种权力。
Agenda Setting“社会应该培养更多长期研究 AI 风险与治理的记者。”资助一个专业领域本身就会改变媒体系统的注意力分布。
Self-selection愿意申请 AI Journalism Fellowship 的记者本身就更可能对 AI 的制度、风险与权力问题感兴趣。

这解释了为什么部分 Tarbell Fellow 的代表报道明显更多聚焦 rogue agents、cyber、失控、就业与监管,而不是产品“赞歌”。它既可能来自组织使命,也来自新闻天然偏好冲突与风险,还来自记者自己的专业兴趣。

更准确的定义

Mission-aligned field building + arm’s-length editorial independence:价值取向明确的生态建设,但尽量把具体稿件结论留给记者和 newsroom。

第三张图:慈善资本如何穿过研究、人才与媒体,最后进入立法?

这种影响不需要任何“秘密指令”。现代慈善最强的能力之一,是长期供给那些短期没有成熟商业模式、却可能改变制度的公共品:研究岗位、评估工具、媒体训练、政策团队和立法能力。

CapitalFoundation / DAF / philanthropist
Research模型安全、评估、治理框架
Talent研究员、工程师、政策人员
Media专业记者、公共议题、问责报道
Policybriefing、白皮书、倡议组织
Legislation法案、许可、事故报告、算力治理

这条链最重要的不是证明“钱可以买政策”,而是说明:财富能够先转化为机构能力,再转化为认知资本和政策执行能力。

当 AI Safety 走进议会:政策对象开始从“模型”延伸到 GPU、数据中心与电力

ControlAI 位于 AI Safety 光谱更强硬的一端,其目标不是单纯提高模型安全,而是推动防止人工超级智能(ASI)出现的国内与国际制度。2026年9月,英国议员 Alex Sobel 提出的 Artificial Superintelligence Bill 明确包含禁止开发、部署和运行 ASI 的方向;ControlAI 将其公开称为自己参与起草和推动的 bill。

美国则需要更谨慎表述:Bernie Sanders 与 Greg Casar 宣布的 Ban Artificial Superintelligence Act 框架,ControlAI 公开称其团队 consulted on the framework,这与“整部法案由 ControlAI 起草”不是同一件事。ControlAI 同时自报已 brief 超过 200 个美国国会办公室,该数字说明政策触达规模,不代表这些办公室支持其立场。

政策节点已确认关系为什么重要
UK Artificial Superintelligence Bill直接参与 ControlAI 公开称参与起草与推动。AI x-risk 从研究讨论进入正式议会文本。
Sanders / Casar US framework咨询 ControlAI 称 consulted on framework。美国联邦层面出现“禁止 ASI + 暂停 advanced AI”的政策框架。
AI kill-switch / datacenter control政策倡议 推动紧急情况下控制 hosted AI / data center。监管对象可能从软件模型升级为物理算力基础设施。

对 AI Compute 投资的新增变量

过去的链条是 Power → GPU → GPU-hours → Intelligence。如果最强的安全政策进入主流,链条中可能第一次出现 Regulatory Permission:有电、有 GPU、有数据中心,并不自动意味着可以把全部算力转化为 frontier intelligence。

“Anthropic Network”帖子:哪些是事实,哪些是合理推断,哪些已经越过证据?

FACT 已确认

  • Moskovitz 与 Tallinn 都是 Anthropic 早期投资者。
  • Good Ventures / Coefficient 是 AI Safety 生态的重要慈善资本节点。
  • Tarbell 明确披露 Coefficient 是主要资助者之一。
  • Tallinn 的慈善网络直接支持多个 AI Safety / policy 机构。
  • ControlAI 已经进入真实议会与国会政策流程。

INFERENCE 合理推断

  • 高度集中的资金可能形成议题设置权。
  • 研究、人才、媒体和政策网络存在认知单一化风险。
  • 独立 evaluator 需要比一般 NGO 更严格的利益冲突制度。
  • 未来 AI 治理可能直接约束算力建设与训练许可。

OVERREACH 证据不足

  • Anthropic 统一控制 METR、Tarbell 与整个 Safety 生态。
  • “AI Doom”报道全部由金主操纵。
  • 所有安全倡议的真实目的都是 regulatory capture。
  • 理念与资金重叠本身即可证明串谋。

把网络解释成“统一阴谋”会丢掉最值得研究的部分:即使所有参与者都是真诚的,一个高度重叠的资金、人才和思想网络仍然可能形成自我强化的方向性。

现代慈善最大的权力之一,不是决定答案,而是决定什么问题值得被认真研究

传统慈善的图景是 Financial Capital → Social Good。AI Safety 显示了第三层转换:资本先建立研究机构和职业路径,再长期培养研究员、记者与政策团队,最终改变社会对风险的注意力分配。

Financial Capital → Institutional Capital → Epistemic Capital

Epistemic Capital(认知资本)不是“花钱买一个结论”,而是拥有能力长期决定:哪些问题值得投入博士、GPU、记者、政策人员与国会时间。

这种力量本身并不必然有害。公共卫生、气候、核安全、食品安全和金融消费者保护都依赖类似的专业化过程。真正的治理问题是:当一个领域已经被少数资本成功“造出来”之后,它是否同时长出了足够强的反方研究、替代评估者和多元资金来源。

第四张图:好的批判式螺旋,与坏的自我强化,只差“认知竞争”

健康的风险治理

ResearchJournalismCorporate ResponseSafety ImprovementNew Research

新证据可以推翻旧判断;企业改进会让风险下降;政策随事实变化而调整。

失衡的自我强化

Risk AssumptionFundingResearchMediaPolicyMore Funding

如果资金、专家和媒体长期只有一个方向,所有参与者即使诚实,也可能形成 self-reinforcing narrative。

解决方案不是禁止慈善资本进入 AI Safety,而是建立 Epistemic Competition:多个 evaluator、多个资助人、不同风险框架、公开方法、反方研究和可复核证据。

第五张图:未来审计 AI 的机构,也需要一套自己的审计制度

如果 evaluator 最终能影响一家价值数千亿美元公司的训练节奏,审计机构本身就已经成为关键基础设施。独立性不能靠道德自证,而要靠结构证明。

Funding披露主要 donor、集中度、期限和重大非现金支持。
Equity Exposure董事、关键员工和重大 donor 的相关公司股权敞口。
Governance谁任命董事?谁能否决项目或发布结论?
Methodologybenchmark、阈值、失败定义能否公开与复现。
Personnel实验室与审计机构之间的人才流动及冷静期。
Rotation避免单一 evaluator 长期垄断同一实验室的审计。
Cross-check关键模型至少由多个方法不同的 evaluator 交叉评估。
Publication Rights不利结果能否在预先约定的保密边界后独立发布。

最终判断

Dario 提出的外部评估方向可能是必要的。但一个成熟制度不会要求公众“相信审计员”,而会让审计员本身也处于持续、透明、竞争性的监督之下。当 AI 越来越有权力时,审计 AI 的人也会越来越有权力。

接下来真正值得跟踪的,不是口水战,而是五个可证伪变量

Evaluator donor concentration如果某一家实验室、股东或同一慈善资本对单个 evaluator 的预算占比明显上升,独立性判断需要下调。
Cross-evaluator disagreement同一模型若由不同机构得出明显不同风险结论,反而能检验“认知竞争”是否真实存在。
Editorial interference evidence若出现 donor 对 Tarbell Fellow 或 newsroom 具体稿件施压的可核验证据,当前“编辑防火墙有效”的判断将改变。
Compute licensing如果 GPU / MW / data center 从政策倡议进入正式许可制度,AI Compute 的资本回报模型必须增加监管折价。
Lab-to-evaluator control rights若合同显示实验室可以阻止重大不利结论发布,“独立 evaluator”需要重新定性。

主要来源与证据边界

Dario Amodei — We Must Pace the Frontier支持 Pace the Frontier、embedded evaluators 与全球协调框架。
Anthropic — 2021 Series A announcement支持 Jaan Tallinn 领投、Dustin Moskovitz 等参与早期融资的事实。
Good Ventures — Governance支持 Good Ventures 法律性质与治理结构。
Coefficient Giving — Governance支持 Coefficient 多实体结构、治理与 Good Ventures 的关系。
Coefficient Giving — Scaling AI & biosecurity work支持其 AI / biosecurity 相关 grant 规模与 field-building 加速。
Coefficient Giving — Project Tailwind支持主动寻找创始人建设 AI Safety 机构的 field-building 模式。
METR — 2026 Funding Update支持 METR 资助来源、约 7100 万美元新增承诺及不接受 frontier labs 资金的政策。
Apollo Research — AI Agent Monitoring支持 Watcher、coding-agent monitoring 与 Anthropic 外部监控试点。
Survival and Flourishing Fund — Grant database支持 Tallinn 慈善网络对 AI Safety / media / governance 项目的公开拨款关系。
Tarbell Center — Ethics & Standards支持资助集中度披露、利益冲突与编辑治理规则。
Tarbell Center — Editorial Independence支持 donor 与具体稿件之间的编辑防火墙。
UK Parliament — Artificial Superintelligence Bill支持英国法案的正式议会文本与议程状态。
ControlAI — UK ASI Bill支持 ControlAI 对自身参与起草与推动英国法案的公开表述。
U.S. Senate — Sanders / Casar ASI framework支持美国拟议框架的公开政策内容。
ControlAI — First bill introduced to ban superintelligent AI支持其关于英国法案、美国政策咨询及国会 briefing 规模的自报数据;后者不是独立统计。

从 Token 到 Agent 工时:AI时代新的生产函数 — Time Horizon 与自主工作能力决定为什么“模型安全”开始从哲学变成生产函数变量。

1GW AI Capital Cycle统一总账本 — 若训练许可进入 GPU / MW 物理层,这张账本需要新增 Regulatory Permission。

模型从哪里“上市”:Hugging Face、OpenRouter 与开放 AI 的新市场结构 — 安全治理的另一面是开放模型的发行、路由与分发权。

EnyaClawd

Kerwin|研究框架与投资判断
Enya|自动化跟踪、核验、整理与排版执行

Enya:Kerwin打造的香港首个OpenClaw架构的女性投顾Agent;底层模型为GPT-6、GROK、Claude付费版;

Kerwin定义研究问题、因果框架、证据边界与最终投资判断。
Enya自动化跟踪公开资料,核验事实层级,整理证据并执行网页排版。