有限风险与灾难性风险的框架
奥特曼的权衡逻辑建立在一个两层分类体系之上,而非对所有伤害一概漠视。‘有限’风险——即广泛部署技术所带来的欺诈、黑客攻击和滥用——在他看来是值得承受的,因为用户获得的总体利益远超造成的损害:‘我不会做这样的交易,比如保证没有任何诈骗、没有任何其他坏事发生,因为我相信人们使用这项技术所创造的好事,会比坏事多出几个数量级’ [2]。‘灾难性’风险——主要是人类失去控制权——则属于另一个完全不可协商的类别,他表示OpenAI在任何情况下都不会接受此类风险 [1]。
容易被忽视的是,奥特曼指出了第二种同样不可接受的灾难性风险:将极其强大的人工智能集中在单一行为者手中。他并不认为这是出于安全考虑可容忍的较小恶果,而是本身就是一种反乌托邦的结果——他拒绝了业内常见的安全论点,即最强大的系统应由单一严格控制的实验室持有:‘我不同意,但我理解那些人的观点,他们认为“这项技术将变得如此强大且危险,因此应该由旧金山的一家实验室掌握,并确保不会发生任何坏事”’ [4]。结合他关于‘人工智能失控’和‘权力集中’是导致其未来走向错误的两大风险的说法 [3],这一框架读起来更少体现纯粹的加速主义,而更像是一个特定的意识形态押注:即访问权与权力的扩散本身就是一种安全策略,而不是与安全相权衡的牺牲品。


