对灾难性AGI风险的回应:调查

||论文

MIRI正在自行发表另一份技术报告,该报告太长(60页),不适合在期刊上发表:对灾难性AGI风险的回应:调查

该报告由过去的MIRI研究人员共同撰写亚博体育官网Kaj Sotala以及路易斯维尔大学罗马Yampolskiy,是现有关于AGI风险的文献(250多篇参考文献)的总结,既可以作为研究者的指南,也可以作为外行人的介绍。亚博体育官网

以下是摘要:

许多研究人亚博体育官网员认为,人类将在未来20到100年内创造出人工通用智能(AGI)。有人认为AGI可能给人类带来灾难性的风险。在总结了为什么AGI可能构成这样的风险的论据之后,我们调查了该领域对AGI风险提出的响应。我们考虑了社会建议、对AGI行为的外部约束的建议,以及创建由于其内部设计而安全的AGI的建议。

论文的首选讨论页面是在这里

更新:这篇报告现已在自然史Scripta,可用在这里