2013年评论:战略和说明性研究亚博体育官网
This is the 3rd part of my personal and qualitativeself-review of MIRI in 2013,在其中我开始回顾美里2013年的研究活动。亚博体育官网通过“研亚博体育官网究活动”,我的意思是包括主要针对研究人员的外展工作,还包括three typesMir亚博体育官网i进行的研究:
- 说明性研究亚博体育官网aims to consolidate and clarify already-completed strategic research or Friendly AI research that hasn’t yet been explained with sufficient clarity or succinctness, e.g. “Intelligence Explosion: Evidence and Import“ 和 ”Robust Cooperation: A Case Study in Friendly AI Research。”(I consider this a form of “research” because it often requires significant research work to explain ideas clearly, cite relevant sources, etc.)
- 战略研究亚博体育官网旨在阐明未来可能会如何发展,以及我们现在可以做些什么来推动未来朝着良好的结果推动,并且涉及比说明性研究更多的新颖思想和建模 - 但是,这种区别是模糊的。亚博体育官网参见例如“情报爆炸微观经济学“ 和 ”How We’re Predicting AI — or Failing to。”1
- 友好的AI研究亚博体育官网aims to solve the technical sub-problems that seem most relevant to the challenge of designing a stably self-improving artificial intelligence with humane values. This通常涉及sharpening philosophical problems into math problems, and then developing the math problems into engineering problems. See e.g. “Tiling Agents for Self-Modifying AI“ 和 ”囚犯困境中的强大合作。”
I’ll review MIRI’s strategic and expository research in this post;我对Miri 2013年友好AI研究的评论将在以后的帖子中出现亚博体育官网。在本文的其余部分中,我通常不会尝试区分哪些著作是“说明性”与“战略”研究,因为其中大多数部分都是两种。亚博体育官网
- 请注意,我所说的“ Miri的战略研究”或“超级智能战略研究”是一个以超智慧为中亚博体育官网心的子集给予会称呼“战略原因选择研究亚博体育官网“ 和CEAwould call this “cause prioritization research。”↩