人工智能公司Anthropic周三(3/11)宣布成立Anthropic Institute,这是一个专门研究前沿AI系统对社会与经济影响的研究机构,未来也将参与AI政策与治理议题的研究。
Anthropic表示,AI技术在公司成立5年以来发展迅速,在成立两年后推出第一个商用模型,并在随后3年间开发出能发现严重网络安全漏洞、执行多种实际工作任务,甚至开始加速AI研究进展的模型。Anthropic预测,未来两年AI能力仍可能出现更剧烈的提升。
随着AI系统能力持续增强,Anthropic认为政府与产业将面临一系列重要问题,例如AI将如何改变就业市场与经济活动、是否会带来新的安全风险,以及社会应如何制定AI系统所遵循的价值与治理原则。此外,如果未来AI开始出现递归式自我改进能力,相关监管与治理机制也将成为重要议题。
Anthropic Institute将整合公司三个研究团队,包括负责测试AI能力极限的Frontier Red Team,研究AI在现实世界应用的Societal Impacts团队,以及分析AI对就业与经济影响的Economic Research团队。研究院也将推动新的研究计划,例如预测AI发展速度,以及研究强大AI系统与法律制度之间的互动。
该研究院将由Anthropic联合创始人Jack Clark领导,他原本负责公司的公共政策业务,并已担任公共政策主管超过五年。此次人事调整后,他将转任公共利益主管(Head of Public Benefit),负责带领研究院的相关工作。
而公共政策主管则由原本的对外事务主管Sarah Heck接任。Anthropic表示,公共政策团队将持续关注AI安全与透明度、能源与AI基础设施投资、出口管制以及AI治理等政策议题,并计划在今年春天于华盛顿特区设立新的政策办公室。
近期Anthropic也因政策争议受到关注。美国政府日前将Anthropic列为供应链风险(Supply Chain Risk,SCR),限制其技术在部分政府项目中的使用。Anthropic已对此提起诉讼,挑战该项决定。