Zico Kolter 加入 OpenAI 董事会
OpenAI 任命 Zico Kolter 加入其董事会,以加强组织的技术治理。Kolter 为董事会的监督职能带来了在 AI 安全、对齐以及机器学习分类器鲁棒性方面的丰富专业知识。
在 AI 安全与鲁棒性方面的技术专长
Zico Kolter 是机器学习分类器鲁棒性和 AI 系统对齐方面的专家。他对该领域的技术贡献包括:
- 保证鲁棒性: Kolter 开发了首批能够保证鲁棒性的深度学习模型方法。
- 约束嵌入: 他开创了在神经网络层中使用经典优化将硬约束嵌入 AI 模型的技术。
- LLM 安全评估: 2023 年,他的团队开发了自动化优化技术来评估大型语言模型(LLM)的安全性,特别展示了如何绕过现有模型的安全防护。
- 模型影响力: 他的研究包括用于理解特定数据如何影响模型行为的方法论,以及新深度网络架构的开发。
在 OpenAI 治理及安全与安保委员会中的角色
Zico Kolter 将在董事会担任技术董事,并专门加入董事会的安全与安保委员会。该委员会负责就所有 OpenAI 项目中的关键安全与安保决策提出建议。
Kolter 加入的委员会成员包括:
- Bret Taylor
- Adam D'Angelo
- Paul Nakasone
- Nicole Seligman
- Sam Altman (CEO)
- OpenAI technical experts
学术与职业背景
Zico Kolter 目前担任卡内基梅隆大学计算机科学教授兼机器学习系主任,已任职 12 年。他的学术背景包括斯坦福大学(2010 年)的计算机科学博士学位以及麻省理工学院(2010-2012 年)的博士后研究。
在学术之外,Kolter 曾担任多个高级行业职务:
- C3.ai: 前首席数据科学家。
- Bosch: 现任首席专家。
- Gray Swan: 现任该 AI 安全与安保初创公司的首席技术顾问。
他的研究已在包括 NeurIPS、ICML 和 AISTATS 在内的顶级会议上发表。