OpenAI 기술 목표 (2016)

OpenAI의 2016년 기술 로드맵은 인텔리전스에 대한 범용 메트릭과 네 가지 주요 기술 목표에 초점을 맞춤으로써 안전한 AI를 구축하기 위한 프레임워크를 설정합니다. 이 전략은 다양한 환경에 적용할 수 있는 일반 학습 알고리즘을 개발하여 AI 혜택이 널리 그리고 고르게 분배되도록 하는 것을 목표로 합니다.

범용 인텔리전스 메트릭

OpenAI는 에이전트가 다양한 환경에서 사용자가 의도한 목표를 달성하는 능력을 기반으로 인텔리전스를 측정하는 "생동하는 메트릭"을 개발하고 있습니다. 이 메트릭은 진행 상황을 구체적으로 측정하고 연구 노력을 집중할 수 있는 방법을 제공하도록 설계되었습니다.

이를 구현하기 위해 OpenAI는 다양한 OpenAI Gym 환경을 활용하고 있습니다. 이러한 환경은 통합된 행동 및 관찰 공간을 제공하여 단일 에이전트가 다음을 포함한 여러 도메인에서 작동할 수 있게 합니다:

• 로보틱스
• 언어 기반 작업
• 게임

핵심 기술 목표

OpenAI는 일반 학습 알고리즘을 개발하기 위한 구체적인 프로젝트로 연구를 조직했습니다. 이러한 프로젝트는 특정 결과를 목표로 하지만, 근본적인 목표는 범용 인텔리전스 메트릭으로 측정되는 에이전트의 능력을 향상시키는 알고리즘을 만드는 것입니다.

목표 1: 진행 상황 측정

OpenAI는 현재의 세계관을 벗어날 수 있는 새로운 아이디어를 테스트하기 위해 기본 연구를 우선시하며, 기존 아이디어만으로는 장기 목표를 달성하기에 충분하지 않다는 점을 인정합니다.

목표 2: 가정용 로보틱스

주요 기술 목표 중 하나는 가정용 로봇을 개발하는 것으로, 이는 일반적인 목표 해결 능력의 물리적 적용을 의미합니다.

목표 3: 자연어 이해

OpenAI는 목표 달성의 언어적 측면에 초점을 맞추어 유용한 자연어 이해를 갖춘 에이전트를 구축하는 것을 목표로 합니다.

목표 4: 다중 게임 마스터리

OpenAI는 초기 메트릭 내에서 모든 게임을 해결할 수 있는 단일 에이전트를 훈련시키려 합니다. 게임은 다양한 가상 미니 세계 역할을 하므로 이를 마스터하려면 강화 학습 및 생성 모델에서 상당한 발전이 필요합니다. OpenAI는 이 목표가 DeepMind의 선구적인 작업에서 영감을 받았다고 언급합니다.

연구 통합 및 진화

기본 연구와 구체적인 프로젝트가 핵심 구성 요소를 공유하기 때문에, 어느 하나의 프로젝트에서의 진전은 다른 프로젝트에도 도움이 될 것으로 기대됩니다. 각 목표는 목표 해결의 다른 측면을 포착하고 전체 인텔리전스 메트릭을 크게 향상시킬 잠재력이 있기 때문에 선택되었습니다.

OpenAI는 이러한 프로젝트가 초기 단계에 있으며, 더 많은 데이터가 수집되고 새로운 프로젝트가 시간이 지나면서 추가됨에 따라 세부 사항이 변할 수 있음을 인정합니다.