이 프로젝트는 다양한 분야의 인간 전문가와 비교하여 AI 모델을 측정하려는 OpenAI의 광범위한 전략의 일부입니다. 9월에 OpenAI는 인간 전문 지식과 비교하여 AI 성능을 측정하기 위한 새로운 평가 프로세스를 시작했습니다. 회사는 이 비교를 대부분의 경제적으로 가치 있는 작업에서 인간의 능력을 능가할 수 있는 AI 시스템으로 정의되는 인공 일반 지능(AGI) 추구에 있어 중요한 지표로 간주합니다.

한 기밀 OpenAI 문서는 "AI 모델이 해당 작업에서 얼마나 잘 수행하는지 측정할 수 있도록 정규직에서 수행한 작업을 모델로 하여 실제 작업을 수집하기 위해 다양한 직업의 사람들을 고용했습니다. 직업에서 수행한 장기 또는 복잡한 작업(시간 또는 며칠)의 기존 부분을 가져와 각 작업을 작업으로 전환하십시오."라고 명시했습니다.

데이터 수집 노력은 지적 재산 및 데이터 개인 정보 보호에 대한 질문을 제기합니다. OpenAI는 이러한 문제를 해결하기 위해 취해진 특정 조치에 대해 공개적으로 언급하지 않았지만 회사 내부 문서는 민감한 정보를 책임감 있게 처리해야 할 필요성에 대한 인식을 시사합니다. 이 이니셔티브는 또한 AI 모델의 성능이 훈련된 데이터에 크게 의존하는 AI 산업에서 고품질 교육 데이터에 대한 수요가 증가하고 있음을 강조합니다.

이러한 움직임은 기업들이 복잡한 실제 작업을 수행할 수 있는 AI 시스템을 만드는 데 점점 더 집중하고 있는 AI 개발의 광범위한 추세를 반영합니다. OpenAI는 AI 성능을 인간 벤치마크와 비교함으로써 모델이 뛰어난 영역과 추가 개선이 필요한 영역을 식별하는 것을 목표로 합니다. 이 접근 방식은 더욱 유능하고 신뢰할 수 있는 AI 시스템 개발을 가속화하기 위한 것입니다.

평가 프로세스는 미래의 업무에 중요한 영향을 미칠 수 있습니다. AI 모델이 현재 인간이 수행하는 작업을 수행하는 데 능숙해짐에 따라 다양한 산업에서 자동화로 이어질 수 있습니다. 그러나 OpenAI는 목표가 인간 노동자를 대체하는 것이 아니라 인간의 능력을 보강하고 생산성을 향상시킬 수 있는 AI 시스템을 만드는 것이라고 강조합니다. 회사는 아직 평가 프로세스에서 특정 결과를 발표하지 않았지만 앞으로 몇 달 안에 진행 상황에 대한 업데이트를 공유할 것으로 예상됩니다.