BioBasicsBench, OpenAI가 공개한 AI 에이전트 습식 실험 과학 평가 벤치마크
OpenAI는 자사 공식 채널인 OpenAI News를 통해 AI 에이전트가 일상적인 습식 실험(wet-lab) 과학을 얼마나 잘 다루는지 측정하는 벤치마크 'BioBasicsBench'를 공개했다.
BioBasicsBench는 모두 100개 과제로 이뤄져 있다. OpenAI에 따르면 이 벤치마크는 AI 에이전트의 능력을 두 가지 측면에서 본다. 첫째는 가공하지 않은 원시 실험 데이터를 해석하는 능력이고, 둘째는 실험실에서 날마다 이뤄지는 습식 실험 과학 업무를 처리하는 능력이다.
습식 실험은 시약, 세포, 생체 시료 같은 실제 물질을 직접 다루는 실험을 말한다. 컴퓨터 계산과 시뮬레이션이 중심인 건식(dry-lab) 연구와는 구분된다. OpenAI가 붙인 소개 글의 제목은 'AI 에이전트가 일상적인 습식 실험 과학을 어떻게 다루는지 측정하기(Measuring how AI agents handle everyday wet-lab science)'다. 제목에서 보듯 이 벤치마크의 평가 대상은 실험실의 '일상적인' 과학 업무다. 실험 데이터 해석과 기본 실험 업무 처리라는 두 가지 축으로 AI 에이전트를 평가하는 것이 BioBasicsBench의 목적이다.
