OpenAI, LifeSciBench 공개 — 박사급 에이전트는 실제 과학에서 실패하는가?

OpenAI는 실제 생명 과학 연구의 복잡성을 처리할 수 있는지 평가하기 위해 설계된 엄격한 벤치마크인 **LifeSciBench**를 도입했습니다. 단순한 사실 회상에서 벗어나 적용된 워크플로우로 나아가고 있습니다. 이 데이터 세트는 7개 도메인에 걸쳐 750개의 전문가가 작성한 작업을 포함하고 있으며, 산업 경험을 갖춘 173명의 박사 학위 과학자가 작성하였으며, PDF, 시퀀스 파일 및 웹 참조와 같은 1,062개의 아티팩트를 특징으로 합니다. 작업의 79%는 여러 추론 단계를 필요로 하며, 53%는 90%의 전문가 동의를 요구하는 등급표에 따라 비텍스트 아티팩트의 해석을 요구합니다. 이 릴리스는 의약품 발견 및 생명공학 연구에 필요한 다단계, 에이전트 기반 추론 능력으로 AI 평가의 전환을 강조합니다.