Nature: 구형 모델로 구동됨에도 AI 에이전트가 의사 능가
Nature에 실린 두 편의 연구에 따르면 AI 에이전트가 구형 베이스 모델을 사용했음에도 진단 및 치료 계획에서 의사와 대등하거나 앞서는 성과를 보임. 최신 LLM을 사용하지 않았음에도 의료 에이전트가 임상 활용성에 근접하고 있음을 시사.
투드레스덴(TUD Dresden)의 MIRA 에이전트는 시뮬레이션된 전자 건강 기록 내에서 자율적으로 작동하여 11가지 도구를 사용하여 충수염과 같은 상태를 98.6%의 정확도로 진단했다. 반면 구글의 연구에서는 Amie가 95%의 적절한 치료 계획을 달성한 반면 인간 의사는 72%였다. 연구진은 MIRA가 위험한 약물 상호작용이나 용량 오류를 전혀 만들지 않았으며 필요한 입원을 완벽하게 식별했다고 밝혔다. 이는 이러한 자율 시스템의 안전 잠재력을 강조한다. 중요한 점은 두 시스템 모두 이미 구식인 기본 모델에서 실행되었으며, 이는 의료 작업에서 최신 세대의 범용 LLM에 대한 액세스보다 아키텍처 및 도메인별 미세 조정이 더 중요하다는 것을 의미한다. 이러한 결과가 시뮬레이션된 환경으로 제한되지만, 이는 복잡하고 고위험 의사 결정 프로세스에서 AI 에이전트의 신뢰성에 대한 새로운 벤치마크를 설정한다.