전방위 대형 언어 모델의 가이드라인 준수 및 케이스별 종양학 의사결정에 대한 집합적 능력 경계

전방위 대형 언어 모델의 가이드라인 준수 및 케이스별 종양학 의사결정에 대한 집합적 능력 경계

온콜로지 의사결정 경계 벤치마크(ODBB)는 NCCN 가이드라인에서 도출된 2,005개의 의사결정 포인트와 9개의 전방위 LLM(2025~2026년 발표)을 대상으로 대조 평가를 수행했다. 결정 경로의 신뢰성 평가를 위한 결정론적 채점자는 14가지 실패 유형을 분류했고, 종양학 전문의 검증은 구체적 추론 전에 가이드라인 경로를 선택하는 과정에서 의사결정 경로의 현저한 맹점을 보여주었다고 밝혔다.

주요 발견에 따르면 다수의 항목에서 어떤 모델도 정답에 도달하지 못하며, 일부 모델은 안전하지 않은 약속을 하거나 올바른 단계를 확정하는 데 실패하는 경우가 있다. 이는 모델의 품질만으로 임상적 배치가 충분하지 않음을 시사하며, 효과적 의사결정 지원을 위해 능력 경계 탐지 및 임상의 의사결정 연결을 가능하게 하는 아키텍처가 필요하다고 제시한다.

AI-assisted brief