#FDA

AI 벤치마크, 새로운 기준이 필요하다

기존 AI 벤치마크는 명확한 정답이 있는 고립된 문제에 대한 성능만 비교했으나, 실제 AI는 복잡한 환경에서 인간과 상호작용합니다. 미국 캘리포니아와 영국 런던 병원의 방사선 AI 사례처럼, 벤치마크에서 빠르던 AI가 실제 현장에서는 해석 시간으로 인해 오히려 업무 지연을 초래했습니다. 이에 따라, 2022년부터 영국, 미국, 아시아 등에서 연구된 실제 AI 배포 사례를 기반으로 인간과 AI의 협업을 맥락에 맞게 평가하는 HAIC 벤치마크가 대안으로 제시되었습니다.