원드르헬스 AI 코치 시험은 700문제였다
사람을 만나기 전에 AI 코치는 700문제를 치렀다. 미국 디지털헬스 회사 원드르헬스(Wondr Health)는 기업 복리후생으로 제공되는 체중관리 프로그램의 온보딩 상담을 AI에 맡기면서, 실제 참여자가 AI 코치를 만나기 전에 6개 사용자 페르소나에 걸쳐 700개가 넘는 질문을 통과시켰다고 밝혔다. Anthropic이 공개한 자사 고객사례 기준이고 아직 베타 단계라는 점이 먼저 붙는 숫자다.
10분을 만든 건 모델이 아니라 안전장치다
원드르헬스의 프로그램은 구조화된 커리큘럼과 사람 코치로 구성돼 있다. 회사는 사람 코치를 대체하지 않는 계층(layer)을 붙이는 걸 목표로 AI 코치 '원다(Wonda)'를 만들었고, AI 전문 엔지니어링사 블랭크메탈과 세 번의 스프린트로 첫 단계를 구축했다. 사람 코치가 30~60분에 걸쳐 하던 첫 상담이 10분짜리 안내 대화로 압축됐다. 여기서 눈여겨볼 대목은 절감치가 아니라 부속 장치다. 대화는 RAG 파이프라인으로 자사 커리큘럼에 근거를 두고, 별도의 안전 서브에이전트가 모든 대화 턴을 감시하다 문제를 감지하면 젠데스크로 사람 코치에게 넘긴다. 700개 질문 검증도 엔지니어 지원 없이 임상·코칭팀이 직접 테스트 콘솔로 돌렸다. 출시 뒤에도 자동 평가자와 사람 평가 라운드, 전체 대화 추적이 붙어 있다.
시간 절감 숫자는 나오는데 조건이 붙는다
같은 '상담 시간 절감' 숫자는 다른 회사 발표에서도 반복된다. 다만 셋 다 벤더 또는 당사자 발표라는 한계를 달고 있다.
| 회사 | 붙인 업무 | 지표 | 변화 | 출처 |
|---|---|---|---|---|
| 원드르헬스 | 체중관리 프로그램 온보딩 상담 | 첫 상담 시간 | 30~60분 → 10분 | Anthropic 고객사례 |
| 오스카헬스 | 의료 상담 문서화·검사결과 검토 | 문서화 소요 시간 | 약 40% 절감 | OpenAI·오스카 공동 발표 |
| 오스카헬스 | 보험금 청구 에스컬레이션 처리 | 해결 시간 | 50% 감소, 월 4천건 자동화 목표 | 오스카 자사 블로그 |
| 슬랙 | 채널 요약·리캡 | 사용자 주당 시간 | 주당 97분 절감 | Anthropic 고객사례 |
미국 건보사 오스카헬스는 의료진-환자 대화 문서화에 20분 이상 걸리던 작업을 OpenAI API로 약 40% 줄였고, 청구 이력 추적 어시스턴트로 에스컬레이션 해결 시간을 50% 줄였다고 밝혔다. 월 4천건 자동화는 '목표'라는 표현이 원문에 붙어 있다. 슬랙의 주당 97분은 사용자 평균 집계치인데 측정 방식이 외부에 공개되지 않았다.
10분 뒤에 숨은 예외 큐
실무자 커뮤니티의 반응은 이 숫자들의 뒷면을 보여준다. r/AI_Agents의 한 익명 작성자는 자동화 자체는 전체의 쉬운 80%이고 시스템을 지탱하는 건 나머지 20% 예외 처리라며, 설계 시점에 대비책을 정하지 않으면 실패가 조용히 묻히거나 일이 사람에게 그대로 돌아온다고 적었다. 같은 커뮤니티의 다른 글은 잘못된 숫자를 일주일 넘게 조용히 반환하는 에이전트 사례를 짚는다. 모든 실행을 성공으로 기록하는 시스템에서는 오류가 알람을 울리지 않는다는 것이다. 원드르헬스가 매 턴 감시 에이전트를 별도로 붙인 선택은 이 실패 양상에 대한 대답으로 읽힌다. 채팅 요약은 틀려도 웃어넘기지만 코칭 대화의 오류는 프로그램 이탈과 건강 문제로 직결되기 때문이다.
한국에서는 건강정보가 먼저 걸린다
원드르헬스 사례를 국내 웰니스·보험·HR 서비스 사업자가 그대로 옮기려면 숫자보다 앞서 두 가지가 걸린다. 체중과 식이 기록은 개인정보보호법상 민감정보라 해외 API로의 처리와 반출이 동의·규제의 영역이고, 원드르헬스가 EU 데이터 상주를 위해 아마존 베드록의 리전을 고른 것과 같은 인프라 판단도 국내에서는 자국 리전·자체망 요구로 번역된다. 상담 인력이 위탁·정규직 구조로 묶여 있어 '시간 절감'이 곧 비용 절감으로 이어지지 않는 점도 다르다. 한국 기업의 AX 견적은 모델 사용료보다 검증 콘솔과 에스컬레이션 설계에서 커진다.
700문제의 사전 시험과 매 턴의 감시 에이전트, 이 사례의 본체는 절감 숫자가 아니라 그 검증 장치 쪽에 있다. 숫자는 검증의 산출물이지 모델의 선물이 아니다.
분석 근거: Anthropic 고객사례(원드르헬스·슬랙), OpenAI·오스카헬스 공동 발표 및 오스카 자사 블로그, r/AI_Agents 실패담, Hacker News 토론. 공개 자료에 근거한 분석입니다.
