AI 연구연구 프리프린트
AutoOnboarder, 에이전트 모델·프롬프트·도구 환경을 함께 탐색
원문 읽기 · arxiv.org ↗(새 탭에서 열림)AutoOnboarder는 작업 실행자와 분리된 에이전트가 실행자의 모델·프롬프트·도구 환경을 수정하고 비용과 정확도를 함께 평가하는 방식이다.
실험 구성
- 합성 의료 유전자검사 사전승인 화면에서 유효 사례는 정확히 제출하고 결함 사례는 중단해야 한다.
- 180건 검증에서 잘못된 중단·제출·필드 기입을 모두 실패로 채점했다.
관찰
- 세 후보의 점수는 0.323~0.409, 건당 비용은 0.016~0.069달러였다. 기본 Gemini 3.5 Flash는 0.319와 0.934달러였다.
- 그러나 온보딩 반복 점수는 0.199~0.501, 비용과 제출 여부도 크게 흔들렸다.
한계
- 세 설정 범위의 우열은 반복 변동성 때문에 의미 있게 비교하기 어렵다고 저자들이 명시했다.
- 실제 의료 판단이나 서식 처리에 적용하려면 데이터 접근 통제와 독립 검증이 필요하다.
함께 확인할 조건
- 180건의 합성 사례이며 실제 임상 업무 성능이나 환자 안전성을 측정하지 않았다.
- 반복 수가 적고 모델 버전이 변할 수 있어 설정 간 우열을 단정하기 어렵다.
이 글의 용어
기사에서 다루는 개념을 검수된 용어집에서 살펴보세요.
출처와 편집 기준
arxiv.org · 연구 프리프린트 · 검수 2026.10.18 (KST)
요약은 원문의 핵심을 정리했으며, 커머스 인사이트는 편집 해석이다.