AI 연구연구 프리프린트
Kolab, 50명 전문가의 긴 업무에서 인간·에이전트 협업을 기록
원문 읽기 · arxiv.org ↗(새 탭에서 열림)Kolab은 사람이 AI 에이전트와 일할 때 결과를 실제로 받아들이는지, 고치는지, 버리는지를 긴 업무 흐름 속에서 분석한 자료다.
자료 구성
- 50명 전문가의 자기 업무 화면 115시간 이상을 508개 단계로 정리하고 90개 이상 소프트웨어 사용을 포착했다.
- 각 단계에 사람의 협업 경험과 최종 결과 품질 판단을 연결했다.
관찰
- 모델은 AI 결과의 수용을 과대예측하고 수정·거절을 놓쳤다.
- Gemini 3.1 Pro는 실제 수정의 52%, 거절의 71%를 수용으로 분류했다.
읽을 때 주의
- 채팅 외부의 편집·검증을 보려면 화면과 작업 결과가 필요할 수 있다.
- 참여자와 모델별 평가 사례가 제한돼 특정 제품의 현장 성능을 일반화할 수 없다.
함께 확인할 조건
- 50명 연구 참여자의 업무와 사용 도구에 한정돼 전체 직업을 대표하지 않는다.
- 일부 모델은 비용 때문에 더 적은 사례에서 평가됐고 같은 표본 비교가 필요하다.
이 글의 용어
기사에서 다루는 개념을 검수된 용어집에서 살펴보세요.
출처와 편집 기준
arxiv.org · 연구 프리프린트 · 검수 2026.10.18 (KST)
요약은 원문의 핵심을 정리했으며, 커머스 인사이트는 편집 해석이다.