AI 연구연구 프리프린트
코딩 에이전트 보고서, 실행 상태의 절반가량만 복원
원문 읽기 · arxiv.org ↗(새 탭에서 열림)코딩 에이전트의 보고만으로는 실행 중 실패와 미해결 위험을 파악하기 어려울 수 있다.
배경과 변화
- 코딩 에이전트의 보고만으로는 실행 중 실패와 미해결 위험을 파악하기 어려울 수 있다.
- 전체 실행 기록과 누적 보고를 같은 작업 상태 질문으로 읽힌 뒤 답변 가능성을 비교했다.
근거와 결과
- 37개 작업·4799개 질문에서 전체 기록은 92.7%, 보고만으로는 52.0%를 복원해 40.7점 차이가 났다.
적용 조건
- 질문 생성과 상당수 채점이 모델 기반이다. 실제 감독자의 판단이나 코드 결과 악화를 직접 측정한 수치는 아니다.
함께 확인할 조건
- 질문 생성과 상당수 채점이 모델 기반이다. 실제 감독자의 판단이나 코드 결과 악화를 직접 측정한 수치는 아니다.
출처와 편집 기준
arxiv.org · 연구 프리프린트 · 검수 2026.10.18 (KST)
요약은 원문의 핵심을 정리했으며, 커머스 인사이트는 편집 해석이다.