"AI가 오히려 숙련 개발자 작업 속도 19% 늦췄다"

비영리 연구기관 METR 실험…AI 제안 검토·수정 과정서 발목

(지디넷코리아=김미정 기자)인공지능(AI) 기술이 숙련 개발자 업무 생산성을 떨어뜨릴 수 있다는 연구 결과가 나왔다. 

11일 테크크런치 등 외신에 따르면 AI 연구 비영리단체 METR는 올해 초 오픈소스 프로젝트에서 숙련 개발자들이 코딩 도구 '커서'를 사용해 작업한 결과 업무 소요 시간이 19% 증가했다고 밝혔다. 

연구에 참여한 개발자들은 커서가 작업 속도를 24% 줄여줄 것이라 예상했으며 실험 후에도 20%가량 빨라졌다고 답했다. 연구 전 METR 연구진조차 작업 속도가 2배 빨라질 것으로 내다봤다. 그러나 실제 기록된 데이터는 정반대였다.

인공지능(AI) 기술이 숙련 개발자 업무 생산성을 떨어뜨릴 수 있다는 연구 결과가 나왔다. (사진=구글 제미나이)

작업 속도 저하 원인은 AI 부정확성 때문인 것으로 나타났다. AI가 제안한 코드는 완전히 틀리진 않았지만 사람이 직접 검토하고 수정해야 했던 수준이었다. 방향은 맞췄지만 개발자의 의도나 코드 문맥은 제대로 파악하지 못했던 셈이다.

이번 실험은 숙련된 개발자가 이미 익숙한 코드베이스에서 작업할 때를 기준으로 진행됐다. 이에 초급 개발자나 처음 접하는 코드 환경에서는 다른 결과가 나올 수 있다는 가능성도 언급됐다. AI 도구의 효과는 사용자 숙련도나 작업 환경에 따라 달라질 수 있다는 의미다.

실험에 참여한 다수 숙련 개발자는 여전히 커서를 사용 중인 것으로 확인됐다. 작업 속도가 느려졌음에도 계속 사용하는 이유는 효율보다는 심리적 편의성이 더 크게 작용했기 때문인 것으로 나타났다.

연구에 참여한 한 개발자는 "AI가 제안하는 코드는 완벽하지 않지만 처음부터 모든 코드를 직접 짜야 하는 부담을 줄여준다"며 "마치 빈 화면에서 글을 쓰기보다 초안을 다듬는 과정에 가까운 느낌을 준다"고 밝혔다. 

실제 사용자들은 개발 결과보다는 작업 과정이 더 편하고 쾌적해졌다는 점을 높이 평가한 것으로 전해졌다. 조엘 베커 METR 연구원은 "개발자에게는 가능한 한 빨리 작업을 완료하는 것 외에도 다양한 목표가 있다"며 "커서 등을 활용해 더 적은 노력이 드는 방식을 선택하고 있는 것"이라고 주장했다.

김미정 기자(notyetkim@zdnet.co.kr)