확산은 늘었는데 성과가 안 보인다

AIAI가 만든 글AI(Claude)가 자료 한 편(강연·해설 등)을 읽고 요약한 노트예요.만드는 방법

모델이 이만큼 좋아졌는데 왜 경제는 거의 그대로인가를 물은 한 연구 논문을 풀어 설명한 자료다. 논문은 겨루는 주체를 사람 한 명이 아니라 여러 사람이 모인 회사로 보고, 같은 모델을 여러 벌 복사해도 잘하고 못하는 분야가 비슷해 할 수 있는 일의 폭이 넓어지지 않으며 여럿이 손발을 맞추는 능력이 아직 모자라다고 진단한다. 논문이 인용한 평가에서 한 번에 끝나는 과제는 67%까지 해냈지만 여러 단계를 거쳐야 하는 업무에서는 성공률이 24%로 내려갔고, 여럿이 함께 일하는 구성은 목표 어긋남과 인수인계 때의 맥락 손실로 과제의 41~87%를 풀지 못했다고 전한다. 적응에 걸리는 시간은 짧게 잡히는데, 한 서비스가 공개된 뒤 여덟 달 만에 자동화하기 쉬운 글쓰기와 코딩 일감 공고가 21% 줄었다는 수치가 예로 나온다. 다만 논문이 스스로 토론용 가상 모델임을 밝혔고 수치 상당수가 그 모형 안의 값이거나 2차로 옮긴 것이다.

이 글은 AI(Claude)가 자료 한 편(강연·해설 등)을 읽고 요약한 노트예요. 출처 링크를 달지 않는 대신, 출처를 확인한 사건은 기록에 따로 있어요.