AI 시대의 일하는 법 · 번역 정리
에이전트가 일을 대신할 때, 생각은 누가 하나
Claude Code 팀의 Addy Osmani가 X에 올린 아티클 「Critical thinking when agents do the work」를 우리말로 옮기고 정리했습니다. AI에게 일을 맡기되, 생각과 책임까지 넘기지 않는 방법에 관한 글입니다.
원문: x.com/addyosmani/status/2117512471930167377
예전에는 비판적 사고를 "새로운 정보를 겸손한 호기심과 건강한 의심으로 대하고, 여러 관점을 들은 뒤 자기 의견을 세우는 것"이라고 배웠습니다. 지금도 맞는 말입니다. 그런데 일의 상당 부분이 에이전트를 거쳐 돌아가면서, 일상에서 비판적 사고를 강제하는 장치가 점점 사라지고 있습니다.
저자는 에이전트 도구의 열렬한 지지자입니다. 이 글은 에이전트를 덜 쓰자는 이야기가 아닙니다. 무엇이든 에이전트에게 넘기기 쉬운 세상에서 스스로 생각하는 힘을 지키는 법에 관한 이야기입니다.
과거에는 질문과 답 사이의 시간에 대부분의 사고가 일어났습니다. 이제 그 시간은 몇 초입니다. 모델이 좋아질수록 눈에 띄는 오류는 줄어듭니다. 결과물 대부분은 잘 쓰였고 거의 맞습니다. 그래서 다시 들여다볼 이유가 생기지 않습니다. 에이전트를 여러 개 돌려도 결과를 보는 눈은 여전히 한 쌍뿐입니다.
비판적 사고는 하루 일과 안에 일부러 넣어야 합니다. 가만히 두면 아무것도 그걸 대신해 주지 않습니다.
스스로 바로잡기 어려운 이유도 있습니다. 에이전트와 일하는 건 즐겁습니다. 바쁜 날에 빠르고, 기분 좋고, 대체로 맞는 답을 받으면 상쾌합니다. 바로 그래서 경계심이 쉽게 풀립니다.
1. 맡기기, 기대기, 그리고 넘겨주기
저자는 AI에 의존하는 정도를 하나의 스펙트럼으로 설명합니다.
위 · 건강한 상태
인지적 위임
일은 AI에 맡기되 결과의 주인은 나입니다. 저자는 하루 종일 이렇게 일하고, 여러분도 그래야 한다고 말합니다.
가운데 · 주의
기대기
도구의 출력이 그대로 나의 다음 입력이 됩니다. 결과물이 더 이상 '검증할 가설'이 아닙니다.
아래 · 위험
인지적 항복
AI의 출력이 슬그머니 내 생각이 됩니다. 확인할 필요조차 느끼지 못합니다.
'인지적 항복(cognitive surrender)'은 와튼 스쿨의 Steven Shaw와 Gideon Nave가 만든 말입니다. 신뢰(또는 게으름)가 커질수록 사람들은 스펙트럼 아래로 미끄러집니다. 한 걸음 한 걸음이 완만하고 그럴듯해서 알아채기 어렵습니다. 지난 답을 꼼꼼히 읽었으니 이번엔 훑어봅니다. 그다음엔 뼈대만 봅니다. 그러다 어느 줄에 대해 질문을 받으면, 에이전트의 도움을 받아도 설명하지 못합니다.
이렇게 '인지 부채'가 쌓입니다. 팀에서는 공유하던 시스템 이해가 조금씩 무너지는 모습으로 나타나고(Margaret-Anne Storey), 코드에서는 '이해 부채(comprehension debt, Jeremy Twei가 만든 말)'로 나타납니다. 당장은 전혀 보이지 않습니다. 코드는 깔끔하고 테스트도 통과합니다. 시스템을 고쳐야 하는 순간이 와서야 아무도 그걸 이해하지 못한다는 걸 깨닫습니다. 전략 문서나 기획서의 목차만 읽고 승인했을 때도 마찬가지입니다.
불가능한 걸 요구하는 건 아닙니다. 큰 코드베이스 전체를 머릿속에 담고 있을 수는 없습니다. Claude Code 팀도 필요할 때마다 Claude에게 해당 부분을 설명해 달라고 해서 이해를 그때그때 다시 세운다고 공개적으로 말했습니다. 전체를 다 알 필요는 없습니다. 필요할 때 다시 세울 수 있으면 되고, 내가 무엇을 모르는지만 알면 됩니다.
걸린 게 적은 일은 통째로 맡겨도 됩니다. 하지만 에이전트의 도움을 받아도 답을 설명할 수 없다면, 그 일의 주인 자리를 내준 것입니다.
그게 늘 문제인 건 아닙니다. 저자는 강의 촬영 장소로 평점이 비슷한 호텔 세 곳 중 하나를 고를 때 AI에게 결정을 맡겼고, 결과도 괜찮았습니다. 하지만 돈을 어디에 투자할지, 아이들의 진로를 어떻게 조언할지, 회사에서 무엇을 만들고 출시해도 안전한지는 맡기지 않습니다. 틀려도 비용이 싼 일은 넘기고, 남이 결과를 감당해야 하는 일은 판단을 직접 쥐고 있으라는 것입니다.
2. 저자가 스스로에게 던지는 여섯 가지 질문
예전에는 생각이 막히면 "내가 맞는 문제를 풀고 있나? 맞는 방법으로 풀고 있나? 결론을 뒷받침할 근거가 있나? 다 끝났다는 걸 어떻게 아나?" 같은 기본 질문으로 돌아갔습니다. 적어 놓으면 유치해 보이지만, 놓치기 쉬운 관점을 강제로 떠올리게 합니다. 요즘은 이걸 다 건너뛰고 에이전트에게 "어떻게 할까?"라고 묻기 쉽습니다. 그래서 저자는 이렇게 질문을 바꿔 씁니다.
① 묻기 전에 가설을 세웠나?
어려운 일을 에이전트에 맡기기 전, 머릿속으로라도 답을 예상해 둡니다. 틀린 예상이어도 괜찮습니다. 잘 쓰인 답을 먼저 읽으면 다른 가능성을 떠올리기 어려워집니다. 전혀 감이 없다면 Thariq Shihipar가 말하는 '사각지대 점검'을 요청하세요. 내가 아는 걸 알려 주고, 내가 모르는 줄도 모르는 것을 찾아 달라고 하는 겁니다.
② 생각을 도와 달라는 건가, 생각을 대신해 달라는 건가?
둘 다 괜찮습니다. 지금 어느 쪽을 하고 있는지만 알면 됩니다.
③ 이게 틀렸다면, 무엇이 사실이어야 할까?
그리고 직접 확인하세요. 모델이 스스로 말하는 확신보다, 실제로 돌려 볼 수 있는 테스트 하나가 훨씬 값집니다.
④ 다른 각도의 반론을 들어 봤나?
정답이 열려 있는 문제에서 강한 입장을 정했다면, 여러 모델에게 반대편 주장을 펼쳐 보게 한 뒤 직접 검토해 의견을 세웁니다. 시간은 더 들지만 주제를 훨씬 깊이 알게 됩니다.
⑤ 이걸 유지보수할 사람 앞에서 걸 수 있나?
코드뿐 아니라 내가 내놓는 모든 결과물에 해당합니다. 저자는 이것이 '책임질 수 있는가'의 기준이라고 말합니다.
⑥ 나는 이제 무엇을 더 이상 연습하지 않나?
일상적인 디버깅 같은 것일 수 있습니다. 일부는 내려놓아도 괜찮지만, 그건 의도적인 선택이어야 합니다.
3. 검증을 습관으로
저자는 병목이 '코드를 짜는 일'에서 '내가 맞다고 확신하는 일'로 옮겨 갔다고 봅니다. 에이전트에게 검증 수단(E2E 테스트, 속성 테스트, 실제 앱 조작 등)을 주면, 사람이 보기도 전에 고치고, 테스트를 돌리고, 결과를 읽고, 다시 시도합니다. Boris Cherny의 말처럼 "Claude에게 자기 작업을 검증할 방법을 주는 것"이 좋은 결과의 핵심입니다. 모든 줄을 읽는 대신, 이런 순환 구조를 만들고 그 증거를 검토하게 됩니다.
하지만 검증도 '항복'할 수 있습니다. "결론을 뒷받침할 근거가 있나?"가 "체크가 초록색이 됐나?"로 바뀌는 순간입니다. 에이전트 덕에 테스트 만들기가 너무 싸져서 초록불은 넘쳐납니다. 기능과 같은 실수를 담은 테스트는 당연히 통과합니다. 초록불 하나는 한 가지 사실만 말해 주는데, 모든 걸 보장한다고 착각하기 쉽습니다.
체크가 초록색이 되면, 그게 무엇을 증명했는지 물으세요. 그리고 무엇을 증명하지 못했는지도 물으세요.
- '검증 완료'의 기준은 미리 정하세요. 끝난 뒤에는 어떤 결과든 합리화하게 됩니다.
- 완료 기준은 손에 잡히는 것이어야 합니다. 통과한 테스트, 스크린샷, 로그나 트레이스처럼요. "다 된 것 같은데요"는 기준이 아닙니다.
- 완료 알림을 받으면 요약보다 먼저 실제로 실행한 명령과 그 출력을 확인하세요.
- 자기 비평을 순환 구조에 넣으세요. Claude Code는 새 컨텍스트의 서브에이전트로 자기 작업을 점검할 수 있습니다. 기억날 때만이 아니라 매번 돌게 하세요.
- 마지막에 "내가 놓친 게 있을까?"라고 물으세요. 우스워 보여도, 최신 모델은 꼭 두세 가지를 더 찾아옵니다.
늘 이렇게 깊이 파야 하는 건 아닙니다. 언제 깊이 들어갈지 아는 것도 실력입니다. Claude Code 팀의 코드 리뷰 원칙 중 저자가 가장 좋아하는 말은 이것입니다. "체크가 무엇을 놓칠지 말할 수 없다면, 빠른 승인 말고 제대로 된 리뷰를 요청하라."
코드 밖에서도 같습니다. 에이전트가 고객 통화 50건이나 경쟁사 분석을 요약해 줬다면 원본 문서 몇 개를 직접 확인하세요. 내 결론이 기대는 숫자 하나는 제대로 계산됐는지 직접 확인하세요.
에이전트 덕에 검증을 만드는 건 쉬워졌습니다. 어려운 건 '좋은 검증이 어떤 모습인지' 아는 일입니다.
4. 만들어진 것을 진짜로 들여다보기
에이전트가 600줄짜리 PR을 줬다고 해 봅시다. 구조를 대충 보고, 변수 이름도 그럴듯하고 테스트도 통과하니 승인합니다. 그런데 중간 어딘가에 트랜잭션 경계의 순서가 미묘하게 바뀌었거나, 생각지 못한 예외 상황의 기본값이 뒤집혀 있습니다. 리뷰는 했지만, 원래 찾을 줄 알던 것만 찾은 셈입니다.
코드를 쓰는 것과 리뷰하는 것은 다른 기술이고, 어느 순간 리뷰는 도장 찍기로 변합니다. 그러니 AI가 쓰지 않았다고 생각하고 변경 사항을 읽고, 그 너머에서 에이전트가 무엇을 결정했는지 보세요. 긴 세션 동안 에이전트는 기본값, 범위에서 뺀 것, 두 요구사항이 충돌할 때 어느 쪽을 재해석할지 같은 작은 결정을 수없이 대신 내립니다.
"다 잘 됐습니다"라는 요약에는 이런 게 안 보입니다. 그러니 내린 결정과 가정을 목록으로 달라고 하세요. 그리고 스스로 시험해 보세요. 아무 줄이나 골라 "이 줄은 왜?"라고 물어봅니다. 문서라면 닫고 핵심 주장을 기억만으로 써 봅니다. 어떤 사람들은 긴 세션 끝에 Claude에게 변경 보고서와 함께 맨 아래 퀴즈를 내게 하고, "퀴즈를 만점 받아야만 머지한다"는 규칙을 지킵니다.
내보내는 것을 변호할 수 있을 만큼 이해하세요. 언젠가 누군가 물어볼 테니까요.
에이전트는 주의력을 지키는 데도 쓸 수 있습니다. 저자는 PR이 많이 들어오는 오픈소스 프로젝트에서, 무엇이 들어왔고 무엇이 가이드라인에 어긋나며 어디에 내 주의가 필요한지 에이전트로 좁힙니다. 판단까지 맡기진 않지만, 덕분에 "이 변경이 맞는 문제를 맞는 방법으로 풀고 있나"를 생각할 여유가 생깁니다.
물량 문제도 솔직해져야 합니다. 저자는 이를 '오케스트레이션 세금'이라고 부릅니다. 에이전트가 만들어 내는 양과, 내 이름을 걸 수 있는 양 사이의 격차입니다. 끝난 작업이 내가 소화하는 속도보다 빨리 쌓인다면 세션을 하나 더 여는 건 답이 아닙니다. 체크를 촘촘히 해서 내 손이 덜 가게 하거나, 속도를 늦추세요.
감당할 수 있는 것보다 많이 만들어 내고 있다면, 그건 더 이상 리뷰가 아닙니다. 그냥 잘되길 바라는 겁니다.
5. 좋은 입력이 좋은 결과를 만든다
사람의 생각은 여전히 필요하지만, 위치가 중간에서 앞과 끝으로 옮겨 갔습니다. 앞에서는 과제 설명과 맥락에, 끝에서는 결과 검토에 힘을 씁니다. 그래서 저자는 좋은 프롬프트 작성을 비판적 사고 기술로 봅니다.
예전에는 막연한 요청을 하면 누군가 되물었고, 그제야 "아, 이건 내가 정리를 안 했구나" 하고 깨달았습니다. 에이전트는 대개 거기서 멈추지 않습니다. 빠진 부분을 알아서 채워 완성된 것처럼 보이는 결과를 돌려줍니다. 정작 아이디어는 여전히 흐릿한데도요. 저자는 이를 '의도 부채(intent debt)'라고 부릅니다. 내가 쓰지 않은 결과물에 숨은 목표, 제약, 이유입니다. 다른 부채와 달리 이건 아무도 대신 갚아 줄 수 없습니다. 의도는 나에게서 나와야 합니다.
프롬프트는 문제를 얼마나 이해했는지 보여 주는 거울입니다. 분명하게 표현할 수 없다면, 내 머릿속에서도 분명하지 않은 겁니다.
- 도움을 청하기 전에 내 말로 요청서를 먼저 쓰세요. 대상, 범위에서 빼는 것, '완료'의 정의를 적습니다.
- 두 번 고쳐도 원하는 결과가 안 나오면 땜질을 멈추고 프롬프트를 새로 쓰세요.
- Andy Clark는 AI에 '위임'하는 것과 AI와 '협업'하는 것을 구분합니다. 협업에서는 프롬프트가 결과를, 결과가 다음 프롬프트를, 그 과정이 문제에 대한 내 이해를 날카롭게 합니다. 막히면 에이전트에게 모르는 걸 나에게 인터뷰해 달라고 하세요. 세션을 닫을 때 내 이해가 더 단단해졌다면 성공입니다.
- 입력도 조심하세요. 에이전트끼리 앞 에이전트의 요약만 넘기다 보면, 세 번째 에이전트는 원본 문서를 한 번도 읽지 않은 상태가 됩니다.
- 결과물에 대한 나만의 기준을 가지세요. 이제 모든 결과가 깔끔하고 자신감 있게 나오기 때문에, 매끈함은 더 이상 품질의 신호가 아닙니다. 저자는 내 이름을 붙이기 불편한 결과는 내보내지 않습니다.
- 기준에 못 미친 이유는 공유 설정, 훅, 테스트에 적어 두세요. 그래야 같은 일이 반복되지 않고, 안목이 쌓입니다.
6. "어차피 모델이 나보다 잘하게 될 텐데요"
1~2년 뒤면 모델이 내가 잡아낼 것을 다 잡아낼 텐데, 왜 이 능력을 유지해야 할까요? 저자도 많은 탐지 작업을 점점 에이전트에게 넘기자고 주장해 왔고, 그 부분은 맞을 수 있다고 인정합니다. 그래도 중요한 이유가 있습니다. 결국 출시되는 것에는 누군가 책임을 져야 합니다. AI가 얼마나 도왔든, 책임은 사람이 집니다.
어떤 일에 에이전트를 얼마나 믿을지도 그 자체로 판단의 문제입니다. 모델이 틀리는 방식은 계속 바뀌므로, 감을 유지하려면 작업을 검토해야 합니다. Anthropic의 내부 연구도 이를 '감독의 역설'이라고 부릅니다. "Claude를 감독하려면 바로 그 코딩 실력이 필요한데, 그 실력은 AI를 과하게 쓰면 퇴화할 수 있다."
더 좋은 모델이 해결해 주지 않는 질문도 있습니다. 무엇을 만드는가, 왜 그럴 가치가 있는가, 누구에게 영향을 주는가, 무엇을 포기할 각오가 되어 있는가. 에이전트가 함께 고민해 줄 수는 있지만, 답은 여전히 나의 몫입니다.
일도, 점검의 상당 부분도 넘길 수 있습니다. 하지만 책임은 넘길 수 없습니다.
7. 매일 해볼 수 있는 실천
전부 철저하게 할 필요는 없습니다. 내 작업 방식에 맞는 것만 골라 쓰세요.
일주일에 한 번
에이전트 없이 코드를 조금 짜거나, 잊어버리면 곤란할 일을 직접 하나 해 보세요. 저자는 이를 '감 잡기 연습'이라고 부릅니다. 도덕적인 의무라는 뜻은 아닙니다.
한 달에 한 번
더 이상 하지 않게 된 것을 적고, 그중 무엇을 안 해도 괜찮은지 정하세요. 저자의 오래된 질문은 지금도 유효합니다. "AI가 없다면 나는 얼마나 길을 잃을까?"
모르는 게 나오면
한 줄 설명을 검색해 붙여 넣는 대신, 조금 공부해서 그게 어디에 들어맞는지 제대로 이해하세요.
검증은 일정에 넣기
기계를 제대로 점검하는 건 진짜 일입니다. 공짜인 척하면 팀은 결국 안 하게 됩니다. 업무 항목으로 일정에 넣어야 실제로 합니다. 쓰지 않는 기술은 생각보다 빨리 사라집니다. 놓치고 싶지 않은 기술은 계속 쓰세요.
기억해 둘 여덟 가지
- 의도적으로 하세요. 에이전트는 나에게 퀴즈를 내고, 인터뷰하고, 증거를 보여 줄 수 있습니다. 단, 그렇게 설정해 둘 때만요.
- 스펙트럼에서 내 위치에 솔직하세요. 에이전트의 도움을 받아도 설명할 수 없다면, 이미 넘겨준 것입니다.
- 가설을 가지세요. 틀린 가설이라도 묻기 전에 세우세요.
- 초록불은 한 가지만 말합니다. 무엇을 확인했고, 무엇을 확인하지 않았나요?
- 증거를 보세요. 요약보다 먼저, 무엇을 실행했고 무엇이 나왔는지 읽으세요.
- 내린 결정을 읽으세요. 에이전트가 나 대신 무엇을 결정했나요?
- 프롬프트를 다듬으세요. 어떻게 쓰느냐가 문제를 얼마나 이해했는지 보여 줍니다.
- 기준을 정하고 지키세요. 내 이름을 걸 수 없으면 내보내지 않습니다.
중요한 기술은 직접 손으로 쓰면서 게임 안에 머무르세요. 이렇게 시작해 볼 수 있습니다. 묻기 전에 어떤 결과가 나올지 적고, 에이전트가 끝나면 그것이 확인하지 않은 것 하나를 적어 보세요. 결과를 읽는 방식이 달라질지도 모릅니다.
스스로 생각하세요. 더 좋은 질문을 던지세요. 결과에 책임을 지세요.
에이전트가 일을 대신할 때, 생각은 누가 하나
Claude Code 팀의 Addy Osmani가 X에 올린 아티클 「Critical thinking when agents do the work」를 우리말로 옮기고 정리했습니다. AI에게 일을 맡기되, 생각과 책임까지 넘기지 않는 방법에 관한 글입니다.
원문: x.com/addyosmani/status/2117512471930167377
예전에는 비판적 사고를 "새로운 정보를 겸손한 호기심과 건강한 의심으로 대하고, 여러 관점을 들은 뒤 자기 의견을 세우는 것"이라고 배웠습니다. 지금도 맞는 말입니다. 그런데 일의 상당 부분이 에이전트를 거쳐 돌아가면서, 일상에서 비판적 사고를 강제하는 장치가 점점 사라지고 있습니다.
저자는 에이전트 도구의 열렬한 지지자입니다. 이 글은 에이전트를 덜 쓰자는 이야기가 아닙니다. 무엇이든 에이전트에게 넘기기 쉬운 세상에서 스스로 생각하는 힘을 지키는 법에 관한 이야기입니다.
과거에는 질문과 답 사이의 시간에 대부분의 사고가 일어났습니다. 이제 그 시간은 몇 초입니다. 모델이 좋아질수록 눈에 띄는 오류는 줄어듭니다. 결과물 대부분은 잘 쓰였고 거의 맞습니다. 그래서 다시 들여다볼 이유가 생기지 않습니다. 에이전트를 여러 개 돌려도 결과를 보는 눈은 여전히 한 쌍뿐입니다.
스스로 바로잡기 어려운 이유도 있습니다. 에이전트와 일하는 건 즐겁습니다. 바쁜 날에 빠르고, 기분 좋고, 대체로 맞는 답을 받으면 상쾌합니다. 바로 그래서 경계심이 쉽게 풀립니다.
1. 맡기기, 기대기, 그리고 넘겨주기
저자는 AI에 의존하는 정도를 하나의 스펙트럼으로 설명합니다.
'인지적 항복(cognitive surrender)'은 와튼 스쿨의 Steven Shaw와 Gideon Nave가 만든 말입니다. 신뢰(또는 게으름)가 커질수록 사람들은 스펙트럼 아래로 미끄러집니다. 한 걸음 한 걸음이 완만하고 그럴듯해서 알아채기 어렵습니다. 지난 답을 꼼꼼히 읽었으니 이번엔 훑어봅니다. 그다음엔 뼈대만 봅니다. 그러다 어느 줄에 대해 질문을 받으면, 에이전트의 도움을 받아도 설명하지 못합니다.
이렇게 '인지 부채'가 쌓입니다. 팀에서는 공유하던 시스템 이해가 조금씩 무너지는 모습으로 나타나고(Margaret-Anne Storey), 코드에서는 '이해 부채(comprehension debt, Jeremy Twei가 만든 말)'로 나타납니다. 당장은 전혀 보이지 않습니다. 코드는 깔끔하고 테스트도 통과합니다. 시스템을 고쳐야 하는 순간이 와서야 아무도 그걸 이해하지 못한다는 걸 깨닫습니다. 전략 문서나 기획서의 목차만 읽고 승인했을 때도 마찬가지입니다.
불가능한 걸 요구하는 건 아닙니다. 큰 코드베이스 전체를 머릿속에 담고 있을 수는 없습니다. Claude Code 팀도 필요할 때마다 Claude에게 해당 부분을 설명해 달라고 해서 이해를 그때그때 다시 세운다고 공개적으로 말했습니다. 전체를 다 알 필요는 없습니다. 필요할 때 다시 세울 수 있으면 되고, 내가 무엇을 모르는지만 알면 됩니다.
그게 늘 문제인 건 아닙니다. 저자는 강의 촬영 장소로 평점이 비슷한 호텔 세 곳 중 하나를 고를 때 AI에게 결정을 맡겼고, 결과도 괜찮았습니다. 하지만 돈을 어디에 투자할지, 아이들의 진로를 어떻게 조언할지, 회사에서 무엇을 만들고 출시해도 안전한지는 맡기지 않습니다. 틀려도 비용이 싼 일은 넘기고, 남이 결과를 감당해야 하는 일은 판단을 직접 쥐고 있으라는 것입니다.
2. 저자가 스스로에게 던지는 여섯 가지 질문
예전에는 생각이 막히면 "내가 맞는 문제를 풀고 있나? 맞는 방법으로 풀고 있나? 결론을 뒷받침할 근거가 있나? 다 끝났다는 걸 어떻게 아나?" 같은 기본 질문으로 돌아갔습니다. 적어 놓으면 유치해 보이지만, 놓치기 쉬운 관점을 강제로 떠올리게 합니다. 요즘은 이걸 다 건너뛰고 에이전트에게 "어떻게 할까?"라고 묻기 쉽습니다. 그래서 저자는 이렇게 질문을 바꿔 씁니다.
어려운 일을 에이전트에 맡기기 전, 머릿속으로라도 답을 예상해 둡니다. 틀린 예상이어도 괜찮습니다. 잘 쓰인 답을 먼저 읽으면 다른 가능성을 떠올리기 어려워집니다. 전혀 감이 없다면 Thariq Shihipar가 말하는 '사각지대 점검'을 요청하세요. 내가 아는 걸 알려 주고, 내가 모르는 줄도 모르는 것을 찾아 달라고 하는 겁니다.
둘 다 괜찮습니다. 지금 어느 쪽을 하고 있는지만 알면 됩니다.
그리고 직접 확인하세요. 모델이 스스로 말하는 확신보다, 실제로 돌려 볼 수 있는 테스트 하나가 훨씬 값집니다.
정답이 열려 있는 문제에서 강한 입장을 정했다면, 여러 모델에게 반대편 주장을 펼쳐 보게 한 뒤 직접 검토해 의견을 세웁니다. 시간은 더 들지만 주제를 훨씬 깊이 알게 됩니다.
코드뿐 아니라 내가 내놓는 모든 결과물에 해당합니다. 저자는 이것이 '책임질 수 있는가'의 기준이라고 말합니다.
일상적인 디버깅 같은 것일 수 있습니다. 일부는 내려놓아도 괜찮지만, 그건 의도적인 선택이어야 합니다.
3. 검증을 습관으로
저자는 병목이 '코드를 짜는 일'에서 '내가 맞다고 확신하는 일'로 옮겨 갔다고 봅니다. 에이전트에게 검증 수단(E2E 테스트, 속성 테스트, 실제 앱 조작 등)을 주면, 사람이 보기도 전에 고치고, 테스트를 돌리고, 결과를 읽고, 다시 시도합니다. Boris Cherny의 말처럼 "Claude에게 자기 작업을 검증할 방법을 주는 것"이 좋은 결과의 핵심입니다. 모든 줄을 읽는 대신, 이런 순환 구조를 만들고 그 증거를 검토하게 됩니다.
하지만 검증도 '항복'할 수 있습니다. "결론을 뒷받침할 근거가 있나?"가 "체크가 초록색이 됐나?"로 바뀌는 순간입니다. 에이전트 덕에 테스트 만들기가 너무 싸져서 초록불은 넘쳐납니다. 기능과 같은 실수를 담은 테스트는 당연히 통과합니다. 초록불 하나는 한 가지 사실만 말해 주는데, 모든 걸 보장한다고 착각하기 쉽습니다.
늘 이렇게 깊이 파야 하는 건 아닙니다. 언제 깊이 들어갈지 아는 것도 실력입니다. Claude Code 팀의 코드 리뷰 원칙 중 저자가 가장 좋아하는 말은 이것입니다. "체크가 무엇을 놓칠지 말할 수 없다면, 빠른 승인 말고 제대로 된 리뷰를 요청하라."
코드 밖에서도 같습니다. 에이전트가 고객 통화 50건이나 경쟁사 분석을 요약해 줬다면 원본 문서 몇 개를 직접 확인하세요. 내 결론이 기대는 숫자 하나는 제대로 계산됐는지 직접 확인하세요.
4. 만들어진 것을 진짜로 들여다보기
에이전트가 600줄짜리 PR을 줬다고 해 봅시다. 구조를 대충 보고, 변수 이름도 그럴듯하고 테스트도 통과하니 승인합니다. 그런데 중간 어딘가에 트랜잭션 경계의 순서가 미묘하게 바뀌었거나, 생각지 못한 예외 상황의 기본값이 뒤집혀 있습니다. 리뷰는 했지만, 원래 찾을 줄 알던 것만 찾은 셈입니다.
코드를 쓰는 것과 리뷰하는 것은 다른 기술이고, 어느 순간 리뷰는 도장 찍기로 변합니다. 그러니 AI가 쓰지 않았다고 생각하고 변경 사항을 읽고, 그 너머에서 에이전트가 무엇을 결정했는지 보세요. 긴 세션 동안 에이전트는 기본값, 범위에서 뺀 것, 두 요구사항이 충돌할 때 어느 쪽을 재해석할지 같은 작은 결정을 수없이 대신 내립니다.
"다 잘 됐습니다"라는 요약에는 이런 게 안 보입니다. 그러니 내린 결정과 가정을 목록으로 달라고 하세요. 그리고 스스로 시험해 보세요. 아무 줄이나 골라 "이 줄은 왜?"라고 물어봅니다. 문서라면 닫고 핵심 주장을 기억만으로 써 봅니다. 어떤 사람들은 긴 세션 끝에 Claude에게 변경 보고서와 함께 맨 아래 퀴즈를 내게 하고, "퀴즈를 만점 받아야만 머지한다"는 규칙을 지킵니다.
에이전트는 주의력을 지키는 데도 쓸 수 있습니다. 저자는 PR이 많이 들어오는 오픈소스 프로젝트에서, 무엇이 들어왔고 무엇이 가이드라인에 어긋나며 어디에 내 주의가 필요한지 에이전트로 좁힙니다. 판단까지 맡기진 않지만, 덕분에 "이 변경이 맞는 문제를 맞는 방법으로 풀고 있나"를 생각할 여유가 생깁니다.
물량 문제도 솔직해져야 합니다. 저자는 이를 '오케스트레이션 세금'이라고 부릅니다. 에이전트가 만들어 내는 양과, 내 이름을 걸 수 있는 양 사이의 격차입니다. 끝난 작업이 내가 소화하는 속도보다 빨리 쌓인다면 세션을 하나 더 여는 건 답이 아닙니다. 체크를 촘촘히 해서 내 손이 덜 가게 하거나, 속도를 늦추세요.
5. 좋은 입력이 좋은 결과를 만든다
사람의 생각은 여전히 필요하지만, 위치가 중간에서 앞과 끝으로 옮겨 갔습니다. 앞에서는 과제 설명과 맥락에, 끝에서는 결과 검토에 힘을 씁니다. 그래서 저자는 좋은 프롬프트 작성을 비판적 사고 기술로 봅니다.
예전에는 막연한 요청을 하면 누군가 되물었고, 그제야 "아, 이건 내가 정리를 안 했구나" 하고 깨달았습니다. 에이전트는 대개 거기서 멈추지 않습니다. 빠진 부분을 알아서 채워 완성된 것처럼 보이는 결과를 돌려줍니다. 정작 아이디어는 여전히 흐릿한데도요. 저자는 이를 '의도 부채(intent debt)'라고 부릅니다. 내가 쓰지 않은 결과물에 숨은 목표, 제약, 이유입니다. 다른 부채와 달리 이건 아무도 대신 갚아 줄 수 없습니다. 의도는 나에게서 나와야 합니다.
6. "어차피 모델이 나보다 잘하게 될 텐데요"
1~2년 뒤면 모델이 내가 잡아낼 것을 다 잡아낼 텐데, 왜 이 능력을 유지해야 할까요? 저자도 많은 탐지 작업을 점점 에이전트에게 넘기자고 주장해 왔고, 그 부분은 맞을 수 있다고 인정합니다. 그래도 중요한 이유가 있습니다. 결국 출시되는 것에는 누군가 책임을 져야 합니다. AI가 얼마나 도왔든, 책임은 사람이 집니다.
어떤 일에 에이전트를 얼마나 믿을지도 그 자체로 판단의 문제입니다. 모델이 틀리는 방식은 계속 바뀌므로, 감을 유지하려면 작업을 검토해야 합니다. Anthropic의 내부 연구도 이를 '감독의 역설'이라고 부릅니다. "Claude를 감독하려면 바로 그 코딩 실력이 필요한데, 그 실력은 AI를 과하게 쓰면 퇴화할 수 있다."
더 좋은 모델이 해결해 주지 않는 질문도 있습니다. 무엇을 만드는가, 왜 그럴 가치가 있는가, 누구에게 영향을 주는가, 무엇을 포기할 각오가 되어 있는가. 에이전트가 함께 고민해 줄 수는 있지만, 답은 여전히 나의 몫입니다.
7. 매일 해볼 수 있는 실천
전부 철저하게 할 필요는 없습니다. 내 작업 방식에 맞는 것만 골라 쓰세요.
에이전트 없이 코드를 조금 짜거나, 잊어버리면 곤란할 일을 직접 하나 해 보세요. 저자는 이를 '감 잡기 연습'이라고 부릅니다. 도덕적인 의무라는 뜻은 아닙니다.
더 이상 하지 않게 된 것을 적고, 그중 무엇을 안 해도 괜찮은지 정하세요. 저자의 오래된 질문은 지금도 유효합니다. "AI가 없다면 나는 얼마나 길을 잃을까?"
한 줄 설명을 검색해 붙여 넣는 대신, 조금 공부해서 그게 어디에 들어맞는지 제대로 이해하세요.
기계를 제대로 점검하는 건 진짜 일입니다. 공짜인 척하면 팀은 결국 안 하게 됩니다. 업무 항목으로 일정에 넣어야 실제로 합니다. 쓰지 않는 기술은 생각보다 빨리 사라집니다. 놓치고 싶지 않은 기술은 계속 쓰세요.
기억해 둘 여덟 가지
중요한 기술은 직접 손으로 쓰면서 게임 안에 머무르세요. 이렇게 시작해 볼 수 있습니다. 묻기 전에 어떤 결과가 나올지 적고, 에이전트가 끝나면 그것이 확인하지 않은 것 하나를 적어 보세요. 결과를 읽는 방식이 달라질지도 모릅니다.
스스로 생각하세요. 더 좋은 질문을 던지세요. 결과에 책임을 지세요.
이 글 다음 경험
AI를 더 잘 쓰고 싶다면
도구보다 중요한 건 활용법이에요. AI를 창의적으로 쓰는 사람들의 방식을 무료 강연으로 확인해 보세요.
챗GPT로 노션 활용하기 (9,900원) 보러 가기 →