본문 바로가기

직접 만든 소프트웨어, 두 가지 개발 기록

구현 구조와 적용 범위, 확인한 기능과 남은 한계를 함께 기록합니다.

마음·생활습관

AI 도움과 내 실력은 어떻게 구분할까요? 컨설턴트 487명 연구를 읽는 법

by 아빠띠띠뽀 2026. 10. 31.

AI의 도움으로 일을 끝냈다면, 결과물의 완성도와 혼자 설명할 수 있는 범위를 나눠 확인해 보세요. 10월 26일 공개된 연구를 읽을 때에도 수행 성과를 개인의 학습 효과로 곧바로 확대하지 않아야 합니다.

이 글은 업무에 AI를 활용하면서도 어떤 부분을 직접 배워야 할지 고민하는 분을 위한 안내입니다. 먼저 확인한 연구 결과를 짧게 살펴보고, 그다음에는 개인과 팀이 써 볼 수 있는 학습 점검표를 제안할게요. 아래 기록표와 가상 사례는 연구에서 효과를 검증한 학습법이 아니라, 자신의 이해 범위를 살펴보기 위한 제안입니다.

AI가 완성한 결과물은 어디까지 내 역량일까요?

회의 자료나 분석 초안을 AI와 함께 만들었다고 가정해 볼게요. 문서는 제출할 수 있는 모습이지만, 선택한 기준이나 숫자의 뜻을 다른 사람이 물으면 바로 답하기 어려울 수 있습니다. 반대로 AI가 문장 정리만 도왔고 판단 근거는 자신이 충분히 설명할 수 있는 경우도 있겠죠. 두 상황을 같은 ‘AI 사용’ 한 줄로만 기록하지 말자는 것이 이 글의 출발점입니다.

자신의 기여를 확인하려고 AI가 쓴 문장과 사람이 쓴 문장을 글자 단위로 나눌 필요는 없어요. 대신 누가 질문을 정했는지, 어떤 자료를 골랐는지, 틀린 내용을 어떻게 확인했는지 살펴보세요. 결과를 받아들이거나 수정한 이유까지 적으면 다음에 무엇을 배울지 묻는 데 쓸 수 있습니다.

학습 목표도 조금 더 구체적으로 정해 보세요. ‘AI를 잘 쓰겠다’보다 ‘이 표에서 비교 기준을 고른 이유를 설명하겠다’처럼 과제와 연결하는 방식입니다. 이렇게 정한 목표를 달성했다고 해서 다른 과제까지 능숙해졌다고 볼 수는 없어요. 점검 범위를 작게 정하고, 기록도 그 범위 안에서 읽어 주세요.

컨설턴트 487명 연구에서는 무엇을 확인했나요?

Nature Human Behaviour에 실린 원연구의 초록에 따르면, 연구진은 경영 컨설턴트 487명을 대상으로 무작위 대조 실험을 했습니다. ChatGPT에 접근하고 사용 훈련을 받은 집단이 기존 숙련 범위 밖의 데이터 과학 과제를 수행하도록 비교했어요. 초록은 해당 과제가 ChatGPT만으로 독립적으로 해결되는 과제는 아니었다고 설명합니다.

개입 집단은 세 과제에서 대조 집단보다 점수가 높았지만, 숙련 데이터 과학자와 동등하게 수행한다는 가설은 기각됐습니다. 실험 뒤 ChatGPT 없이 기술 질문에 답할 때에는 개입 집단이 우수하다는 증거를 찾지 못했다고 보고했어요.

확인 범위는 공개 초록·서지정보입니다. 전문의 방법·점수 차·모델 버전·실험 시점은 확인하지 못했고, 공개일과 실험일을 구분합니다.

성과와 학습은 어떻게 나눠 적으면 좋을까요?

업무 결과를 평가하는 질문과 학습을 평가하는 질문을 별도 칸에 적어 보세요. 첫 번째는 ‘지금 맡은 일을 어떤 수준으로 끝냈는가’이고, 두 번째는 ‘그 과정에서 다음에도 사용할 수 있도록 무엇을 이해했는가’입니다. 한쪽 질문의 답만으로 다른 쪽까지 평가하지 않는 방식이에요.

확인하려는 것 기록할 질문
이번 과제의 결과 요구한 항목이 들어 있고 근거와 오류를 확인했나요?
내가 설명할 수 있는 부분 비교 기준과 선택 이유를 결과물을 읽지 않고 설명할 수 있나요?
아직 도움이 필요한 부분 어떤 개념이나 판단에서 자료 또는 도구를 다시 확인해야 하나요?
다음에 배울 부분 다음 과제 전에 확인할 질문을 하나 고른다면 무엇인가요?

이 표는 사람을 능력별로 줄 세우기 위한 채점표가 아닙니다. 설명이 막힌 칸을 다음 학습의 질문으로 남기는 용도로 제안해요. 모르는 부분을 발견했다면 억지로 답을 완성하지 말고, ‘이 기준이 왜 필요한지 아직 설명하기 어렵다’처럼 현재 상태를 적어도 괜찮습니다.

기록에는 도움의 범위도 함께 남겨 주세요. 아이디어만 받았는지, 계산 과정을 맡겼는지, 문장을 다듬었는지 구분하는 식입니다. 다른 날의 결과를 비교할 때에도 같은 도움을 받았다고 가정하지 않도록, 사용한 자료와 확인한 항목을 나란히 적어 두세요.

좋아진 결과를 해석하기 전에 무엇을 물어야 할까요?

평소보다 자료를 빨리 만들었다면 무엇이 달랐는지 질문해 보세요. 과제가 익숙했는지, 참고 자료가 더 잘 정리돼 있었는지, AI가 맡은 부분은 무엇이었는지 적어 보는 겁니다. 개인의 한 번의 경험으로 특정 도구의 학습 효과를 입증했다고 쓰지 않는 것이 중요해요.

완성한 문서에서 설명할 부분을 고를 때에는 문장의 매끄러움보다 판단이 들어간 곳을 찾아보세요. 예를 들어 후보 세 개 중 하나를 고른 이유, 비교에서 제외한 항목, 결론을 바꿀 만한 조건이 해당합니다. 정답 문장을 외우는 대신 그 선택을 자신의 말로 설명하는 것을 점검 목표로 정해 볼 수 있어요.

자료를 다시 보고 설명했다면 그 사실도 적어 주세요. 참고 자료를 열어 둔 상태와 아무 자료 없이 설명한 상태를 같은 조건으로 취급하지 않기 위해서입니다. 도구를 사용한 일을 숨기거나 모든 과제를 반드시 자료 없이 해내자는 뜻은 아닙니다. 업무 목적에 맞는 도움을 쓰되 확인한 범위를 정확하게 남기자는 제안이에요.

내일부터 쓸 학습 기록은 어떻게 만들까요?

새 양식을 복잡하게 만들기보다 기존 업무 메모에 세 칸을 덧붙여 보세요. ‘도움받은 일’, ‘내가 확인한 근거’, ‘아직 남은 질문’입니다. 아래 예시는 실제 직원의 사례나 시험 결과가 아니라, 기록 방식만 보여 주는 가상의 메모예요.

기록 칸 가상 메모 예시
도움받은 일 공개 행사 안내문에서 준비물과 일정을 정리하는 초안을 받음
내가 확인한 근거 공식 안내의 날짜와 참가 조건을 대조하고 빠진 항목을 표시함
아직 남은 질문 선택 참가와 필수 참가를 나눈 기준을 원문으로 다시 확인하기

처음에는 모든 작업을 기록하려고 하지 말고, 설명하기 어려웠던 판단 하나를 골라 보세요. 무엇을 했는지보다 왜 그렇게 했는지를 한 문장으로 남기는 데 초점을 맞추는 방법입니다. 기록 시간이 부담스럽다면 항목을 줄이되, 확인하지 않은 내용을 확인했다고 표시하지는 마세요.

다음 학습 시간에는 남은 질문에 맞는 자료를 찾으면 됩니다. 개념이 문제라면 정의와 적용 조건을, 자료 읽기가 문제라면 원문에서 근거를 찾는 과정을 살펴보세요. AI의 답을 다시 받는 것만으로 점검을 끝내지 말고, 자신이 확인할 수 있는 원자료가 무엇인지 질문해 보길 권합니다.

기록을 공유할 때에는 회사의 정보 취급 규칙부터 확인하세요. 실제 고객 자료나 내부 문서를 학습 예시로 외부 서비스에 올리는 절차는 이 글에서 안내하지 않습니다. 연습은 공개 자료나 직접 만든 가상 자료로 범위를 정하고, 조직에서 허용한 도구와 방법을 사용하세요.

가상의 업무 과제로 연습한다면 어떤 순서가 좋을까요?

가상의 공개 행사 두 개를 비교하는 연습을 생각해 볼게요. 연습 목표는 가장 멋진 추천문을 만드는 것이 아니라, ‘참가 목적에 맞춰 어떤 조건을 비교했는지 설명하기’로 정합니다. 실제 행사의 가격이나 운영 정보를 가져온 사례가 아니므로, 아래 예시를 현재 서비스 비교 결과로 읽지는 말아 주세요.

  • 먼저 일정·참가 대상·진행 방식처럼 확인할 항목을 직접 고릅니다. 아직 모르는 조건은 빈칸으로 남겨 두세요.
  • AI에 표 정리나 문장 초안의 도움을 받았다면 맡긴 범위를 적습니다. 대신 선택 이유까지 모두 검토했다고 가정하지 않습니다.
  • 완성한 표에서 한 항목을 골라 원자료와 대조합니다. 문구가 빠졌거나 조건이 달라졌다면 수정 이유를 기록하세요.
  • 표를 잠시 덮고 어떤 기준으로 골랐는지 설명해 봅니다. 기억이 불분명한 부분은 억지로 채우지 말고 다시 확인할 질문으로 남깁니다.

조건이 달라졌을 때의 질문도 하나 덧붙일 수 있어요. ‘참가 시간이 겹치면 비교 기준은 어떻게 달라질까?’처럼 결론에 영향을 주는 가정을 묻는 것입니다. 새로운 가정을 넣었다면 처음 비교와 다른 과제라는 점을 표시하세요. 두 결과를 단순히 점수로 비교하는 실험을 했다고 쓰지는 않습니다.

연습 뒤에는 잘한 점을 길게 적는 대신 다음에 확인할 사항을 남겨 보세요. 일정 읽기는 설명할 수 있지만 참가 대상 조건은 근거를 찾기 어려웠다면, 다음 목표를 후자에 맞추는 식입니다. 이 순서는 특정한 능력 향상을 보장하는 훈련법이 아니라 학습 질문을 정리하는 예시입니다.

팀에서는 어떤 기준을 함께 정하면 좋을까요?

동료와 결과물을 함께 보는 상황이라면 먼저 검토 목적을 맞춰 보세요. 제출할 문서의 오류를 찾는 자리인지, 담당자가 판단 근거를 설명하는 학습 자리인지 구분하는 겁니다. 두 목적을 한 번에 다루더라도 ‘문서 수정 사항’과 ‘다음에 배울 질문’을 별도로 적어 둘 수 있어요.

도구를 사용했는지만 묻기보다 확인 책임을 구체적으로 나눠 보길 권합니다. 원자료의 최신 날짜는 누가 확인할지, 결론을 승인하기 전에 어떤 조건을 볼지, 미확인 항목은 어디에 표시할지 묻는 방식입니다. 그 답은 팀의 역할과 규칙에 맞춰 정해야 하며 이 글의 예시가 회사의 승인 절차를 대신하지 않습니다.

개인 기록을 팀 평가로 옮길 때에도 목적을 다시 확인하세요. 혼자 적은 학습 질문이 곧바로 인사 평가 점수가 되는 것으로 가정하지 말고, 공유 범위와 사용 목적을 먼저 정하는 편을 제안합니다. 설명이 막힌 부분을 말해도 되는지, 나중에 확인한 내용을 덧붙일 수 있는지도 함께 질문해 보세요.

짧은 자기 점검은 어떻게 끝내면 될까요?

하루 업무를 모두 되짚는 대신 결과물 하나와 질문 하나를 고르는 방식으로 시작해 보세요. 오늘 확인한 근거를 말할 수 있는지, 그 근거가 결론과 연결되는지, 아직 도움이 필요한 부분이 무엇인지 살펴보는 겁니다. 확인한 부분과 미확인인 부분을 구분해 적었다면 그날의 기록은 거기서 멈춰도 됩니다.

다음에 비슷한 과제를 맡았을 때에는 이전 질문을 다시 열어 보세요. 이제 설명할 수 있는지, 같은 자료를 참고해야 하는지, 과제 조건이 달라졌는지를 확인하면 됩니다. 기간이나 점수의 기준을 정하더라도 스스로 관리하려고 정한 기준이라는 점을 밝혀 주세요. 이 글은 특정 일수 안에 습관이나 역량이 완성된다고 약속하지 않습니다.

이 연구로 단정하면 안 되는 것은 무엇일까요?

특정 직종과 과제의 결과를 모든 사람·AI·장기 학습으로 확대하지 마세요. ‘차이의 증거를 찾지 못함’은 ‘아무도 배우지 못함’과 다릅니다.

이 글의 기록법은 연구 개입을 재현한 것이 아닙니다. 개인의 변화나 특정한 학습 효과가 확인됐다고 소개하지 않을게요.

BCG와 OpenAI 관련 고용 관계 등의 이해상충도 신고돼 있습니다. 대상·조건과 함께 살펴볼 배경입니다.

이런 점도 궁금하셨나요?

AI를 안 쓰고 일해야 배울 수 있다는 뜻인가요? 그렇게 일반화할 수는 없어요. 이 글은 특정 연구를 소개하고, 업무 성과와 자신의 이해를 나눠 확인하는 기록 방식을 제안합니다.

설명을 잘 못하면 AI를 잘못 쓴 건가요? 그 한 번으로 판단하지 말고 무엇을 설명하기 어려웠는지 기록해 보세요. 자료를 다시 확인해야 하는지, 개념을 더 배워야 하는지 다음 질문을 정하는 데 사용할 수 있습니다.

이 점검표가 효과 있는 학습법으로 검증됐나요? 아닙니다. 연구에 사용된 개입을 그대로 재현한 것이 아니라 이 글에서 제안한 업무 메모 양식입니다. 능력 향상률이나 학습 효과를 검증한 결과로 소개하지 않습니다.

자료 확인일: 2026년 10월 30일. 원연구 초록·서지정보, Nature Human Behaviour, 2026년 10월 26일 공개.

AI의 도움을 받은 작업과 스스로 설명하는 학습을 나누는 개념 그림
직접 생성한 개념 이미지입니다. 실제 서비스 화면이나 구축·성능 시험 결과가 아닙니다.