AI 활용 역량평가 준비: 과제 수행과 검증 기록 쓰는 법

이 글에서는 지원자가 AI 도구를 써서 실무형 과제를 푸는 전형을 AI 활용 역량평가라고 불러요. 결과물만 내는지, 프롬프트와 대화 기록까지 제출하거나 자동으로 기록되는지는 채용사마다 다를 수 있어요. 도구 사용을 막지 않고 전제한다는 점이 일반적인 코딩테스트나 필기시험과 다르고, 공고에 따라 'AI 리터러시 평가', 'AI 활용능력 평가'처럼 다른 이름으로 적혀 있을 수 있어요.

이름이 비슷한 'AI 역량검사'는 지원자가 검사에 응시하고 그 결과를 분석받는 전형이에요. 예를 들어 JOBDA 역량검사는 공식 안내에서 응시 결과를 역량 유형과 강약점으로 보여 준다고 설명해요(공식 안내). 이름이 비슷해 검색 결과에 두 전형의 자료가 섞여 나올 수 있으니, 공고 제목과 응시 안내에서 어떤 전형인지 확인하고 시작해야 엉뚱한 연습을 피할 수 있어요. 두 전형의 차이는 AI 면접·AI 역량검사·AI 활용평가 차이에서 따로 정리했어요.

허용 도구, 시간, 제출 방식, 과제 유형은 채용사와 공고마다 달라요. 특정 기업의 전형을 일반화하기보다 응시 안내 메일과 첨부 문서를 기준으로 시간 배분을 짜는 편이 안전합니다.

채점표는 대부분 비공개라서, 결과물과 과정 기록 두 가지를 모두 설명할 수 있는 상태를 목표로 삼는 편이 현실적이에요. 결과물만 있고 과정을 설명하지 못하면 후속 면접에서 답이 막히기 쉽고, 과정만 길고 결과물이 없으면 과제를 완수하지 못한 것이 되니까요.

참고할 만한 교육 틀로 Anthropic의 AI Fluency Framework가 있어요. 무엇을 맡길지 정하는 Delegation, 요구를 전달하는 Description, 결과를 판단하는 Discernment, 책임 있게 쓰는 Diligence 네 가지로 AI 활용 능력을 설명합니다(공식 안내). 교육용 개념이지 한국 기업 채용의 평가표는 아니지만, 연습 로그를 돌아볼 때 어느 단계가 비었는지 점검하는 용도로는 쓸 만해요.

이 글의 네 가지 활동은 프리터뷰 편집팀의 연습 제안이에요. 쪼개기는 과제를 무엇부터 만들지 정하는 일, 가정 메모는 덜 정해진 요구를 내가 어떻게 해석했는지 남기는 일, 검증은 AI 답을 실행하거나 근거를 확인하는 일, 설명은 왜 그 방식을 택했는지 말로 옮기는 일입니다.

설명을 위한 가상 예시예요. 과제는 '고객 문의 200건이 담긴 스프레드시트를 유형별로 분류하고, 가장 많은 유형에 대한 안내 문구 초안을 만드세요. 제한 시간 60분'이라고 가정할게요. 실제 공고의 담당 업무 한 줄을 이런 형태로 바꾸면 자기 직무용 과제를 만들 수 있어요.

쪼개기부터 시작해요. 첫 프롬프트에 파일을 통째로 넣고 분류를 요청하기보다, 먼저 문의 30건을 붙여 '적절한 분류 체계 후보 세 개를 제안해 달라'고 묻고, 체계를 고른 뒤 나머지를 분류시키는 순서로 갑니다. 가정 메모에는 '유형은 5개 이내로 한정, 복수 유형은 첫 번째 사유 기준'처럼 스스로 정한 해석을 적어요.

검증 단계에서는 분류 결과 중 20건을 직접 읽어 잘못 묶인 항목을 찾고, 그 항목을 예로 들어 다시 분류를 요청합니다. 안내 문구 초안은 실제 문의 문장 두 개에 대입해 어색한 표현을 고쳐요. 마지막에 '왜 후보 A 체계를 골랐는지', '어디에서 AI 답이 틀렸는지'를 두세 문장으로 적어 두면 면접 대비 메모가 됩니다. 다른 직무용 과제 예시는 AI 활용능력 평가 예시 과제에 더 있어요.

연습을 마치면 로그를 위에서부터 읽으면서 아래 항목을 채워 보세요. 채우지 못하는 칸이 다음 연습에서 보완할 지점이에요. 프리터뷰 편집팀의 점검 제안이며 공인된 채점 기준이 아닙니다.

• 과제를 나눈 조각: ______ (몇 개로, 어떤 순서로)
• 스스로 세운 가정: ______ (요구가 모호했던 지점과 내 해석)
• AI 답이 틀렸거나 부족했던 곳: ______ (어떻게 알아챘는지)
• 틀린 답을 고친 방법: ______ (다시 질문, 직접 수정, 다른 자료 대조)
• 최종 결과물에서 내가 직접 판단한 부분: ______
• 다시 한다면 바꿀 프롬프트: ______

이 양식을 몇 번 반복해 채우면 자신의 습관이 보이기 시작해요. 가정 칸이 늘 비어 있으면 요구사항을 충분히 읽지 않고 바로 도구에 넘기고 있는지, 검증 칸이 비어 있으면 결과를 확인하지 않고 제출하고 있는지 돌아볼 신호로 삼으면 됩니다.

문제 상황, 도구를 붙인 이유, 검증하다 발견한 오류, 결과 순서로 한 사례를 써요. 도구 이름을 여러 개 나열하는 문단은 무엇을 판단했는지 보여 주지 못합니다. 실제로 있었던 경험만 쓰고, 결과에 숫자가 없으면 만들어 넣지 말고 무엇이 달라졌는지 서술하세요.

설명을 위한 가상 예시예요. 수정 전: '업무에 ChatGPT, Claude 등 다양한 생성형 AI를 적극 활용해 생산성을 높였습니다.' 수정 후: '동아리 행사 후기 30건을 요약해 보고서를 만들어야 했는데, 문장 요약은 AI에 맡기고 원문과 대조하는 역할을 제가 맡았습니다. 참가 인원 수치가 원문과 다르게 요약된 항목을 발견해 수치는 직접 표로 정리하고 문장 요약만 AI 결과를 썼습니다. 그 덕에 초안을 하루 안에 마치고 남은 시간을 검토에 쓸 수 있었습니다.'

수정 후 문장에는 맡긴 부분과 직접 판단한 부분의 경계, 오류를 발견한 방법, 달라진 점이 들어 있어요. 면접에서 이 문장을 근거로 후속 질문이 오더라도 실제 경험이라면 세부를 이어서 말할 수 있습니다. 글자 수 제한은 공고마다 다르니 실제 양식 기준으로 줄여 쓰세요.

과제 뒤에 면접이 붙는 채용에서는 제출한 결과물과 기록을 근거로 후속 질문이 이어질 수 있어요. 특정 기업의 질문을 알 수는 없지만, 연습용으로 아래 흐름을 준비해 두면 스스로 설명이 막히는 지점을 찾을 수 있습니다.

설명을 위한 가상 예시예요. 질문: '분류 체계를 다섯 개로 한정한 이유가 무엇인가요?' 답: '초반 30건을 읽어 보니 배송, 환불, 상품 문의가 대부분이었고, 세분화하면 안내 문구를 만들 시간이 부족하다고 판단해 다섯 개로 정하고 가정 메모에 남겼습니다.' 꼬리질문: 'AI가 제안한 다른 체계는 왜 쓰지 않았나요?' 답: '제안 B는 문의 채널 기준이라 안내 문구 작성과 연결되지 않았습니다.'

AI를 쓴 경험 자체를 묻는 질문에는 도구 하나와 사례 하나로 답하는 편이 이어지는 질문에 대응하기 쉬워요. 어디까지 맡기고 어디부터 직접 판단했는지 경계를 말할 수 있으면 그것이 곧 답변이 됩니다. 결과물을 근거로 파고드는 질문의 일반적인 흐름은 포트폴리오를 읽은 면접관은 무엇을 묻는가에서도 볼 수 있어요.

과제를 만들어 풀고 로그를 점검하는 것까지는 혼자 할 수 있어요. 스스로 정한 과제, 타이머, 위의 점검표만 있으면 됩니다. 설명 연습은 되묻는 상대가 있을 때 빈 곳이 더 잘 보여요. 스터디 동료에게 로그를 보여 주고 '왜 이렇게 했어?'만 물어 달라고 해도 충분합니다.

프리터뷰는 올린 이력서와 포트폴리오 문장을 바탕으로 모의면접 질문을 만들고, 면접 후 답변별 피드백을 제공하며, 포트폴리오 점검 기능도 있어요. 경험기술서에 쓴 AI 활용 사례를 올려 두고 후속 질문에 답해 보는 용도로 쓸 수 있습니다. 이용 조건은 요금·이용 조건, 피드백 형식은 예시 리포트에서 확인하세요. 모의면접 결과가 실제 채용 결과를 예측하지는 않아요.