프로그래머스 AI 활용 역량평가: 공식 안내로 본 구성과 응시 방식

공식 이름은 '프로그래머스 AI 역량평가'예요. 프로그래머스가 기업과 기관에 제공하는 온라인 시험이고, AI 지식평가·AI 활용평가·AI 전문평가 세 유형이 있어요. 'AI 활용 역량평가'는 공식 유형 이름이 아니라 검색어이고, 공식 구성에서는 실무 과제를 AI로 푸는 'AI 활용평가'가 가장 가까워요(프리터뷰의 해석). 프로그래머스는 'AI 역량평가'라는 말이 'AI로 사람의 능력을 평가한다'와 '사람의 AI 활용 능력을 평가한다' 두 뜻으로 쓰인다고 설명하고, 이 시험은 뒤쪽이에요. 이 설명에서 AI를 잘 쓴다는 것은 AI에게 무엇을 맡기고 어떻게 지시할지, 돌아온 결과를 믿을지 말지 판단하는 일이에요.

세 유형을 어떻게 묶을지는 도입한 기업이 정해요. 공식 페이지는 지식평가와 활용평가를 묶은 '베이직', 활용평가와 전문평가를 묶은 '프로', 셋을 모두 묶은 '마스터' 패키지를 소개하고, 채용 중심 구성으로는 활용평가와 전문평가를 예로 들어요. 프로그래머스가 올린 전형 단계별 안내(2026-09-11)는 서류에서 AI 활용 경험을 보고, 인적성 검사로 대규모 지원자를 선별하고, AI 실무 과제에서 과정까지 평가하고, 구조화 면접에서 앞 단계 기록으로 검증하는 순서를 권해요. 운영사의 권고이고, 면접에서는 과제에서 프롬프트를 고친 기록을 근거로 "왜 이렇게 수정했나"를 물을 수 있다고 해요.

프로그래머스 사이트에는 코딩테스트 문제와 스킬체크 메뉴도 따로 있어요. AI 역량평가는 별도 메뉴이고, 공식 구성 가운데 개발자 대상 유형은 'AI 전문평가' 안의 '개발자 AI 역량평가'예요.

실무 상황이 적힌 문제를 AI와 함께 풀어요. 프롬프트를 입력하고, 답변을 확인하고, 고쳐서 다시 요청하는 일을 반복하는 방식이에요. 활용평가와 전문평가는 정답과 함께 AI를 활용한 과정 전체를 평가해요. 지식평가는 객관식·주관식이에요.

프로그래머스가 올린 안내 글(2026-10-07)에는 응시 환경의 제한도 나와요. 문항마다 AI에 질문할 수 있는 횟수가 제한되고, 질문한 뒤 결과가 나오기까지 30초의 쿨타임이 있어요. 프로그래머스는 답이 나올 때까지 반복해서 질문하는 방식으로는 점수를 얻을 수 없게 설계했다고 설명해요. 문제 지문을 그대로 복사해 붙여넣는 것도 보안상의 이유로 제한돼요. 문제에 딸린 자료 파일은 첨부할 수 있고, 어떤 자료를 AI에 넘길지 고르는 것도 평가 대상이라고 해요. 응시자에게는 시험 화면 안의 AI 어시스트가 제공돼요. 질문 횟수의 구체적인 수치와 외부 AI 도구 허용 여부는 안내에 나와 있지 않아요.

공식 페이지는 다양한 모니터링 기능으로 부정행위를 사전에 차단한다고 안내하고, 테스트 관리 기능으로 전체 공지, 부정행위자 퇴실, 개별 추가시간 부여를 할 수 있다고 설명해요.

공식 페이지가 내건 평가 영역은 여섯 개예요. AI 기초 이해력, AI 활용력, AI 통제력, 재현성, AI 결과 도출력, 성과 잠재력이에요. 2026-09-11 안내 글은 LLM 대화 로그를 목표 정의, 맥락 설계, 지시 명확성, 반복 개선, 결과 검증 기준으로 분석한다고 설명해요. 같은 기준으로 다른 AI 활용 평가 도구와 비교한 표는 채용에서 지원자의 AI 활용능력을 평가하는 방법과 도구 비교에서 볼 수 있어요.

채점은 정답과 과정을 함께 봐요. 문제를 푸는 과정 전체를 평가하고, 프롬프트 수정 이력과 AI 상호작용 로그를 분석해요. 초기 결과물과 최종 결과물이 얼마나 나아졌는지도 재요. 안내 글(2026-10-07)에 따르면 과정 채점은 AI가 대화 기록을 분석하고, 기업용 페이지는 전문가 검수도 함께 제공한다고 해요. 프롬프트를 어떻게 설계했는지, 나온 답을 거꾸로 검증했는지를 본다고 해요.

그렙이 2026년 상반기 고객사 응시 데이터에서 발췌했다는 베타 테스트 사례가 이 차이를 보여 줘요. 응시자 A와 B는 결과 점수가 71점으로 같았는데, 과정 점수가 A 60점, B 22점이라 최종 점수는 73점과 49점으로 갈렸어요. 프로그래머스는 A가 문제를 구조화하고 사실을 검증한 응시자라고 설명해요.

프로그래머스의 비개발 직군 가이드 글(2026-06-26 게시)은 평가 단계를 문제 분석, 프롬프트 설계, AI 활용 방식, 결과 검증, 수정 및 보완으로 설명해요. 과제는 직무별 업무 시나리오이고, 마케팅 예시로 '신제품 출시를 위한 디지털 캠페인 전략을 AI를 활용해 수립하시오.'가 실려 있어요.

같은 글은 직무마다 AI를 쓰는 지점이 달라 평가 포인트도 다르다고 설명해요. 기획은 복잡한 문제를 구조화해 AI에 전달하는지, 마케팅은 타깃 고객과 브랜드 톤을 정해 주는지, 영업과 고객 응대는 AI가 준 정보를 고객 상황에 맞게 다시 짜고 사실을 검증하는지를 본다고 해요. 직무와 상관없이 공통으로 보는 신호는 목적에 맞게 프롬프트를 설계했는지, 결과를 그대로 쓰지 않고 검증하고 보완했는지예요. 채점은 정량 판단을 규칙 기반으로, 맥락 판단을 전문가 검토로 나누고 같은 답안을 반복 채점해 일관성을 관리하는 구조가 과정 평가의 조건이라고 적어요.

공식 안내에서 확인되는 결과는 AI 역량 점수, 수준 분류, 강점과 개선 영역 분석이고, 개인 단위와 조직 단위 리포트가 제공돼요. 합격선과 응시자에게 리포트가 공개되는 형태는 안내에 없고, 합격 여부는 검사를 도입한 회사가 전형 안에서 정해요.

프로그래머스가 올린 안내 글(2026-09-11)은 평가 결과를 바로 합불 기준으로 쓰라고 권하지 않아요. 리포트가 총점만 주는지, 항목별 분석과 수행 기록까지 주는지에 따라 결과를 쓸 수 있는 범위가 달라지고, 항목별 분석이 함께 나오면 합불 기준 대신 면접 참고 자료로 쓸 수 있다고 설명해요. 기업에 하는 운영사의 권고라서 응시하는 회사가 결과를 어떻게 쓰는지는 안내에서 따로 확인해야 해요.

점수 사례도 합격선으로 읽으면 안 돼요. 프로그래머스가 소개한 우리카드 사례(2026-10-16)에서 2026년 8월 응시한 신입 2년차 사원의 평균은 100점 만점에 70점이었는데, 같은 교육을 받은 직원이 지식평가와 활용평가에 응시한 결과예요. 채용 전형의 합격선과는 무관해요.

공식 안내에 없어요. 프로그래머스 소개 페이지, 기업용 소개 페이지, 프로그래머스가 올린 안내 글 어디에도 응시 시간과 문항 수는 적혀 있지 않고(2026-11-03 기준), 선택한 평가 항목에 따라 문항 수와 응시 시간이 달라진다는 설명만 안내 글에 있어요. 공식 페이지의 2,000개 이상은 시험 하나의 문항 수가 아니라 기업이 고를 수 있는 문항 라이브러리의 규모로 읽어야 해요.

개인이 따로 신청해서 응시하는 방식은 공식 소개에 없고, 기업과 기관이 평가를 설계해 응시자를 초대하는 구조예요. 응시자가 미리 해 볼 수 있는 공식 경로는 프로그래머스 AI 역량평가 메뉴의 '응시 환경 체험하기'예요. 공식 페이지가 "3분 안에 직접 확인해보세요"라고 안내하고, 실제 전형의 화면과 규칙은 회사가 보낸 응시 안내가 우선이에요.

체험 화면을 본 뒤 프롬프트를 고쳐 가며 풀어 볼 과제가 필요하면 AI 활용능력 평가 연습 과제 2종의 가상 과제를 혼자 돌려 볼 수 있어요.

응시 안내 메일과 공고에서 아래 항목을 확인하세요. 안내에 없으면 채용 담당자에게 문의하는 것이 가장 정확해요.

과제에서 고친 이유를 말로 설명하는 연습은 모의면접에서 질문을 받고 답하는 방식으로 할 수 있고, 로그에 어떤 기록을 남길지는 AI 활용 역량평가 준비의 점검표를 따라가면 돼요. 게임 과제나 영상 답변이 들어간 검사를 받는다면 구성이 달라서 AI 역량검사 게임 유형과 AI 면접 질문 예시와 평가 범위를 따로 읽으세요.