AI 활용 능력 검사는 무엇인가요? 평가 내용부터 준비 방법까지
챗GPT로 궁금한 내용을 찾아보고, 긴 문서를 요약하거나 보고서 초안을 작성해 본 경험이 있나요?
생성형 AI를 사용하다 보면 자연스럽게 이런 질문이 생깁니다.
“나는 AI를 얼마나 잘 활용하고 있을까?”
AI에 질문하고 답변을 받는 것은 어렵지 않습니다. 하지만 그 답변이 정확한지 확인하고, 목적에 맞게 수정해 실제로 사용할 수 있는 결과물로 만드는 일에는 여러 판단이 필요합니다.
AI 활용 능력 검사는 이러한 과정에서 필요한 지식과 판단, 수행 능력을 살펴보는 평가입니다. 무엇을 평가하는지, 어떤 방식으로 진행되는지, 어떻게 준비하면 좋은지 알아보겠습니다.
AI 활용 능력이란 무엇일까요?
AI 활용 능력은 자신의 목적에 맞게 AI를 사용하고, 그 결과를 검토해 문제를 해결하는 능력입니다.
예를 들어 고객 리뷰를 분석하는 업무를 생각해 보겠습니다.
AI에 “리뷰를 요약해 줘”라고 요청하면 빠르게 정리된 답변을 받을 수 있습니다. 실제 업무에 활용하려면 여기에 몇 가지 판단이 더 필요합니다.
분석의 목적이 제품 개선인지, 광고 메시지 개발인지 정해야 합니다.
어떤 리뷰와 정보를 분석할지 선택해야 합니다.
AI가 제시한 결론이 실제 리뷰에 근거하는지 확인해야 합니다.
일부 고객의 의견을 전체 고객의 반응으로 확대하지 않았는지 살펴봐야 합니다.
여러 개선안 중 무엇을 먼저 실행할지 결정해야 합니다.
이처럼 목적을 정하고, AI에 필요한 작업을 요청하고, 결과를 검토하며 최종 판단을 내리는 과정이 AI 활용 능력에 포함됩니다.
AI 활용 능력 검사는 무엇을 평가하나요?
검사마다 평가 범위와 기준은 다릅니다. AI에 대한 기초 이해를 확인하는 검사도 있고, 실제로 AI와 함께 과제를 수행하도록 하는 검사도 있습니다.
검사에서 살펴볼 수 있는 역량을 정리하면 다음과 같습니다.
평가 영역 | 살펴볼 수 있는 행동 |
|---|---|
AI 기초 이해 | AI가 잘하는 일과 한계를 이해하고 적절한 사용 방법을 선택한다 |
문제 이해와 정의 | 해결해야 할 문제, 목표, 결과물의 조건을 정리한다 |
자료 해석 | 필요한 정보를 찾고 사실과 추정, 부족한 정보를 구분한다 |
AI 지시 | 배경과 목적, 자료, 제약조건을 구체적으로 전달한다 |
답변 검토와 보완 | 근거와 수치, 누락된 내용, 오류를 확인하고 수정한다 |
최종 판단 | 대안을 비교하고 선택한 이유와 남은 한계를 설명한다 |
책임 있는 활용 | 개인정보와 기밀정보를 구분하고 사용 가능한 자료와 도구를 판단한다 |
위 항목은 AI 활용 능력을 이해하기 위한 구분입니다. 모든 검사가 이 항목을 동일하게 평가하거나 같은 비중으로 채점하는 것은 아닙니다.
핵심은 AI가 만들어 준 답을 자신의 과제에 맞게 판단하고 활용할 수 있는가에 있습니다.
검사는 어떤 방식으로 진행되나요?
AI 활용 능력 검사는 목적에 따라 여러 형태로 구성할 수 있습니다. 하나의 검사에서 두 가지 이상의 방식을 함께 사용하기도 합니다.
① 지식·상황판단형
AI의 특징과 한계, 업무 상황에서 적절한 활용 방법 등을 묻는 방식입니다.
예를 들어 다음과 같은 상황을 제시할 수 있습니다.
AI가 작성한 보고서에 출처가 불분명한 시장 규모 수치가 포함돼 있습니다. 제출 전에 어떤 조치를 해야 할까요?
이러한 문항은 AI의 답변을 어디까지 신뢰하고, 무엇을 추가로 확인해야 하는지 판단하는 능력을 살펴볼 수 있습니다.
② 자료 기반 문제해결형
매출 자료, 고객 문의, 회의록, 내부 기준 등의 자료를 읽고 문제를 해결하는 방식입니다.
검사에 따라 제공된 AI를 활용하면서 객관식 문항에 답하거나, 분석 결과를 작성하도록 구성할 수 있습니다.
자료를 제대로 이해했는지, 필요한 정보를 찾았는지, AI의 설명을 원자료와 대조했는지 등이 중요한 수행 행동이 됩니다.
③ 결과물 작성형
주어진 상황에서 AI를 활용해 보고서, 제안서, 기획안, 코드 등의 결과물을 만드는 방식입니다.
예를 들어 다음과 같은 과제를 구성할 수 있습니다.
캠페인 실적 자료를 검토해 개선이 필요한 대상을 선정하고, 팀장에게 보고할 개선안을 작성하세요.
이때 결과물의 완성도뿐 아니라 문제를 어떻게 이해했고, AI의 제안을 무엇 때문에 수정했는지까지 살펴보도록 설계할 수 있습니다.
④ 탐구·설명형
하나의 질문을 AI와 함께 탐구한 뒤 자신의 관점이나 판단을 설명하는 방식입니다.
정보를 얼마나 많이 모았는지에 더해, 서로 다른 관점을 비교했는지, 근거의 한계를 검토했는지, 자신의 결론을 설명할 수 있는지 확인할 수 있습니다.
위 상황과 과제는 이해를 돕기 위한 예시이며, 특정 기업의 실제 출제 문항이 아닙니다.
프롬프트를 잘 쓰면 높은 평가를 받을 수 있을까요?
구체적인 프롬프트는 좋은 출발점입니다. AI가 해야 할 일을 명확하게 전달하면 답변을 검토하고 수정하기도 쉬워집니다.
예를 들어 다음과 같이 요청할 수 있습니다.
제공한 고객 리뷰를 사용감, 가격, 용기 편의성으로 분류해 줘. 각 분류의 근거가 되는 리뷰를 함께 제시하고, 자료만으로 판단하기 어려운 내용은 따로 표시해 줘.
하지만 질문을 구체적으로 작성했다고 해서 결과까지 정확해지는 것은 아닙니다.
AI가 리뷰를 잘못 분류했을 수도 있고, 자료에 없는 원인을 덧붙였을 수도 있습니다. 따라서 답변을 받은 뒤에는 원자료를 확인하고 필요한 부분을 수정해야 합니다.
프롬프트 작성과 답변 검증, 최종 판단은 함께 연습해야 합니다.
질문을 길게 쓰거나 대화를 많이 나누는 것만으로 활용 능력을 판단하기도 어렵습니다. 각 질문이 과제 해결에 어떤 역할을 했는지 살펴보는 것이 중요합니다.
AI 역량검사와 AI 활용 능력 검사는 같은 말인가요?
명칭만으로는 같은 검사인지 판단하기 어렵습니다.
‘AI 역량검사’라는 표현은 AI를 활용해 응시자를 평가하는 검사를 가리킬 수도 있고, 응시자의 AI 활용 역량을 확인하는 검사에 쓰일 수도 있습니다.
따라서 안내문에서 다음 내용을 확인해야 합니다.
응시자가 직접 AI를 사용하나요?
어떤 문제나 과제를 수행하나요?
답안, 결과물, 대화 기록 중 무엇을 평가하나요?
사용 가능한 도구와 자료는 무엇인가요?
제한시간과 제출 방식은 어떻게 되나요?
특히 채용 전형에서는 검사 이름보다 공식 응시 안내에 적힌 과제와 조건을 확인하는 것이 중요합니다.
어떻게 준비하면 좋을까요?
가장 먼저 해볼 수 있는 연습은 하나의 작은 과제를 처음부터 끝까지 수행하는 것입니다.
1. 해결할 문제를 먼저 적어보세요
AI를 사용하기 전에 목적과 제출할 결과물을 정리합니다.
“매출을 분석한다”보다 “채널별 매출 자료에서 추가 확인이 필요한 변화를 찾고, 점검 우선순위를 제안한다”처럼 범위를 구체화해 보세요.
2. 목적과 자료, 조건을 함께 전달하세요
AI에게 작업을 요청할 때 다음 내용을 포함해 보세요.
무엇을 해결하려는지
어떤 자료를 사용해야 하는지
어떤 기준과 제약조건을 지켜야 하는지
결과물을 어떤 형태로 정리해야 하는지
자료에 없는 내용은 추정으로 표시하고, 근거를 함께 제시하도록 요청하면 검토하기 편리합니다.
3. 중요한 주장부터 직접 확인하세요
AI가 제시한 핵심 수치와 결론을 원자료와 비교합니다.
합계나 비율이 맞는지, 비교 기간이 같은지, 특정 사례를 전체의 특징처럼 설명하지 않았는지 살펴보세요. 확인할 수 없는 내용은 불확실한 상태로 남겨두는 판단도 필요합니다.
4. 선택한 이유를 자신의 말로 설명하세요
최종 결과물을 작성한 뒤 다음 질문에 답해 보세요.
어떤 문제를 발견했나요?
AI를 어디에 활용했나요?
어떤 답변을 확인하고 수정했나요?
왜 이 결론을 선택했나요?
추가로 확인해야 할 것은 무엇인가요?
이 질문에 구체적으로 답하는 연습은 자신의 수행 과정을 돌아보는 데 도움이 됩니다.
검사 결과는 어떻게 활용하면 좋을까요?
검사 결과를 받았다면 점수와 함께 어떤 행동을 잘했고, 무엇을 보완해야 하는지 살펴보세요.
예를 들어 AI에 요구사항을 명확히 전달했지만 근거 확인이 부족했다면, 다음 과제에서는 결론의 근거를 원자료에서 찾는 연습을 할 수 있습니다.
확인한 보완점 | 다음 과제에서 실천할 행동 |
|---|---|
질문의 목적이 불명확함 | 첫 요청에 해결할 문제와 결과물의 목적을 적는다 |
자료와 추정을 혼동함 | 확인된 사실과 가설을 구분해 정리한다 |
수치 검증이 부족함 | 핵심 수치의 계산 과정과 원자료를 확인한다 |
대안 비교가 부족함 | 두 가지 이상의 대안을 같은 기준으로 비교한다 |
선택 이유가 드러나지 않음 | 최종 결론에 근거와 예상 한계를 함께 적는다 |
한 번의 수행 결과만으로 자신의 모든 AI 활용 능력을 단정할 필요는 없습니다. 과제의 종류와 난이도, 직무에 대한 익숙함, 사용 환경도 수행에 영향을 줄 수 있습니다.
결과를 바탕으로 다음 연습에서 바꿀 행동을 정하고, 실제로 그 행동을 했는지 확인해 보세요.
커리어스코프에서 나의 AI 활용 과정을 점검해 보세요
커리어스코프 AI 활용 능력 검사는 AI와의 대화와 과제 수행 과정을 바탕으로 자신의 활용 방식을 돌아보고, 개인별 결과 리포트를 확인할 수 있는 서비스입니다.
인문학적 질문을 탐구하면서 지식을 비판적으로 검토하고 자신의 관점을 정리하거나, 직무 문제를 해결하면서 자료를 해석하고 AI의 답변을 검토·보완하는 과정을 경험할 수 있습니다.
결과 리포트는 자신의 강점과 보완점을 살펴보고 다음 연습 목표를 정하는 데 활용할 수 있습니다. 대학에서는 취업 특강, 직무 실습, 비교과 프로그램과 연결해 학생의 학습을 지원할 수도 있습니다.
커리어스코프는 특정 기업의 공식 시험이나 기출문제를 재현하는 서비스가 아닙니다. AI와 함께 문제를 이해하고 해결하며, 결과를 판단하는 과정을 연습하고 점검하는 도구로 활용할 수 있습니다.
AI와 함께 만든 결과물에 대해 “왜 이렇게 판단했나요?”라는 질문을 받는다면 어떻게 답하시겠어요?
#AI활용능력검사 #AI활용역량 #AI리터러시 #생성형AI #취업준비 #AI채용 #대학취업지원 #커리어스코프