채용 장면에서의 직업기초능력평가 문항에 대한 내용타당도 분석

미래 환경변화에 따른 직무중심의 인사관리체계의 논의가 중요해지고 있는 시점에서, “채용공고-서류전형-필기전형-면접전형”에 직무능력 중심의 객관적인 평가도구 활용이 확산되고 있다. 채용제도가 지원자에 대한 측정 및 평가 방법론을 도입하여 운영된다는 점에서 채용제도에 대한 타당도를 분석하는 것은 중요한 절차임에도 불구, 직업기초능력평가에 대한 타당도 검증은 매우 미흡한 실정이다. 따라서 이 연구를 통해 NCS 직업기초능력평가의 타당도 분석의 중요성을 인식하고 내용타당도 분석 방법론을 통해 NCS 직업기초능력평가의 타당도를 분석하였다.

이 연구의 분석대상은 2022년 능력중심채용모델의 직업기초능력 필기문항 850문항이다. 내용타당도 분석을 위하여 측정 및 평가 방법론 전문가와 직군별 내용전문가가 개별 문항을 검토하여 해당 문항이 측정하고자 하는 내용과 관련되어 있는지를 정량적으로 평정하도록 하였다. 평정 척도는 4점 척도로 구성되었으며, 3점 또는 4점으로 평정된 문항에 대하여 내용 관련성이 있다고 판단하였다. 평정 결과는 CVI를 산출하기 위한 기초자료로 활용되었고, 영역 및 직군별 CVI를 산출하여 내용타당도 수준을 지표화하였다. 직업기초능력평가는 10개 영역에 대한 하위 영역별 내용 관련성을 분석한 결과 직업기초능력평가 내용타당도가 양호한 수준으로 확인되어 측정 문항이 측정하고자 하는 내용을 안정적으로 포함하고 있었다.

이 연구에서 활용된 내용타당도 분석은 전문가가 개별 문항의 내용을 직접 검토하여 전문가의 주관성에 의해 내용타당도 수준이 결정된다는 점에서 객관적 검증이 제한적이라는 단점 또한 존재한다. 그러나 통계적 방법론에 의존하는 측면이 큰 구인 타당도, 준거 타당도 관점의 타당도 분석과 달리 실제 내용전문가에 의해서 전문가적 관점의 문항 검토 결과를 제시하고 이와 같은 검토 결과를 정량적인 타당도 지수로 산출하였다는 점에서 의의가 있다.

주제어 : 채용, 국가직무능력표준(NCS), 직업기초능력, 평가, 문항, 내용타당도.