MHResearch

심리 척도 개발과
타당화

문항 초안에서 내용타당도 평정, 예비조사 요인분석, 본조사 확인적 요인분석, 규준 산출까지 척도 개발 보고서에 담는 순서를 정리했습니다.

상담 기관이나 교육 기관이 자체 척도를 만들어 달라고 의뢰하면 처음 받는 것은 문항 100여 개가 적힌 초안입니다. 그 초안이 쓸 수 있는 척도가 되기까지의 순서를 적습니다. 정신건강 서비스 기업의 심리 척도를 개발하며 거친 순서입니다.

무엇을 재는지부터 정합니다

무엇을 재는 척도인지 한 문장으로 적고, 그 아래 하위요인을 정합니다. 하위요인마다 최소 문항 수를 미리 정해 두어야 뒤에서 문항을 뺄 때 요인이 사라지지 않습니다. 이 단계에서 요인 구조의 근거가 되는 선행연구를 정리합니다.

전문가에게 문항을 평정받습니다

문항 초안을 전문가 여러 명에게 보내 각 문항이 해당 요인을 재는지 평정받습니다. 내용타당도 비율(CVR)과 문항 수준 내용타당도 지수(I-CVI)를 계산해 기준에 못 미치는 문항을 뺍니다. 전문가 수에 따라 기준값이 달라지므로 몇 명이 평정했는지 함께 기록합니다.

예비조사로 요인 구조를 찾습니다

남은 문항으로 예비조사를 하고 탐색적 요인분석을 합니다. 요인 수는 평행분석 같은 통계 기준과 해석 가능성을 같이 보고 정합니다. 여러 요인에 걸쳐 적재되거나 적재량이 낮은 문항을 빼고, 요인별 신뢰도를 확인합니다.

본조사로 구조를 검증합니다

예비조사와 다른 표본으로 본조사를 하고 확인적 요인분석으로 요인 구조를 검증합니다. 적합도는 CFI, TLI, RMSEA처럼 성격이 다른 지표를 함께 보고, 어떤 기준을 썼는지 보고서에 적습니다. 수렴타당도(CR, AVE)와 판별타당도(Fornell-Larcker)도 이 단계에서 확인합니다.

척도 개발 단계별 문항 수 감소 막대그래프
그림 1 (예시 데이터). 단계마다 문항이 줄어듭니다. 어느 단계에서 왜 뺐는지를 기록해 두어야 최종 척도의 타당도를 설명할 수 있습니다.

규준과 단축형을 만듭니다

본조사 자료로 T점수 같은 규준을 만들어 개인 점수를 해석할 수 있게 합니다. 현장에서 짧게 써야 하면 요인별로 적재량이 높은 문항을 골라 단축형을 만들고, 본척도와의 상관과 신뢰도를 보고합니다.

척도와 함께 받아 둘 자료

최종 문항과 채점 방법 외에 문항별 제외 사유 기록, 전문가 평정 결과, 예비조사와 본조사의 요인분석 결과표, 적합도 지표와 기준, 규준표, 단축형의 검증 결과를 함께 받으십시오. 이 자료가 있어야 척도를 논문이나 서비스 설명에 쓸 수 있습니다.

Insights 목록으로 이 주제로 상담하기