1. 개요
설문지는 사람으로부터 정보를 수집하기 위해 미리 정의된 일련의 질문들로 구성된 조사 도구를 의미한다.[3] 이러한 도구는 대면 방식이나 비대면 방식을 포함하여 다양한 경로를 통해 활용될 수 있다.[3] 연구자는 연구 목적과 해결하고자 하는 연구 질문의 성격 등 여러 요인을 고려하여 적절한 연구 방법론을 선택하게 된다.[1] 설문지는 단순히 질문을 나열한 것을 넘어, 특정 대상의 특성이나 의견을 체계적으로 파악하기 위한 핵심적인 수단으로 기능한다.
용어의 사용에 있어서 설문지, 양식, 조사는 흔히 혼용되기도 하지만 학술적·실무적 관점에서는 명확히 구분된다.[7] 설문지나 양식은 데이터를 수집하기 위해 작성된 서면 형태의 질문 세트를 지칭하는 반면, 조사는 데이터를 수집하고, 집계하며, 분석하는 전체적인 방법론을 의미한다.[7] 즉, 설문지나 양식은 조사를 수행하기 위한 도구로서 사용되는 개념이다.[7] 이러한 개념적 차이를 이해하는 것은 데이터의 성격을 규정하고 적절한 분석 기법을 적용하는 데 필수적이다.
데이터의 품질은 데이터 생애주기의 초기 단계인 설계 과정에서부터 결정된다.[7] 따라서 포괄적인 설문지를 설계하는 과정은 연구의 신뢰성을 확보하는 데 있어 매우 중요한 역할을 수행한다.[7] 특히 심리측정학적 분석이 요구되는 환자 만족도 설문지와 같은 경우에는 도구의 구성과 타당성 검토가 더욱 정밀하게 이루어져야 한다.[2] 설계 단계에서의 오류는 이후 진행될 데이터 집계와 분석 결과에 직접적인 영향을 미치므로 주의가 필요하다.
설문 조사는 연구자가 설정한 가설을 검증하거나 현상을 파악하는 데 있어 강력한 도구가 되지만, 도구의 설계 방식에 따라 결과의 변동성이 크게 나타날 수 있다. 적절하지 못한 질문 구성이나 도구의 선택은 연구 전체의 타당성을 저해하는 위험 요인이 된다.[1] 따라서 연구자는 조사하고자 하는 대상의 특성과 연구의 맥락에 부합하는 최적의 도구를 선정하고, 이를 체계적으로 운용할 수 있는 역량을 갖추어야 한다.
2. 설문 조사의 방법론적 접근
연구를 수행하려는 개인은 목적에 따라 다양한 방법론적 접근 방식을 선택할 수 있다.[1] 적절한 접근 방식을 결정하는 요소에는 연구의 구체적인 목적과 해결하고자 하는 연구 질문의 유형 등이 포함된다.[1] 연구자는 이러한 요인들을 종합적으로 고려하여 설계된 설문 도구를 활용해 정보를 수집한다.
데이터를 수집하는 범위에 따라 표본 조사와 전수 조사로 구분된다.[8] 전수 조사는 대상이 되는 집단 전체를 조사하는 방식인 반면, 표본 조사는 전체 집단 중 일부를 추출하여 조사하는 형태를 취한다.[8] 연구 설계 단계에서 조사 대상의 규모와 가용 자원을 고려하여 어떤 방식을 채택할지 결정하는 과정이 필수적이다.
데이터 수집 방법은 조사 환경과 전달 매체에 따라 여러 가지로 분류된다.[8] 정보 수집은 대면 방식이나 비대면 방식을 모두 포함할 수 있으며, 설문지에 정의된 일련의 질문들을 통해 대상자로부터 정보를 얻는다.[3] 또한 심리측정학적 분석을 통해 환자 만족도 설문지와 같은 도구의 타당성을 검토하기도 한다.[2] 이러한 다양한 방법론적 선택은 연구의 신뢰도와 직결된다.
3. 설문지 설계 및 도구 개발
설문 도구를 설계할 때는 이론적 측면과 실무적 측면의 이슈를 동시에 고려해야 한다. 설문 방법론 전문가들은 데이터 수집 도구의 구현 과정에서 발생할 수 있는 문제를 다루며, 특히 응답자의 인지적 측면을 평가하여 측정 오차를 최소화하는 데 중점을 둔다.[9] 이러한 과정에서 인지적 면접법은 설문지를 테스트하고 평가하기 위한 종합적인 방법론의 일부로 권장된다.[9] 이는 설문 문항이 응답자의 사고 과정과 일치하는지 확인하여 데이터의 정확성을 높이는 역할을 한다.
온라인 설문지를 설계하고 적용할 때는 디지털 환경에 특화된 가이드를 준수해야 한다.[4] 온라인 플랫폼을 활용한 조사는 접근성이 높으나, 설계 방식에 따라 결과의 신뢰도가 달라질 수 있으므로 체계적인 설계가 요구된다.[4] 효과적인 설문 도구 개발을 위해서는 질문의 구조화와 응답 경로의 최적화가 필수적이다. 연구자는 온라인 환경에서 응답자가 문항을 이해하고 답변하는 과정을 면밀히 검토해야 한다.
설문지의 구성 요소와 질문 작성 원칙은 데이터의 질을 결정하는 핵심 요소이다. 질문을 작성할 때는 응답자가 혼란을 느끼지 않도록 명확한 언어를 사용해야 하며, 표본의 특성을 반영한 문항 설계가 이루어져야 한다.[8] 설문 도구의 설계 단계부터 구현 단계에 이르기까지 조사 설계의 원칙을 철저히 따르는 것이 중요하다.[8] 적절한 질문 구성은 응답 편향을 줄이고 연구 목적에 부합하는 유효한 정보를 수집할 수 있게 한다.
4. 심리측정학적 타당도 검증
설문지의 신뢰성과 정확성을 확보하기 위해서는 심리측정학적 평가가 필수적이다. 환자 만족도 설문지를 구성하고 분석할 때는 해당 도구가 측정하고자 하는 개념을 얼마나 정확하게 반영하는지 검토하는 과정이 수반되어야 한다.[2] 이러한 검증 과정은 설문 도구가 임상적 또는 연구적 목적으로 사용될 때 데이터의 질을 결정짓는 중요한 요소가 된다.
환자 기반 결과 측정 도구인 PBOM의 적절성을 판단하기 위해 다양한 도구의 심리측정적 특성을 비교하는 연구가 수행되었다. 복압성 요실금 수술 결과를 평가하기 위한 연구에서는 291명의 여성을 대상으로 세 가지 PBOM를 비교 분석하였다.[5] 이 과정에서는 각 측정 도구가 임상 현장에서 사용되기에 가장 적합한 특성을 갖추었는지 검증하는 작업이 이루어진다.
특정 회복 과정을 측정하기 위한 도구의 타당도 검증 사례도 존재한다. 스페인에서는 회복 과정에 관한 15개 문항 설문지인 QPR-15-SP를 대상으로 심리측정학적 타당도 검증을 실시하였다.[6] 이러한 검증 절차는 설문 문항이 대상자의 상태를 통계적으로 유의미하게 측정할 수 있는지 확인하는 데 목적이 있다.
5. 설문 도구의 신뢰도와 타당도 분석
심리측정학적 검증은 측정 도구가 의도한 개념을 얼마나 정확하게 측정하는지 확인하는 필수적인 과정이다. 스페인의 회복 과정 설문지 사례 연구에서는 15개의 문항으로 구성된 도구의 심리측정적 타당도를 검증하였다.[6] 이러한 검증 절차는 설문 도구가 임상적 또는 연구적 목적으로 사용될 때 데이터의 질을 결정짓는 핵심적인 요소로 작용한다.
환자 기반 결과 측정 도구의 유효성을 평가하기 위해 무작위 대조 시험 내에서 다양한 도구의 특성을 비교하는 연구가 수행되기도 한다.[5] 복압성 요실금 수술 결과를 평가하기 위한 연구에서는 6개의 센터에서 모집된 291명의 여성을 대상으로 세 가지 측정 도구의 심리측정적 속성을 비교 분석하였다.[5] 이는 임상 현장에서 가장 적절한 측정 도구를 결정하기 위한 목적으로 진행되었다.
통계적 유효성을 확보하기 위해서는 도구의 신뢰도와 타당도를 체계적으로 평가해야 한다. 양적 심리학 및 측정 관점에서의 검증은 설문 문항이 응답자의 사고 과정과 일치하는지, 그리고 측정하고자 하는 개념을 정확히 반영하는지를 검토한다. 이러한 분석 과정을 통해 도구의 임상적 활용 가능성과 데이터의 정확성을 확보할 수 있다.
6. 설문 조사 운영 및 실행 단계
설문 조사를 본격적으로 수행하기 전에는 설문 조사 준비 및 설정 단계가 선행되어야 한다. 이 과정에서는 표본 추출 방식과 전수 조사 여부를 결정하며, 구체적인 데이터 수집 방법을 확립한다.[8] 조사 목적에 부합하는 적절한 표집 틀을 구축하고 응답자를 선정하는 작업은 전체 조사 설계의 기초가 된다.
온라인 설문 조사는 현대적인 데이터 수집 환경에서 널리 적용되는 방식이다. 온라인 환경에서의 설문 적용은 물리적 제약을 극복할 수 있는 이점이 있으나, 설문 도구의 디지털 구현 방식에 따라 결과가 달라질 수 있다.[4] 따라서 온라인 설문지를 설계할 때는 응답자가 디지털 매체를 통해 문항을 명확히 이해할 수 있도록 기술적인 고려가 수반되어야 한다.
설문지의 품질을 관리하기 위해서는 전문가 검토를 통한 체계적인 점검이 요구된다. 특히 인지적 면접을 활용하여 응답자의 인지적 측면을 평가함으로써 측정 오차를 최소화하는 과정이 권장된다.[9] 이러한 검토 절차는 설문 문항이 응답자의 사고 과정과 일치하는지 확인하여 데이터의 정확성을 높이는 역할을 한다.