응답 범주 순서가 원자력 발전 정책 방향 및 국가 자긍심 문항에 미치는 영향: 신고리 5‧6 호기 공론화 조사 및 2016, 2018 한국종합사회조사

Abstract

본 연구는 한국리서치에서 2017년에 수집한 신고리 5‧6호기 3차 조사, 2016년과 2018년 한국종합사회조사(KGSS)의 조사실험 문항인 원자력 발전의 정책 방향과 한국사회의 다양한 영역에서의 국가 자긍심 질문을 통하여 응답 범주 순서가 응답의 차이에 미치는 영향을 살펴본다. 두 개의 부표본을 이용한 원자력 정책 방향 질문은 나열식 형태로 제시하였으며, 하나의 표본에서는 질문 순서가 원자력 발전 확대, 현상 유지, 축소 순서이고, 다른 표본에서는 역순으로 구성했다. 국가 자긍심 문항 또한 두 개의 부표본을 이용하였는데, 10개 문항(예, 사회보장제도 등)의 격자판 형태의 4점 척도로, 하나의 표본에서는 ‘매우 자랑스럽다’부터 ‘전혀 자랑스럽지 않다’ 순서이고, 다른 표본에서는 역순으로 구성했다. 신고리 5‧6호기와 2018 한국종합사회조사의 원자력 정책 방향 설문에서 응답 순서에 따른 통계적으로 유의미한 응답의 차이는 없었다. 또한, 2016년과 2018년 한국종합사회조사에서 두 차례 반복 조사실험한 국가 자긍심을 보면, 2016년에 10문항 중 3문항만 순서효과가 있었는데, 한 문항은 초두효과, 두 문항은 최신효과가 있었지만, 2018년에는 모든 항목에서 응답 순서효과가 없었다. 비록 통계적으로 유의미한 차이가 거의 없었지만 최신효과를 보여주는 경향이 있다는 점에서, 우리의 연구결과는 설문지에서 중요한 정책 결정 항목을 물어볼 때 응답 범주의 무작위 순환이 필요하다는 점을 제시한다.