제목: 부패와 사회복지정책에 관한 선행 실험연구를 통해 살펴본 실험연구 시 주의해야 할 다섯 가지 사항들

저자: 장한일 , 박일주

우리는 한국 사회과학계에서의 실험연구 활성화에 기여하고자 다음의 두 가지를 이 논문에서 수행한다. 첫째, 한국 연구자들이 관심가질 것이라 생각되는 부패와 사회복지 정책에 관한 실험 논문 10편을 소개한다. 둘째, 소개된 논문들을 활용하여, 실험연구 시 연구자들이 주의해야 할 다섯 가지 사항들에 대해서 논의한다. 이 사항들은 (1) 관찰대상의 평균적 특질들이 실험조건들 사이에서 차이가 없음을 경험적으로 확인하는 균형검사의 중요성, (2) 관찰대상에 대해서 의도된 실험적 조작이 이루어지지 못할 때 발생하는 비순응 문제, (3) 실험적 조작이 의도된 관찰대상이 아닌 다른 대상으로 확산되는 일명 확산효과의 문제, (4) 관찰대상이 연구자가 의도한 방식으로 실험적 조작을 받아들이는지 확인하는 조작검사의 중요성, 그리고 (5) 실험적 조작에 의해 영향 받았을 수 있는 변수가 통제변수로 사용될 때의 위험성 등이다.

주제어: 실험연구, 균형검사, 비순응 문제, 확산효과, 조작검사



Five lessons for Experimenters from a Review of Experimental Studies on Corruption and Social Welfare

To promote experimental studies among social scientists in South Korea, we introduce 10 articles that experimentally study corruption and social welfare, of which the social scientists are expected to be interested. Utilizing the articles, we then discuss five issues to which the social scientists have to pay attention while conducting experimental studies. The issues are (1) the significance of balance tests to verify no differences in the average attributes of observational units between experimental conditions, (2) noncompliance issues that emerge as experimental manipulation on observational units fails, (3) spillover effects that concern the unintended exposure of observational units to experimental manipulation, (4) the importance of manipulation checks to verify that observational units took experimental manipulation in the manner intended by the experimenters, and (5) the inappropriateness of using as a control variable a factor that is likely to have been affected by experimental manipulation.

※ Keywords: experiment, balance test, noncompliance, spillover effect, manipulation check