단계1-설문조사 기획

ii

설문조사_조사기획

① 누구를 대상으로 : 조사대상-표본조사

② 어떤 조사방법으로 : 면대면 설문조사

③ 무엇을 조사할 것인가? 연구가설 -> 향후 설문지 ⇔ (조사목적)

전수조사 혹은 표본조사

전수조사 : 관심 대상 전체(모집단)를 대상으로 설문조사

•장점 : 관심 대상에 대한 정확한 정보를 얻을 수 있음

•단점 : 경제적, 시간적 비효율성, 비표본오차의 증가

*) 모집단 population : 조사대상의 개별 단위 전체 (예) 2016년 1학기 현재 한남대에 등록한 학생 전체

표본조사 : 모집단 일부만 설문조사

•장점 : 시간적, 경제적 효율성

•단점 : 표본오차 발생

*) 확률적 표본추출방법은 향후 다루기로 한다 - 국가통계, 여론조사와 같이

전체의 추정을 목적으로 한다면 반드시 확률적 표본추출방법을 활용해야 하지만 실제 필드에서는 확률적 방법보다는 현실을 고려한 편이추출방법을 사용

조사방법

설문 자료 수집 방법으로는 면접조사, 전화조사, 우편조사, 온라인조사 등이 있다. 어떤 방법을 사용할 것인지는 연구 목적, 조사 내용, 조사 대상, 소요 시간 및 비용, 응답률, 응답 민감도 등을 고려하여 결정하여야 한다.

학기 팀 프로젝트 설문조사 - 그룹감독(실제는 일대일 감독을 해야 하지만)-자기기입식-면접조사

1. 설문지를 기입 주체에 따른 분류

(1)응답자 자기 기입 방식 (self administrated survey)

대부분의 설문 조사는 응답자가 자기 의견을 직접 기입하는 응답자 자기 기입 방식을 채택하고 있다. 응답자가 혼자 스스로 설문지에 응답하는 방법으로 응답능력이 높은 조사대상에 대한 설문조사에 활용되며 대부분의 조사가 이에 해당된다. 조사원이 옆에 있을 수는 있으나 응답자의 조사 과정을 관리 감독할 뿐이지 설문 응답에는 관여하지 않는다.

① 일대일 감독 (one-to-one supervision): 대부분의 면접 설문조사는 이에 해당 조사원 1명이 1명의 조사를 관리한다. (예) 필드설문조사, 전화여론조사

② 그룹 감독 (group administration): 조사원 1명이 여러명의 조사를 관리한다. (예) 중고등학교 학기말에 실시하는 학교만족도

ARS 이용한 여론조사, 인터넷 조사, 우편조사도 자기기입식 설문에 해당된다.

(2)조사원 기입 (interviewer survey)

조사원이 응답자를 도와 설문지에 응답을 직접 적어 주는 방법으로 조사원의 외모, 말씨, 태도 등이 응답 결과에 큰 영향을 미친다.

①전화 조사 (telephone survey) : 조사원이 전화를 통해 응답자의 의견을 들은 후 설문 조사지에 적어 넣는다. 요즈음은 CATI(Computer Assist Personal

iii

Interview)가 개발되어 컴퓨터가 문항 읽기, 응답결과 입력까지 전 과정을 관리하고 전화 조사원은 모니터링, 표본할당만 관장하게 된다.

②조사원 기입 면접조사 (personal interview) : 조사원이 응답자를 직접 방문하여 일대일로 만나 응답자의 답변을 설문지에 옮겨 적는 방법으로 응답자의 응답 능력이 낮은 경우 사용하게 되며, 응답 대상자들이 문맹, 문항에 대한 이해 능력이 떨어지거나 응답 기입 능력이 낮은 노인이나 어린이들 조사에서는 조사원 기입 방법이 사용된다.

2. 조사방법에 따른 분류

(1) 면접 조사

조사자가 직접 응답자를 방문하여 조사하는 것으로 조사원의 영향이 크다. 설문지는 조사자가 작성할 수도 있고 응답자가 직접 응답할 수도 있다.

조사원은 ①응답할 수 있는 분위기를 조성하고(사용하는 언어, 복장, 외모) ②응답자가 의견을 솔직히 밝힐 수 있는 환경을 조성하고 ③설문지 내용을 완벽하게 이해하고 있어야 하며 ④응답 환경을 기록하는 등 성실성이 있어야 한다.

면접 조사의 장점은 다음과 같다.

1) 응답률이 높다.

2)응답자가 이해하지 못하는 문항에 대한 묻는 경우 즉각적인 설명이 가능하여 신뢰성 높은 응답을 얻어낸다.

3)조사자가 응답자의 신뢰도, 응답 환경 등을 관찰할 수 있다.

면접 조사의 단점은 다음과 같다.

1) 조사원 영향이 크다.

2) 시간 및 비용 면에서 비효율적이다.

면접 조사 가운데 응답자를 한 곳에 모아 놓고 한 번에 조사하는 집단 조사가 있다. 비용 및 시간을 절약하는 장점은 있으나 집단 상황이 응답을 왜곡시킬 수 있고 (평에 있는 사람들과 의견이나 생각 교환)설문 조사 과정을 통제하는데 어려움이 있다.

(2) 전화 조사

여론 조사와 같이 응답자 표본 프레임이 매우 큰 경우 주로 사용한다. 주로 전화와 조사원에 의해 실시되고 있다. RDD(Random Digital Dialing) 시스템에 의해 전화가 걸리면 교육 받은 조사원들이 설문을 하게 된다. 요즈음 컴퓨터가 모든 과정을 관리하는CATI (Computer Assisted Telephone Interview)가 이용되기도 한다.

전화 조사의 장점은 다음과 같다.

① 신속성 및 조사 비용 절약

② 넓은 지역 조사 가능

③ 조사자 관리가 쉽다.

전화 조사의 단점은 다음과 같다.

① 질문 길이와 내용의 제한(응답자 신분 노출로 인하여)

② 표본의 대표성 유지가 어렵다. (인구학적 변수 비율을 맞추기 어렵다)

③ 우편 조사보다 다소 높지만 응답률이 낮다.

④ 그림이나 시각적 도표가 들어간 설문 문항은 물을 수 없다.

(3) 우편조사

패널이 구성되어 있거나 학회와 같이 주소 리스트가 있는 집단이나 대규모 아파트 단지 입주자 대상 설문 조사에 이용된다.

iv

질문지를 반송 봉투와 함께 넣어 우편으로 보내거나 아파트와 같은 주거 밀집 지역에서는 직접 방문하여 우편함에 넣는다.

우편 조사의 장점은 다음과 같다.

①최소의 비용과 노력으로 광범위 조사 가능

②문항이 많거나 전문적인 문항이 포함된 설문 조사 가능

③응답자가 충분한 시간을 가지고 응답할 수 있고 자발적 응답이라 응답의 신뢰성이 높다.

단점은 다음과 같다.

①회수율(응답률)이 낮고 (25%)

②응답자가 문항에 대한 의문이 생길 경우 질문할 곳이 없다는 것이다.

우편 조사의 가장 큰 문제는 응답률을 높이는 것이다. 우편 조사의 응답률은 조사 기관의 신뢰도, 설문지 양식 및 우송 방법, 그리고 응답자가 집단 성향(예: 전문가 집단)에 의존한다. Dillman & Christenson(1974) 연구에 의하면 다음 절차를 따르면 우편 조사 응답률을 높일 수 있다.

① 일주일 전에 설문 조사 발송을 알리는 엽서 보냄

② 조사 당일 반송 봉투와 함께 설문지 발송

③ 일주일 후 설문 조사 환기 우편 발송

④ 3주일 후 응답하지 않은 응답자에게 설문 재발송

⑤ 7주 후 응답하지 않은 사람들 대상으로 재조사.

(4) 온라인 조사

전자메일(e-mail)이나 인터넷(Web-based)을 이용한 설문 조사를 의미한다. 단기간에 저렴한 비용으로 조사할 수 있다는 장점은 있으나 조사 모집단 규정

(표본 프레임, 컴퓨터 사용자, 웹 사용자만 모집단) 및 표본의 대표성(관심 집단만 설문에 응한다) 문제, 한 사람이 여러 번 응답(IP 체크에도 한계가 있다)로 인하여 신뢰할만한 조사는 아니다.

온라인 조사는 포탈 사이트 사용자 DB를 이용하거나 패널을 구성하여 운영하면 온라인 조사의 신뢰성을 높일 수 있을 것이다. 또한 설문 조사 할 때마다 점수를 부여하여 누적 점수에 의해 선물을 제공하게 되면 응답률도 높일 수 있다.

요즈음 방송국에서도 자주 이용하는 ARS (Advanced Record System) 조사도 온라인 조사의 일종인데 문항이 한 개, 흥미 위주 조사(가요순위, 토론 중 여론조사)에 주로 이용된다.

연구가설

연구문제 선정

•연구자가 연구 목적, 내용, 방향, 범위를 결정하는 설문조사의 첫 단계이자 핵심단계 - 구체적인 연구문제 선정

v

•새로운 문제, 중요한 문제, 해결(설문조사로 연구) 가능한 문제, (이번 팀 설문조사는 흥미로움까지 더하여)

•문헌고찰 : 설문조사 분야의 연구 현황을 파악하고 문제를 해결하는 접근방법을 탐색하기 위한 근거 - 참고문헌, 팀 조사 주제에 맞는 분야 책을 읽자

연구가설 설정

•변수들간 관계 중심으로 설정하고 - 이론이나 경험적 근거 - 설문조사 데이터를 이용하여 검증

•연구가설은 명료하고 간결하게 진술 - 복잡한 경우에는 하위 연구가설로 계층화 하여 설정한다

1) 연구문제의 명확한 구조화

설문 문항 자체가 관찰(조사) 가능한 현상인가? = 구조화, (예) “인간의 본성은 변하는가?” (어떤 본성인지 구체적이지 못함-구조화 되지 않음) < “인간의 소유욕은 변하는가”(구체화, 관찰 가능) < “인간은 돈에 대한 소유욕은 변하는가?” (보다 구체적이고 관찰가능)

2)용어의 명확화

연구문제 기술의 모호성(설문 문항=측정도구 작성이 어려움)은 조사로부터 얻는 정보의 내용이 조사목적과 다를 수 있음 - 용어=문항은 모든 사람이 동일하게 해석되도록 구성되어야 한다 “실연(?)의 경험은 있는가?”

3)연구 가능성

연구대상이 되기 위해서는 (1)연구의 검증가능성이 있어야 하고 (2)조사 가능 성이(예산 & 시간 제약, 조사대상 확보 가능?, 설문조사 가능?) 있어야 한다 (예) “원전에 노출된다면 당신은 어떻게 하겠는가?”

가설

1) 가설의 특징

•가설은 원하는 정보을 얻게 해 주며

•가설은 변수들과의 관계로 기술되고

•조사로 검증 가능해야 한다.

•가설의 진위가 검증되지 않았거나 이전 연구와 다른 집단에 대한 조사 (예) 서울 대학생들은 졸업을 위하여 준비한 스펙 (해외여행, 영어점수 등) - 그럼 우리 대학 학생들은?

2)가설의 구조

•참(인간은 산소없이 살 수 있나?)일 수도 거짓(인간을 죽음을 피할 수 있나?)일 수도 있는 문장 (예) 운동량이 많을수록 체력이 좋아진다?

•조건문 형태 (if A, then B) : 만약 “운동량이 많으면”, “체력이 좋아진다”

3)가설 평가 기준

•가설은 조사에 의해 검증될 수 있어야 한다. - 계량화 (변수들과의 관계), 조사 목적을 달성

•연구가설은 통계적 가설, “귀무가설” & “대립가설”, 중 “대립가설”에 해당되는 것임

•귀무가설이 채택되면 연구가설이 기각되는 것으로 이런 연구는 발표 의미가 없어 휴지통으로 감

vi

통계적 추론

통계적 가설

•연구문제를 통계적 방법에 의해 검증 가능한 문장(가설)으로 나타낸 것으로 귀무가설과 대립가설이 있음

•연구문제와 통계적 가설이 다른 것은 통계적 가설은 모수(parameter)로 표현된다.

•모수 : 연구자가 관심을 갖는 개체의 특성으로 (평균, 비율, 분산, 모형의 계수), 모수는 표본(조사) 데이터로부터 계산된 통계량(statistic)에 의해 추정되고 가설 검정된다.

(예1) 여자가 남자보다 공부시간이 많을까? ⇔ 여자의 평균 공부시간은 남자보다 많은가?

(예2) 학력에 따른 행복감의 차이는 존재하나? ⇔ 학력(대학원졸, 대졸, 고졸, 중졸 이하) 간 행복감 평균의 차이는 있는가? ⇔ 학력 간 행복감 평균 차이는 있는가?

(예3) 소득이 높을수록 행복감이 높을까? ⇔ Happy = a + b(Income), b > 0

귀무가설 null hypothesis

•“원 상태”, “일반 상황”, “차이가 없음”, “관계가 없음” 등으로 표현되는 가설

•모수의 하나의 값으로 표현된다. 기호 : H0

•1)H0:μm − μf = 0 2)H0:μ1 = μ2 = ⋯ = μk 3)H0:b = 0, in y = a + bx

대립가설 alternative hypothesis

•귀무가설의 반대되는 가설로 귀무가설에 설정된 모수 값 이외 구간으로 표현되고 “차이가 있다”, “영향을 미친다” 등으로 표현

•조사 목적이 대립가설로 표현되므로 연구 reserach 가설이라고도 하고 H0 혹은 Ha로 표현

•단측 one-sided 가설 : 귀무가설 모수 값보다 크거나 작은 한 쪽 구간만 가설화 (>, <)

•양측 two-sided 가설 : 귀무가설 모수 값 이외 모든 모수값으로 표현 ( ≠ )

•1)H1:μm − μf < 0 2)H1:at least μi is different3)H1:b > 0, in y = a + bx

통계적 가설 검정 절차

법정의 배심원 제도와 동일하다. <=> 귀무가설 : 용의자는 무죄이다.

증거(데이터 수집, 분석)가 “용의자가 무죄이다”(귀무가설)를 기각할 수 있을 충분한 수준(신뢰수준 ⇔유의수준 )이면 “용의자는 무죄이다”(귀무가설)을 기각하고 유죄”하고 판결한다. 증거가 충분하지 않으면 “무죄”라고(귀무가설을 채택) 판결한다. 배심원이 증거에 의해 판결하다 보니 다음 상황이 발생한다.

판단(판결)

귀무가설(범인 무죄) 채택 ↓ 귀무가설 기각=범인유죄

증거의 효력 매우 큼- 범인유죄

증거의 효력 없음

증거 효력=0 (무죄)

vii

통계적 가설 검정에서는 귀무가설(증거 효력 전혀 없음)의 모수(0)가 분포함수의 중앙(검은색 두꺼운 선)이다.

검정(배심) ↓ 실제 → 귀무가설 참 대립가설 참

귀무가설 채택 옳은 판단 1종오류 (α)

귀무가설 기각 2종 오류 (β) 옳은 판단

1종 오류, error of type I

•귀무가설이 사실임에도 불구하고 귀무가설을 기각할 확률, α로 표현

•α = P(reject H0 H0 is true)

•분석에 허용된(증거가 이 정도 이상이면 범인 유죄라고 하자-여전히 판단 오류 존재) 오류이며, 유의수준 significant level이라 함

•붉은 수직 화살표 오른쪽 영역 확률이 1종 오류임

•일반적으로 5% (유의 significant)를 많이 사용하며 10%는 약간 유의 (little significant), 1%는 매우 유의 (highly significant) 하다고 함

•유의수준의 값이 결정되면 붉은 수직선의 “증거 효력 값” (붉은 점)이 결정되며, 그 값을 기각값(critical value), 우측 영역을 기각역(critical region)이라 한다.

•5% 유의수준 ⇔ 95% 신뢰수준과 동일함, 즉 유의수준 5%에서의 귀무가설 기각(연구가설 채택) 결과는 95% 신뢰수준으로 받아들여진다.

•그러므로 붉은 수직 화살표 왼쪽 영역 확률이 신뢰수준임

2종 오류, error of type II

•대립가설이 사실임에도 불구하고 귀무가설을 채택할 확률, β로 표현

•β = P(accept H0 H1 is true)

•1 − β = P(reject H0 H1 is true)을 가설의 검정력(power of test, 대립

(연구)가설이 사실일 때 대립(연구)가설 채택)라 하고 통계가설검정 방법론은 검정력을 최대로 하는 방법을 찾는다.

1) 검정통계량 계산

조사 데이터를 활용하여 통계적 가설 검정을 위하여 계산된 통계량을 검정통계량이라 한다.

검정통계량은 귀무가설의 모수 추정량(통계추론에서는 MVUE, 최소분산 불편추정량)의 함수임. 검정통계량의 분포를 샘플링분포 (sampling distribution)라 하고 귀무가설의 모수 값이 분포의 중앙이다. 옆의 분포함수가 귀무가설 하에서 검정통계량의 샘플링 분포이다.

2)기각값(기각역) 계산

유의수준이 주어지면 검정통계량의 샘플링 분포(귀무가설 하에서, 옆의 분포)에서 귀무가설을 기각하는 영역의 시작인 기각값(왼편 그림에서 붉은 화살표의 붉은 점)과 기각역이 정해진다.

계산된 검정통계량 값이 기각역에 속하면 (초록색 점 값) 귀무가설을 기각하고 (대랍가설 채택), 속하지 않으면 (검정색 점 값) 귀무가설을 채택 증거효력 0 1(최대)

용의자 유죄 판결용의자 무죄 판결

기각값

viii

하게 된다.

3) p-값 (p-value) 유의확률 계산

•귀무가설 하 샘플링분포에서 계산된 검정통계량의 꼬리 부분에 해당되는 확률

•통계 소프트웨어는 검정통계량과 유의확률을 제공한다.

•유의확률이 유의수준보다 작으면 귀무가설이 기각, 크면 귀무가설이 채택

변수

사회연구조사에서 연구를 구성하는 개념이나 속성을 변수라 한다. 통계 데이터는 변수(열)와 관심 개체의 변수 관측값(행)으로 이루어져 있다.

설문조사에서 변수는 설문 문항과 동일하다.

변수의 개념적 정의

개념은 관심 속성을 일반화 하여 추상적으로 표현 - (예) 당신의 대학생활? - (몰입도, 만족도, 충성도)

변수의 조작적 정의

개념을 측정가능하고 조작가능하게 한다. “학교 생활 몰입도?” -> “학교에 매일 가나요?” “학교에서 하루 몇 시간 머무르나요?”

변수의 종류

1) 종속변수 target/dependent 와 독립변수 predictor/independent

종속변수=연구자의 주된 관심변수, 독립변수=종속변수에 영향을 미치는 변수

(예) 라면섭취는 고혈압 유병율을 높인다?

2)조절변수 moderating

•종속변수와 설명변수의 관계 정도에 영향을 미치는 변수 Y = a + b1X + b2MO + b3MO * X

•(예) (성별, 직업군)별로 라면섭취는 고혈압 유병율을 관계는 다를 것이다?

3)매개변수 mediating

•종속변수와 설명변수의 관계에 영향을 미치는 변수

•(아래 그림) 관계 B, C - 유의함, Y = a + b1X + b2Me : b2-유의, b1-유의하지 않으면 (완전매개), 유의확률이 낮아지면 (일부매개)

•(예) 소득수준(매개변수)은 라면섭취는 고혈압 유병율을 관계를 없앤다?

귀무가설 하 샘풀링분포

계산된 검정통계량 값