제5장 사회조사과정의 관리

제5장 사회조사과정의 관리

전광희 교수

jkh96@cnu.ac.kr

학습목표

• 먼저, 면접자의 선정 및 면접원 교육에 대해 서 설명한 다음, 구체적인 면접계획과 현지 에서 감독할 내용 등을 정리한다. 또 수집된 자료의 편집, 부호화, 정선(精選) 등 자료처 리과정을 설명한다. 마지막으로 조사연구에 서 발생할 수 있는 오류와 오차의 개념을 설 명하고, 조사과정의 각 단계에서 발생할 수 있는 오차의 함정들에 대해서 설명하며, 조 사비용의 종류와 절약방법을 제시한다.

• 주요용어: 면접자 편의, 면접원 지침서, 원자

료, 편집, 부호화, 자료정선, 결손자료, 오류,

오차, 무작위오차, 편의

1. 면접원 선정 시 고려사항 및 교육의 내용과 과정 2. 조사준비 및 현지 면접과정의 구체적 관리사항 3. 면접, 부호화, 정선 등 자료처리과정의 이해

4. 사회조사에서 발생하는 오차와 함정의 가능성 5. 조사비용의 종류와 절약방법



2016-12-09 제4장 사회조사과정의 관리 3

1.면접원 선정과 교육

1.면접원 선정

자료수집방법이 무엇이든 조사연구에 있어 면접원의 역할은 매우 중요하며 따라서 면접원 선 정은 매우 중요하다.

※ 면접원 종류

①전문 면접원

㉠장점:

*교육이 잘 됨. 대체로 면접 경험 많음→ 면접 성공률도 높다.

*능력과 자질이 수준급 이상 → 면접원간의 편차와 오류가 적다.

*전문가적 감각과 책임감이 큼→ 면접을 그만두는 일이 거의 없다.

㉡단점: 큰 조사기관이 아닌 이상 전문 면접원을 양성하기 어렵고 구하기도 어렵다.

비싼 수당을 지불해야 한다.

② 자원봉사자 & 실습생

전문 면접원 대신 면접원으로 채용 가능

(교육 및 관리 감독여하에 따라 훌륭한 면접 수행이 가능).

☞선발과정이 중요. 선발 후 적절하지 않다고 판단 되면 즉시 교체한다.

1)면접원 선정의 외형적 요인

* 성(性): 남녀 능력차이는 없으나 조사내용 또는 성격에 따라 어느 한쪽이 더 적합 할 수는 있음

* 연령: 30대 정도가 정서적으로 안정(효율성 및 책임감이 큼)

* 언어능력: 발음이 또렷하고 자기생각을 조리 있게 표현가능

* 외모: 최소한 상대방에게 거부감을 주지 않는 외모

2)면접원 선정의 내면적 요인

* 성격: 쉽게 흥분하지 않고 원만한 성격

* 품성: 남을 이해해주는 포용력과 따뜻한 품성

* 태도: 대인관계에 있어 긍정적이고 관용적인 태도

* 성향: 보수적이든 진보적이든 극단적인 성향의 소유자는 부적합

* 지적 수준: 고등학교졸업이상으로 조사방법론에 대한 일반적인 이해와 의식을 갖춰야 함

※ 면접원 수: 조사 면접원의 수는 20명을 넘지 않는 것이 좋다.

면접원이 지나치게 많은 면접을 하면 면접원 편의가 발생할 수 있다.

☞면접원 편의(interviewer bias) : 한 면접원이 지나치게 많은 면접을 하게 되면 조사결과에 미 치는 그 면접원의 영향이 너무 커져 그 면접원으로부터 유발된 영향으로 인해 응답결과에 오 차가 나타남.

2.면접원 교육의 내용

 연구의 목적과 중요성, 주관 기관, 연구결과의 활용계획 등 연구배경

 면접원의 역할과 중요성

 전체적인 조사과정 및 면접일정

 면접의 원리와 기술, 면접원의 사명감과 윤리

 질문지 전반에 대해 숙지하고 개별문항의 의도를 이해하도록 함 .

 면접 시 취할 행동의 행정적 절차와 단체행동의 규범

 면접과정에서 발생할 수 있는 여러 가지 상황들에 대처방법

 면접원들 간에 친밀한 인간관계 형성의 계기 → 연구에 참여하는 사람들의 팀워크 및 면접 원들의 사기는 표면적으로는 드러나지 않지만 조사결과에 큰 영향을 미칠 수 있음.

2016-12-09 제4장 사회조사과정의 관리 7

① 1단계(전반적 이해)

- 조사 참여자들의 소개 및 인사, 면접의 원리와 기술 교육

- 연구의 배경과 목적, 연구의 중요성 등을 밝히고 조 사과정 및 기본개념 설명

- 면접원이 많을 시 → 면접원 지침서(interview guide) 작성

② 2단계(면접상황 및 질문지 숙 지)

- 면접하게 될 대상자를 선정하는 과정설명 및 토론 - 질문지의 형식이나 내용에 대해서 설명뿐만 아니라 이해한 바를 토론.

- 부호화 과정의 설명과 실습

③ 3단계(면접실습)

- 면접원들끼리 면접원과 응답자를 짝을 지어 서로의 역할 연습.

- 예상되는 문제점을 발견하고, 대응방안 토론.

- 현지에 나갔을 때 예상되는 행정적, 재정적 문제 등에 대해 서로 토론.

④ 4단계(현지실습)

- 사전조사를 겸하여 대상지역과 비슷한 곳에 가서 실제로 면접을 수행해봄.

- 실습이 끝난 후 결과를 놓고 서로의 경험에 대해 토 론할 기회를 갖는다.

3.면접원 교육과정

2. 면접과정의 관리

1.현지조사 준비

 면접수행 전 현지의 협조 및 사전계몽.

 연구대상 지역의 시장이나 읍·면 장 등 조직의 책임자에게 공문을 보내고 사 전에 협조.

 조사지역이 광범위한 경우 대중매체를 이용해서 홍보.

 외지인에 대한 경계심과 배타성이 강한 시골지역은 현지협조가 필수적이다.

*주의: 지나친 사전계몽은 역효과(부정적인 반응, 편견 형성)

 면접원의 신분을 증명할 만한 신분증을 만들고 비상시 24시간 언제든 연락 할 수 있는 조사본부 연락처를 두어야 함.

2016-12-09 제4장 사회조사과정의 관리 9

2. 면접계획 및 지휘활동

 조사경비에 대한 사전의 치밀한 계획수립 →최대한 경비를 아끼는 것이 좋지만 너 무 절약하다 보면 조사결과에 나쁜 영향을 미칠 수도 있음

 면접준비 및 현지조사에 소요되는 시간은 여유 있게 계획

 지역마다 조장을 두고 현지에서 매일 각 면접원의 면접을 지휘

 면접에 지장을 주지 않도록 면접원들에게 적절한 통제를 가해야 함

 전체면접에 소요되는 시간은 2주가 넘지 않도록 한다→조사기간이 너무 길어지면 그 동안에 조사결과에 영향을 미칠 수 있는 사건들이 일어나 조사환경이 바뀔 수 있기 때문

 조장은 ⓐ면접의 세밀한 검토, ⓑ면접의 실시여부 확인 ⓒ필요 시 면접원들의 재 면접(reinterview) 및 면접의 보완 ⓓ동기부여 및 사기진작의 역할을 해야 한다.

3. 면접원 휴대품

면접원들이 휴대하고 떠나야 할 품목 들은 다음과 같다.

·질문지(할당된 분량보다 10%정도 더 휴대해야 함)

·질문지에 딸린 보조자료

·조사대상자의 명단과 주소 또는 전화번호

·현지에서 표본을 추출한다면, 자세한 표본지침

·면접일지용 공책과 필기도구

·주민등록증 및 면접 신분증

·조사기관의 협조요청 공문 및 소개편지

·응답자에게 줄 기념품(여분준비)

·현지 지도 및 교통안내서

·조사에 필요한 비용 및 여행경비

·회계기록부

·비상연락망과 조사본부의 전화번호

·기타 여행에 필요한 개인용품(세면도구, 잠옷, 내의 등)

2016-12-09 제4장 사회조사과정의 관리 11

3. 자료 정리와 컴퓨터 입력

조사과정을 통해 얻은 원자료(raw data)를 분석 가능한 자료로 처리하는 과정을 대게 질문지 검토 및 편집, 부호화, 컴퓨터 입력, 자료정선 등으로 나눈다. 이 과정을 소홀히 여기면 많은 시간과 경비를 들여 조사한 귀중한 자료를 제대로 사용하지 못하고 전체분석 결과를 왜곡시킬 수 있음에 유의해야 함.

1.질문지 검토 및 편집

1)질문지 검토

 질문지를 검토하여 실제 분석에 사용할지 제외할지 결정

 응답하지 않은 질문이 다수, 특히 조사목적상 중요한 질문들에 응답하지 않은 경우

 전체 질문에 대해 무성의하게 거의 비슷한 응답을 한 경우

 응답자가 조사 설계상 부적격자인 경우(청소년 대상 질문지에 그 어머니가 응답)

 응답자가 질문내용을 제대로 이해하지 못하고 응답한 것으로 판단되는 경우

 질문지가 예정된 기간보다 너무 늦게 회수된 경우

☞ 일반적으로 이와 같은 질문지들은 분석에서 제외하는 것이 좋다.

2)편집 : 모든 응답을 정확히 부호화, 입력하기 위해 각 문항이 제대로 응답되어 있는지 확인하는 과정

 각 질문지에 고유한 일련번호를 매겨 두는 것이 좋음 → 이후에 진행되는 자 료처리 및 분석과정에서 각 질문지를 확인하거나 특정질문을 확인하고자 할 때 쉽게 찾아낼 수 있다.

 조사자료가 방대하여 여러 명이 편집을 할 경우 각 편집인들 간에 편집의 일 관성을 유지

① 완결성: 여러 가지 방법으로 응답이 누락된 문항의 응답을 찾아 내야함. 응답을 찾 아낼 수 없을 경우에는 결손자료(missing data)로 처리.

② 정확성: 응답자가 거짓으로 대답했거나 면접원이 자료를 조작한 경우를 찾아내어 바로 잡아주거나 분석에서 제외하는 것.

③ 자유 응답형의 처리: 개방형 질문들에 대한 응답들도 적절히 부호화하게끔 처리

2016-12-09 제4장 사회조사과정의 관리 13

2. 부호화

 수집된 자료를 통계적으로 분석할 수 있도록 일정한 원칙에 따라 각 응답에 숫자를 부여하는 과정.

 조사자료가 방대할 경우 여러 사람이 부호화 작업에 참여하게 되므로 부호화의 일관 성이 유지 될 수 있도록 부호화지침서(code book)를 만들어 사용.

※부호화 지침서를 만들 때 유의사항

① 모든 응답들이 다 포함될 수 있도록 포괄적이며 서로 중복되는 부분이 없게 상 호 배제적으로 부호화 ▶어떤 응답이든 하나의 값으로 부호화 될 수 있어야 한다.

② 응답이 없는 문항들도 구분되게 부호화. ex) 응답자에게 해당되지 않는 문항은 00, 모르겠다는 98, 해당되지만 응답하지 않은 문항99등으로 값을 부여

③ 모두 많은 구분은 각 범주 속에 사례수가 적어짐으로 의미 없는 분석이 될 수 있다.

대게 각 범주에 최소한10%정도의 사례는 포함될 수 있도록 해야 한다.

④ 부호화 작업 중 새로운 응답범주를 추가하는 것은 신중하게 결정한다.

⑤ 각 질문지의 식별번호, 각 변수의 이름 포함. 경우에 따라서는 면접원이나 부호화 작업자의 식별번호도 포함 가능하다.

3) 컴퓨터 입력

① 1970년까지만 해도 부호화된 모든 자료를 부호화 용지(coding sheet)에 기입 후 이것을 컴퓨터가 읽을수 있는 카드에 천공을 뚫어 입력하는 과정을 거쳤다

② 현재는 SPSS,SAS, BMDP, MINITAB, ISP등의 프로그램을 사용. 과거에는 이러 한 프로그램이 대학이나 연구기관의 대형 컴퓨터에서만 이용 가능하였지만 최근 에는 개인용 컴퓨터에서도 이용 가능하다

4)자료 정선(data cleaning)

① 모든 자료가 정확하며 일관성을 지니고 있는지, 부호화와 입력에 착오는 없는지 확인하며 오류를 찾아내 수정하는 작업

② 원래의 질문지를 찾아 대조해봄으로써 입력과정에서 오류발생여부를 확인

③ 응답자 또는 부호화 작업자와 접촉하여 응답을 재차 확인 후 누락된 부분 보충

④ 잘못된 값이 나오는 이유에 대해 여러 가지로 추정. ex)입력과정에서 한 칸 씩 밀림

⑤ 어떤 방법으로도 확인이 안될 경우 특정 문항의 응답을 버리거나 결손자료로 처 리

⑥ 특별히 오류가 많은 사례의 경우에는 아예 분석에서 제외

2016-12-09 제4장 사회조사과정의 관리 15

4. 사회조사의 오차와 함정

1. 오류와 오차

 오류(fallacy): 조사과정에서 범하는 실수나 잘못으로 얻게 되는 틀린 결과

 오차(error): 조사과정의 어떤 불완전함으로 인해 파생되는 결과의 차이 -무작위 오차(random error): 조사기법의 불완전함으로 인하여 발생하는

피하기 어려운 비체계적·확률적 변이

-편의(편향, bias): 조사결과에 체계적으로 영향을 미치는 방향성을 지닌 변이

 그 정도가 커지면 조사결과를 무의미 하게 만들 수 있으므로 만족할만한 조 사결과를 얻기 위해서는 오류와 오차를 최소화 해야 함

 오차는 조사의 설계부터 보고서 작성까지 전 단계에서 발생할 수 있지만 정 확히 측정하기란 힘들어 매 단계마다 오차발생의 가능성에 유의 하면서 신중 히 대응에 나가야 한다.

2.빠지기 쉬운 함정

⑴ 조사 설계 단계

① 조사방법이 조사목적에 부합되지 못할 때

② 조사과정 전체를 치밀하게 계획하지 못할 때

③ 결과의 분석방법이나 활용에 대해 미리 계획하지 않을 때

④ 정확한 모집단 대신 편리한 대로 임의로 모집단을 정할 때

⑤ 조사에 필요한 일의 양과 소요시간 및 경비를 과소평가할 때

⑥ 부적절한 면접원을 선정할 때

⑦ 면접원에 대한 교육이 부족하거나 피상적일 때

⑵ 질문지 작성 단계

① 주요개념의 조작적 정의를 제대로 하지 못할 때(타당도의 문제)

② 질문에 대한 지시문을 명확하게 주지 못할 때

③ 균형을 잃은 질문을 할 때

④ “응답 없음”, “모르겠음”등의 판단유보 범주를 무조건 포함 or 배제할 때

⑤ 너무 복잡하거나 응답자의 수준에 어려운 질문을 할 때

⑥ 어떤 질문이 다른 질문에 미칠 영향을 충분히 고려하지 않을 때

⑦ 일정에 쫓기거나 재정적 이유 때문에 사전조사를 생략할 때

⑧ 면접원과 부호화하는 사람(coder)의 편의성을 간과할 때

2016-12-09 제4장 사회조사과정의 관리 17

⑶ 표본추출단계

① 오류가 많은 모집단목록에서 표본을 추출할 때 (대표성의 문제)

② 표집 또는 추출(sampling)의 원리를 엄격히 준수하지 않고 편리한 대로 표집할 때

(4) 면접 단계

① 표집된 응답자를 지침대로 엄격히 면접하지 않을 때

② 표집된 응답자를 너무 쉽게 다른 사람으로 대체할 때

③ 면접 거부자를 재방문하지 않거나 설득하지 못할 때

④ 특정의 조사결과를 바라는 의도를 가지고 면접할 때

⑤ 면접원에 대한 현지감독을 소홀히 할 때

⑥ 면접내용을 검색하지 않아 면접상황에서 발생하는 오류를 초기에 찾지 못할 때

⑦ 중도에서 탈락하는 면접원을 바로 대체하지 못할 때

⑧ 새로운 면접원을 충분히 교육시키지 못할 때

⑸자료처리단계

① 코더(coder)에게 적절한 교육을 충분히 실시하지 못할 때

② 편집, 부호화, 자료입력 등에 대한 감독을 소홀히 할 때(입력착오)

③ 무응답자, 응답거부자 등에 대한 부호화를 소홀히 할 때

④ 입력된 자료의 검색이나 정선을 소홀히 할 때

⑹결과분석 및 해석단계

① 조사단위와 분석단위가 다를 때

② 표집 된 모집단보다 더 큰 모집단으로 결과를 확대 유출할 때

③ 무응답자, 응답거부자 등의 의미를 간과할 때

④ 자료에 의해 확인되지 않은 결과를 확대 해석할 때

⑤ 확실하지 않은 변수간의 인과관계를 가정할 때

2016-12-09 제4장 사회조사과정의 관리 19

5.조사비용의 종류와 절약방법

1.조사비용의 종류

⑴질문지 작성

-질문지원본 및 교정본 작성 비용 /사전조사용 질문지 및 면접 보조자료 인쇄비 -사전조사 및 그 결과 분석비용 /사전조사 결과에 대한 토론 및 질문지 수정비용 -본 조사의 질문지 및 면접 보조자료 인쇄비

⑵면접대상자 표집

-모집단 목록 구입비 /표본명단 작성 비용

⑶면접조사

-현지협조 추진비 /면접원들에 대한 교육자료 준비 및 교육에 소요되는 경비 -응답자에 대한 기념품 준비 비용 /면접원들의 여비 및 수당

-면접감독자들의 여비 및 수당 /조사본부, 면접원, 응답자 간의 각종 연락비용

⑷자료처리

-자료편집, 부호화, 자료 입력자, 자료 정선자 등의 인건비 -컴퓨터 사용료/컴퓨터 파일작성을 위한 프로그래머 비용

⑸결과분석 및 보고서 작성

-통계처리 비용/보고서 작성 및 인쇄비용

2.조사비용의 절약방법

조사의 질을 떨어뜨리지 않으면서 경비를 절약할 수 있는 방법 모색 -치밀한 계획을 세움으로써 시행착오를 줄인다.

-비용의 규모 및 소요시기를 정확히 예측하고 계획한다.

-질문지 길이를 줄인다./표본의 크기를 작게 한다./개방형 질문을 줄인 다.

-질문지 외에 별도의 응답지 또는 면접기록지를 사용한다.

-부호화 용지에 옮기지 않고 질문지를 보면서 바로 자료를 입력하도록 한다.

-주민등록명부, 유권자등록부 등 미리 작성되어 있는 응답대상자 목록 을 이용.

2016-12-09 제4장 사회조사과정의 관리 21