이 과제는 설문으로 답할 수 있는 질문인가 — 조사 방법을 먼저 가르는 법
과제 주제를 받고 가장 먼저 하는 일이 구글폼을 여는 것이라면, 그 전에 한 번 멈추는 편이 좋습니다. 설문은 모든 질문에 답해주는 도구가 아닙니다. 어떤 질문은 응답을 100건 모아도 리포트에 쓸 문장이 한 줄도 나오지 않고, 어떤 질문은 인터뷰 세 건으로 끝납니다. 조사 방법을 고르는 일은 문항을 짜기 전에 끝나 있어야 합니다.
설문이 잘 답하는 질문
설문은 "얼마나 많은 사람이 어떻게 생각하는가"에 강합니다. 바꿔 말하면 분포와 비교를 보는 도구입니다.
- 분포 — 응답자 중 몇 퍼센트가 어떤 선택지를 고르는지
- 집단 비교 — 1학년과 4학년, 자주 쓰는 사람과 거의 안 쓰는 사람 사이에 차이가 있는지
- 자기보고가 가능한 태도 — 만족도, 동의 정도, 선호
- 본인이 기억하는 대략의 빈도 — 정확한 수치가 아니라 구간으로 묻는 경우
과제에서 요구되는 결과가 이 범위 안에 있으면 설문이 맞는 방법입니다.
설문이 잘 답하지 못하는 질문
- "왜"를 깊이 묻는 질문 — 주관식 칸에 이유를 적어달라고 하면 대개 한 줄, 그것도 "그냥", "편해서" 정도로 돌아옵니다. 동기와 과정을 설명하는 답은 말이 오가는 자리에서 나옵니다
- 응답자 본인도 모르는 자기 행동 — 하루 스마트폰 사용 시간, 한 달 지출액 같은 것은 기억이 아니라 기록의 문제입니다. 자기보고와 실제 값이 벌어집니다
- 앞으로 할 행동 — 사겠다, 쓰겠다, 참여하겠다는 응답은 실제 행동보다 후하게 나옵니다
- 모집단이 아주 작은 주제 — 학과 조교, 동아리 운영진, 특정 상권의 점주처럼 대상이 스무 명 남짓이면 설문은 표본이 아니라 명단이 됩니다. 몇 명을 직접 만나는 쪽이 빠르고 내용도 깊습니다
- 전문적인 판단이 필요한 것 — 어떤 제도가 효과가 있었는지, 설계가 적절한지를 일반 응답자에게 물으면 결과는 판단이 아니라 인상입니다
묻고 싶은 사람이 전부 몇 명인지 먼저 세어본다
방법을 가르는 가장 빠른 기준은 모집단의 크기입니다. "내가 묻고 싶은 사람은 전부 몇 명쯤 있는가"를 종이에 적어보십시오.
- 수백 명 이상이고 그중 수십 명에게 닿을 수 있다면 설문
- 수십 명 규모이고 거의 전수에 닿을 수 있다면 설문도 가능하지만, 결과를 일반화하지 말고 그 집단의 이야기로만 씁니다
- 스무 명 안쪽이면 면담이나 사례 조사
목표 표본을 배포 경로에서 역산하는 방법은 과제용 설문, 몇 명을 목표로 잡아야 하나에 따로 적어두었습니다.
학부 과제에서 가장 잘 먹히는 것은 섞는 순서다
결과가 깔끔하게 나오는 조합은 둘 중 하나를 고르는 것이 아니라 순서를 두는 것입니다.
- 면담 먼저, 설문 나중 — 세 명에서 네 명에게 20분씩 물으면 사람들이 실제로 쓰는 말과 이유의 종류가 드러납니다. 그 말을 그대로 선택지로 옮기면 "기타"에 응답이 쌓이지 않습니다. 과제 설문이 가장 자주 실패하는 지점이 내 머리에서 나온 보기만으로 채운 문항입니다
- 설문 먼저, 면담 나중 — 분포는 나왔는데 이유를 설명할 수 없을 때, 눈에 띄는 응답을 한 사람 두세 명에게 추가로 물어 발표의 마지막 장을 채웁니다
면담 세 건은 조원이 각자 한 명씩 맡으면 하루에 끝납니다. 응답 100건을 모으는 일보다 일정 부담이 작은 경우도 많습니다.
설문으로 가기로 했다면, 남은 시간이 생각보다 짧다
설문 품앗이 맞썰에서 오간 맞설문 요청 8,297건을 집계해 보면, 요청이 들어온 시점의 설문 나이 중앙값은 1.2일이었습니다. 올라온 지 하루가 갓 지난 설문에 요청이 몰리고 그 뒤로는 눈에 띄게 줄어듭니다. 플랫폼 밖에서 링크를 뿌릴 때도 양상은 비슷합니다. 단체 대화방에 올린 링크는 올린 그날 응답을 받고, 다음 날에는 거의 올라오지 않습니다.
그래서 조사 방법을 정하는 일은 발표 일주일 전이 아니라 주제를 받은 날에 끝나 있어야 합니다. 배포 자체는 하루면 되지만, 문항을 다시 짜야 한다는 사실을 발표 사흘 전에 알게 되면 되돌릴 시간이 없습니다.
리포트에는 방법을 고른 이유를 한 문장 적는다
무엇을 했다고만 적은 리포트와, 왜 그 방법을 골랐는지 적은 리포트는 다르게 읽힙니다. "대상이 특정 집단에 한정되어 거의 전수에 접근할 수 있으므로 설문 대신 면담을 택했다" 같은 한 문장은 분량을 거의 쓰지 않으면서 조사 설계를 이해하고 있다는 것을 보여줍니다. 중간에 방법을 바꾼 경우에는 더 그렇습니다. 설문을 돌리다 응답이 모이지 않아 면담으로 보완했다면, 그 경위를 숨기기보다 한 줄로 적어두는 편이 낫습니다.
정리
- 설문은 분포와 집단 비교에 강하고, 깊은 이유·본인도 모르는 행동·미래 행동·작은 모집단에는 약합니다
- 묻고 싶은 사람이 전부 몇 명인지 세어보면 방법이 거의 정해집니다
- 면담 몇 건으로 보기를 만들고 설문으로 분포를 확인하는 순서가 과제에서는 가장 안전합니다
- 방법 선택은 주제를 받은 날에 끝냅니다. 응답이 들어오는 창은 짧습니다
인용한 수치는 맞썰 집계 기준이며 2026-11-04 시점의 값입니다.