과제용 설문, 몇 명을 목표로 잡아야 하나 — 배포 경로에서 역산하는 법
과제 설문을 다 만들고 나면 바로 다음 질문이 옵니다. 몇 명이면 될까요. 학위논문이라면 쓰려는 분석 방법에서 필요한 수를 계산해 내려옵니다. 그런데 학부 과제에서는 그 순서가 잘 작동하지 않습니다. 계산으로 나온 수가 남은 2주와 아는 사람의 범위로는 도저히 닿지 않는 값인 경우가 대부분이기 때문입니다. 과제용 설문의 목표 표본은 위에서 내려오는 것이 아니라 아래에서 올라옵니다.
목표를 '몇 명'으로 먼저 정하면 대개 틀린다
팀 회의에서 목표 응답 수는 보통 "100명 정도?"처럼 정해집니다. 근거가 아주 없는 것은 아닙니다. 세 자리 숫자가 보고서에서 그럴듯해 보이기 때문입니다. 문제는 이 수가 나중에 무엇을 할지, 어디에 뿌릴지와 아무 관계없이 정해졌다는 점입니다. 그래서 채워도 쓸 데가 마땅치 않고, 못 채우면 실패한 것처럼 느껴집니다.
과제 설문의 목표 표본은 세 곳에서 동시에 나옵니다.
- 과제가 요구하는 것 — 과제 안내에 최소 응답 수나 조사 대상 조건이 적혀 있는 경우가 있습니다. 있다면 그것이 하한입니다
- 하려는 분석 — 전체 빈도만 볼 것인지, 집단을 나눠 비교할 것인지에 따라 필요한 수가 크게 달라집니다
- 닿을 수 있는 사람 — 팀이 가진 배포 경로로 실제로 도달 가능한 범위입니다
현실의 목표는 셋 중 가장 작은 값에서 결정됩니다. 그리고 학부 과제에서 가장 작은 값은 거의 항상 세 번째입니다. 그래서 세 번째부터 세는 것이 순서에 맞습니다.
배포 경로를 먼저 세고, 거기서 역산한다
목표 숫자를 정하기 전에, 팀이 링크를 올릴 수 있는 곳을 전부 적습니다. 학과 단체 채팅방, 동아리, 아르바이트하는 곳, 가족과 친척, 고등학교 친구들, 온라인 커뮤니티, 설문 품앗이 서비스처럼 성격이 다른 단위로 나눕니다. 그리고 각 경로 옆에 두 가지를 적습니다.
- 그 경로에서 링크를 실제로 보게 될 사람이 대략 몇 명인지 — 단체 채팅방이면 인원 수, 커뮤니티면 글이 노출될 규모의 어림값
- 그 경로를 누가 맡는지 — 이름이 적히지 않은 경로는 배포되지 않습니다
대부분의 팀이 여기서 한 번 놀랍니다. 링크를 보는 사람과 응답을 끝내는 사람의 차이가 생각보다 크기 때문입니다. 인원 200명짜리 단체 채팅방에 한 번 올린다고 200명이 답하지 않습니다. 대부분은 스크롤로 지나가고, 열어본 사람 중에서도 중간에 나가는 사람이 있습니다. 실제 비율은 경로의 성격과 관계의 거리에 따라 크게 달라지므로 미리 정해진 값은 없습니다. 다만 목표를 세울 때 후하게 잡지 않는 편이 안전합니다.
경로를 다 적고 나면 목표는 거의 저절로 나옵니다. 그리고 그 수가 원하던 것보다 작다면, 목표를 낮추기 전에 경로를 늘리는 것이 먼저입니다. 이때 같은 곳에 한 번 더 올리는 것과 성격이 다른 곳을 하나 추가하는 것은 효과가 다릅니다. 같은 곳의 두 번째 게시물은 같은 사람들이 봅니다.
쪼갤 계획이 있으면 목표가 몇 배가 된다
"남녀 차이를 보겠다", "학년별로 비교하겠다" 같은 계획은 발표 자료를 풍성하게 만들지만 목표 표본을 조용히 몇 배로 올립니다. 60명을 모아도 성별 둘과 학년 넷으로 교차하면 여덟 칸이 되고, 고르게 들어오는 일은 드물기 때문에 어떤 칸은 서너 명으로 남습니다. 서너 명짜리 칸으로 그린 막대그래프는 발표에서 질문을 가장 먼저 받는 자리입니다.
그래서 배포 전에 결정할 것은 표본 수가 아니라 이것입니다. 나눠 볼 것인가, 나누지 않을 것인가.
- 나누기로 했다면 목표는 전체 응답 수가 아니라 가장 작은 칸에 몇 명이 들어와야 하는가로 잡습니다. 그 칸이 비면 나머지가 아무리 많아도 그 비교는 하지 못합니다
- 나누지 않기로 했다면 목표는 그만큼 내려갑니다. 이것은 후퇴가 아닙니다. 하나의 질문에 대해 전체 분포를 정확히 보고하는 보고서가, 여덟 칸으로 쪼갠 근거 약한 비교표보다 낫습니다
- 어느 쪽이든 배포를 시작하기 전에 정합니다. 응답을 다 받은 뒤에 "이 칸이 비었네"를 알게 되면 그때는 손쓸 방법이 없습니다
목표를 채웠는지는 배포 다음 날 저녁에 판단할 수 있다
목표를 채우는 계획에서 가장 흔한 형태는 기간입니다. "2주 열어두면 되겠지"입니다. 이 계산은 응답이 기간에 걸쳐 고르게 들어온다는 가정 위에 서 있는데, 실제 분포는 그렇지 않습니다.
맞썰에서 오간 맞설문 요청 3,841건을 집계한 결과, 요청이 붙은 시점의 설문 나이는 중앙값 1.1일이었습니다. 응답이 붙는 일의 절반이 설문이 올라온 지 하루 안팎에 일어났다는 뜻입니다.
이것을 과제 일정으로 옮기면 중간 점검 시점이 정해집니다. 배포 다음 날 저녁에 응답 수를 세고 목표와 비교합니다. 이 시점에 목표에 한참 못 미친다면, 같은 경로를 그대로 두고 기다려서 채워질 가능성은 낮습니다. 남은 방법은 그날 새 경로를 추가하는 쪽입니다. 마감 전날에 처음 세어보는 팀은 이 판단 기회를 통째로 잃습니다.
목표에 못 미쳤을 때 손대는 곳
경로를 늘려도 끝내 목표에 못 미치는 경우가 있습니다. 이때 손대면 안 되는 곳과 손대야 하는 곳이 비교적 분명합니다.
- 조원들이 나눠서 여러 번 응답해 칸을 채우는 것은 수를 늘리는 일이 아니라 데이터를 버리는 일입니다. 분포가 부자연스러워지고, 자유응답만 비어 있는 것은 눈에 띕니다
- 대신 분석 계획을 줄입니다. 교차분석을 빼고 전체 분포만 보고하거나, 비교할 집단을 둘로 줄입니다. 줄인 계획에 맞는 결론은 표본이 작아도 정확합니다
- 주관식 응답의 비중을 올립니다. 40명이 만든 퍼센트보다 40명이 직접 쓴 이유 쪽이 발표에서 더 많은 것을 말해주는 경우가 많습니다
- 보고서에는 목표와 실제를 같이 적습니다. "목표 80건, 수집 52건, 분석 49건"처럼 쓰면 계획이 있었다는 사실이 남습니다. 최종 수만 적으면 처음부터 49명을 목표한 것처럼 읽힙니다
정리
- 목표는 "몇 명"에서 시작하지 않고 배포 경로 목록에서 역산합니다
- 쪼개서 볼 계획이 있으면 기준은 전체가 아니라 가장 작은 칸입니다. 쪼개지 않기로 정하는 것도 하나의 답입니다
- 기간을 늘려 목표를 채우려는 계획은 잘 작동하지 않습니다. 중간 점검은 배포 다음 날 저녁에 잡습니다
- 끝내 못 채웠을 때 바꾸는 것은 응답 수가 아니라 분석 계획입니다
인용한 수치는 맞썰 집계 기준 2026-09-19입니다.