조별과제 설문, 교수님은 어디를 보나
설문을 붙인 조별과제를 채점할 때, 채점자는 응답자 수부터 세지 않습니다. 여러분이 모은 원자료를 검증할 방법이 없기 때문입니다. 대신 보고서 안에서 앞뒤가 맞는지를 봅니다. 조사 목적과 문항, 문항과 제시한 숫자, 숫자와 결론이 한 줄로 이어지는지가 실제로 점수가 갈리는 자리입니다.
채점되는 것은 설문이 아니라 보고서다
학기 중에 돌린 설문 자체는 채점자의 손에 들어가지 않습니다. 채점자가 보는 것은 보고서의 조사 절차 절과 결과 절, 그리고 발표 슬라이드뿐입니다. 그래서 설문을 아무리 성실하게 돌렸어도 그 과정이 글로 남지 않으면 점수에 반영될 길이 없습니다.
반대로 표본이 작고 절차가 소박해도, 무엇을 어떻게 했고 그래서 무엇까지 말할 수 있는지가 정확히 적혀 있으면 그 부분은 감점되지 않습니다. 학부 과제에서 요구하는 것은 대표성 있는 조사가 아니라 조사할 줄 아는지이기 때문입니다.
기준 하나 — 조사 목적과 문항이 이어지는가
가장 흔한 감점은 통계가 아니라 연결에서 납니다. 서론에는 "20대가 중고 거래를 꺼리는 이유를 알아본다"고 써놓고, 문항은 이용 빈도와 선호 플랫폼만 묻는 식입니다. 이렇게 되면 결과 절에 아무리 그래프가 많아도 처음에 던진 질문에는 답하지 못한 보고서가 됩니다.
제출 전에 문항지를 펼쳐놓고 목적 문장을 한 줄씩 대보십시오. 어떤 문항에도 대응하지 않는 목적 문장이 있다면, 그 문장은 설문으로 확인한 것이 아니라 조원들이 원래 생각하던 것입니다. 반대로 어떤 목적에도 대응하지 않는 문항이 있다면, 그 문항은 결과 절에서 쓸 자리가 없어 빈도표만 늘립니다.
기준 둘 — 문항과 숫자가 이어지는가
결과 절이 무너지는 지점은 대개 문항의 문장과 그래프 제목이 달라지는 곳입니다. "앞으로 구매할 의향이 있다"를 물어놓고 그래프에는 "구매 경험"이라고 붙이면, 읽는 사람은 두 개를 서로 다른 것으로 이해합니다. 그래프 제목은 문항 문장을 줄이되 뜻을 바꾸지 않는 선에서 씁니다.
5점 척도로 물었는데 결과에는 "그렇다 68%"만 적는 경우도 흔합니다. 4점과 5점을 묶었다면 묶었다고 적어야 합니다. 묶는 것 자체는 보통의 처리지만, 밝히지 않으면 채점자는 그 숫자가 어떻게 나온 것인지 확인할 방법이 없습니다.
문항마다 응답 수가 다르다면 그것도 적습니다. 건너뛴 문항이나 조건부로만 표시한 문항이 있으면 분모가 달라지는데, 모든 그래프에 전체 응답자 수를 그대로 붙이면 없는 응답을 센 셈이 됩니다. 각 그래프에 그 문항의 응답 수를 함께 적는 것으로 해결됩니다.
기준 셋 — 숫자와 결론이 이어지는가
감점이 가장 크게 나는 자리는 결론입니다. 설문을 돌리지 않고도 쓸 수 있었던 문장이 결론에 있으면, 설문은 보고서의 장식이 됩니다.
확인하는 방법은 단순합니다. 결론의 각 문장 옆에 근거가 되는 그래프 번호를 적어보는 것입니다. 번호가 붙지 않는 문장은 조사 결과가 아니라 의견입니다. 의견을 쓰지 말라는 뜻이 아닙니다. 제언이나 고찰로 절을 나눠 적으면 그것대로 평가받습니다. 문제는 의견이 결과인 척 섞여 있는 경우입니다.
또 하나는 표본이 감당하지 못하는 범위로 넘어가는 문장입니다. 40명에게 받아놓고 "대학생은 가격보다 후기를 중시한다"고 쓰면, 읽는 사람은 그 한 문장 때문에 앞의 숫자까지 의심하게 됩니다. "이번 조사에 응답한 40명 중에서는"으로 바꾸면 같은 내용이 감점되지 않는 문장이 됩니다. 범위를 좁히는 것은 발견을 약하게 만드는 일이 아니라 정확하게 만드는 일입니다.
조사 절차를 적지 않으면 표본이 없는 것과 같다
조사 절차 절에 최소한 들어가야 하는 것은 다섯 가지입니다.
- 기간 — 언제부터 언제까지 응답을 받았는지
- 경로 — 어디에 링크를 올렸는지 (학과 단체방, 온라인 커뮤니티, 설문 품앗이 서비스 등)
- 대상 — 응답 자격에 제한을 두었는지, 두었다면 어떻게 확인했는지
- 응답 수 — 수집된 응답 수와 분석에 실제로 쓴 응답 수, 그리고 그 차이의 이유
- 문항 — 문항 전문을 부록에 넣었는지
길어야 한 문단입니다. 그런데 이 문단이 빠진 보고서가 많고, 빠지면 채점자는 결과 절의 숫자를 어디까지 받아들여야 할지 판단할 근거를 잃습니다. 표본의 약점을 숨기려고 절차를 생략하는 경우도 있는데, 생략은 약점을 가려주지 않고 보고서 전체의 신뢰도를 대신 깎습니다.
표본이 작은 것보다 나쁜 것
응답 수가 적으면 감점된다고 생각해 수를 부풀리거나, 조원들이 나눠서 여러 번 응답해 칸을 채우는 팀이 있습니다. 이쪽이 훨씬 위험합니다. 채점자가 응답 수를 검증할 수는 없지만, 분포가 지나치게 고르거나 자유응답이 전부 비어 있는 것은 눈에 띕니다.
표본이 대부분 조원 주변 사람이라면, 그 사실을 적는 쪽이 감점이 적습니다. 편의표집이라고 밝히고 해석 범위를 좁히는 것은 학부 과제에서 기대하는 정직함의 수준에 정확히 맞습니다.
제외한 응답이 있다면 기준을 먼저 정하고 적습니다. "응답 시간 1분 미만은 제외했다"처럼 기준을 밝힌 제외는 방법이 되지만, 결과를 본 뒤 마음에 들지 않는 응답을 빼는 것은 조작이 됩니다. 같은 행동도 순서에 따라 다르게 읽힙니다.
일정은 결국 보고서에 드러난다
설문이 붙은 과제에서 시간은 늘 모자랍니다. 그런데 응답은 기다린 만큼 고르게 들어오지 않고 배포 직후에 몰립니다. 맞썰에서 오간 맞설문 요청 3,183건을 집계해 보면, 요청이 오는 시점의 설문 나이 중앙값은 1.1일이었습니다. 설문이 올라온 지 하루 안팎에 응답이 붙는다는 뜻입니다.
과제 일정에는 두 가지 뜻이 됩니다. 첫째, 배포하고 사흘이 지나도 응답이 거의 늘지 않는다면 더 기다려서 해결되지 않습니다. 새 경로에 다시 올리는 편이 빠릅니다. 둘째, 마감 이틀 전에 배포하면 문항을 고칠 기회가 사라집니다. 초반에 들어온 응답에서 문항 문제가 보여도 이미 절반 이상이 그 문항으로 답한 뒤이기 때문입니다. 배포 전에 조원이 아닌 사람 두세 명에게 먼저 풀게 해보는 데 드는 시간은 한 시간이 안 됩니다.
제출 전에 스스로 묻는 것
- 조사 목적 문장마다 대응하는 문항이 있는가
- 그래프 제목이 실제 문항 문장과 같은 뜻인가
- 각 그래프에 그 문항의 응답 수가 적혀 있는가
- 척도를 묶었다면 묶었다고 적었는가
- 결론의 각 문장에 근거 그래프를 붙일 수 있는가
- 결과와 의견이 절로 나뉘어 있는가
- 조사 기간·경로·대상·응답 수가 한 문단에 적혀 있는가
- 제외한 응답이 있다면 기준을 미리 정했고 그것을 적었는가
- 문항 전문이 부록에 들어 있는가
이 목록은 통계 지식을 요구하지 않습니다. 전부 앞뒤를 맞추는 일이고, 하루 저녁이면 끝납니다. 그리고 학부 조별과제 설문에서 점수가 갈리는 자리는 대부분 여기입니다.
인용한 수치는 맞썰(MATSSUL) 집계 기준 2026년 9월 14일 값입니다.