데이터 수집

이 단계에서 하는 일

방법론 설계에서 정한 계획대로 실제 데이터를 모으는 단계입니다. 가장 변동성이 큰 단계이므로, 4~8주는 고정 데드라인이 아니라 권장 범위입니다. 참여자 모집이 늦어지거나 장비가 말을 안 듣는 일은 거의 항상 일어납니다 — 그래서 일정에 여유를 두고, 파일럿을 먼저 돌리고, 매일 기록합니다.

이 단계의 원칙은 하나입니다. 결과를 보기 전에 정한 규칙을, 결과를 본 뒤에 바꾸지 않는다. 아래 내용은 전부 이 원칙을 지키기 위한 장치입니다. 예시 연구에서 이 단계가 어떻게 풀렸는지 보기

첫 데이터를 받기 전에 끝내야 할 것

이상치 기준을 미리 적는 이유는 단순합니다. 결과를 본 뒤에 "이 값은 이상해 보이니까 빼자"고 하면, 내 가설에 불리한 값만 빠지기 쉽습니다. 기준을 먼저 적어 두면 그 의심에서 자유로워집니다.

표본 수의 감각도 잡아 두세요. 두 집단의 평균을 비교할 때 '중간 크기 효과'(Cohen's d = 0.5)를 80% 확률로 잡아내려면, 교과서 기준으로 집단당 약 64명이 필요합니다. 고등학생 연구에서 이 수를 채우기 어려운 경우가 많습니다 — 그렇다면 더 큰 효과만 검출할 수 있다는 한계를 알고 시작하고, 논문의 제한점에 그대로 적습니다. 표본을 못 채웠다는 사실은 숨길 일이 아니라 보고할 일입니다.

파일럿 테스트가 잡아주는 것

파일럿은 본 수집의 축소판입니다. 5~10명(또는 실험 3~5회)으로 처음부터 끝까지 한 번 돌려보세요. 파일럿이 잡아주는 문제는, 본 수집 중에 발견하면 데이터를 전부 버려야 하는 것들입니다.

• 설문 문항을 참여자가 다르게 해석한다 (예: '자주'의 기준이 사람마다 다름)
• 과제가 너무 쉽거나 어려워 점수가 천장이나 바닥에 몰린다
• 한 회차에 걸리는 시간이 계획의 두 배다
• 장비 설정(소음 크기, 온도, 소프트웨어 버전)이 매번 달라진다
• 기록표에 적을 칸이 없는 정보가 생긴다
• 동의서 받는 데 예상보다 오래 걸린다

파일럿에서 나온 데이터는 본 데이터에 섞지 않습니다. 절차를 고친 뒤 본 수집을 처음부터 시작하세요. 고친 내용은 연구노트에 "파일럿 후 변경: ○○ → △△, 이유: …"로 남깁니다.

연구노트·실험일지: 그날 일은 그날 적는다

연구노트는 실험실에서만 쓰는 것이 아닙니다. 설문이든 공개 데이터 분석이든, 한 학기짜리 연구를 기억에 의존하면 반드시 구멍이 납니다. 하루 작업이 끝나면 5분 안에 다음을 적으세요.

'이상한 일' 칸이 가장 중요합니다. 나중에 한 참여자의 값이 튀었을 때 "그날 방송이 있었다"는 기록이 있으면 이상치 판단의 근거가 되고, 기록이 없으면 감으로 빼게 됩니다. 수집 중 절차를 바꾼 일이 있다면(장비 교체, 시간대 변경) 날짜와 이유를 반드시 적습니다 — 5단계 방법 서술에 그대로 들어갑니다.

파일 정리와 백업

데이터가 쌓이기 시작하면 첫날에 폴더 구조를 정해 두세요. "나중에 정리하지"는 거의 지켜지지 않습니다.

내연구/
  raw/      원본. 수집한 그대로. 절대 수정·덮어쓰기 금지
  clean/    정리본. raw에서 복사해 만든 파일. 이름에 날짜를 붙임
  notes/    연구노트, 파일럿 기록, 변경 이력
  docs/     동의서 사본, 설문지 최종본, 3단계 설계 문서

• 원본은 한 번 저장하면 손대지 않습니다. 정리할 때는 항상 복사본을 만들어 clean/에서 작업합니다. 원본을 덮어쓴 뒤 실수를 발견하면 되돌릴 방법이 없습니다.
• 파일 이름에는 날짜와 내용을 넣습니다. 2026-05-14_백색소음_회차1.csv처럼 쓰면 이름순 정렬만으로 순서가 보입니다. '최종', '진짜최종' 같은 이름은 피하세요.
• 클라우드에 한 벌 더 둡니다. 노트북 고장이나 분실로 한 학기 데이터를 잃는 일은 드물지 않습니다. 동기화 폴더에 두거나, 주 1회 수동 업로드를 연구노트에 체크합니다.
• 개인정보가 있는 파일(동의서, 이름 목록)은 데이터 파일과 분리해서 보관하고, 데이터에는 참여자 번호만 남깁니다.

본 수집의 하루 루틴

본 수집이 시작되면 매 회차를 같은 순서로 진행하세요. 순서를 고정하면 조건 간 차이가 줄고, 빠뜨린 것이 바로 보입니다.

1. 시작 전 — 장비·설문 링크·단어 목록이 계획과 같은지 확인하고, 오늘 참여자 번호와 배정 조건을 명단에서 읽습니다.
2. 동의서 확인 — 동의서가 없는 참여자는 오늘 진행하지 않습니다. 예외를 한 번 두기 시작하면 끝까지 예외가 생깁니다.
3. 수집 — 대본대로 같은 말, 같은 시간으로 진행합니다.
4. 즉시 저장 — 끝나자마자 raw/에 날짜가 붙은 파일로 저장합니다. "집에 가서 정리"는 금지입니다.
5. 연구노트 5분 — 위 표의 다섯 칸을 채웁니다.
6. 주 1회 — 클라우드 백업, 누적 표본 수와 목표 수 비교, 남은 일정 점검.

모집이 계획보다 더디면 3주째에 결정하세요. 선택지는 세 가지입니다 — 모집 경로를 하나 더 열기(다른 반·동아리), 수집 기간을 정해진 날짜까지만 연장하기, 설계를 줄이기(조건 수를 줄여 집단당 인원 확보). 무엇을 택했든 연구노트에 날짜와 이유를 적고, 5단계 방법에 그대로 씁니다.

공개 데이터를 쓰는 연구라면 '수집'이 '다운로드'로 바뀔 뿐 원칙은 같습니다. 다운로드한 날짜·출처·데이터 버전·적용한 필터(기간, 지역)를 연구노트에 적고, 받은 파일은 raw/에 그대로 둡니다. 전처리는 스크립트나 단계별 기록으로 남겨서, 같은 원본에서 같은 clean/ 파일이 다시 나오게 하세요 — 공개 데이터 연구의 재현가능성은 여기서 결정됩니다.

설문·실험·관찰, 유형별 주의점

실험에서 한 가지 더: 실험자인 내가 어느 참여자가 어느 조건인지 알면, 나도 모르게 말투나 태도가 달라질 수 있습니다. 가능하면 조건 배정과 점수 채점을 다른 사람이 하거나, 채점할 때 조건을 가린 채로 합니다.

클리닝: 정한 기준대로, 기록하면서

본 수집이 끝나면 raw/의 복사본을 clean/에 만들고 다음 순서로 정리합니다.

1. 중복 — 같은 참여자가 두 번 응답했으면 첫 응답만 남깁니다(기준을 미리 정했다면 그 기준대로).
2. 결측 — 빈 칸을 0으로 채우지 마세요. 빈 칸은 빈 칸으로 두고, 분석에서 어떻게 다룰지(제외할지) 적습니다.
3. 이상치 — 수집 전에 적어 둔 기준에 해당하는 값만 제외합니다. 기준에 없는 값이 이상해 보이면, 빼지 말고 연구노트에 적은 뒤 5단계에서 "포함했을 때와 뺐을 때" 둘 다 보고하는 쪽을 택하세요.
4. 형식 통일 — 단위, 소수점 자리, 범주 표기('남/여' vs 'M/F')를 하나로 맞춥니다.
5. 기록 — 몇 건 중 몇 건을 무슨 이유로 뺐는지 표로 남깁니다. 이 표는 논문의 방법 또는 결과에 그대로 들어갑니다.

정리가 끝난 파일은 3단계 변수 표의 변수 이름을 열 이름으로 갖고, 한 행이 한 참여자(또는 한 측정)인 형태여야 합니다. 이 형태면 5단계 '간이 통계 계산기'에 바로 넣을 수 있습니다.

흔히 하는 실수

• 수집 중간에 방법을 바꾸기 — 절차를 바꾸면 그 전과 후의 데이터는 같은 데이터가 아닙니다. 바꿔야 한다면 날짜를 기록하고, 전·후를 따로 분석하거나 바꾸기 전 데이터를 버릴 각오를 하세요. 파일럿을 제대로 하면 대부분 막을 수 있습니다.
• 결과를 보고 분석법을 고르기 — 3단계 계획에 없는 분석을 결과를 본 뒤 추가하면 '유리한 결과 고르기'가 됩니다. 추가 분석을 하더라도 "사후 분석"이라고 명시하세요.
• 원본 파일에서 직접 수정하기 — 되돌릴 수 없습니다. raw/는 읽기 전용으로 두세요.
• 파일럿 데이터를 본 데이터에 섞기 — 절차가 달랐던 데이터입니다. 분리하세요.
• "나중에 정리하지" — 연구노트, 파일 이름, 백업 모두 첫날에 정하지 않으면 끝까지 안 됩니다.
• 표본 부족을 숨기기 — 목표 수를 못 채웠으면 그 사실과 이유를 제한점에 적습니다. 심사자는 작은 표본보다 숨긴 표본을 더 문제 삼습니다.

다음 단계

clean/에 정리된 파일과 연구노트가 준비됐다면 논문화 단계로 넘어가세요. 3단계 분석 계획을 열어 두고 시작하면 됩니다.