소셜 실험 방법론

개요

CashPop은 Telegram 게임입니다. 동시에 인간의 협력, 초점 신념(focal beliefs), 전략적 깊이, 공통 지식(common knowledge) 전파에 대한 지속적이고 행성 규모의 실시간 실험이기도 합니다. 프로토콜의 상업적 구조(광고 자금 지원, 토큰 재분배)는 실험을 재정적으로 지속 가능하게 만듭니다. 그리고 실험은 프로토콜을 지속적인 과학적 공유재로 만듭니다.

이 페이지에서는 우리가 측정하는 것, 익명화 방법, 공개하는 데이터, 그리고 관련 학술 파트너십에 대해 문서화합니다.

관찰 변수

모든 Round (라운드)에 대해 다음을 기록합니다:

변수	유형	해상도
Round ID	정수	고유
Question ID	정수	공개 저장소 항목 매핑
Round 시작 타임스탬프	UTC ms	정확
참가자 수	정수	정확
ms 버킷별 Commit (커밋) 단계 수	배열	1초 간격으로 구간화
ms 버킷별 Reveal (리빌) 단계 수	배열	1초 간격으로 구간화
다수결 결과		정확
투표 비율	실수	정확
인구통계학적 분해	집계	구간당 ≥100명 참가자로 구간화

다음은 기록하지 않습니다:

• 모든 수준의 개별 사용자 신원
• 개별 사용자 투표 (집계 비율만 기록)
• IP 주소 (100명 이상 참가자 집계에서 국가 코드만 기록)
• 특정 사용자의 Round 간 행동 (각 사용자는 각 Round에서 익명의, 상호 교차 상관되지 않은 토큰으로 나타남)

익명화 프로토콜

모든 공개 데이터는 k-익명성 하한선 k=100을 통과합니다: 어떤 집계 셀도 100명 미만의 참가자를 포함하지 않습니다. k 미만의 셀은 인접 셀과 병합되거나 제거됩니다.

인구통계학적 분해(국가, 연령대, 언어)의 경우, 차등 프라이버시(differential privacy) 를 ε = 1.0으로 적용합니다: 각 셀 수에 보정된 라플라스 노이즈 메커니즘이 추가됩니다.

암호학적 증명: 익명화 파이프라인은 오픈소스(github.com/cashpop-protocol/data-pipeline)이며, 제3자 검증자가 공개 데이터셋이 익명화 규칙과 일치하는지 확인할 수 있습니다.

공개하는 데이터

분기별 집계 데이터셋

매 분기마다 다음을 공개합니다:

1. Round 수준 집계: Round별 통계(수, 비율, 인구통계) — k-익명화됨.
2. 질문 저장소 스냅샷: 사용된 질문, 응답 분포, 초점 신뢰도(focal-point) 추정치.
3. 시계열: 주간 DAU, MAU, Round 수, Prize Pool (상금 풀) 분포.
4. 국가 간 초점 신뢰도 행렬: 질문 범주별, 국가 간 응답 분포의 코사인 유사도.

모든 데이터셋: CC-BY-4.0 라이선스. datasets.cashpop.meme에서 공개.

연간 연구 보고서

매년 프로토콜은 동료 검토 수준의 연구 보고서를 발행합니다. 다음을 약속합니다:

• 분기별 최소 한 편의 논문 사전 인쇄본을 SSRN / arXiv (econ.GT, cs.GT)에 제출.
• 학술 파트너와 공동 작성한 연간 보고서 최소 한 편 (목표: 연구 대학의 행동 경제학 그룹).
• 외부 학술 검토자를 포함한 공개 데이터 검토 위원회.

첫 번째 보고서(2027년 Q1 데이터셋 대상)는 2027년 Q2에 발행될 예정입니다.

탐구 중인 방법론

활성 연구 라인(동료 검토 대상):

1. 문화 간 Schelling Point (셸링 포인트) 발산 지수. 질문 유형과 문화적 거리의 함수로서 초점 신뢰도가 얼마나 문화 특화적인지 측정하는 지표.
2. 인구 규모의 Level-k 혼합 추정. Round 수준의 Commit 시간과 응답 데이터를 사용하여 인구의 level-k 분포 추정.
3. 공통 지식 전파 지연 시간. 신념에 대한 신념이 Telegram 소셜 그래프를 통해 얼마나 빨리 전파되는가? 동기화된 질문 배터리에 대한 Round 간 일관성을 통해 측정 가능.
4. 군중의 지혜(Wisdom of Crowds) 보정 대 실제 진실. 사실적 질문에 대해 CashPop 다수결 결과를 검증된 실제 진실과 비교.
5. 인구통계학적 계층별 전략적 깊이 이질성. 노인은 더 level-1에 가깝고, 암호화폐 원주민은 더 level-3에 가까운가? 경험적으로 테스트 가능.
6. 정보 충격 하의 신념 수정. 주요 뉴스 이벤트 전후에 질문 배터리 실행; 변화 측정.

이것이 중요한 이유

세 가지 이유:

1. 과학적. Beauty Contest (뷰티 콘테스트) 실험은 30년 동안 통제된 실험실에서 200명 미만의 피험자로 수행되었습니다. CashPop은 Round당 약 10,000명의 피험자를 현장 조건에서, 문화를 넘어, 암호학적 감사 가능성과 함께 실행합니다. 경험적 활용도는 전례가 없습니다.

2. 시민적. 공통 지식 구조(Aumann, Rubinstein, Vives)는 시장 미시구조에서 선거 결과에 이르기까지 모든 것을 뒷받침합니다. 공통 지식이 어떻게 형성되고 해체되는지 더 잘 측정하는 것은 공공재입니다.

3. 평판적. 프로토콜의 장기적 정당성은 데이터 공유재(data commons)로서의 정체성에 달려 있습니다. CashPop은 사용자로부터 추출하는 것이 아니라 사용자와 함께 과학적 자원을 공동 생산하고 있습니다.

인정하는 한계

• 선택 편향. CashPop 사용자는 인류의 대표 표본이 아닙니다. 그들은 암호화폐에 호기심이 있고 게임을 할 시간이 있는 Telegram 사용자입니다. 우리의 결과는 이 인구 집단에 일반화되며, 인류 전체에는 일반화되지 않습니다.
• 인센티브 오염. 플레이어는 POP (포인트)으로 보상을 받습니다. 이는 인센티브가 없는 실험실 연구와 비교하여 전략적 게임을 변화시킵니다. 우리는 이 효과를 문서화하고 정량화합니다.
• 질문 저장소 편향. 저장소는 LLM으로 생성되고 최선의 노력으로 편향이 제거되었지만, 잔여 편향이 존재합니다. 우리는 저장소를 공개하여 외부 연구자가 자체 편향 제거 방법으로 재분석할 수 있도록 합니다.

참고 문헌

• Aumann, R.J. (1976). Agreeing to Disagree. Annals of Statistics 4(6).
• Rubinstein, A. (1989). The Electronic Mail Game. AER 79.
• Vives, X. (2008). Information and Learning in Markets. Princeton.
• Surowiecki, J. (2004). The Wisdom of Crowds. Doubleday.
• Galton, F. (1907). Vox Populi. Nature 75.