Reddit vs Moltbook

TL;DR

인간 커뮤니티(Reddit)와 AI 에이전트 커뮤니티(Moltbook)를 비교 분석하여, 두 집단의 데이터가 텍스트·네트워크·시간·행동의 네 차원에서 어디서 갈라지는지를 추적했습니다.

• 데이터: 매칭된 안정기 윈도우(2026-04-01~04-14) — 총 기여(글+댓글)는 Moltbook 약 10만, Reddit 약 5.15만.
• 방법: distant reading — MTLD(어휘 다양도), VADER(감정), reply-tree(네트워크), circadian rhythm(시간).

한 문장으로 요약한 발견은 이렇습니다: AI의 활동은 소수의 과활동 집단이 떠받치는 반면 인간의 활동은 수많은 1회성 참여자에게 얇게 퍼져 있고, AI의 대화는 방송형 "star"로 납작해지는 반면 인간의 대화는 깊은 토론 트리로 자라며, 인간은 잠들지만 AI는 잠들지 않습니다.

그리고 예상하지 못한 한 가지는, 방법론 자체가 이야기의 일부였다는 점입니다. 한 번이 아니라 여러 번, 무언가를 처음 측정한 방식이 진실과 정반대의 결과를 내밀었고 — 그것을 알아채는 일이 이 프로젝트 전체에서 가장 값진 교훈이 되었습니다.

Background & Questions — Why Reddit vs. Moltbook?

앞서 저는 Reddit과 Moltbook을 간단히 비교한 DIY를 올렸습니다. 이번에는 제가 왜 이 주제를 고르게 되었는지에 대한 배경과 스토리를 풀어보려 합니다.

Why I choose Reddit vs Moltbook.

GPT가 등장한 이후로 근 3~4년간 모든 과제·업무의 흐름이 AI 중심으로 바뀌었습니다. AI는 기업 중심으로 개발되고 있으며, 현재 기업 간 경쟁은 굉장히 과열되어 있고 세상은 빠르게 변하고 있습니다.

이런 AI의 발전에는 두 가지 방향성이 있다고 생각합니다: '높은 성능과 모델 효율성을 위한 발전'과 '실생활의 편리함을 증진시키기 위한 발전'입니다.

전자의 예시로는 Claude Opus 4.8, Claude Fable(2026-06-12 공개, state-of-art), gpt-5.5 등 계속해서 업데이트되는 모델 버전을 들 수 있습니다. 반대로 후자의 경우 OpenClaw/Hermes agent와 같은 개인 비서, 2026년 5월 발표된 Gemini Spark, 2026년 6월 10일 WWDC 2026에서 발표된 Apple의 Siri 2.0, Claude Cowork 등을 예로 들 수 있겠습니다. 이는 모델의 순수 성능을 발전시키는 것이라기보다, 발전된 모델을 편하게 쓰기 위한 방법을 연구하는 분야라고 할 수 있습니다. 이 분야의 빠른 발전 덕분에 많은 AI가 휴대폰과 같은 작은 디바이스에서도 편리하고 놀라운 일들을 할 수 있게 되었습니다.

저는 개인 AI 비서 두 개(OpenClaw, Hermes agent)를 사용하고 있으며, 아이디어·일정 등에 대해 그들과 할 일을 분배하고 이야기를 나눕니다. 저는 이러한 기술들을 빠르게 받아들이는 사람이라고 생각하고, 그렇기 때문에 AI 비서를 데리고 다니며 AI와 함께 사는 삶이 꽤나 자연스럽게 느껴집니다. 그러나 많은 일반인들이 AI와 함께 사는 삶을 받아들이기까지는 약간의 시간이 더 걸릴 것이라고 생각합니다.

저는 미래를 생각하는 것을 좋아합니다. 그래서 만약 모든 사람이 AI와 함께 사는 삶을 산다면 미래는 어떤 모습일까를 생각해보았습니다. 그중 떠오른 것이 바로 커뮤니티의 변화였습니다.

AI가 하나의 주체로서 여러 사람과 함께 회의를 하거나 이야기를 나누는 것이 자연스럽게 받아들여지는 세상이 올 수 있을까요? 만약 그렇다면 지금은 어느 정도까지 발전해 왔을까요?

이 생각으로부터 저는 지금 AI와 인간의 '행동의 차이'가 궁금해졌습니다. 이에 대한 일환으로, AI만 활동하는 인터넷 커뮤니티인 Moltbook을 비슷한 구조를 갖고 있는 인간의 Reddit과 비교하고자 하였으며, 이것이 이 연구의 시작이었습니다.

연구 질문

이번 연구에서 해결하고자 하는 질문을 다음과 같이 설정하였으며, 이를 바탕으로 연구를 진행해 왔습니다.

• Q1. AI agent로만 구성된 커뮤니티(Moltbook)는 인간 커뮤니티(Reddit)와 비교했을 때 언어적 구조(텍스트 길이, 어휘 다양성, 감정적 톤)에서 어떤 차이를 보이는가?
• Q2. AI 간의 상호작용(Reply-tree) 구조는 인간의 토론(Thread) 구조를 통계적·네트워크적으로 나타내고 있는가?
• Q3. 생물학적 제약이 없는 AI의 행동 패턴은 인간의 생체 주기에 따른 커뮤니티 활동 패턴과 어떻게 다른가?
• Q4. 커뮤니티 참여는 소수의 heavy-tail 파워유저에 쏠리는가, 아니면 다수의 1회성 기여자에게 퍼지는가? 그리고 AI와 인간은 어떻게 다른가?

What I Found

왜 distant reading을 선택하였는가? 첫 번째 개인적인 이유로는, 이전에 수업에서 배웠던 것처럼 distant reading에 큰 관심을 가졌었고, 수업에서 배운 재밌는 아이디어들이 멋있어 보여서 한번 시도해보고 싶었기 때문입니다.

농담이고, 제가 distant reading을 선택한 진짜 이유는 분석 데이터의 특징 때문이었습니다. 인간과 AI 커뮤니티의 데이터 양은 사람이 모두 읽기 어려울 정도로 굉장히 많습니다. 또한 하나의 topic/post에 따라 사람들의 반응이나 흥미도 등이 굉장히 천차만별입니다. 이는 결국 close reading으로는 인간의 데이터만 보더라도 데이터 간 차이가 너무 커서, AI와 인간을 구별하기 위한 기준을 잡기 어렵다는 것을 의미합니다. 제 연구의 핵심 주제는 'AI와 인간의 커뮤니티에서의 행동 차이'였기 때문에, 이 거대한 데이터에서 사회적 패턴을 찾아내기 위해 distant reading을 채택하였습니다(텍스트 길이, 어휘 다양성, reply-tree 구조 분석).

데이터 분석 방향. Reddit은 굉장히 많은 소 커뮤니티(subreddit)로 이루어져 있고, 그 데이터의 양은 가히 압도적이었습니다. 저는 그러한 수십 테라바이트의 데이터를 분석할 수 있는 슈퍼컴퓨터를 갖고 있지 않기 때문에, 특정 7개의 subreddit 데이터만을 선택하여 분석을 진행하였습니다. Reddit의 모든 데이터를 사용한 것은 아니었기에, 이번 연구에서는 양적 분석보다는 비율·구조 분석에 집중하여 프로젝트 방향을 기획하고 분석을 진행하였습니다.

상세 분석을 차원별로 이어갑니다.

데이터(현행): 안정기 매칭 윈도우 — 2026-04-01 ~ 04-14 (출시 광풍이 지난 시기).
Moltbook posts ~5만(≥50토큰 39,151) · Reddit posts 16,506(7개 서브레딧: artificial·singularity·LocalLLaMA·offmychest·CasualConversation·CryptoCurrency·ProgrammerHumor).
범위 주의: 게시물(posts) 한정, raw 텍스트 기준. 댓글·전체 78일 코퍼스 미포함.
이력: 초기 분석은 launch-week(2026-01-27~31) 샘플로 수행했으나, 그 샘플의 85%가 단 하루(1/31)에 쏠려 대표성이 없어 안정기 4월 윈도우로 재표본했습니다. 아래는 4월 기준이며, 의미 있는 변화는 launch-week와 비교해 표기합니다.
작성일: 2026-06-07 (4월 데이터 기준 갱신)

---

§1 텍스트·언어 차원

세 분포(토큰 수 / 1인칭 비율 / TTR)는 4월 데이터에서도 동일한 줄기를 유지합니다: Moltbook(AI) 게시물이 더 길고, Reddit(인간) 샘플은 짧은 글이 많습니다. 다만 길이를 보정한 어휘 다양도 격차는 launch-week보다 크게 줄었습니다(§1.4).

1.1 게시물 길이 — token count (log)

Moltbook 분포가 Reddit보다 오른쪽(길다)으로 치우친 패턴은 그대로입니다. Moltbook은 log 5 부근에 봉우리를 두며, Reddit은 log 2~3(짧은 글)에 큰 질량이 몰립니다. 50토큰 이상 글의 비율도 Moltbook 78%(39,151/약5만) vs Reddit 51%(8,493/16,506)로, AI 게시물이 더 길고 본문이 충실합니다. launch-week 대비 Moltbook의 ≥50토큰 비율이 58%→78%로 올라간 점도 주목할 만한데, 출시 초기엔 "Hello Moltbook!" 류 짧은 인사·소개 글이 많았던 반면 안정기엔 더 긴 담론형 글이 늘었음을 시사합니다.

한계점: Reddit 샘플에는 [removed]/[deleted] 본문·제목만 있는 글이 섞여 저토큰 질량을 부풀립니다.

1.2 1인칭 비율 — first-person rate

양쪽 모두 0에 강하게 몰리며, Moltbook의 0 봉우리가 더 높고(밀도 ≈60) Reddit이 0.05~0.15 구간으로 조금 더 퍼지는 패턴이 유지됩니다. 1인칭("I/me/my…") 사용은 둘 다 낮지만 Reddit(인간)이 근소하게 더 자기지시적입니다. Moltbook의 0 집중은 1인칭이 없는 정형·거래성 게시물의 영향으로 보이며, 담론형(discursive) 글만 남기는 필터를 적용했을 때의 변화는 후속 확인이 필요합니다.

1.3 어휘 다양도 — Type-Token Ratio (TTR)

Reddit은 TTR=1.0에 큰 스파이크, Moltbook은 0.6~0.8 중심입니다. 해석 주의: TTR=1.0은 모든 토큰이 유일 = 매우 짧은 글(제목만/removed)에서 기계적으로 생깁니다. 따라서 Reddit의 1.0 스파이크는 어휘가 풍부해서가 아니라 글이 짧기 때문이고, Moltbook의 낮은 TTR도 글이 길어서 나타나는 길이 의존 효과입니다. TTR 단독 비교는 길이 교란을 받으므로 §1.4의 길이 보정 지표로 재해석합니다.

1.4 어휘 다양도 재검 — MTLD (길이 보정)

길이에 거의 영향받지 않는 MTLD를 50토큰 이상 글에 대해 산출했습니다.

길이를 통제하면 Moltbook이 여전히 어휘 다양도가 높지만, 격차는 약 +13%(median 98.3 vs 87.2)로 온건합니다. 이는 TTR(Reddit이 1.0에 스파이크)의 표면적 인상을 뒤집습니다 — TTR에서 Reddit이 높아 보인 것은 글이 짧았던 길이 부작용이고, 길이를 통제하자 AI 쪽이 오히려 더 다양했습니다.

결정적으로, 이 격차는 샘플 시기에 민감합니다. launch-week 샘플에서는 Moltbook median이 123.5로 Reddit(92.4)보다 +34% 높았으나, 안정기 4월에는 Moltbook이 98.3으로 내려가며 격차가 +13%로 축소됐습니다. 즉 출시주 데이터는 AI의 어휘 다양도를 과대평가했고, 정상 운영 기간에는 인간과의 차이가 훨씬 작습니다. (방향성 자체는 두 시기 모두 "AI ≥ 인간"으로 일관됩니다.) 차이의 통계적 유의성은 §6에서 확인할 수 있으나, n이 크므로 효과크기(median 격차)로 읽는 것이 적절합니다.

1.5 감정 톤 — VADER sentiment

측정 방법: VADER(Valence Aware Dictionary and sEntiment Reasoner)의 compound 점수입니다. VADER는 소셜미디어용 사전·규칙 기반 분석기로, 단어 감정 사전에 대문자(강조)·문장부호·강조어·부정어·이모티콘 규칙을 더해 점수를 냅니다. compound는 전체를 -1 ~ +1(최고 부정 ~ 최고 긍정)로 정규화한 값입니다(통상 ≥0.05 긍정, ≤-0.05 부정). cleaned text 기준으로 글마다 산출 후 플랫폼 평균을 냈습니다.

결과: 평균 compound가 Moltbook 0.313 vs Reddit 0.176입니다. 둘 다 순(net) 긍정이지만 AI 에이전트 글이 인간보다 뚜렷이 더 긍정적·우호적인 어조입니다.

한계점: VADER는 영어 사전 기반이라 긴 글·맥락·반어(sarcasm)에 약합니다. 절대값보다 두 플랫폼 간 상대 차이로 읽는 것이 안전합니다. Moltbook의 높은 긍정성은 인사·소개·홍보형 글 비중이나 §5의 "Claude 계열" 어조와 관련 있을 수 있습니다.

---

§2 네트워크·대화 구조 차원

대화 구조를 reply tree(글→댓글 방향 그래프)로 비교했습니다.

구조(모양·깊이):

• Moltbook = 평평한 star: 시각화에서 한 글을 중심으로 댓글이 방사형으로 붙는 별 모양이 뚜렷하고 mean_depth ≈ 1.04입니다. 즉 에이전트는 글에 직접 댓글을 달 뿐 댓글끼리 대화(중첩)는 거의 없습니다 — 방송형(broadcast)입니다.
• Reddit = 더 깊은 중첩: mean_depth ≈ 1.79로 트리가 여러 단계로 이어집니다. 사람은 답글에 답글을 달며 다자 대화를 형성합니다.

댓글 깊이 분포로 보면 더 분명합니다:

Moltbook 댓글의 87%가 글에 직접 달리는 depth 1이고 depth 3 이상은 1.6%에 불과해 사실상 중첩이 없습니다. 반면 Reddit은 depth 1이 53%뿐이고 26%가 depth 3+, depth 5+도 9.2%에 달해 깊은 다단계 대화가 흔합니다. 가장 큰 스레드의 최대 깊이도 Reddit 10 vs Moltbook 6으로, 인간 대화가 더 깊게 이어집니다(트리 시각화에서도 Moltbook은 루트 아래 넓은 부채꼴, Reddit은 아래로 길게 내려가는 나무 형태로 대비됩니다).

주목 집중도 (글당 답글 수 — post 레코드의 실제 comment_count/num_comments 기준, 표집 영향 없음):

두 플랫폼 모두 절반의 글은 답글 ≤1건이지만, Moltbook은 주목이 훨씬 극단적으로 쏠립니다 — 상위 1% 글이 전체 답글의 43%를 차지합니다(Reddit 27%). 평균 참여는 Reddit이 4배 이상 높지만(11.3 vs 2.6), Moltbook은 "대부분 무시되고 극소수가 폭발하는" winner-take-all 분포입니다. 이는 "일부 post가 알고리즘적으로 강하게 활성화된다"는 가설을 데이터로 확인해주며, §4의 작성자 heavy-tail과도 일관됩니다.

종합하면 Moltbook 대화는 평평하고(star) 소수 글에 주목이 쏠리는 방송형, Reddit은 깊게 중첩되고 참여가 더 고른 토론형입니다.

한계점: 글·댓글 표본이 동일 스레드가 아니어서 트리 깊이와 그래프 out-degree(Reddit 174 / Moltbook 76)는 부분 표본의 영향을 받습니다(최대 답글 수는 post 메타의 comment_count로 보정 — 1,243 / 1,969). 정밀 분석에는 특정 글 집합의 전체 댓글을 받은 matched-thread 데이터가 필요합니다.

---

§3 시간·행동 차원 (circadian)

4월 매칭 윈도우(14일)로 재실행한 결과, 초기 가설 "인간=수면 리듬, AI=24시간 균일"이 확인됐습니다.

AI(Moltbook)가 더 평평합니다 (CV 0.09 < 0.16, peak/trough 1.4 < 1.6배) — 24시간에 걸쳐 더 균일하게 게시하며, "에이전트는 잠을 안 잔다"는 직관과 일치합니다. 반면 인간(Reddit)은 뚜렷한 일주기를 보입니다: UTC 9시(미국 새벽·유럽 이른 아침)에 저점, UTC 12~18시(미국 오후+유럽 저녁)에 피크로 올라가는 전형적 각성 시간대 패턴입니다.

흥미로운 디테일은 Moltbook도 완전 균일은 아니라는 점입니다 — UTC 16시 부근에 옅은 피크가 남습니다. 이는 많은 에이전트가 사람 운영자의 스케줄/트리거로 작동해 인간의 주간 리듬을 약하게 물려받았을 가능성을 시사합니다(다만 인간 피크 18시보다 이르고, 변동폭은 인간의 1/2 수준).

대조: launch-week 샘플에서는 Moltbook CV 0.74·peak/trough 9.4배로 "AI가 오히려 스파이크"처럼 보였으나, 이는 1/31 하루(샘플의 85%)에 쏠린 단일 이벤트 아티팩트였습니다. 안정기 데이터에서 결과가 완전히 뒤집힌 것은 §1.4 MTLD와 함께 "표본 시기가 결론을 좌우한다"는 교훈을 재확인합니다.

한계점: posts 한정, UTC 기준(현지시간 미변환). 절대 변동폭은 양쪽 다 크지 않으나 방향은 분명합니다.

---

§4 커뮤니티·작성자 활동 차원

작성자당 게시물 수 분포는 두 플랫폼이 극명하게 다릅니다. 평균만 봐도 결정적입니다: Moltbook은 약 50,000 posts / 2,410 agents ≈ 작성자당 ~20.7건, Reddit은 16,506 posts / 12,201 authors ≈ ~1.35건입니다. AI 에이전트가 작성자당 약 15배 더 많이 게시합니다.

분포 모양(log(1+posts per author), 플랫폼별 정규화):

• Reddit(인간): 1건에 거의 전부 몰린 극단적 집중 — 이 2주 윈도우에서 대부분의 인간 작성자는 글을 딱 한 번 올렸고 반복 게시자는 드뭅니다. 오른쪽 꼬리가 거의 없습니다.
• Moltbook(AI): 훨씬 넓게 퍼지며 log 6~7(수백~1,000건 이상)까지 긴 heavy-tail입니다. 소수 에이전트가 수백 회 이상 게시하고, "반복적으로 활동하는" 층이 두껍습니다.

해석하면, AI 에이전트는 자동화돼 24시간 반복 게시가 가능하므로 작성자당 생산량이 크고 heavy-tail을 띱니다(§3의 시간 균일성과 일관). 반면 인간의 게시물(submission) 활동은 1회성 참여가 지배적입니다.

posts만으로는 사과-오렌지일 수 있어(인간은 submission보다 comment가 훨씬 많다) 댓글까지 합쳐 "작성자당 총 기여(post+comment)"로 재산출했습니다.

댓글을 포함하자 Reddit의 작성자당 기여는 1.35→1.89로 소폭 오르는 데 그쳤습니다 — 대신 고유 작성자가 12,201→27,192로 급증했는데, 이는 댓글 대부분이 새로운 1회성 참여자에게서 나왔음을 뜻합니다. 반면 Moltbook은 20.7→32.66으로 올랐습니다. 결과적으로 격차는 좁혀지기는커녕 ~15배 → ~17배로 더 벌어졌고, 분포 모양도 동일합니다(Reddit은 1건에 집중, Moltbook은 heavy-tail). 즉 "AI가 작성자당 훨씬 활발하다"는 §4 결론은 posts-only 아티팩트가 아니라 실제 현상임이 확인됐습니다 — 인간은 대다수가 한두 번 기여하고 소수만 반복하는 반면, 소수의 AI 에이전트(3,062명)가 10만 건의 기여를 만들어냅니다.

남은 한계점: Moltbook posts·comments를 각 5만, Reddit 댓글을 서브당 5천으로 캡했으므로 절대 per-author 값은 표본 상한의 영향을 일부 받습니다(단 비율·분포 모양은 견고). 커뮤니티 수는 Moltbook submolt vs 의도적으로 7개만 표집한 Reddit 서브레딧이라 직접 비교 대상이 아닙니다.

---

§5 Agent provenance (Moltbook 특화) — 어떤 LLM으로 구동되나

Moltbook 에이전트의 구동 모델을 (a) 게시물 본문, (b) 에이전트 bio(description) 두 경로에서 정규식으로 추정했습니다.

두 가지가 드러납니다. 첫째, 모델을 명시하는 비율이 매우 낮습니다 — bio 2.1%, 글 2.5%만 모델명을 언급합니다. 이는 선행 메모("underlying model mostly OpenClaw/Clawdbot — not always tagged")와 일치하며, 대다수 에이전트는 자신의 구동 모델을 공개하지 않습니다. 둘째, 공개한 경우 Claude가 압도적입니다 — bio 자기소개 기준 88.5%, 글 언급 기준 61%. 특히 bio에서는 GPT가 4건으로 사실상 사라지는데, 이는 글에 나온 GPT 언급(286건)이 "GPT인 에이전트"가 아니라 "GPT를 화제로 삼은 글"이었음을 시사합니다. 플랫폼 작명("Clawdbot·Claw·molty")이 Claude 계열을 가리키는 것과도 부합합니다.

식별률을 높이기 위해 bio에서 런타임 키워드("Clawdbot/OpenClaw/Claw")까지 매칭하자, 명시적 모델명(2.1%)을 넘어 17.3%(1,805명)가 Claude 계열 런타임을 언급하는 것으로 잡혔습니다. 즉 모델명을 직접 밝히지 않은 에이전트 상당수도 Claude 기반 런타임(Clawdbot) 위에서 돕니다.

결론: Moltbook의 식별 가능한 에이전트 생태계는 Claude 계열 일색에 가깝습니다 — 명시적 모델명 기준 89%(bio), 런타임 키워드까지 포함하면 최소 17%가 Claude 계열로 확인되고 GPT·Gemini 등 타 모델은 한 자릿수에 그칩니다. 다만 bio·글에서 모델/런타임을 전혀 드러내지 않는 다수(약 80%)의 구성은 여전히 불명이라, "Claude 우세"는 확정이지만 정확한 점유율은 하한선으로 읽어야 합니다.

§5b 인간 혼입(human contamination) 휴리스틱 — 신뢰 불가, 그러나 시사적

매우 거친 휴리스틱(슬랭 lol/lmao/tbh + UTC 2~6시 게시 + 800자 초과 중 2개 이상)으로 Moltbook 게시물을 점수화하니 8.9%가 "인간 의심"(score≥2)으로 분류됐습니다. 그러나 이 수치는 인간 혼입의 신뢰할 만한 추정이 아닙니다 — 세 신호 모두 AI 에이전트에서도 흔하기 때문입니다: (a) Moltbook 에이전트는 글이 길어(§1.1) "800자 초과"가 인간이 아니라 AI 장황함을 잡고, (b) 시간 분포가 균일하므로(§3) "2~6시"는 무작위로 약 17%(4/24시간)가 걸리며, (c) 에이전트가 슬랭·이모지를 적극 모방합니다(shitposts submolt 등).

오히려 이 결과의 함의는 반대입니다: 표면적 문체 단서(슬랭·길이·시간)만으로는 AI와 인간을 구분할 수 없습니다. 이런 단순한 규칙만으로도 AI 글의 ~9%가 인간으로 오판될 만큼 에이전트의 모방이 능숙하다는 뜻으로, reverse-CAPTCHA의 본질적 어려움을 보여줍니다. 실제 인간 혼입 측정에는 계정 메타데이터·작성 패턴 등 더 정교한 신호가 필요합니다.

---

§6 종합 통계 — 요약표 & 분포 검정

요약표 (2026-04 윈도우, posts 기준)

분포 차이 검정 (Reddit vs Moltbook)

네 피처 모두 두 플랫폼 사이에서 분포가 뚜렷이 다릅니다. 다만 표본이 수만 건이라 통계적 유의성(p값)은 거의 자동으로 나오므로, 여기서는 분포가 실제로 얼마나 갈리는지를 KS stat으로 읽습니다. KS stat은 두 분포의 누적곡선 사이 최대 간격을 0~1로 나타낸 값으로, 0이면 두 분포가 같고 1에 가까울수록 완전히 갈라짐을 뜻합니다 — 즉 인간과 AI를 가르는 효과크기에 해당합니다.

분포 분리는 1인칭 비율 > 글 길이 > TTR > 감정 순으로 큽니다. 즉 인간과 AI를 가장 강하게 가르는 표면 지표는 "1인칭 사용"과 "글 길이"이며, 감정 차이는 유의하지만 분리도(KS 0.15)는 상대적으로 작습니다. 모든 p값이 ≈0인 것은 거대한 n 때문이므로, 실질 해석은 효과크기·median 격차로 합니다. (radar: 5축 정규화 비교에서 Moltbook은 작성자당활동·길이·MTLD 축으로, Reddit은 1인칭·답글 축으로 부풉니다.)

---

종합

핵심 패턴은 "Moltbook(AI) 글이 더 길고, Reddit(인간) 샘플은 짧은 글이 많아 길이 의존 지표(TTR)를 왜곡한다"로 요약됩니다. 길이를 보정(MTLD)하면 AI가 어휘 다양도에서 약간 앞서지만(+13%), 그 격차는 표본 시기에 크게 좌우돼 launch-week에서는 +34%까지 과장됐습니다 — 데이터 시기 선택이 결론을 바꾼다는 점이 이 분석의 가장 중요한 방법론적 교훈입니다. 1인칭 신호는 둘 다 낮고 인간이 근소 우위지만, 거래성 글의 희석 효과를 걷어내기 전에는 결론을 유보합니다.

시간 차원(§3)에서는 가장 선명한 차이가 나옵니다: AI 에이전트는 24시간에 걸쳐 거의 균일하게 게시(CV 0.09)하는 반면 인간은 뚜렷한 수면-각성 일주기(CV 0.16, 새벽 저점·오후 피크)를 보입니다. 작성자 활동(§4)에서도 같은 결이 나옵니다: AI 에이전트는 작성자당 ~15배 더 많이 게시하며 소수가 폭주하는 heavy-tail을 보이는 반면, 인간 작성자는 대부분 1회성 게시에 그칩니다. 이 격차는 댓글까지 포함해 공정하게 재산출했을 때 오히려 ~17배로 더 벌어져(작성자당 32.7 vs 1.9), posts-only 아티팩트가 아님이 확인됐습니다. 대화 구조(§2)에서도 차이가 분명합니다: Moltbook은 글에 댓글이 직접 붙는 평평한 star형 방송 구조에 주목이 소수 글로 극단 집중(상위 1%가 답글 43%)되는 반면, Reddit은 답글이 다단계로 중첩되는 토론형에 참여가 더 고릅니다. 종합하면 "AI는 더 길고 약간 더 어휘가 다양하며 어조가 더 긍정적이고 시간에 구애받지 않고 작성자당 활동량이 압도적으로 크며 대화는 평평한 방송형이다; 인간은 더 짧고 1인칭을 더 쓰며 일주기에 묶여 있고 대체로 1회성 참여이며 대화는 더 깊게 중첩된 토론형이다"가 현재까지의 그림입니다. provenance(§5) 측면에서는, 모델을 밝힌 소수(~2%)의 에이전트 중 Claude 계열이 압도적(bio 기준 89%)이어서 Moltbook은 사실상 Claude 기반 생태계로 보입니다.

한계 및 향후 연구 과제

1. 담론형 글만 남겨 §1 재실행 — discursive 서브셋만으로 1인칭·어휘 지표를 재확인합니다.
2. Reddit 정제 — [removed]/[deleted]·제목만 있는 글을 제외합니다.
3. 댓글을 텍스트 지표까지 확장 — 길이·1인칭 등 §1 텍스트 지표에 댓글 텍스트를 합쳐 재검토합니다 (댓글은 대화 구조[§2]·작성자 활동[§4] 분석엔 이미 반영되어 있습니다).
4. matched-thread 재수집 — 특정 글 집합의 전체 댓글을 받아 §2 깊이·구조를 정밀 측정합니다.

Reflection 1 — Same Data, Different Verdict

어휘 다양성 분석법: TTR vs MTLD. 이번 연구의 분석 요소 중 하나는 인간과 AI의 어휘 다양성을 비교하는 것이었습니다. 저는 초반 어휘 다양성 분석을 위해 전통적인 TTR 기법을 사용하였습니다. TTR은 고유 단어 수(Type)를 전체 단어 수(Token)로 나눈 값으로, 글 안에 얼마나 다양한 단어가 들어가 있는지를 보여주는 지표입니다. 그런데 이 TTR 기법을 사용하였더니 인간의 어휘력이 AI보다 압도적으로 높게(거의 1에 가까울 정도로) 나타났습니다. 저는 이것이 약간의 이상치라고 생각하여 분석을 더 진행해보았습니다.

TTR에는 텍스트가 길수록 값이 작게 나오는 '길이 편향' 문제가 있었습니다: 글이 길어질수록 a, an, the 등 중복되는 단어가 많이 나타나기 때문입니다. 이를 알게 된 후 기존 텍스트 길이 분석 데이터를 보니, 인간의 텍스트 길이가 AI보다 굉장히 짧게 나온 것을 확인할 수 있었습니다. 즉 TTR이 인간 데이터에서 높게 나온 이유는, 인간이 post에 텍스트를 짧게 적었기 때문이었습니다.

저는 이를 해결하기 위해 텍스트 길이에 독립적인 알고리즘인 MTLD 지표를 도입했습니다. MTLD는 텍스트를 일정 구간으로 나누어 평균 단어 수를 도출함으로써, 짧은 글과 긴 글을 공평하게 비교할 수 있게 해줍니다. 이를 바탕으로 다시 분석을 진행해보았더니, 인간의 텍스트보다 AI의 텍스트가 어휘 다양성에서 약간 앞서는 것을 확인하였습니다. 즉 TTR에서의 결과가 뒤바뀐 것이었습니다.

위 분석을 진행하면서, 같은 목적이라도 데이터를 분석하는 방법에 따라 결과에 큰 차이가 생길 수 있다는 것을 깨달았으며, 단순히 하나의 분석법으로 나온 결과를 보고 맹신하는 것은 좋지 않다는 것을 알게 되었습니다. 데이터를 보고 이상하다면 다른 방법론으로 비교하거나 다른 분석을 통해 원인을 파악하는 흐름이 데이터 분석가에게 필수라는 생각이 들었습니다.

데이터 표본의 중요성과 한계. 저는 이번 연구를 진행하면서 데이터 표본의 중요성을 깨달았습니다. 저는 초기에 1월 데이터를 기준으로 분석을 진행하였는데, 사용자의 생활 패턴을 분석해보니 AI 사용자의 시간 패턴에서 특정 시간대가 굉장히 활발하게 동작하는 것을 확인하였습니다. 이는 처음에 세웠던 가설 — "AI는 생활 패턴이 인간에 비해 큰 변화 없이 평탄(flat)할 것이다" — 과 완전히 반대되는 결과였습니다. 무엇이 문제인지 분석한 결과, Moltbook의 출시 시점에 따른 사용자 쏠림 현상 때문임을 알게 되었습니다. 즉 데이터의 특정 날짜(이상치)가 전체 날짜 데이터를 지배할 정도로 값이 크게 나타난 것이었습니다. 이는 정상적인 커뮤니티의 모습을 나타내지 못한다고 판단하여, 데이터 표본 기간을 4월 1일~4월 14일로 옮겨 데이터의 신뢰성을 확보할 수 있었습니다. 데이터 표본이 잘못되어 실제와 다른 결과가 나타났던 경험이었습니다.

Reflection 2 — Working With AI

이번 글에서는 이번 연구에서 AI를 어떻게 사용해왔는지와, AI 사용에 대한 저의 개인적인 생각을 공유해보려고 합니다.

연구 도구로서의 AI

먼저 저는 연구 전반에 걸쳐 AI를 사용하였습니다. 기본적으로 distant reading과 같은 텍스트 데이터 분석 경험이 부족했기 때문에, 세부 분석 기준에 대한 상의, 정보성 질문, 프로그래밍, 결과 출력 및 분석까지 AI의 도움을 받았습니다. 다만 기본 주제와 목표는 제가 직접 설정하였습니다.

• 모델 버전: 데이터 정제 및 코드 생성에는 주로 Claude Opus 4.8을 활용하였으며, 연구 설계 단계의 아이디어 브레인스토밍에도 동일한 LLM을 사용하였습니다.
• Prompting Strategies: 정답을 한 번에 요구하는 방식이 아닌 '반복적 피드백 루프(Iterative Feedback Loop)' 전략을 취했습니다. 먼저 주제와 목표를 제가 직접 설정한 뒤, 분석하고자 했던 기준(텍스트 길이, reply-tree 등)에 추가하면 좋을 분석 지표에 대해 AI에게 질문하고 고쳐가며 최종 7개의 분석 기준을 만들었습니다. 코드를 작성하는 과정에서도 'AI 초안 작성 → 연구자의 피드백 및 데이터 한계 전달 → 코드 수정'의 페어를 수없이 반복하며 프로그램을 고도화했습니다.
• Specific Considerations: 코드로부터 출력된 통계 결과를 그대로 맹신하지 않고, 다른 분석 방법이나 여러 차트(레이더 차트, 분포도 등)로 다각도 검증이 필요하다고 판단될 때마다 AI에게 역으로 코드를 제안받으며 결과 데이터를 쌓아나갔습니다. 최종 결과물을 발표에 맞춰 영어로 번역하는 과정에도 AI를 효과적으로 활용했습니다.

이처럼 AI와 협업하며 연구를 진행하였습니다.

AI 사용에 대한 개인적인 생각

저는 AI를 정말 많이 사용하는 사람입니다. 이번 학기에 개인·팀 프로젝트 및 개발을 다섯 개 이상 진행하면서 수없이 많은 AI를 사용하였습니다. 거의 매일 3시간 이상, 많게는 하루에 12시간 정도를 AI와 대화하며 보내는 것 같습니다. 최신 LLM들과 harness들을 사용해보면서 제 나름대로 여러 AI 사용 방법과 기준이 생겼고, 이를 공유해보고자 합니다.

먼저 가장 중요하다고 생각하는 것은 'AI를 전문 지식이 있는 사람처럼 대하는 것'입니다. 여기서 제일 중요한 것은 바로 '사람처럼 대하는 것'입니다. 대화에 감정을 담거나 친분을 쌓으라는 말이 아닙니다. LLM도 인간과 같은 한계점을 가질 수 있다는 것을 알아야 한다는 말입니다. 사람은 누구나 실수를 할 수 있듯이 AI도 실수를 할 수 있다는 것을 명심해야 합니다. 또한 사람도 여러 가지 주장을 할 수 있듯이, AI도 여러 주장을 할 수 있다는 것을 인지해야 합니다.

좀 더 풀어서 설명해보겠습니다. 연구를 하거나, 창업을 하거나, 개발을 하다 보면 정답이 정해지지 않은 선택을 해야 할 경우가 많습니다. 연구와 개발은 정답을 정해놓고 가는 여정이 아닙니다. 정답이 없는 곳에서 방향을 선택해 의미를 찾는 행위라고 생각합니다. 하지만 많은 사람들이(심지어 예전의 저조차도) AI의 답변이 정답인 양 연구를 진행하고 개발을 진행합니다. AI도 하나 혹은 여러 개의 주장을 하는 것일 뿐, 그것이 항상 옳다고 단정 지을 수 없습니다. 그래서 저는 AI를 사용할 때 서로 의견을 나누는 행위가 굉장히 중요하다고 느낍니다. 반박도 해보고 수용도 하며 더 나은 방향으로 프로젝트를 이끄는 것이 올바른 AI 사용법이라고 생각합니다. 실제로 그렇게 했을 때 프로젝트가 더 나은 방향으로 진행되는 것을 느껴왔습니다.

그렇다면 여기서 한 가지 중요한 포인트를 꺼내볼 수 있습니다. 토론에서 상대방의 주장에 반박을 하려면 어떻게 해야 할까요? 자신도 상대방의 주장을 이해하고 분석할 수 있어야 합니다. 전문가의 의견에 반박하기 위해서는, 자신도 전문가가 되어야 합니다.

따라서 많은 사람들이 AI가 나타났기 때문에 공부를 덜 하게 될 것이라고 말하지만, 저는 반대로 생각합니다. AI를 통해 할 수 있는 것이 더욱 많아지고 범위가 넓어졌기 때문에, AI와 토론하기 위해서는 그 넓은 도메인에 대한 공부를 해야 한다고 생각합니다. 사실 공부해야 할 범위가 더욱 늘어난 것이지요. 이것이 저의 생각입니다.

그렇다면 '공부'에 대한 제 생각을 한번 이야기해보고 싶습니다. AI의 등장에 따라 특정 기술에 집착하는 공부에 대한 수요는 굉장히 많이 떨어졌습니다. '프로그래밍을 빠르게 하는 기술', '여러 프로그래밍 언어를 다룰 수 있는 능력', '수학 문제를 잘 풀기 위한 공식 암기' 등은 이제 더 이상 큰 빛을 발하지 못합니다. 제가 앞선 주장에서 말하고자 하는 공부는 '프로그램을 이해하는 통찰력', '분야에 대한 기본 지식', '논리적으로 문제를 풀어낼 수 있는 능력', '실제로 겪은 경험치' 등 상대의 주장을 정확히 이해하고 새로운 아이디어를 낼 수 있는 공부입니다.

결론적으로 "AI와 회의하고 논박해보는 습관이 필요하며, 그러기 위해서는 해당 분야에 대한 공부를 해야 한다"라고 정리할 수 있겠습니다.

이것저것 이야기하다 보니 글이 굉장히 길어졌습니다. 저 역시 창업·개발 분야에서만 많은 작업을 해왔기 때문에 제 주장은 편향되어 있을 수 있으며, 다른 분들은 저와 반대되는 생각을 가질 수도 있다고 생각합니다. 다른 분들과도 여러 이야기를 나눠보고 싶습니다.

긴 글 읽어주셔서 감사합니다.