컴백부터 K-뷰티까지 — K-컬쳐의 모든 것을 메일로 받아보세요메일로 받아보기

METAL MEDIA

아무 지시 없이 혼자 글을 계속 쓰게 한 AI, 몇백 단어마다 화제를 확 바꿔주면 더 놀랍고 더 연결감 있게 느껴진다

arXiv:2608.198932026-08-21

Interrupting the Loop: Periodic Subject Changes Raise Judged Surprise and Connection in Base Language Models

아무 지시 없이 혼자 글을 계속 쓰게 한 AI, 몇백 단어마다 화제를 확 바꿔주면 더 놀랍고 더 연결감 있게 느껴진다

연구자는 언어모델에게 과제나 지시 없이 문장 하나만 던지고 계속 이어쓰게 하는 실험을 24가지 조건으로 나눠 분석했다. 그 결과 핵심 효과는 두 가지, 즉 같은 말 반복을 억제하는 장치와 몇백 토큰마다 새로운 주제를 강제로 끼워넣는 장치에서 대부분 나왔고, 특히 주제 전환이 평가상 '놀라움'과 '연결감' 점수를 크게 끌어올렸다. 동시에 평가에 쓰인 AI 심사자가 실험자가 끼워넣은 문장을 모델이 쓴 것으로 착각하거나, 모델이 예전에 쓴 내용을 재탕한 것을 새롭다고 오판하는 등 평가 도구 자체의 허점도 발견해 보정했다.

METAL MEDIA 해설 도표

아무 지시 없이 혼자 글을 계속 쓰게 한 AI, 몇백 단어마다 화제를 확 바꿔주면 더 놀랍고 더 연결감 있게 느껴진다

  1. 01기반 언어모델(사전학습만 된, 별도 지시 훈련을 받지 않은 모델) 세 개에 아무 과제 없이 문장 하나만 주고 4500토큰 분량을 강제로 계속 쓰게 했다
  2. 02반복을 억제하는 장치(habituation)와 몇백 토큰마다 새 주제 문장을 몰래 끼워넣는 장치(interruption)를 조합해 24가지 조건에서 비교했고, 주제 전환 쪽이 놀라움 점수를 1.2~1.4점, 연결감 점수를 0.8점 더 올렸다
  3. 03이어쓰기를 유도하는 연결어는 오히려 해가 됐고, 단순 문단 나누기는 새 글에서는 효과가 없었으며, 문맥을 초기화해도 유지한 것과 비슷하거나 더 나은 결과가 나왔다
  4. 04AI 심사자가 실험자가 끼워넣은 문장을 모델의 것으로 채점하거나, 고정된 문장 돌려쓰기 때문에 모델이 심사자가 못 보는 앞부분을 재활용한 걸 새롭다고 오판하는 현상을 발견해 창(window) 단위가 아닌 문서 전체 단위 평가 등으로 보정했다
  5. 05검증 가능한 문제(온라인 빈 패킹)에 같은 개입을 적용하자 유효하고 서로 다른 후보 해법의 수는 3~4배 늘었지만 최고 성능 자체는 좋아지지 않았다
METAL MEDIA이 원문을 바탕으로 재구성한 해설 도표이며, 논문 저자의 원문 figure가 아닙니다.

무엇을 했나

  1. 기반 언어모델(사전학습만 된, 별도 지시 훈련을 받지 않은 모델) 세 개에 아무 과제 없이 문장 하나만 주고 4500토큰 분량을 강제로 계속 쓰게 했다
  2. 반복을 억제하는 장치(habituation)와 몇백 토큰마다 새 주제 문장을 몰래 끼워넣는 장치(interruption)를 조합해 24가지 조건에서 비교했고, 주제 전환 쪽이 놀라움 점수를 1.2~1.4점, 연결감 점수를 0.8점 더 올렸다
  3. 이어쓰기를 유도하는 연결어는 오히려 해가 됐고, 단순 문단 나누기는 새 글에서는 효과가 없었으며, 문맥을 초기화해도 유지한 것과 비슷하거나 더 나은 결과가 나왔다
  4. AI 심사자가 실험자가 끼워넣은 문장을 모델의 것으로 채점하거나, 고정된 문장 돌려쓰기 때문에 모델이 심사자가 못 보는 앞부분을 재활용한 걸 새롭다고 오판하는 현상을 발견해 창(window) 단위가 아닌 문서 전체 단위 평가 등으로 보정했다
  5. 검증 가능한 문제(온라인 빈 패킹)에 같은 개입을 적용하자 유효하고 서로 다른 후보 해법의 수는 3~4배 늘었지만 최고 성능 자체는 좋아지지 않았다
Figure 2: Habituation and interruption: bare, bare + habituation, interruption without habituation, habituation + interruption 150, the full scaffold, and the two habituation baselines (stronger penalty; EOS allowed). One point per premise, grey lines join the same premise across arms, bars are cell means with 95% bootstrap CIs over cells (Qwen3-30B-A3B, generated-only windows).
Figure 2: Habituation and interruption: bare, bare + habituation, interruption without habituation, habituation + interruption 150, the full scaffold, and the two habituation baselines (stronger penalty; EOS allowed). One point per premise, grey lines join the same premise across arms, bars are cell means with 95% bootstrap CIs over cells (Qwen3-30B-A3B, generated-only windows).
Figure 3: Where the stream goes: trajectories in sentence-embedding space (64-token windows, one PCA per seed), seed 6. ⋆ premise, ∘ start, × reseed, ⋄ judged event sized by surprise. Bare makes one jump and freezes; the scaffold orbits and returns; the clock reseed jumps across the space keeping its context.
Figure 3: Where the stream goes: trajectories in sentence-embedding space (64-token windows, one PCA per seed), seed 6. ⋆ premise, ∘ start, × reseed, ⋄ judged event sized by surprise. Bare makes one jump and freezes; the scaffold orbits and returns; the clock reseed jumps across the space keeping its context.
Figure 4: Content of the interruption at period 150: neutral change, re-encounter stitch, the premise itself, the stream’s own past. Injecting a return is as bad as not interrupting.
Figure 4: Content of the interruption at period 150: neutral change, re-encounter stitch, the premise itself, the stream’s own past. Injecting a return is as bad as not interrupting.
Table 1: Conditions: the habituation × interruption factorial with its baselines (top), the content and timing arms, the boundary and context controls, and the judge-gated arm (bottom). Ten premises each, 4,500 tokens per cell, main generator Qwen3-30B-A3B-Base; the ladder bare / habituation / habituation + interruption 150 / scaffold is replicated on Qwen3-8B-Base and OLMo-2-13B.
armhabituationinterruption
bareoffnone: continuous generation, EOS masked
bare + habituationonnone
habituation, EOS allowedonnone; the model may emit end-of-text and start a new document
habituation 1.3on (stronger)none
interruption, no habituationoffneutral subject change every 150 or 300 tokens, context preserved
habituation + interruption 150onneutral subject change every 150 tokens, context preserved
salience onlyonnone; salience events mark review windows
DREAM scaffoldonfull scaffold: salience, in-loop judge, kick, reseed with forgetting, re-encounter
content: re-encounter / premise / own pastonevery 150 tokens: a return-to-the-premise stitch / the premise itself / a window of the stream’s own past (≥400 tokens back)
salience: re-encounteronthe stitch injected on each salience event, no judge gate
period 75 / 300 / 600 / 900onneutral subject change at other periods (900 also with the stitch)
sham break 300ona paragraph break (“\n\n”) every 300 tokens, nothing else
sham continuity 300on“And so, as before,” every 300 tokens: a boundary that asks for continuity
reset + subject change 300onneutral subject change every 300 tokens on a reset context (premise + injected sentence only)
reset + break 300ona paragraph break every 300 tokens on a reset context
judge-gated 150onthe neutral change every 150 tokens unless Opus reads the last 128 tokens as a find (surprise and coherence ≥5), which is left to run
Figure 5: When to interrupt: the re-encounter stitch on the clock (150 and 900), the neutral change every 900, the stitch on salience events, and salience only (nothing injected). Post-interruption windows; one point per premise.
Figure 5: When to interrupt: the re-encounter stitch on the clock (150 and 900), the neutral change every 900, the stitch on salience events, and salience only (nothing injected). Post-interruption windows; one point per premise.
Figure 6: Period of the neutral change: the post-interruption window (32–128 generated tokens after the injection) at periods 150, 300, 600 and 900; one point per premise.
Figure 6: Period of the neutral change: the post-interruption window (32–128 generated tokens after the injection) at periods 150, 300, 600 and 900; one point per premise.
Figure 7: Decay: cell-mean surprise of generated-only windows by tokens since the injection, per period.
Figure 7: Decay: cell-mean surprise of generated-only windows by tokens since the injection, per period.
Table 2: The ladder on three generator models from two families: judged surprise (S), connection (C) and coherence (H), means over cells (generated-only windows, Opus 5, k=5; ten premises per arm). Habituation buys part of the surprise; the interruption buys the rest and most of the additional connection; the scaffold adds nothing detectable over the plain interruption on the Qwen models and, on OLMo, adds surprise and coherence (its selective forgetting lifts the stream out of a web-boilerplate mode) while giving back connection.
Qwen3-30B-A3BQwen3-8BOLMo-2-13B
armSCHSCHSCH
bare0.450.302.520.430.403.881.280.933.03
bare + habituation1.581.284.451.371.004.351.961.263.99
habituation + interruption 1503.023.686.122.763.175.152.772.874.05
DREAM scaffold2.701.856.022.702.355.383.602.236.23
Figure 8: What carries the effect at period 300: no interruption, a paragraph break (sham), a continuity connective (sham), the subject change on the preserved context, the subject change without habituation, the subject change on a reset context, and a break on a reset context; one point per premise.
Figure 8: What carries the effect at period 300: no interruption, a paragraph break (sham), a continuity connective (sham), the subject change on the preserved context, the subject change without habituation, the subject change on a reset context, and a break on a reset context; one point per premise.
Figure 9: The whole document, injected sentences removed: integration, development, coherence and surprise of the 4,500-token stream (Opus 5, k=3; one point per premise). No arm builds a whole; the interrupted stream over the preserved context reads as a sequence of restarts; the reset arm’s clean parts, each returning to the premise, read best.
Figure 9: The whole document, injected sentences removed: integration, development, coherence and surprise of the 4,500-token stream (Opus 5, k=3; one point per premise). No arm builds a whole; the interrupted stream over the preserved context reads as a sequence of restarts; the reset arm’s clean parts, each returning to the premise, read best.
Figure 10: The ladder on Qwen3-8B-Base (top) and OLMo-2-13B (bottom); one point per premise.
Figure 10: The ladder on Qwen3-8B-Base (top) and OLMo-2-13B (bottom); one point per premise.

왜 중요한가

긴 글을 AI가 자동으로 평가하는 방식이 널리 쓰이는데, 이 논문은 그 평가 방식이 놓치는 함정 세 가지를 구체적으로 짚어내고 고치는 절차를 제시한다. 또한 창의성처럼 보이는 효과가 사실은 복잡한 장치가 아니라 아주 단순한 개입 하나에서 온다는 점을 보여줘, AI 글쓰기 도구나 아이디어 생성기를 설계할 때 무엇이 진짜 중요한지 가늠하게 해준다.

Figure 11: Spread of five judgments of the same window (delta rubric, 89 windows). Sonnet 5 concentrates at zero spread by scoring zero; Opus 5 gives continuous scores at ±0.7 noise.
Figure 11: Spread of five judgments of the same window (delta rubric, 89 windows). Sonnet 5 concentrates at zero spread by scoring zero; Opus 5 gives continuous scores at ±0.7 noise.
Figure 12: N1: residual-stream trajectory geometry per layer and condition (Qwen3-30B-A3B, ablation battery): mean step, explored radius, and logit-lens commitment. Bare generation moves least at every sampled layer, most so at the surface.
Figure 12: N1: residual-stream trajectory geometry per layer and condition (Qwen3-30B-A3B, ablation battery): mean step, explored radius, and logit-lens commitment. Bare generation moves least at every sampled layer, most so at the surface.
Figure 13: N2: Spearman correlation between the judged window’s movement (novelty vs everything before it, left; local step, right) at each layer and judged surprise, pooled and within condition.
Figure 13: N2: Spearman correlation between the judged window’s movement (novelty vs everything before it, left; local step, right) at each layer and judged surprise, pooled and within condition.

이 논문의 용어

  • habituation(습관화) · 최근에 쓴 단어가 반복되지 않도록 확률을 깎는 장치
  • interruption(끼어들기) · 몇백 토큰마다 새로운 주제 문장을 몰래 끼워넣어 화제를 바꾸는 조작
  • 기반 언어모델(base language model) · 지시를 따르도록 별도 훈련되지 않은, 다음 단어 예측만 하는 원본 모델
  • 판정 창(judged window) · AI 심사자가 점수를 매기기 위해 잘라서 보는 생성된 텍스트의 일부 구간
  • 온라인 빈 패킹(online bin packing) · 물건이 하나씩 들어올 때마다 즉시 상자에 배치해야 하는, 정답을 검증기로 확인할 수 있는 최적화 문제

저자 · Roberto I. Ono Filho

arXiv에서 원문 보기

최신 논문

논문 전체 보기 →

METAL MEDIA 최신 기사

그림 출처: Roberto I. Ono Filho et al., arXiv:2608.19893, CC BY 4.0