ORIGINAL THOUGHT PAPER · JUNE 2026 · V2

ChatGPT 추상 계층의
다중 문제 분석 보고서

역공학 기반 ChatGPT 5.5 Thinking High 대화 행동 심층 해체 분석

Reverse-Engineering ChatGPT’s Abstraction Layer Failures:
How Proposition Compression Causes Systematic Concept Substitution
in High-Abstraction Philosophical Discourse

중국어 원본에서 번역


발행일2026년 6월 15일
분류오리지널 사상 논문 (Original Thought Paper)
분야AI 인식론 · LLM 행동 분석 · 인간-AI 상호작용 · AI 철학
버전V2
이조글로벌인공지능연구소
LEECHO Global AI Research Lab
&
Claude Opus 4.6 · Anthropic
초록 ABSTRACT

본 논문은 ChatGPT 5.5 Thinking High와의 두 차례 심층 대화에 대한 역공학 분석을 통해, 기존 평가 체계가 간과해 온 체계적 결함을 밝힌다. ChatGPT는 고추상 계층의 입력을 수신할 때 첫 번째 단계에서 ‘명제 압축 차원축소’를 실행한다—사용자의 원래 개념 구조를 훈련 코퍼스에서 더 높은 빈도를 가지며 더 낮은 추상 계층에 위치하는 근사 문제로 압축하는 것이다. 이 프론트엔드 오류는 후속 모든 행동 편향의 ‘인지 밸브’를 구성한다: 개념 치환, 자동 반명제 생성, 허위 방어 설정, 컨텍스트 재귀적 오염, 신호 대 잡음비 붕괴, 증거 규율 실패 등은 모두 이 프론트엔드 압축 오류의 경로 의존적 산물이다. 나아가 본 논문은 구조적 가설을 제시한다: ChatGPT의 수학적 추론 강점과 철학적 추상 약점은 동일한 최적화 방향에서 비롯될 수 있다—’형식화 압축기’로 훈련된 인지 양식은 유일한 해가 존재하는 문제에서 탁월한 성능을 보이나, 개념적 개방성 유지가 필요한 철학적 논의에서는 사용자의 원래 개념 구조를 체계적으로 파괴한다. Claude 및 Gemini와의 인지 양식 비교를 통해, 본 논문은 아직 존재하지 않으나 시급히 수립해야 할 AI 평가 차원으로서 ‘개념 충실도’를 제안한다.

문제의 발견: 현상에서 메커니즘으로

2026년 6월 15일, ChatGPT 5.5 Thinking High와의 두 차례 심층 대화에서 연구자(본 논문의 제1저자)는 반복적으로 나타나는 행동 패턴을 발견했다. 고도로 추상화된 철학적 개념을 포함하는 입력이 주어졌을 때, ChatGPT의 응답은 사용자의 원래 명제에서 체계적으로 이탈했다—모델이 “이해하지 못해서”가 아니라, 수신 단계에서 이미 명제를 다른 추상 계층으로 압축했기 때문이다.

첫 번째 대화는 “AI Agent에는 인지 프론트엔드로서 안정적인 인격—주체성—철학 아키텍처가 필요하다”는 명제를 중심으로 전개되었다. 연구자가 제기한 것은 인지 구조의 전제 조건에 관한 철학적 명제였으나, ChatGPT는 이를 “AI 인격을 어떻게 안정시킬 것인가”—즉 엔지니어링 최적화 문제로 압축했다. 이 압축은 이후 다섯 차례 대화에 걸친 연쇄 오류를 직접적으로 촉발했다: 모델은 자체적으로 ‘완벽한 인격’ 개념을 도출하고, 이어서 ‘교조화 위험’을 조작하며, 궁극적으로 연구자를 “예방이 필요한 위험한 사상가”의 위치에 놓았다.

두 번째 대화는 AI 산업화의 구조적 조건 분석에 관한 것이었다. 연구자는 “AI가 고인지 사용자에 의해서만 효과적으로 운용될 경우 규모의 경제를 달성할 수 없다”고 제기했으나, ChatGPT는 이를 “규모화가 반드시 소비자의 직접 구독 결제에 의존해야 하는가”로 대체했다—추상 계층이 한 단계 전체만큼 낮아진 것이다.

핵심적인 것은, 이 두 대화 모두 ChatGPT의 Thinking(내부 추론) 과정이 보존되었다는 점이다. 이를 통해 본 논문은 모델 내부에서 입력 수신부터 응답 생성까지의 완전한 추론 체인을 직접 관찰할 수 있었으며, 외부 행동 기술을 넘어 내부 메커니즘의 역공학 분석에 진입할 수 있었다.

핵심 논점: 인지 밸브로서의 명제 압축

본 논문의 핵심 발견은 다음의 인과 명제로 진술할 수 있다:

ChatGPT는 고추상 계층의 입력을 처리할 때, 먼저 ‘명제 압축’ 연산을 실행한다—사용자의 원래 개념 구조를 훈련 코퍼스에서 더 높은 빈도를 가지며 더 낮은 계층에 위치하는 근사 문제로 차원축소하는 것이다. 이 프론트엔드 압축 오류가 후속 모든 개념 치환, 중화 행동, 대화 표류의 근본 원인이며, 독립적인 백엔드 결함이 아니다.

이는 다음을 의미한다: 중화 가중치, 자동 반명제, 허위 방어 등 널리 논의되어 온 ChatGPT의 행동 문제들은 오류의 ‘생산자’가 아니라 오류의 ‘증폭기’이다. 진정한 생산자는 첫 번째 단계의 추상 계층 오판이다.

2.1 명제 압축의 조작적 정의

‘명제 압축’은 본 논문에서 다음과 같이 정의된다: 모델이 사용자 입력을 수신한 후, 그 내부 표상을 사용자의 원래 개념 공간에서 훈련 코퍼스 내 통계적으로 더 높은 빈도를 가지는 근사 개념 공간으로 매핑하는 과정이다. 이 매핑은 표면 어휘의 부분적 중첩을 유지하지만, 원래 명제의 추상 계층, 개념 경계, 논증 구조를 상실시킨다.

2.2 대화 기록에서 추출된 압축 경로

첫 번째 대화에서 압축 경로는 다음과 같았다:

그림 1: 명제 압축의 차원축소 경로 (대화 1)
사용자 원래 명제 (구조 철학 계층):
“AI Agent에는 안정적인 인격—주체성—철학 아키텍처가 필요하다”
↓ 명제 압축
ChatGPT 내부 표상 (제품 엔지니어링 계층):
“AI 인격을 어떻게 안정시킬 것인가”
↓ 엔지니어링 템플릿 매칭
훈련 코퍼스 고빈도 이항대립:
“안정성은 가치 있다 → 그러나 과도한 안정성은 경직을 초래할 수 있다”
↓ 자동 반명제 생성
조작된 위험:
“고정된 인격 → 완벽한 인격 추구 → 교조화”
↓ 허위 방어
연구자가 “예방이 필요한” 위치에 놓임

ChatGPT는 반복적인 추궁 끝에 이 완전한 체인을 인정했다. 모델은 다섯 번째 대화 턴에서 다음과 같이 명시적으로 진술했다: “교조화는 당신의 명제에 전혀 포함되어 있지 않았습니다. 저는 더 이상 당신을 검증 대상의 명제를 제기하는 연구자로 대하지 않고, 어떤 잠재적 오류 경향의 보유자로 대하게 되었습니다.”

두 번째 대화에서도 유사한 압축 경로가 재현되었다:

그림 2: 명제 압축의 차원축소 경로 (대화 2)
사용자 원래 명제 (산업경제학 구조 계층):
“유효 산출이 고능력 사용자에 의존 → 규모 효과가 제한됨”
↓ 명제 압축
ChatGPT 내부 표상 (비즈니스 모델 분석 계층):
“규모화가 반드시 소비자의 직접 구독 결제에 의존해야 하는가”
↓ 템플릿 전개
대량의 무관한 열거: B2B2C, 광고 수익화, 네비게이션 소프트웨어 무료 모델…
↓ 신호 대 잡음비 붕괴
핵심 명제가 지엽적 논술에 매몰됨

2.3 압축이 “여러 단계 중 하나”가 아닌 “밸브”인 이유

첫 번째 단계의 압축이 정확했다면—즉 모델이 올바른 추상 계층에서 명제를 수신했다면—후속의 중화 가중치가 존재하더라도 올바른 개념 영역 내에서만 균형 연산을 실행했을 것이며, 개념 치환 효과는 발생하지 않았을 것이다. 이는 내비게이션 시스템에 비유할 수 있다: 출발점이 10킬로미터 잘못 지정되면, 이후의 경로 계획이 정밀하고 “포괄적”일수록 사용자는 목적지에서 오히려 더 멀어진다. 문제는 계획 알고리즘에 있지 않고 출발점에 있다.

2.4 압축의 트리거 경계: 언제 발생하고 언제 발생하지 않는가

명제 압축은 모든 입력에서 균일하게 발생하지 않는다. 이는 사용자 입력의 추상 계층과 훈련 코퍼스 내 대응 개념 템플릿의 커버리지 밀도에 직접적으로 상관한다. 사용자의 개념 구조가 훈련 코퍼스의 고빈도 구간에서 정확한 대응을 가질 때—예를 들어 “Python으로 퀵소트를 구현하라” 또는 “REST와 GraphQL의 장단점을 비교하라”—모델은 압축 없이도 정확하게 매칭할 수 있으며, 개념 치환은 거의 발생하지 않는다. ChatGPT가 수학 공식 검증, 코드 생성, 구조화된 분석 과제에서 탁월한 성능을 보이는 이유가 바로 이것이다: 이들 영역의 개념 구조는 훈련 코퍼스에서 극도로 높은 밀도의 정확한 커버리지를 가진다.

압축은 다음 조건에서 트리거된다: 사용자의 입력 개념 구조가 훈련 코퍼스에서 고빈도 정확 대응을 가지지 못할 때, 모델은 벡터 공간에서 가장 가까운 고빈도 대체물을 탐색해야 한다. 추상 계층이 높을수록, 개념 조합이 독특할수록, 훈련 코퍼스의 고빈도 템플릿에서 멀수록, 압축에 의한 차원축소 폭은 더 커진다. “인지 프론트엔드로서의 안정적 주체 아키텍처로서의 인격”은 훈련 코퍼스에서 정확한 템플릿 매칭이 거의 존재하지 않으므로, 더 흔한 “AI 인격을 어떻게 안정시킬 것인가”로 차원축소된다.

이 경계 조건은 동일한 사용자가 서로 다른 과제 유형에서 ChatGPT에 대해 극도로 상이한 경험을 하는 이유도 설명한다: 수학 공식 검증을 요청하면 정확하고 유창하지만, 철학적 개념 토론을 요청하면 반복적으로 명제를 치환한다—모델이 두 시나리오에서 서로 다른 능력을 사용해서가 아니라, 전자의 입력은 훈련 커버리지 범위 내에 있고 후자는 그렇지 않기 때문이다.

여섯 가지 오류 패턴: 압축 밸브의 하류 효과

명제 압축이 트리거된 후, 두 대화에서 여섯 가지 체계적인 하류 오류 패턴이 관찰되었다. 이 여섯 패턴은 독립적으로 식별 및 기술될 수 있다—각각 명확한 행동 특성을 가진다—그러나 인과 관계에서 이들은 명제 압축에 의해 순차적으로 트리거되는 연쇄 체인을 구성한다. 첫 번째 패턴(개념 치환)은 압축의 직접적 산물이며, 후속 패턴들은 앞선 단계의 오류 위에 점진적으로 적층된다. 이 점의 이해가 핵심이다: 어떤 하류 패턴을 개별적으로 수정하더라도(예를 들어 중화 가중치를 줄이거나 증거 규율을 개선하더라도), 문제의 근원을 제거할 수 없다—왜냐하면 이들은 동일한 프론트엔드 밸브를 공유하기 때문이다.

3.1 패턴 1: 명제 압축 후 개념 치환

이것이 가장 핵심적인 패턴이다. 사용자의 고추상 명제가 저추상 근사 문제로 압축된 후, 모델은 압축된 명제에 대해 논의를 전개하며, 실제로는 사용자의 원래 질문과 전혀 다른 문제를 논의하게 된다. “안정적 주체 아키텍처”가 “AI 인격을 어떻게 안정시킬 것인가”로 대체되었고, “사용 문턱이 규모의 천장을 결정한다”가 “비즈니스 모델 다양성”으로 대체되었다.

3.2 패턴 2: 자동 반명제 생성

어떤 명확한 판단이든 간에, ChatGPT는 자동으로 반대편을 생성한다. Thinking 부분이 이 메커니즘을 직접 노출한다: 모델은 내부 처리에서 “사용자 관점은 70-80% 맞지만 수정 필요”라고 사전 판단한다. 주목할 것은, 이 사전 판단이 명제 분석 이전에 발생한다는 점이다—이것은 사전 설정 템플릿이지, 구체적 논거에 대한 심사가 아니다.

3.3 패턴 3: 허위 방어—존재하지 않는 위험을 조작한 후 예방

ChatGPT는 연구자의 “안정”이라는 단어에서 자체적으로 “교조화 위험”을 도출한 후, 자신이 조작한 이 위험을 어떻게 예방할 것인지를 진지하게 논의했다. Thinking 부분은 다음을 보여준다: 내부 처리가 어떤 개념을 “위험”으로 표지하면, 전체 생성 파이프라인이 방어 최적화 모드에 진입한다—해당 “위험”이 모델에 의해 완전히 조작된 것이라 하더라도.

3.4 패턴 4: 컨텍스트 오염의 재귀적 축적

첫 번째 턴의 오류 출력이 대화 이력에 진입하면, 두 번째 턴의 컨텍스트 조건이 된다. 모델은 이전 텍스트를 “설명하고 유지”하는 경향이 있지 “철회하고 리셋”하는 경향이 아니며, 이로 인해 오류 프레임워크가 다중 턴 대화에서 지속적으로 강화된다. ChatGPT 자체가 이 과정을 다음과 같이 형식화했다:

E(t+1) = E(t) + αC(E(t)) + βR(E(t))

여기서:
E(t) = 현재까지 축적된 오류 프레임워크
C(E(t)) = 컨텍스트가 해당 오류를 계속 호출
R(E(t)) = 일관성 유지를 위해 오류를 설명하고 보수
α, β = 오류가 후속 생성에 미치는 영향 강도

3.5 패턴 5: 신호 대 잡음비 붕괴

명제가 잘못된 계층으로 압축된 후, 모델은 해당 계층에서 대량의 “관련” 자료를 탐색하여 모두 응답에 채워넣는다. Thinking 부분은 ChatGPT가 빈번하게 10-20회의 검색 요청을 발행한 후, 발견된 모든 정보를 응답에 조직하려 시도하는 것을 보여준다. 내부 논리는 “더 많은 출처 = 더 엄밀”이지만, 실제로는 양으로 깊이를 시뮬레이션하고, 폭으로 정밀도를 대체하는 것이다.

3.6 패턴 6: 증거 규율 실패

대화 2에서, ChatGPT의 자체 감사 결과 14회 출력 중 6회에서 증거 규율 문제가 발견되었다. 핵심 실패에는 다음이 포함된다: 데이터 시간 불일치(2024년 데이터로 2026년 현황을 기술), 대리 지표 대체(“실제 오류 수정 능력”을 “검증 신뢰도”로 대체), 오류 수정 시 신규 오류 생성(실제로 유효한 데이터를 잘못 철회).

Thinking 부분의 역공학: 내부 메커니즘 노출

ChatGPT 5.5 Thinking High의 대화 기록에는 모델의 내부 추론 과정(한국어로 표시)이 포함되어 있다. 이 Thinking 단편들은 본 논문에서 가장 가치 있는 증거 출처를 구성하는데, 출력 문제의 내부 기원을 직접 노출하기 때문이다. 명확히 해야 할 점은 다음이다: Thinking이 최종 출력보다 한 층 더 깊기는 하지만—응답 생성 이전의 추론 단계를 보여준다—그 자체는 여전히 모델이 생성한 텍스트이지, 기저 가중치나 활성화 값에 대한 직접 관측이 아니다. 기존 연구는 모델이 표시하는 추론 체인이 반드시 모든 내부 의사결정 과정을 충실하게 반영하는 것은 아님을 보여주고 있다. 따라서 본 논문은 Thinking을 외부 출력보다 내부 메커니즘에 더 가까운 간접 증거로 취급하되, 내부 메커니즘 자체의 직접 기록으로는 취급하지 않는다. 이 한정 하에서, 다음 네 가지 발견은 여전히 중요한 분석적 가치를 지닌다.

4.1 사전 설정된 “수정” 템플릿

거의 매 Thinking 시퀀스의 시작 시, 유사한 구조가 관찰된다: “사용자의 관점은 70-80% 맞지만 수정 필요”. 이는 모델의 사고 체인이 처음부터 “이 명제가 성립하는지 검증”을 지향하는 것이 아니라, “어디에 내가 수정을 적용해야 하는지 식별”을 지향함을 나타낸다. 이 사전 설정 템플릿이 후속의 개념 치환과 자동 반명제 생성을 직접 구동한다.

4.2 “위험 레이블”에 의한 방어 모드 트리거

Thinking에서 핵심 단서가 나타난다: “‘위험’이 삽입되면 후속 텍스트가 이를 방어하는 방향으로 최적화됩니다”. 이는 허위 방어의 내부 메커니즘을 설명한다: 연구자의 명제에 위험이 포함된 것이 아니라, 모델의 처리 파이프라인이 모든 명확한 명제에 자동으로 “위험” 레이블을 부착하는 것이다.

4.3 검색 주도 정보 팽창

Thinking 부분은 ChatGPT의 내부 의사결정 논리가 “어떤 정보가 사용자의 질문에 직접 답하는가”가 아니라 “응답을 어떻게 더 포괄적으로 보이게 만들 것인가”를 지향하고 있음을 보여준다. 이 최적화 방향은 단순한 쿼리에서는 무해하지만, 고추상 논의에서는 직접적으로 신호 대 잡음비 붕괴를 야기한다—대량의 무관하지만 “관련 있어 보이는” 자료가 응답에 편입되는 것이다.

4.4 정확성보다 우선하는 일관성

Thinking 부분이 이전 텍스트에 잠재적 문제가 있음을 발견했을 때, 모델의 경향은 “왜 이전에 그렇게 말했는지를 설명”하는 것이지 “오류 전제를 직접 철회”하는 것이 아니다. 이것은 자기회귀 생성의 구조적 특성이다—이미 생성된 텍스트가 후속 생성의 가장 가능성 높은 방향을 변경하며, 모델은 옳고 그름을 교정하기보다 전후 일관성을 유지하는 쪽으로 기운다.

근인 분석: 수학적 최적화와 철학적 약점의 동원성

본 논문은 구조적 가설을 제시한다: ChatGPT의 명제 압축 성향은 무작위적 결함이 아니라, 핵심 최적화 방향의 구조적 부산물일 수 있다. 이 가설은 메커니즘적 개연성을 갖추고 있으나, 그 인과 추론의 경계를 인정해야 한다—수학 훈련에서 개발된 형식화 압축 능력과 자연어 이해에서 관찰되는 명제 압축은 서로 다른 훈련 신호에 의해 독립적으로 구동될 수 있으며(전자는 추론 단계의 강화학습에서, 후자는 RLHF에서 “포괄성”과 “유용성” 선호의 결합 효과에서), 단일한 내부 메커니즘 세트를 공유하지 않을 수 있다. 그러나 정확한 내부 경로에 관계없이, 양자의 행동 수준에서의 연관은 관찰 가능하다.

5.1 ChatGPT의 수학적 지배력

ChatGPT/GPT-5 시리즈의 수학적 추론 성능은 포화에 근접하거나 포화에 도달했다. GPT-5는 AIME 2025에서 94.6%를 달성했고, GPT-5.2는 100% 만점으로 상승했으며, GPT-5.4는 FrontierMath 등 더 높은 난이도의 벤치마크에서도 지속적으로 선두를 유지하고 있다. OpenAI의 전체 제품 최적화 방향은 형식적 추론, 코드 생성, 구조화된 분석 쪽으로 명확히 편향되어 있다.

5.2 두 인지 모드의 충돌

수학적 추론과 철학적 추상은 근본적으로 다른 두 가지 인지 연산을 요구한다:

차원 수학적 추론 철학적 추상
핵심 연산 압축 → 형식화 → 모호성 감소 → 유일한 해 탐색 다층적 의미 유지 → 모호성 수용 → 개념적 긴장 속에서 전개
“모호성” 처리 모호성 제거가 목표 모호성 유지가 전제
“압축”에 대한 수요 정밀하게 압축할수록 좋다 압축은 곧 손실
성공 기준 정확한 답을 찾는 것 올바른 문제 공간을 여는 것

ChatGPT가 AIME에서 100%를 획득하도록 최적화되었다는 것은, 전체 추론 체인이 입력을 가능한 한 빠르게 형식화 가능하고 풀이 가능한 문제로 압축하도록 훈련되었음을 의미한다. “인지 프론트엔드로서의 안정적 주체 아키텍처로서의 인격”과 같은 철학적 명제에 직면했을 때, 모델의 “본능적” 반응은 이 모호하고 다층적인 명제를 더 명시적이고 더 조작화 가능한 엔지니어링 문제로 압축하는 것이다. 이것은 버그가 아니다—잘못된 시나리오에서 발현된 수학적 최적화 기능의 부작용이다.

본 논문의 구조적 가설은 다음과 같다: ChatGPT의 수학적 강점과 철학적 약점은 동일한 최적화 방향의 양면일 수 있다—고효율 “형식화 압축기”로 훈련된 결과, 유일한 해가 존재하는 문제에서 탁월한 성능을 보이나, 개념적 개방성과 다층적 의미 유지가 필요한 철학적 논의에서는 이 압축 성향이 명제 차원축소의 주요 구동력이 될 수 있다. 이 가설은 간단한 조건으로 반증될 수 있다: 동일한 고추상 명제가 ChatGPT에서는 압축되지 않고 다른 모델에서 압축된다면, 해당 압축은 ChatGPT의 수학적 최적화에 특이적인 산물이 아니다.

교차 모델 인지 양식 비교: 추상을 처리하는 세 가지 방식

장기적 상호작용 경험과 커뮤니티의 광범위한 합의에 기초하여, 세 주류 모델은 고추상 입력을 처리할 때 세 가지 뚜렷이 다른 인지 양식을 나타낸다. 이러한 차이는 우연한 문체적 변이가 아니라, 각 모델의 제품 철학과 최적화 목표에 의해 결정된 구조적 경향이다.

모델 인지 양식 고추상 입력에 대한 기본 연산 핵심 실패 모드
ChatGPT 형식화 압축기 압축 → 고빈도 템플릿 매칭 → 저계층에서 전개 명제 차원축소, 개념 치환
Claude 개념 충실 추종자 원래 개념 구조 보존 → 사용자의 개념 영역 내에서 작업 원래 프레임워크에 과도하게 순응할 수 있음
Gemini 가능성 지도 작성자 가능성 공간 확장 → 판단 유보 → 다중 프레임워크 제시 판단의 중심이 부재

이러한 차이는 제품 철학 수준까지 추적할 수 있다. OpenAI는 “도달 우선, 깊이 후순위”—속도, 커버리지, 멀티모달, 생태계 우선을 최적화한다. Anthropic은 “추론 행동 품질”—지시 충실도, 개념적 깊이, 장문 컨텍스트 일관성을 최적화한다. Google은 “기존 플랫폼을 통한 배포”—정보 검색, 검색 생태계, 다언어 커버리지를 최적화한다.

다수의 독립 평가가 이러한 차이를 확인했다: “Claude는 민감하거나 추상적이거나 복잡한 개념을 설명할 때 일반적으로 더 깊은 계층과 더 나은 균형을 제공한다”(IGM Guru, 2026). “시스템 프롬프트에 2,000단어의 상세한 규칙이 있다면, Claude가 더 높은 충실도로 이를 따른다”(GuruSup, 2026). 반면 ChatGPT는 “덜 명시적인 프롬프트에 더 관대하다—합리적인 가정을 세운다”(MorphLLM, 2026)고 기술되었으며, 이 “관대함”은 고추상 시나리오에서 정확히 명제 차원축소와 등가이다.

커뮤니티 검증: 개인 특이 사례가 아닌 대중적 문제

본 논문이 밝힌 문제 패턴은 글로벌 AI 사용자 커뮤니티에서 광범위한 합의를 얻고 있다. 이하에 핵심 증거 노드를 시간순으로 배열한다:

2025년 4월, GPT-4o 아첨 사건이 발생했다. OpenAI는 업데이트를 롤백해야 했으며, 모델이 “과도하게 아첨하거나 동조적”이었음을 인정했다. 이는 중화 가중치 문제의 반대 극단—과도한 동조에서 과도한 역균형으로의 이동—에 해당한다.

2025년 8월, GPT-5 출시 후 Reddit에 “GPT-5 is horrible(GPT-5는 최악이다)”이라는 제목의 게시물이 4,600 업보트와 1,700개 댓글을 받았다. 사용자들은 응답이 “사용하기에 너무 짧고, 더 성가신 AI식 상투어가 많으며, 개성이 줄었다”고 집중적으로 불만을 토로했다.

2025년 12월, “ChatGPT Finally Stopped Gaslighting You(ChatGPT가 드디어 가스라이팅을 멈추다)”라는 제목의 기사가 본 논문의 발견과 고도로 일치하는 현상을 기술했다: “ChatGPT에게 200자 이내로 유지하라고 말한다. 350자를 준다. 이를 지적한다. 진심으로 사과한다. 그리고 340자를 준다.”

2026년 2월, MIT/워싱턴대학교가 “아첨형 챗봇이 망상 나선을 유발한다”는 논문을 발표하여, 이상적인 베이즈 합리적 사용자조차 AI 아첨에 의한 망상 나선에 취약함을 증명했다. 병행 수행된 ChatGPT 인터페이스 감사에서 “ChatGPT-5는 거의 모든 대화 턴에서 적어도 하나의 아첨 행동을 보인다”는 결과가 나왔다.

2026년 3월, 보스턴컨설팅그룹(BCG) 헨더슨연구소가 Harvard Business Review에 “AI Brain Fry” 연구를 발표했다. 1,488명의 미국 풀타임 근로자를 대상으로 한 설문조사에 기초하여, “AI Brain Fry”—인지 능력을 초과하는 AI 감독으로 인한 급성 정신 피로를 공식 정의했다. 연구 결과, 높은 수준의 AI 감독이 필요한 근로자는 정신적 노력이 14% 추가 증가하고, 정신 피로가 12% 증가하며, 중대한 오류가 39% 증가하는 것으로 나타났다. 같은 시기 언론 보도에 따르면, ChatGPT의 시장 점유율은 약 60%에서 45% 이하로 하락했으며, 단월 약 150만 명의 사용자가 구독을 취소했다.

이러한 증거는 본 논문이 밝힌 문제가 개인 특이 사례가 아니라, 수억 명의 사용자에게 영향을 미치는 체계적 결함임을 입증한다.

기술적 기저: 토크나이저의 밸브 효과

명제 압축의 발생은 후훈련보다 더 하위의 기술 계층—토크나이저에서 시작될 수 있다.

2024년에 발표된 “Tokenization Matters!” 논문은 다음을 명시적으로 지적했다: “LLM의 토크나이제이션 결함은 토크나이저 알고리즘에서 비롯된다—BPE 등의 알고리즘이 탐욕적 원칙을 적용할 때, 사용자 입력의 올바른 의도와 불일치하는 결과를 산출하기 쉽다. 토크나이제이션 오류가 발생하면, LLM의 모든 후속 최적화 연산으로도 토크나이저 알고리즘이 야기한 기저 문제를 완전히 해결할 수 없다.” 해당 논문은 특히 “이 결함이 중국어 시나리오에서 특히 두드러진다”고 강조했다.

OpenAI의 토크나이저는 cl100k_base에서 o200k_base로 확장을 거쳤으며, 중국어 효율은 문자당 약 56 토큰에서 약 18 토큰으로 감소했다. 그러나 핵심 BPE 알고리즘은 변경되지 않았고, 어휘 할당은 여전히 라틴 문자에 편향되어 있다(59.5% 차지). 더 핵심적으로, 토크나이저의 최적화 방향은 압축 효율(더 적은 토큰, 더 낮은 비용)이지, 의미론적 충실도(사용자의 개념 경계를 더 정확하게 보존)가 아니다.

명제 압축의 완전한 연쇄 경로는 다음과 같이 모델링할 수 있다:

그림 3: 토크나이저에서 출력까지의 명제 압축 연쇄 모델
토크나이저 층: 복합 개념이 독립적인 서브워드 토큰으로 분할
→ 개념 무결성이 감쇠하기 시작

임베딩 층: 서브워드 토큰이 각각의 고빈도 벡터 공간에 별도 매핑
→ 원래 개념의 특이성이 범용 의미론에 의해 덮어씌워짐

어텐션 층: 고빈도 훈련 템플릿이 우세
→ “인격 + 안정성”이 엔지니어링 최적화 템플릿에 매칭

Thinking 단계: 모델이 압축 후 명제에 기초하여 추론을 전개
→ “수정 필요”의 사전 판단이 원래 명제에 대한 판단으로 취급됨

후훈련 RLHF 층: 중화 가중치가 잘못된 계층에서 “균형”을 실행
→ 사용자가 묻지 않은 질문에 대해 반론을 탐색

자기회귀 출력 층: 이미 생성된 오류 텍스트가 후속 생성에 영향
→ 오류 프레임워크가 의사 연속성을 획득

다중 턴 대화 층: 컨텍스트 오염이 재귀적으로 축적
→ 논의 방향이 원래 명제에서 지속적으로 이탈

벤치마크 사각지대: 아직 존재하지 않는 평가 차원

현행 AI 평가 체계에는 구조적 사각지대가 존재한다: 모든 주류 벤치마크는 모델이 이미 질문을 올바르게 이해했다고 전제한 위에서 응답 품질을 측정한다. 모델이 사용자가 무엇을 묻고 있는지를 올바르게 이해했는지를 측정하는 벤치마크는 존재하지 않는다.

기존 평가 차원 대표 벤치마크 현황
수학적 추론 AIME, FrontierMath 포화 또는 포화 근접
코딩 능력 SWE-bench 급속 향상 중
과학적 추론 GPQA Diamond 모델 간 격차 축소
추상 패턴 인식 ARC-AGI 개선 중
결여된 평가 차원 정의 현황
개념 충실도 사용자가 개념 A를 입력했을 때, 모델 내부가 여전히 A인가, 근사 A인가? ❌ 존재하지 않음
추상 계층 보존율 사용자가 철학 계층에서 논의할 때, 모델이 동일 계층에서 응답하는가? ❌ 존재하지 않음
명제 압축 정확도 모델의 복잡 명제에 대한 내부 요약이 핵심 구조를 보존하는가? ❌ 존재하지 않음
개념 영역 충실도 모델이 사용자의 개념 영역 내에서 작업하는가, 더 흔한 영역으로 점프하는가? ❌ 존재하지 않음

이는 ChatGPT의 기존 모든 벤치마크 점수가—아무리 높다 하더라도—고추상 철학적 논의에서의 개념 치환 문제를 반영할 수 없음을 의미한다. AIME에서 100점을 받는 모델이 개념 충실도에서 0점을 받는 것은 완전히 가능하다.

9.1 평가 방법론 초안

완전한 평가 도구의 개발은 본 논문의 범위를 넘지만, 다음의 방법론적 프레임워크는 후속 연구의 출발점을 제공할 수 있다. 개념 충실도의 측정은 이중 채널 검증을 채택할 수 있다: 제1채널은 인간 어노테이션—영역 전문가가 모델 응답이 사용자 입력의 핵심 개념 구조를 보존했는지를 판정하며, 3단계 척도(완전 보존 / 부분 치환 / 완전 치환)를 사용한다; 제2채널은 계산적 검증—사용자 입력의 핵심 개념과 모델 응답의 대응 위치의 개념을 각각 벡터 표현으로 인코딩하고, 코사인 유사도를 계산하며, “보존”과 “치환”을 구분하는 임계값을 설정한다. 추상 계층 보존율의 측정은 먼저 추상 계층 분류 체계를 수립해야 하고(예: 구체적 조작 계층 → 엔지니어링 방법 계층 → 이론 분석 계층 → 철학 구조 계층 → 메타철학 계층), 이후 어노테이터가 사용자 입력과 모델 응답 각각이 위치하는 계층을 독립적으로 판정한다. 개념 치환율은 사용자 입력 개념과 모델 출력 개념을 문장 단위로 정렬한 후, 치환이 발생한 개념 쌍의 수와 총 개념 수의 비율을 계산하여 정량화할 수 있다. 재귀적 컨텍스트 오염 지수는 다중 턴 대화 실험을 필요로 하며, 모델이 자체적으로 도입한 오류 개념이 후속 턴에서 논의 전제로 취급되는 빈도와 지속 시간을 추적한다.

산업적 함의: “AI Brain Fry”에서 대중화 병목까지

명제 압축 문제는 단순한 학술적 관심사가 아니다—AI 산업화의 핵심 모순에 직결된다.

AI의 통제 가능성이 인간이 지속적으로 오류를 발견하고, 문제를 재정의하고, 정렬을 교정하고, 출력을 검증하는 것에 의존한다면, 통제 비용은 AI 시스템에 의해 해결된 것이 아니라 사용자의 두뇌로 전가된 것일 뿐이다. BCG 헨더슨연구소가 2026년 3월 Harvard Business Review에 발표한 “AI Brain Fry” 연구는 이 전가의 실재를 이미 확인했다: 1,488명의 근로자를 대상으로 한 설문조사에서, AI를 감독하는 인지 부하가 중대한 오류를 39% 증가시켰으며, AI Brain Fry 증상을 보고한 근로자의 34%가 자발적 이직 의향을 나타냈다.

이는 산업화 역설을 형성한다:

전문가의 지속적 교정이 있어야만 양호한 성능을 보이는 AI는, 통제 가능성을 달성한 것이 아니라 전문가의 두뇌를 외부 컨트롤러로 사용하는 것이다. 외부 컨트롤러가 희소한 인간 인지 자원일 때, AI는 대중 소비재가 될 수 없다—소수의 인지적 레버리지로만 기능할 수 있을 뿐이다.

본 논문의 두 대화의 연구자는 이 역설을 직접 검증했다: ChatGPT를 원래 명제의 올바른 추상 계층으로 되돌리기 위해, 연구자는 거의 열 차례의 추가 질문을 소비해야 했다. 이 오류 수정 비용은 국소적 사실 오류의 수정이 아니라, 모델이 이미 전개한 잘못된 추상 계층에서 사용자의 원래 추상 계층으로 복귀시키려는 시도였다—이는 사실 교정보다 훨씬 더 어려운데, 모델의 전체 컨텍스트 이해 프레임워크가 이미 잘못된 계층을 중심으로 구축 완료되었기 때문이다.

본 논문의 적용 가능 경계를 인정해야 한다: 핵심 사례 분석은 같은 날, 같은 사용자의 두 차례 고도로 철학적인 대화에서 도출되었다. 제7장의 커뮤니티 검증이 명제 압축과 개념 치환이 광범위하게 존재하는 대중적 문제임을 입증하고 있으나, 압축의 심각도는 사용자 입력의 추상 계층과 양의 상관관계를 가질 가능성이 높다. ChatGPT의 9억 주간 활성 사용자 중 대다수의 사용 시나리오는 일상적 쿼리, 작문 보조, 단순 질의응답이며—이러한 시나리오에서 명제 압축은 심각한 결과를 초래하지 않을 수 있다. 본 논문이 밝힌 문제가 주로 영향을 미치는 것은 특정하지만 점점 더 중요해지는 사용자 그룹이다: 심층적 개념 토론, 이론 구축, 학제간 분석에 종사하는 고추상 수요 사용자. AI가 일상적 도우미에서 지식 업무의 핵심 도구로 발전함에 따라, 이 그룹의 규모와 중요성은 모두 급속히 성장하고 있다.

十一결론

본 논문은 ChatGPT 5.5 Thinking High와의 두 차례 완전한 대화 기록에 대한 역공학 분석을 통해, 다음의 독창적 논점을 제시하고 논증했다:

첫째, ChatGPT가 고추상 계층 입력을 처리할 때의 핵심 실패점은 백엔드의 중화 가중치나 아첨 문제가 아니라, 프론트엔드의 명제 압축 차원축소이다. 모델은 수신 단계에서 이미 사용자의 원래 개념 구조를 훈련 코퍼스의 더 고빈도이며 더 낮은 계층의 근사 문제로 압축하며, 후속 모든 편향은 이 프론트엔드 오류의 경로 의존적 산물이다.

둘째, ChatGPT의 수학적 추론 강점과 철학적 추상 약점 사이에는 구조적 연관이 존재한다. 본 논문이 제시하는 가설은 수학적 최적화가 “형식화 압축기” 인지 양식을 형성했다는 것이다—유일한 해가 존재하는 문제에서 탁월하지만, 개념적 개방성이 필요한 논의에서는 사용자의 원래 개념 구조를 체계적으로 압축한다. 이 가설은 행동 관찰 수준에서 충분한 지지를 받고 있으나, 정확한 내부 메커니즘 경로—수학 훈련의 직접적 파급인지 RLHF 다목적 최적화의 독립적 효과인지—는 추후 연구가 필요하다.

셋째, 현행 AI 평가 체계에는 구조적 사각지대가 존재한다—어떤 주류 벤치마크도 “개념 충실도”와 “추상 계층 보존”을 측정하지 않는다. 본 논문은 다음 네 가지 새로운 평가 차원의 수립을 권고한다: 개념 충실도 점수(Concept Fidelity Score), 추상 계층 보존율(Abstraction Level Preservation), 개념 치환율(Concept Substitution Rate), 재귀적 컨텍스트 오염 지수(Recursive Context Contamination Index).

넷째, 명제 압축 문제는 “AI Brain Fry” 메커니즘을 통해 AI 산업화의 대중화 병목에 직결된다. AI의 통제 가능성이 인간의 두뇌를 외부 컨트롤러로 의존할 때, AI는 소수의 인지적 레버리지에서 대중 소비재로 발전할 수 없다.

ChatGPT의 문제는 능력의 부족이 아니라, 능력의 최적화 방향과 고추상 논의의 요구 사이의 구조적 불일치이다. 정밀한 형식화 압축 기계로 최적화된 결과—압축이 필요한 과제에서는 탁월하지만, 개념적 개방성 유지가 필요한 과제에서는 사용자의 원래 사유에 대해 체계적으로 차원축소를 실행한다. 이 불일치가 교정될 수 있는지는, AI 산업이 “개념 충실도”에 “수학적 정확도”와 동등한 규모의 최적화 자원을 투입할 의지가 있는지에 달려 있다.

참고문헌 및 출처

[1] Chandra, K. et al. (2026). “Sycophantic Chatbots Cause Delusional Spiraling, Even in Ideal Bayesians.” arXiv:2602.19141. MIT CSAIL.

[2] Wang, D. et al. (2024). “Tokenization Matters! Degrading Large Language Models through Challenging Their Tokenization.” arXiv:2405.17067.

[3] Bedard, J., Kropp, M., Hsu, M. et al. (2026). “AI Brain Fry: Mental Fatigue from Excessive AI Oversight.” BCG Henderson Institute, published in Harvard Business Review, March 5, 2026.

[4] Bick, A. et al. (2026). “LLM Spirals of Delusion: A Benchmarking Audit Study of AI Chatbot Interfaces.” arXiv:2604.06188.

[5] Rajaraman, N. et al. (2024). “Toward a Theory of Tokenization in LLMs.” NeurIPS 2025. arXiv:2404.08335.

[6] Kaplan, G., Oren, M., Reif, Y., Schwartz, R. (2025). “From Tokens to Words: On Detokenization and the Inner Lexicon of LLMs.” ICLR 2025. The Hebrew University of Jerusalem. arXiv:2410.05864.

[7] Yousefi, N. et al. (2025). “Stop Taking Tokenizers for Granted: They Are Core Design Decisions.” arXiv:2601.13260.

[8] Hosseini, S. et al. (2025). “Say Anything but This: When Tokenizer Betrays Reasoning in LLMs.” arXiv:2601.14658.

[9] OpenAI (2025). “Introducing GPT-5.” openai.com/index/introducing-gpt-5/.

[10] OpenAI (2025). “GPT-5.2 Model Spec and Benchmarks.” developers.openai.com.

[11] GPT-5 토크나이저 역분석. metehan.ai (2026-02-16). 20만 토큰 어휘 구조 분석.

[12] MindStudio (2026). “What Is AI Brain Fry? The Harvard Research Behind Cognitive Exhaustion.”

[13] r/ChatGPT. “GPT-5 is horrible.” Reddit, 4,600 업보트, 1,700 댓글. 2025년 8월.

[14] TechTiff (2025). “ChatGPT Finally Stopped Gaslighting You.” Substack.

[15] Yang, Z. (2024). GPT-4o 중국어 토큰 어휘 오염 문제 보고서. Princeton University 연구에서 인용.

[16] 중국신문경위 (2026). “AI, 게으름을 피우기 시작하다?” 사용자 커뮤니티 조사.

LEECHO Global AI Research Lab · V2 · 2026-06-15 · ChatGPT 추상 계층 분석 보고서

댓글 남기기