Reported Duration
≈ 11 days초장기 formalization 작업에 걸린 시간으로 문서가 보고한 값.
Verifier-Grounded Long-Horizon AGI: Lessons from Formalizing Fermat's Last Theorem
2026년 9월 4일 공개된 Anthropic의 Fermat's Last Theorem formalization 사례가 AGI 연구에 던지는 메시지는 “Claude가 새로운 수학을 발견했다”가 아니다. 더 중요한 변화는 Foundation Model + Persistent Task Graph + Multi-Agent Parallelism + External Formal Verifier라는 시스템 조합이 약 11일에 걸친 초장기 작업에서 실제로 작동했다는 점이다.
이 결과는 AGI를 더 긴 context window나 더 강한 단일 모델로만 설명하는 관점을 약화시킨다. 긴 작업에서 필요한 것은 상태를 잃지 않는 구조, 작업분해, 오류를 국소화하는 verifier, 실패 뒤 되돌아갈 recovery path이다. 수학이라는 특수한 영역에서 확인된 이 패턴은 self-improving agent와 Autonomous AI Scientist를 설계하는 데도 중요한 단서를 제공한다.
이 글은 첨부된 AGI 연구동향 업데이트를 1차 출처로 재구성한다. 수치와 성과는 해당 문서가 Anthropic의 공식 발표를 인용해 정리한 내용이며, 이 글은 별도의 독립 재현 실험을 수행하지 않는다. 특히 FLT의 새로운 수학적 증명을 발견한 성과로 표현하지 않으며, peer-reviewed 논문이 아니라 공식 기술보고 성격이라는 원문의 제한도 그대로 유지한다.
초장기 formalization 작업에 걸린 시간으로 문서가 보고한 값.
최종 formalization 규모로 문서가 보고한 값.
중간 정리 증명 규모.
내부 연구모델의 output token 규모로, 효율성 해석에 주의가 필요하다.
성과의 의미를 정확히 읽으려면 무엇을 했고 무엇을 하지 않았는지 먼저 분리해야 한다.
첨부 문서는 Anthropic이 Claude 기반 multi-agent system으로 Fermat's Last Theorem의 최초 end-to-end computer-checked formalization을 Lean에서 완성했다고 공개한 내용을 핵심 변화로 제시한다. 작업은 약 11일 동안 진행되었고, 결과물은 약 1,300만 줄의 Lean 코드와 약 30,300개의 중간 정리 증명 규모이며, 수십 개 Claude agent가 병렬로 참여했다. 최종 correctness는 Lean kernel이 검증했다.
위 수치와 “최초 end-to-end computer-checked formalization”이라는 표현은 첨부 문서가 Anthropic의 2026년 9월 4일 공식 발표를 근거로 정리한 내용이다.
원문은 이 경계를 매우 분명하게 긋는다. Claude가 Wiles 계열과 독립된 새로운 FLT 증명을 발견한 것이 아니다. 알려진 Wiles 계열 증명의 단순화된 전개를 기반으로 방대한 의존관계를 Lean에서 완전히 machine-checkable한 형태로 옮긴 autoformalization 성과이다.
성공의 전환점은 Prove2Me라는 external scaffold였다. 이 구조는 기억과 작업분해를 별도 기능이 아니라 같은 graph 위에서 해결한다.
첨부 문서에 따르면 초기 시도에서는 여러 agent가 장기간 프로젝트 상태를 유지하지 못했고 coordination이 붕괴했다. 이는 단일 호출 수준에서 강한 추론 능력을 보여도, 작업이 수일 이상 이어지고 수많은 subproblem이 서로 의존하기 시작하면 상태 보존과 의존성 관리가 별도의 병목이 된다는 점을 드러낸다.
전환점은 Prove2Me라는 외부 scaffold였다. 전체 증명을 theorem DAG로 관리하고, 각 agent가 어떤 sub-theorem을 해결할지 결정하도록 하며, 자연어 설명과 형식정리를 연결해 검색과 재사용을 가능하게 했다. 문서는 Anthropic이 이 구조가 memory degradation과 multi-agent coordination 문제를 완화했다고 설명한다고 정리한다.
이 사례에서 memory는 단순 대화 history나 vector store가 아니다. 작업 구조 자체가 기억 구조가 된다. 무엇이 아직 미해결인지, 무엇이 무엇에 의존하는지, 어떤 artifact를 재사용할 수 있는지가 같은 graph에 남기 때문에 장기 상태와 task decomposition이 하나의 표현으로 결합된다.
원문은 이 사례를 앞서 관찰한 “model + harness + persistent state” 방향과 같은 흐름으로 해석한다. 여기서 새롭게 선명해진 점은 persistent state가 단순 memory buffer가 아니라 구조화된 dependency graph라는 사실이다.
이 사례가 autonomous agent 연구에서 특히 중요한 이유는 생성과 판정을 분리하기 때문이다.
일반적인 autonomous agent pipeline에서는 성공 여부를 다시 LLM judge가 평가하는 경우가 많다. 하지만 이 사례에서는 final correctness를 Lean kernel이 결정한다. 모델이 “맞다”고 주장하는 것과 artifact가 실제로 type-check되고 kernel validation을 통과하는 것은 완전히 다른 층이다.
외부 verifier는 실패를 단순 점수가 아니라 수정 가능한 오류 신호로 바꾼다. compile 또는 proof checking이 실패하면 어디에서 formal artifact가 무너졌는지 추적할 수 있고, agent는 그 오류를 국소적으로 수정한 뒤 다시 검증한다.
좋은 hypothesis나 proof sketch를 한 번 생성하는 것만으로 장기 연구 자동화가 완성되지 않는다. 지속 가능한 시스템은 artifact를 만들고, 외부 verifier의 피드백을 받고, error localization을 수행하고, 상태 graph를 업데이트하면서 다시 시도해야 한다.
이 구조에서 intelligence의 단위는 단일 response가 아니라 검증 가능한 상태 변화를 누적하는 loop로 이동한다. 이는 long-horizon agent 평가에서 “최종 정답률”뿐 아니라 persistent state, repairability, verifier grounding, recovery가 중요한 system primitive가 될 수 있음을 시사한다.
첨부 문서는 최근 신호들을 하나의 시스템 식으로 정리한다. FLT 사례는 그중 Structured Task Graph와 Deterministic Verification을 강하게 보강한다.
이 식은 AGI의 정의를 확정하는 공식이 아니라 첨부 문서가 최근 연구 방향을 구조적으로 정리한 synthesis이다. 이번 FLT formalization이 특히 새롭게 강화한 것은 Structured Task Graph + Deterministic Verification이다.
장기 작업이 무너지는 원인이 memory degradation이나 coordination이라면, 해법은 반드시 parameter update일 필요가 없다. task graph, harness, verifier, recovery logic 같은 model-external layer가 실패 모드를 흡수할 수 있다. 이 관점은 AGI 연구의 실험 단위를 model checkpoint에서 model + scaffold + persistent state + verifier의 조합으로 확장한다.
이 한 사례만으로 AGI가 system-centric architecture로 수렴한다고 단정할 수는 없다. 다만 수일 이상 지속되는 작업에서 모델 외부의 structured state와 verifier가 성패를 가른 사례는, long-horizon capability를 model-only benchmark와 분리해 평가해야 할 근거를 강화한다.
수학의 Lean kernel은 무엇이 맞는지 기계적으로 판정한다. 다른 연구분야는 이에 대응하는 verifier를 어떻게 만들 것인지가 핵심 문제가 된다.
첨부 문서는 self-improving agent와 Autonomous AI Scientist가 먼저 빠르게 발전할 가능성이 높은 영역으로 외부의 반증 가능한 verifier를 가진 분야를 지목한다. 수학은 Lean, 코드는 compiler/test suite, 알고리즘은 executable evaluator가 그 역할을 맡을 수 있다.
| Domain | Potential verifier | Why it helps | Remaining difficulty |
|---|---|---|---|
| 수학 | Lean kernel | proof artifact의 logical correctness를 결정적으로 판정 | formalization 자체의 규모와 search cost |
| 코드 | compiler / test suite | syntax, type, behavior failure를 반복적으로 localization | test coverage가 specification 전체를 보장하지 않을 수 있음 |
| 알고리즘 | executable evaluator | 정확도·objective·constraint를 자동 계산 | evaluation distribution과 hidden failure mode |
| 생물학·신약개발 | experiment-grounded verifier | 현실 observation과 hypothesis를 연결 | 실험비용, noisy outcome, 긴 latency, 불완전한 ground truth |
특히 생물학과 신약개발은 formal proof와 달리 결과가 stochastic하고 expensive하다. 따라서 “Lean kernel에 해당하는 무엇”을 만들 수 있는지가 더 어려운 research problem이다. LLM judge를 stronger model로 바꾸는 것만으로는 실험적 진실을 대체할 수 없다.
첨부 문서는 이 사례를 단일 수학 프로젝트가 아니라 AGI 시스템 연구의 다음 세부 주제로 확장한다.
첫 번째 연구축은 Verifier-Grounded Long-Horizon Agents이다. 장기 계획을 단순히 더 많은 context token으로 유지하는 대신, 외부 state representation과 verifier를 중심으로 progress를 축적한다. 핵심 metric도 단발 성공률에서 state persistence, recovery, verifier-confirmed progress로 확장할 수 있다.
두 번째는 Graph-Structured Persistent Memory for AGI이다. theorem DAG처럼 node가 단순 정보 조각이 아니라 해결해야 할 subproblem, 이미 검증된 artifact, dependency, failure state를 함께 표현한다. memory와 planning을 별도 모듈로 나누기보다 하나의 evolving graph로 통합하는 접근이 장기 agent architecture의 중요한 방향이 될 수 있다.
세 번째는 Machine-Checkable Autonomous Scientific Discovery이다. hypothesis를 검증 가능한 artifact로 변환하고, machine verifier가 failure를 돌려주며, agent가 그 결과로 belief와 artifact를 수정하는 closed loop를 구축한다.
신약개발 같은 noisy science에서는 이 구조를 그대로 복제할 수 없다. 대신 assay protocol, provenance, uncertainty, causal condition, replication, negative result를 포함하는 experiment-grounded verifier를 설계해야 한다. 이것은 첨부 문서의 문제의식을 확장한 연구적 함의이며, 현재 FLT 결과가 직접 입증한 사실은 아니다.
source는 이 결과의 의미를 높게 평가하면서도 peer review, compute scale, internal model이라는 세 가지 제약을 분명히 한다.
Anthropic의 공식 기술보고 성격이며 동료심사 논문이 아니다.
사용된 내부 연구모델의 세부 조건이 일반 외부 시스템에 그대로 대응한다고 볼 수 없다.
약 60억 output token 규모로 정리되어 있어 효율적인 AGI capability의 증거로 해석해서는 안 된다.
이 결과는 “AGI가 장기 수학 연구를 자율적으로 해결했다”는 증거가 아니다. 더 정확한 해석은 충분히 강한 model에 persistent task graph, multi-agent coordination, deterministic verifier를 결합했을 때 초장기 formalization이 가능해졌다는 system-engineering 사례라는 것이다.
더 생산적인 질문은 이것이다. 충분히 좋은 모델에 어떤 scaffold와 verifier를 결합해야 장기적으로 상태를 잃지 않고, 오류를 확인하며, 수일·수주 동안 계속 진전할 수 있는가.
장기 자율지능의 핵심은 오래 말할 수 있는 모델이 아니라, 오래 기억하고, 구조적으로 분해하고, 외부에서 검증받고, 실패 뒤 복구할 수 있는 시스템일 가능성이 커지고 있다.
Article synthesis · evidence, analysis, inference separated새로운 FLT 증명 발견이 아니라 기존 증명 계열의 대규모 end-to-end Lean formalization이다.
초기 coordination failure를 theorem DAG 기반 Prove2Me가 완화했다.
persistent structured state, decomposition, verification, recovery가 장기 작업의 핵심 변수로 부상한다.
최종 correctness를 Lean kernel이 판정해 self-judged success와 분리한다.
foundation model뿐 아니라 memory, task/world model, harness, verifier, self-correction이 하나의 architecture를 이룬다.
수학 밖에서는 domain-specific, falsifiable, experiment-grounded verifier가 자율 과학의 핵심 병목이 될 수 있다.
첨부 문서가 직접 근거로 사용한 공식 출처를 유지한다.
첨부 AGI 연구동향 업데이트가 FLT autoformalization, Prove2Me scaffold, theorem DAG, multi-agent coordination, Lean verification과 계산규모를 정리할 때 인용한 공식 기술보고.