TraviaTechPie Review

기업이 차세대 주력 AI 모델의 이름을 공개하는 방식은 대개 정해져 있습니다. 무대 위 기조연설, 라이브 방송, 카운트다운, 화려한 영상. CEO가 무대에 서서 그 이름을 소리 내어 부르고, 뒤로는 로고가 서서히 떠오릅니다.

그런데 ‘Astra’는 그렇게 등장하지 않았습니다.

OpenAI는 이 이름을 “Ten advances in mathematics and theoretical computer science”(수학과 이론컴퓨터과학의 열 가지 진전)라는 수학 블로그 글의 세 번째 문단에 슬쩍 끼워 넣었습니다. 무대도, 카운트다운도 없었습니다. 그저 글 중간에 이 수학 성과가 “우리의 차세대 주력 모델 Astra의 내부 버전으로 이뤄졌다”는 한 줄이 있었을 뿐입니다.

Gizmodo는 이 방식을 두고 OpenAI가 발표를 수학 글에 “밀반입(smuggled)했다”고 표현했습니다. GPT 계보를 잇는다는 모델을 이렇게 내놓는 것은 분명 독특합니다. 저는 이 방식 자체가 이번 일에서 가장 흥미로운 대목이라고 봅니다.

확인된 사실부터 짚습니다 — 미해결 문제 열 개

과장 없이, 무엇이 확인됐는지부터 정리합니다.

핵심 주장은 Astra의 내부 버전이 수학과 이론컴퓨터과학의 미해결 문제 열 개를 풀었다는 것입니다. 연습 문제 수준이 아니라 실제로 열려 있던 문제들입니다. OpenAI의 설명에 따르면 수학자들이 이 문제들에 최소 10년, 대부분은 그보다 훨씬 오래 진전을 내지 못했습니다.

분야도 만만치 않으며, 세부 영역은 다음과 같습니다.

• 고차원 기하와 코딩 이론
• 산술 회로 복잡도
• 군론(group theory)
• 작용소 대수(operator algebras)
• 양자 복잡도
• 격자 기반 암호(lattice cryptography)
• 극단 조합론(extremal combinatorics)

이 가운데 하나는 군론의 오랜 난제였던 ‘비(非)소픽 군(non-sofic groups)’의 존재를 규명한 결과라고 전해집니다. 용어가 낯선 것은 당연합니다. 요점은 이것들이 장난감 퍼즐이 아니라는 것입니다.

진짜 눈여겨볼 부분은 ‘어떻게 검증했는가’입니다

여기서 과장이 사실을 앞지르기 쉽습니다. 그래서 실제 진행 방식을 정확히 살펴야 합니다.

이번 성과는 모델이 혼자 나가서 정리 열 개를 들고 돌아온 것이 아닙니다. 사람 연구자와 모델의 협업이었고, 그 협업 구조가 핵심입니다. 인간 연구자가 논증을 다듬어 실제 논문 형태로 정리했습니다. 특히 주목할 부분은 모델이 각 증명을 Lean으로 형식화해, 기계가 검증할 수 있는 인증서를 하나하나 만들어냈다는 점입니다.

Lean은 증명 보조기(proof assistant)입니다. 수학 증명을 컴퓨터가 한 단계씩 검증할 수 있는 형태로 적어, 얼버무릴 틈을 없애는 언어입니다.

통과한 Lean 인증서는 “모델이 자신 있어 보인다”가 아니라 “논리가 성립하고, 기계가 그것을 확인했다”는 뜻입니다. 챗봇이 증명처럼 읽히는 문단을 뱉는 것과는 전혀 다릅니다. 그럴듯하게 보이는 것과 실제로 검증된 것은 완전히 다릅니다.

OpenAI는 비용도 함께 밝혔습니다. 열 개 풀이를 만드는 데 쓰인 토큰이 자사 Sol API 요율로 약 2,000달러어치였다고 합니다. 10년 넘은 미해결 문제 열 개를 노트북 한 대 값에 풀었다는 계산이 나옵니다. 적어도 수치로만 보면 그렇습니다.

그리고 이 모든 것 옆에 반드시 붙어야 할 단서가 있습니다. Astra는 아직 제품이 아닙니다. 출시되지 않았고, 출시일도, 가격표도, 호출할 수 있는 API도 없습니다. “차세대 주력 모델 패밀리”라는 이름만 붙은 채 테스트 중인 내부 모델입니다. 위의 내용은 전부 OpenAI가 자기 방식대로 공개한 시연이며, 아직 외부의 독립 검증을 거치지 않았습니다. 인상적인 시연이지만, 아직 출시되지 않은 모델입니다. 이 둘을 함께 붙들어야 합니다.

발표 장소가 곧 메시지입니다

계속 머릿속을 맴도는 건 증명 열 개가 아닙니다. 발표 장소입니다.

차세대 주력 모델을 수학 글 세 번째 문단에서 우연히 발표할 리는 없습니다. 의도된 선택이었습니다. 그리고 OpenAI 스스로 만들어 온 ‘출시일 서커스’와 의도적으로 거리를 두려는 태도로 읽힙니다.

지난 몇 년간 모델 공개 의식은 사실상 벤치마크 미인대회였습니다. 어떤 평가에서 점수가 몇 점 올랐다는 막대그래프, 리더보드를 중심으로 도는 홍보 주기. 그런데 Astra는 수학자들이 못 풀던 문제를 조용히 풀어 보이는 방식으로 등장했습니다. 완전히 다른 종류의 과시입니다. “벤치마크 점수는 잊고, 실제로 무엇을 했는지 보라”는 메시지에 가깝습니다.

무엇을 ‘증명’으로 볼 것인가라는 기준이 바뀌고 있습니다. 이것이 진짜 이야기이며, 이 블로그가 한동안 주목해 온 흐름과도 맞닿습니다.

앞서 AI에 메모장을 쥐어준 연구를 다뤘을 때 요점은, 큰 벤치마크 수치(거대한 컨텍스트 윈도우)가 실제 능력과 같지 않다는 것이었습니다. 티모신의 잉클링 스몰을 소개했을 때도, 차트 1위가 아니라 4분의 1 크기 모델이 잘 추론한다는 사실이 더 중요하다는 것이 핵심이었습니다. Astra의 수학 공개도 같은 결을 따릅니다. 업계는 리더보드 순위 대신, 진짜 어렵고 검증 가능한 문제를 해결하는 능력으로 모델을 평가하는 방향으로 더디게나마 움직이고 있습니다.

이 소식을 단순 과장으로 치부하기 어렵게 만드는 근거가 바로 Lean입니다.

AI와 수학 사이에는 신뢰 문제가 있습니다. 언어 모델은 빈틈없어 보이지만 조용히 틀린 ‘증명’을 만들어낼 만큼 유창하고, 자신 있게 내놓은 틀린 증명의 전례도 민망할 만큼 많이 쌓여 있습니다. 모든 결과를 Lean으로 형식화하면 그 문제를 통째로 비켜갑니다. 모델의 문장이나 OpenAI의 보도자료를 믿을 필요가 없습니다. 증명 보조기는 인증서를 받아들이거나 거부할 뿐입니다. 마케팅 주장과 검증 가능한 주장의 차이입니다. 이 소식의 여러 세부 중에서, Lean 인증서만큼은 끝까지 버틸 것이라고 봅니다.

다만 정직하게 짚을 것이 있습니다. 과대 포장되기 쉬운 지점입니다.

이번 일은 사람 연구자와 모델이 함께한 것이지, 모델 혼자가 아니었습니다. 사람이 논증을 정리했고, 모델이 유도를 돕고 형식화했습니다. 이 협업은 분명 인상적입니다. 그러나 “아무도 안 보는 사이 AI가 미해결 문제 열 개를 풀었다”와는 다른 이야기입니다. 인간의 통찰이 어디서 끝나고 모델의 몫이 어디서 시작되는지, 우리는 볼 수 없습니다. 그리고 이 전체가 지금으로선 미출시 모델의 자체 공개 시연입니다. 결점이 아니라 정직한 관점입니다. OpenAI가 자기 성과를 스스로 보여준 단계이고, 가장 중요한 독립 검증은 아직 이뤄지지 않았습니다.

결국 무엇을 가져가야 할까요?

두 가지입니다. 하나, 이 분야의 무게중심이 “시험에서 점수가 높다”에서 “정말로 막혀 있던 문제를 푼다”로 옮겨 가고 있고, 그것은 더 건강한 방향입니다. 둘, 매체가 곧 메시지였습니다. Astra를 수학 글에 묻어 둔 것은, 출시 스펙터클이 아니라 어려운 일로 평가받겠다는 신호였습니다. 다소 자신만만한 신호이기도 했습니다.

Astra가 손에 잡히는 제품이 됐을 때 그 약속을 지킬지는 전혀 별개의 질문이고, 아직 누구도 답할 수 없습니다. 지금으로선 이름은 실재하고, 시연은 인상적이며, Lean 인증서는 끝까지 지켜볼 만한 증거입니다.

※ 이 글은 정보 제공 목적입니다.

원문 출처 / Source: https://the-decoder.com/openai-announces-its-next-major-model-astra-by-dropping-ten-previously-unsolved-math-solutions/ , https://gizmodo.com/openai-smuggled-the-announcement-of-astra-its-next-ai-model-into-a-blog-post-about-math-2000793689

이미지: Growtika / Unsplash