출처: https://youtu.be/12fSRB3OY6U 길이: 58:44 · 채널: AI Frontier Korea (노정석) 녹화: 2026-09-27(일) · 출연: 노정석, 최승준, 박종현 · 편집: 김유진 포맷: 최승준이 Notion 정리 페이지와 X 게시물·Claude Artifact 데모를 띄우며 진행하는 대담. 박종현은 샌프란시스코에서 원격 참여. 관련 자료: 전사본 · 자료 링크(Notion)
한눈에 보는 요약
- Opus 5.5와 GPT-6 Sol이 같은 날 2시간 차이로 나왔다. 프론티어 모델은 평균 70일 주기로 나오고, 벤치마크는 1년을 못 버틴 채 RL로 촘촘히 채워진다.
- Opus급 가격은 1년 새 75에서 20으로 내려왔고,
medium추론으로 충분한 일이 늘어 체감 비용은 더 떨어졌다. 토큰은 항공권·호텔처럼 시간이 지나면 못 파는 재화라는 관점이 나온다. - 핵심은 Opus 5.5가 외부 에셋 없이 코드만으로 만든 모션 그래픽·화풍 재현·게임·PCM 음악이다. 최승준은 아이와 2시간짜리 JRPG를 하루 만에 완성했다.
- 검증 가능한 보상이 없는 ‘취향’을 어떻게 학습시켰는지가 의문이며, 대리 지표와 전문가 궤적을 이용한 hill climbing이 유력한 추측이다.
- Kyle McDonald·Zach Lieberman·Terence Tao·DHH의 반응을 거쳐, 무엇이든 만들 수 있을 때 인간은 무엇을 만들고 볼지 묻는다. 결론은 관점을 세우려면 일단 해봐야 한다는 epistemic action이다.
장면별 상세 설명
[00:00] 모델 발표 러시와 철학적 담론

이번 주에도 GPT-6 Sol, Xiaomi MiMo, Claude Opus 5.5가 연달아 나왔다. 노정석은 새 모델마다 큰 도약을 기대하는 게 기본값이 됐고, 담론이 기술보다 철학(인간은 무엇을 해야 하나, 속도 조절, ‘프론티어 컴퍼니’에 지울 의무)으로 옮겨 갔지만 커뮤니티는 아직 방향을 못 정했다고 진단한다.
[01:34] 70일 주기와 1년을 못 버티는 벤치마크

최승준이 정리한 AA(동일 하네스) 수치다.
| 계열 | 세대(간격) | HLE | Automation | Terminal |
|---|---|---|---|---|
| Claude Opus | 4.8 → 5 (57일) → 5.5 (60일) | 49 → 55 → 61.4 | 46 → 57 → 69.5 | 22 → 49 → 59.6 |
| GPT | 5.5 → 5.6 Sol (77일) → 6 Sol (75일) | 46 → 49 → 평가 대기 | 47 → 60 → 62 | 15 → 40 → 44 |
1년 단위로 비교하려 해도 HLE 정도만 살아남았고, 사라진 만큼 새 벤치마크가 생겼다. 최승준은 이를 RL이 간격을 촘촘히 채우는 과정으로 읽는다. 70일 주기는 “일주일에 10% 향상”이라는 감각이고, RSI 없이도 내년 이맘때 지금 벤치마크가 몇 개나 남을지 모르겠다고 한다.
[03:38] 가격 경쟁과 medium으로 충분해진 성능

1M 토큰당 입력/출력 가격은 Opus 4.1 75 → 4.5~5 25 → 5.5 20, GPT는 5 10 → 5.5 30 → 6 Sol 10이다. Opus가 여전히 2배 비싸지만 함께 내려가고, 그 위에 Fable·Astra 급이 따로 생겼다. 최승준과 박종현은 예전엔 high·xhigh가 필요했던 작업이 medium으로 충분해져 토큰 사용량까지 줄었다고 말한다.
노정석은 토큰을 항공권·호텔처럼 시간이 지나면 못 파는 재화로 본다. 단위 시간 안에 최대한 팔아야 하니 가격이 역동적이고, 사용자가 추론 강도나 context length를 바꿀 때마다 작업을 다른 GPU 팜으로 옮기는 스케줄링이 모델이 상향 평준화된 시대의 경쟁력이 된다. 최승준은 최근 향상이 일반화라기보다 특화되고 촘촘해진 학습의 결과라고 덧붙인다.
[08:10] Jeffrey Katzenberg와 AI for Creativity

DreamWorks 공동 창업자 Jeffrey Katzenberg는 실리콘밸리에서 본 AI 애니메이션이 1986년 〈룩소 주니어〉를 봤을 때 같은 경외를 줬고, “이게 우리의 끝인가요?”라는 아티스트 친구의 물음에 “절대 아니죠”라고 답했다고 썼다. 전환기마다 일자리는 사라졌지만 싸운 사람들이 권리를 지켰으니 지금이 그때라는 것, 그리고 제작비가 내려가면 영화는 더 많이 만들어지고 창작의 기회가 다시 확장된다는 것이 요지다. 노정석은 창의성이 인간의 마지막 영역이라 믿어 온 단어라 ‘AI for 과학’과 무게가 다르다고 말한다. 최승준은 이미지·영상에 이어 이번엔 코드로 창작하는 사람들이 타격을 받고 있다고 짚는다.
[10:57] AI 쇼츠 드라마와 Phenaki 이후의 생성 영상

2022년 11월 Alonso Martinez는 Google Phenaki 데모를 공유하며 “완전히 AI로 만든 TV 프로그램까지 약 2년”이라고 예측했다. 당시 품질은 “에계?” 수준이었지만 최승준은 AI에서 귀여워 보이는 건 문제라고 강조한다. 신호가 있고 hill climbing이 가능하다는 뜻이기 때문이다. 실제로는 4년쯤 걸렸다. 박종현은 〈신비한 건축사전〉처럼 AI 영상 채널이 큰 인기를 끄는 한편, YouTube가 정보 전달용 AI 영상은 남기고 조회수만 노린 채널은 대거 차단했다고 전한다. 노정석은 2022년 이후 모든 자원이 LLM으로 몰렸고 그 LLM이 이제 모든 걸 하게 됐다고 정리한다.
[16:22] 코드만으로 만든 모션 그래픽

Anthropic도 공유한 Kevin Ngo의 애니메이션은 모든 프레임과 소리가 JavaScript다. 마을 사람들이 Claude에게 요청만 보낼 때 한 소녀가 “넌 뭘 좋아하니?”라고 묻는 이야기다. 박종현은 꽃이 음악 박자에 맞춰 떨어지는 영상·소리의 동기화에 주목한다. 직접 구현하기 어려웠던 부분인데, 둘 다 코드로 만드니 오히려 타이밍이 정확히 맞는다.
[18:43] 7,500줄 Python으로 재현한 화풍

Jake Eaton은 몇 달째 모델들에게 그림을 그리게 해 왔는데 Opus 5.5가 화풍 흉내에 특히 능숙하다고 했다. 표준 라이브러리만 쓴 7,500줄 코드로 붓 스타일을 구현했고, 참고 이미지 없이 화가에 대해 아는 것만으로 그렸다. 최승준은 심상과 코드 사이를 중개하는 능력이 Opus 5.5의 인상이라고 정리한다.
[19:51] Dark Souls·Antikythera 게임과 학습용 대화형 영상

Blendi는 브라우저용 Dark Souls풍 보스전을 만들었다(에셋은 fal, 개발은 Astra + Opus 5.5). edwin은 안티키테라 기계 발굴을 소재로 한 게임을 단일 3MB HTML 파일로 만들었고, Claude Artifact로 바로 플레이할 수 있다.

Karpathy가 8월에 〈반지의 제왕〉으로 했던 ‘공부할 내용을 이야기로 만들어 보기’ 실험보다 충실도가 크게 올랐다. Ethan Mollick은 Opus 5.5로 재귀(recursion)를 코드 없이 설명하는 영상을 만들었다. 아직 3Blue1Brown급은 아니지만 전부 JavaScript다. 최승준은 Remotion류 접근이 Claude Design에서 먼저 나왔고 거기서 더 hill climbing된 것이라고 본다.
[21:52] “해줘”로 만든 마법 데모와 하루 만의 JRPG
![]()
최승준의 첫 실험은 “픽셀로, 마법 여러 개” → “복셀로” → “리깅으로”처럼 “해줘”만 이어 간 데모다. 박종현은 시키지 않은 컷신 전환, 곧 마법을 각도를 바꿔 타이밍 맞춰 보여주는 연출을 모델이 알아서 넣은 점을 신기해한다.

이어 아이와 대화하며 서사·반전·보스를 갖춘 엔딩까지 약 2시간짜리 JRPG “이끼골 모험기”를 하루 만에 만들었다. 첫 프롬프트 10분, 첫 PoC 생성 20분이었다. 에셋은 하나도 없다. GPT로 할 때는 이미지 생성으로 텍스처를 만들어 넣곤 하지만, Claude는 스프라이트와 음악까지 전부 코드로 그렸다. 사실적인 그림은 아직 약하다. 박종현은 비행기에서 할 게임을 찾는 대신 나를 위한 게임을 만들어 하게 될 거라고 말한다.
[25:11] PCM 합성으로 만든 음악

최승준이 가장 놀란 건 사운드다. 모델은 소리를 들을 수 없는데 PCM을 코드로 직접 합성해 작곡을 잘 해냈다. formant 기법으로 “어기여차” 하는 민요의 메기고 받기와 돌림노래를 만들고, 멈춤으로 클라이맥스를 설계하며, 클릭하면 반응하는 상호작용 서사로 엔딩까지 간다. 준 키워드는 그래픽 악보의 Iannis Xenakis 정도였다. 최승준은 소리에 대한 내부 표상 없이는 불가능하다고 보고, 노정석은 “attention과 FFN의 조합 안에서 이런 표상이 돌고 있다”고 받는다.
[29:12] 두 줄 프롬프트 모션 그래픽과 ‘취향’의 학습

타임라인에 많이 돈 예시의 프롬프트는 이것뿐이다.
Make a dynamic 15-second motion graphics video that shows what an incredible
motion designer you are. Go all out. Theme: HipHop모델은 TTF 폰트를 받아 바닐라 JavaScript와 Web Audio만으로 텍스트 효과와 장면 전환을 만들었다. 박종현은 RL이 수학처럼 검증 가능한 보상이 있는 곳에서 잘 됐는데 오디오·모션 그래픽은 무엇으로 평가했는지 묻는다. 최승준은 Google의 프론트엔드 디자인 hill climbing 논문을 예로 들며, 대리 지표로 취향 비슷한 걸 끌어올렸고 pre-training도 함께 갔을 것이라고 추측한다.
박종현은 Astra가 diffusion 계열 VLA 대신 로봇 제어 코드(policy)를 짜서 로봇을 잘 다룬 사례를 든다. 최승준은 둘 다 전문가 작업 궤적으로 reward model을 만들어 한 단계씩 올린 것일 수 있다고 보고, 노정석은 “데이터셋 공급사가 잔뜩 공급했나 보다”라고 농담한다.
[33:47] 영역을 잇는 창의성과 휴리스틱

노정석은 인간이 한 분야의 전문성을 다른 분야에 이어 새 영역을 만들어 왔듯, 이미 코딩 천재인 모델에 아트를 가르치자 가르치지 않은 능력이 임계점을 넘어 생겼을 수 있다고 말한다. 최승준은 수학의 Ansatz처럼 탐색 공간을 크게 잘라 내는 취향 있는 휴리스틱이 창작에서도 올라오고 있다고 본다. 같은 프롬프트의 Python 버전은 cairo·numpy로 그리고 ffmpeg로 합성했으며, TYPE → GRID → MORPH → KINETIC → CHARGE → ORBIT → SIGNATURE 순서로 구간을 스스로 설계했다.
[36:38] 아티스트 정체성을 다시 쓰는 크리에이티브 코더들

- Kyle McDonald: 15년간 소개란에 쓴 “코드로 작업하는 아티스트”를 오늘 “아티스트”로 바꿨다.
- Zach Lieberman: 오히려 정반대로 느낀다. 코딩 자체가 목적이었던 적은 없고, 중요한 건 계산과 소프트웨어가 가능하게 하는 연결이었다.
- Alexander Chen(Google Creative Lab): 평생 숫자·패턴·복잡계 탐구를 좋아했고, 코딩을 안 하더라도 지금이 가장 신난다.
- Celeste Betancur: 코드 아티스트로서의 감정은 진자 운동 같다. 어떤 날은 Kyle, 어떤 날은 Zach, 때로는 그 사이다.
[38:27] Terence Tao의 감속론과 무한한 인재 집단

밀레니엄 문제가 풀린 며칠 뒤 Terence Tao는 “속도가 미쳤고 이렇게 빨라야 할 이유가 전혀 없다”고 말했다. 지금 그의 블로그에는 수학자·철학자 게스트 글로 공론장이 이어진다. 노정석은 아인슈타인도 동료들과 서신으로 생각을 주고받았듯 역사는 몇천 명의 인재 집단이 바꿔 왔다며, 모든 영역에 그런 인재가 무한히 투입된 지금은 많은 것이 달라져야 한다고 말한다.
[40:38] 코더에서 메이커로, 그리고 교육

DHH는 Rails World 2026 기조연설에서 더는 코딩하지 않는다며 **“코더가 아니라 메이커가 된다”**고 했고, Pi 에이전트의 Mario Zechner는 코드를 이해해야 통제할 수 있다는 신중론을 편다. 노정석은 다음 세대가 코드 없이 시행착오로 결과에 도달할 수 있으니 지금은 “해줘”로 새 로직을 체화하는 편이 낫다고 본다.
최승준은 토스의 디자인 학교 수업에서 두 가지를 느꼈다. 상방을 열어줘야 한다(지금 AI로 무엇이 가능한지 모르면 최고 모델을 두고도 늘 쓰던 수준에 머문다). 그리고 브레이크를 너무 일찍 잡지 말아야 한다. 걱정은 Three.js·MediaPipe 같은 개념어를 몰라서 못 쓰는 공백이다. 전문가는 용어·창작자·역사를 인출해 쓰지만 초보자는 그 과정을 건너뛰게 된다.
[45:22] 무엇이든 만들 수 있을 때 무엇을 만들 것인가
노정석은 AI를 써도 회사 생산성이 오르지 않는 건 쓰는 사람의 태도 문제라고 보고, 박종현은 결국 모두 넘어오는 시간의 문제라고 본다. 박종현의 진짜 고민은 그다음이다. 이 대담도 언젠가 AI가 만들 수 있다면, 사람들은 무엇을 왜 보게 될까? 노정석은 기계가 지적인 일을 대신하면 인간끼리의 경쟁과 드라마를 즐기는 호모 루덴스(스포츠)의 시대가 온다는 선배의 말을 전한다. 최승준은 프로 피아니스트의 해석에 담긴 인간의 정념이 모델 음악엔 아직 없지만, 분간할 수 없게 되면 시뮬레이션된 정념에도 감동할지는 그때가 와 봐야 안다고 말한다.
[50:38] Anthropic의 wet lab과 프론티어 컴퍼니
Anthropic이 wet lab에서 CRISPR 가위 비슷한 것을 찾았다는 발표는 생명공학계에서 “이미 하던 일”이라는 비판을 받지만, 두 사람은 Phenaki 때처럼 신호가 있다는 것 자체가 문제적이라고 본다. 노정석은 랩들이 도구·메모리·오피스 기능으로 횡적 확장을 끝낸 뒤 법무·재무·생명과학으로 종적 확장 중이라 ‘프론티어 컴퍼니’로 불리고, 무소불위의 권력 우려가 커진다고 짚는다.
[52:33] Tech Week·DevDay·Tesla를 앞둔 샌프란시스코

박종현은 영상 스타트업 관점에서 프론티어의 영상 생성 흐름을 보려고 a16z Tech Week(시내 곳곳의 수백 개 행사)에 참가한다. 노정석은 9월 29일 OpenAI DevDay에서 전천후 비서형 에이전트를 기대한다. 사람들이 검색·쇼핑·읽기를 비서에게 맡기면 모든 것의 게이트웨이가 바뀌기 때문이다. 박종현은 Waymo·Zoox가 당연하게 다니는 거리를 보며 Tesla 10월 1일 발표(날아다니는 무언가라는 소문)도 기대한다.
[56:08] 관점 형성보다 빠른 변화와 epistemic action
노정석은 이제 소식보다 관점이 중요한데, 도구가 아니라 도구를 만드는 도구(지능)가 나온 전례 없는 변화라 역사에서 빌릴 틀이 없고 관점이 따라가지 못한다고 말한다. 최승준은 테트리스 블록을 돌려 봐야 맞는 자리를 알듯 예측하려면 행동해야 한다는 epistemic action으로 답한다. 노정석은 해 본 사람과 안 해 본 사람이 물과 기름처럼 갈렸다며, 결국 “해봐야 한다”로 닫는다.
관련 노트
- 2026-10-23-ai-frontier-ep119-video-as-code — 후속 회차(EP119), 코드로 만든 모션 그래픽을 실제 채널 운영과 모델·도구 비교로 검증
- 2026-09-27-ai-frontier-ep115-all-in-summit-2026 — 직전 회차(pacing 논쟁, 조합적 놀이)
- 2026-09-09-ai-frontier-ep113-gpt6-astra — GPT-6 Astra 공개 회차
- 2026-09-23-x-miaai-opus-5-5-100-html-files — Opus 5.5가 만든 단일 HTML 100개 쇼케이스(코드만으로 만든 창작물)
- 2026-09-24-dhh-rails-world-2026-keynote — “코더가 아니라 메이커” 발언이 나온 DHH 키노트
- claude-fable-5 — Opus 위 상위 티어로 언급된 Fable
- recursive-self-improvement · anthropic
원문 인용 모음
- [03:10] “RL을 가지고 촘촘하게 그 간격들을 채우고 있다.”
- [05:48] “토큰은 호텔과 비행기와 같거든요. 시간이 지나가면 다시 팔 수 없기 때문에 그 단위 시간 동안 최대한 팔아야 되기 때문에 가격 책정 방식이 굉장히 역동적으로 움직이거든요.”
- [12:30] “문제는 AI 분야에서 귀여워 보이는 건 문제라는 거예요. 신호가 있다는 의미죠.”
- [19:41] “그걸 재현할 수 있을 정도로 심상과 코드 사이를 중개하는 거죠.”
- [25:11] “아까 그 게임이나 마법 같은 거에 에셋이 하나도 쓰이지 않았어요. 픽셀까지 다 생성했고 음악도 다 생성했거든요.”
- [26:13] “사운드는 못 듣거든요. 그런데 그거에 대한 representation이 없고는 이 정도를 못 만든다고 저는 생각해요.”
- [36:38] “15년 동안 내 소개란에는 코드로 작업하는 아티스트라고 적혀 있었다. 오늘 그냥 아티스트로 바꿨다.”
- [44:24] “Three.js를 몰라서 못 쓰는 이런 일들이 있어요. MediaPipe를 몰라서 못 쓰는.”
- [49:57] “시뮬레이션된 정념의 감동을 받을 것이냐. 이거는 그때가 와 봐야 알 수 있는 거죠.”
- [57:09] “기존에는 도구를 만드는 게 기술의 혁신이었는데 이제는 도구를 만드는 도구, 그건 지능이 만들어진 거니까 이거는 너무 다른 거잖아요.”