출처: https://x.com/Lonely__MH/status/2101626594452492450 (Lonely, 중국어). 본문은 laya-mlx 소개이고, 이 노트는 인용된 @MinLiBuilds의 비교 실험(https://x.com/MinLiBuilds/status/2101614012769439966)을 중심으로 정리했다.
개요
@MinLiBuilds는 StepFun의 Step 5 Preview 사전 평가에 참여하면서 표준 벤치마크 대신 실제로 실패할 수 있는 과제를 골랐다. 참고 이미지를 보고 Blender에서 8cm 스프링 애벌레를 만든 뒤 실제로 3D 프린팅하는 일이다. 상대는 GPT-5.6 Sol이다.
- 환경: pi coding agent + 컴퓨터 사용 + Blender 5.2.1 + 1M 컨텍스트, 두 모델 모두 최고 Thinking 단계.
- 요구 사항: 만들 것, 그리고 실제로 출력될 것.
결과
| 모델 | 소요 시간 | 출력 결과 |
|---|---|---|
| GPT-5.6 Sol | 14분 34초 | 작은 다리 몇 개만 베드에 닿아 바닥에 실이 늘어지고 넘어질 뻔했다 |
| Step 5 Preview | 54분 40초 | 평평한 바닥면을 만들어 베드에 안정적으로 붙었고 출력에 성공했다 |
Step 5 Preview는 첫 Thinking만 17분 가까이 걸렸고(출시 직후라 대기가 길었다), 꼬리의 StepFun 로고를 베지어 곡선으로 한 글자씩 새겼다. 다만 모델이 8cm라 로고는 출력하고 보니 잘 보이지 않았다.
후속 실험과 교훈
바닥면·오버행·출력 가능성을 프롬프트에 명시하자 두 모델 모두 잘 해냈다. 작성자는 “Sol은 못하는 게 아니라 너무 자신만만해서 14분 만에 퇴근한 것”이라고 본다.
코드가 돌고 파일이 생기면 끝나던 에이전트 평가도 물리 세계로 넘어가면 달라진다. Blender에서 멀쩡해 보여도 출력되는 건 아니라서, 어디를 한 번 더 검사할지 아는 것이 40분 일찍 끝내는 것보다 중요할 수 있다는 결론이다. 표본 한 번의 사례라 일반화하기는 어렵다(confidence: low).
맥락
인용한 본문(@Lonely__MH)은 Jev보다 50배 빠르다는 laya-mlx를 M2 Pro에서 돌려 1GB 메모리로 초당 60회 결정하며 스네이크 게임을 했다는 소개다(2026-09-27-laya-mlx). 다른 모델 비교 노트는 moc-ai-models에 있다. Sol·Luna·Astra 모델 계열은 2026-09-18-x-antonioleivag-jev-codex-router에도 나온다.