개요
cua가 2026-09-19에 CUA-S1을 발표했다. 컴퓨터 사용(computer use)에 특화된 작은 “System One” 모델 계열이다. 첫 공개작 CUA-S1-FORMS는 폼 하나를 한 번의 추론으로 어떻게 채울지 결정하고, 실제 클릭·입력은 Cua Driver가 순서대로 실행한다. 입력·출력 계약이 TypeSafe jev와 같다. UI 요소 하나와 typed 옵션 목록을 받으면 텍스트를 생성하지 않고 옵션마다 확률 하나씩을 돌려준다. 발표 스레드는 조회 129만 회를 기록했다.
어떻게 동작하나
- 각 폼 요소에 대해
FILL(문서에서 추출한 값 채우기),CHECK,CLICK,SKIP중 하나를 고른다. 필드 값은 함께 넘긴 문서에서 나온다. - 모든 요소를 독립적으로, 하나의 병렬 배치로 채점한다. 실행 순서(필드 → 체크박스 → 허가된 경우에만 제출 클릭)는 모델이 아니라 애플리케이션 코드가 정한다.
- 데모 영상에서는 왼쪽의 소형 모델이 폼을 한 번에 계획하고, 오른쪽의 LLM 에이전트는 같은 폼을 단계별로 조작했다.
공개된 것
| 항목 | 내용 |
|---|---|
| 코드 | trycua/cua 저장소의 libs/cua-s1(MIT). 합성 데이터 생성·학습·평가·Cua Driver 연동 포함, 가중치는 포함하지 않음 |
| 폼 모델 | Hugging Face cua-ai/cua-s1-forms(MIT). tinyx 바이트 수준 트랜스포머 인코더 + 옵션 어텐션 분류 헤드, 706,048 파라미터, 2.8MB |
| 같은 계열 | cua-s1-nano-0.1(처음부터 학습, 약 85.5만 파라미터, 텍스트·멀티모달), cua-s1-4b-0.1/0.2(Qwen3.5-4B 위 LoRA 어댑터, 범용 요소·행동 결정) |
| 학습 데이터 | 가짜 전화번호·.invalid 도메인·가상 브랜드로 만든 합성 폼 에피소드. 실제 사용자 제출 데이터 없음 |
성능 주장과 독립 평가
| 출처 | 평가 | 결과 |
|---|---|---|
| 작성자 보고(HF 카드) | 합성 테스트(폼 분리, 약 1.5만 결정) | 99.95% |
| 작성자 보고(HF 카드) | 실제 폼 3개·PDF 3개, 196 결정 | 100% |
| 작성자 보고(HF 카드) | 같은 과제 1:1 비교 | CUA-S1-FORMS 99.7% vs 호스팅 Jev(jev-latest, 파인튜닝 없음) 83.6% |
| 저장소 MODEL_CARD 독립 평가 | 학습 분포 안 합성 에피소드 3,070 결정 | 97.5% |
| 저장소 MODEL_CARD 독립 평가 | 카탈로그 밖 라벨의 폼 5개(물류·하드웨어·DevOps·수의학·중국어) 41 결정 | 29.3%. 41개 중 36개를 평균 신뢰도 0.974로 skip |
Jev와의 비교는 조건이 다르다는 점을 감안해야 한다. 호스팅 Jev는 판단이 필요한 결정(fill·check·click)에서 96%였다. 그런데 “이미 채워진 필드는 건너뛴다”는 규칙은 CUA-S1만 학습했기 때문에 Jev는 그 항목에서 74%에 그쳤다.
실무상 가장 중요한 한계: 이 모델은 55개 개념의 라벨 카탈로그에 크게 의존한다. 모르는 라벨을 만나도 판단을 보류하지 않고 **높은 신뢰도의 skip**을 반환한다. skip을 “할 일 없음”으로 처리하는 실행기는 범위 밖의 폼 전체를 조용히 건너뛸 수 있다. 실행 전에 라벨이 카탈로그 안에 있는지 확인하거나 완료 여부를 따로 검증해야 한다.
반응
Layton Gott(@Layton_Gott)는 “2.8MB, 70만 파라미터, 무료, RAM 1GB도 안 쓰는 모델이 호스팅 Jev를 이겼다”며 폼·CRM 업데이트·데이터 입력·문서 라우팅마다 작은 전문가 모델을 두고 강한 에이전트 하나가 그 사이에서 일을 나누는 구조를 전망했다(조회 68만). 답글에서는 “99.7%는 레이아웃을 분리한 홀드아웃이 있어야 의미가 있다. 무작위 분할은 템플릿 암기를 가릴 수 있다”는 지적이 나왔다. 위 29.3% 결과가 바로 그 우려를 확인한다.
관련
- 실행기 쪽 맥락: 2026-04-28-trycua-cua-ai-agent-os-sandbox, computer-use-agent-landscape
- 같은 “작은 결정 모델 + 실행기” 패턴: jev-ultrafast, 2026-09-20-sac-y-jev-cu