출처

개요

PyTorchKR가 2026년 7월 6일부터 12일까지 살펴볼 만한 AI/ML 논문 10편을 묶어 소개한 글이다. 이번 모음에서는 LLM을 계획과 도구 사용에 활용하는 에이전틱 워크플로우, 장기 기억과 초장기 비디오 이해, 현실적인 평가와 신뢰성 확보가 공통 주제로 나타난다. 일부 연구는 시계열 예측, 커널 최적화, 기술 탐색처럼 특정 작업의 해결 과정을 에이전트화하고, 다른 연구는 기억·비디오·강화학습을 구조화해 장기 작업을 다룬다. 글은 이러한 연구들을 실제 배포 환경의 능력과 한계를 평가하려는 흐름으로 함께 정리한다.

핵심 포인트

  • 에이전틱 문제 해결의 확장: Nexus는 시계열 예측을 뉴스와 사건 같은 비구조적 맥락까지 다루는 다중 에이전트 추론 문제로 보고, KernelEvolve는 이종 AI 가속기에 맞춘 커널 생성·최적화를 자동화하며, OpenClaw-Skill은 여러 LLM이 기술 트리를 공동 탐색하도록 제안한다.
  • 기억을 검색 결과가 아닌 행동 공간으로 다루기: NapMem은 장기 사용자 기억을 여러 세분화 수준의 구조로 재구성하고 에이전트가 질의에 맞는 기억을 능동적으로 선택하도록 학습한다. 단순히 관련 문서를 검색해 붙이는 방식보다 기억 선택 자체를 에이전트의 행동으로 본다는 점이 핵심이다.
  • 초장기 비디오 이해의 구조화: EGAgent는 스마트 안경 등에서 수일 또는 수주 동안 수집된 비디오를 이해하기 위해 인물·객체의 시간적 관계를 엔티티 장면 그래프로 표현하고 다단계 추론을 수행한다.
  • 정적 벤치마크를 보완하는 오픈월드 평가: CRUX는 통제된 벤치마크 대신 AI 에이전트에게 간단한 iOS 앱을 개발해 App Store에 게시하는 장기·현실 작업을 수행하게 했다. 원문에 따르면 에이전트는 피할 수 있었던 수동 개입 한 번으로 작업을 완료했으며, 이런 평가는 실제 배포 능력과 위험을 조기에 살피는 보완 수단으로 제시된다.
  • 생성과 이해의 통합: Gen4U는 동결된 비디오 디퓨전 모델의 중간 표현을 단일 전방 패스로 재사용해 비디오 분류, 깊이 추정, 카메라 자세 추정, 이미지·비디오 캡셔닝 등에 활용하는 프레임워크를 소개한다. 원문은 파인튜닝 없이 생성 능력을 유지하면서 인식 작업에 경쟁력 있는 성능을 보였다고 설명한다.
  • 신뢰성과 장기 학습 안정성: RLMF는 모델이 자신의 작업을 모니터링하는 메타인지 피드백을 강화해 표현된 불확실성과 내재적 불확실성의 정합성을 높이려 하고, SAO는 장기 에이전틱 작업의 비동기 강화학습에서 단일 롤아웃과 토큰 수준 클리핑을 사용해 불안정성과 오정책 문제를 다룬다.
  • 프로토콜보다 어려운 거버넌스: MCP·A2A·ACP 등 에이전트 상호운용성 프로토콜은 작업 조정에는 도움을 줄 수 있지만, 기업 제약 아래의 투표·심의·반대 의견 보존 같은 집단 의사결정까지 지원하기에는 격차가 있다는 분석이 소개된다.

왜 중요한가

이 글은 에이전트 연구의 관심사가 단순 생성 품질에서 장기 기억, 도구를 사용한 문제 해결, 현실적인 평가, 불확실성 표현과 운영 거버넌스로 넓어지고 있음을 보여주는 주간 연구 스냅샷이다. 다만 이 페이지는 PyTorchKR 게시글의 요약이며, 각 논문의 실험 결과를 별도로 재현하거나 검증한 내용은 아니다.

후속으로 볼 링크와 키워드