출처

개요

AI 에세이스트 Gwern이 “가디언 엔젤(Guardian Angel)“이라는 AI 비서 구상을 제안했다. 강력한 LLM이 몇 년 안에 일상 전반을 지배하게 될 텐데도, 이를 생산성으로 바꾸고 동시에 사이버 보안까지 지킬 뚜렷한 그림이 없다는 문제의식에서 출발한다. 핵심은 AI 비서가 “누구에게나 똑같이 친절한 챗봇 페르소나”가 아니라, 한 사람의 성격·가치관·판단 기준을 학습해 그 사람 자체를 닮아야 한다는 것.

핵심 포인트

  • 본인-대리인 문제를 학습으로 푼다: 원래 이 문제는 대리인(비서·직원·에이전트)이 본인(의뢰인)의 이익과 다르게 행동할 위험을 가리킨다. 대리인이 본인의 가치관·판단 기준을 그대로 학습해 움직이면 둘 사이 간극 자체가 줄어든다는 논리 — 사람은 “무엇을 할 가치가 있는가”만 정하고, 실행 방법은 자신을 닮은 AI에게 맡기는 구조.
  • 개인화가 곧 보안이다: 범용 챗봇은 그럴듯하게 들리는 요청이면 누구의 것이든 따르도록 설계돼 프롬프트 공격에 취약한 “혼란한 대리인” 문제가 생기기 쉽다. 가디언 엔젤은 처음부터 단 한 사람만을 위해 만들어져, 그 사람이 아닌 지시를 따르는 것 자체가 존재 이유와 모순되므로 딥페이크·피싱·프롬프트 공격에 대한 공격 표면이 좁아진다는 논리.
  • 고정 모델·프롬프트 엔지니어링만으론 불가능: 미리 학습을 마친 고정 모델에 프롬프트만 잘 짜 넣는 지금 방식으로는 만들 수 없다고 못박음. 컨텍스트 창 한계와 정적 데이터 수집이 현재 챗봇의 근본적 한계라고 지적.
  • 필요한 3가지 기법: (1) 모델이 실시간으로 계속 갱신되는 학습 방식, (2) 사용자에게 직접 질문해 선호·판단 기준을 캐내는 능동적 학습, (3) 명령창 기반으로 모든 상호작용을 꼼꼼히 기록하는 인터페이스. 이 조합으로 정지된 최신 모델과 견줄 성능을 유지하면서 시간이 지날수록 사용자를 더 정확히 닮아가도록 만들 수 있다는 구상.
  • 누가 만들 수 있는가: 오픈소스 커뮤니티보다는 스타트업 형태가 더 현실적 — 높은 수준의 보안과 국가급 공격 세력까지 상대해야 하므로, 처음엔 CEO·연구자 같은 고급 사용자를 대상으로 시작해 점차 일반 사용자로 넓혀가는 편이 맞다고 봄.

왜 중요한가

“AI를 내 일을 대신 해주는 도구로 볼 것이냐, 나 자신을 정교하게 확장한 존재로 볼 것이냐”는 완전히 다른 제품 설계로 이어진다는 프레이밍이 핵심이다. 현재 대부분의 에이전트 제품(범용 어시스턴트)이 전자를 택하고 있는 것과 대비해, 개인화·보안을 동시에 푸는 대안 축을 제시한다는 점에서 참고할 가치가 있다.

참고 링크

관련 위키