개인용 AI 도우미에 구독료를 낼 이유는 할 수 있는 일의 목록이 길어서가 아닙니다. 메일을 분류하고, 필요한 일정을 잡고, 놓치기 쉬운 행정 업무를 실제로 끝내는지가 더 중요한 기준으로 보입니다. 여기에 사용자가 맡기지 않은 중요한 결정은 하지 않는다는 신뢰까지 갖춰야 합니다.
요청에 답하는 것과 일을 끝내는 것은 다릅니다
AssistantBench는 개인용 AI 도우미 122개를 추적하며 실제 생활 과제로 성능을 비교합니다. 이 가운데 26개를 직접 시험했고, 과제 성공 여부와 응답 속도, 필요한 확인 질문을 하는지 등을 포함한 16개 항목으로 평가합니다. 제품이 제공한다고 적어 둔 기능보다 사용자의 한 번의 요청을 어떻게 처리하는지에 무게를 둔 방식입니다.
예를 들어 시카고행 항공편을 예약하거나 지정한 위치에서 다섯 블록 안의 채식 식당을 찾도록 요청합니다. 이때 살펴볼 것은 그럴듯한 답변만 내놓는지가 아닙니다. 요청을 완료하는 데 필요한 정보가 빠졌다면 되묻는지, 주어진 조건에 맞는 결과에 도달하는지 확인해야 합니다. 결제처럼 결과를 되돌리기 어려운 단계에서는 사용자의 승인을 받는지도 별도로 봐야 합니다.
추적 대상 122개 중 64개는 여러 일상 과제를 폭넓게 처리하려는 일반 소비자용 도우미입니다. 하지만 다룰 수 있는 분야가 넓다는 사실만으로 매달 쓰게 되는 것은 아닙니다. 유료 서비스의 가치를 판단하려면 자신이 반복해서 맡길 과제에서 성능을 확인하는 편이 적절합니다.
여행 예약보다 자주 돌아오는 업무
여행 계획은 AI 도우미의 능력을 보여 주기 좋은 과제입니다. 다만 대부분의 사람은 여행을 자주 가지 않아서 일상적인 사용 습관으로 이어지기는 어려워 보입니다. AI agent(목표를 위해 자율적으로 작업을 이어 가는 AI)를 적극적으로 쓰는 사용자와 개발자 1,200여 명이 모인 대화방들에서도 여행은 네 번째로 많이 논의된 주제였고, 실제 쓰임으로 가장 많이 꼽힌 것은 받은편지함 정리, 문서 분류, 반복 양식 작성 같은 일상 행정 업무였습니다. 이 사용자들은 기술에 밝은 편이라 일반 소비자 전체의 요구로 보기는 어렵지만, 매일 돌아오는 부담을 덜어 주는 일이 더 자주 쓰인다는 점은 참고할 만합니다.
음성 도우미의 쓰임도 이 차이를 드러냅니다. ChatGPT Voice에 Gmail과 Google Calendar를 연결해 30분 동안 자전거로 출근하면서 메일을 분류하고, 태그를 붙이고, 일정 초대를 보낸 사례가 있습니다. 책상에 도착했을 때 받은편지함이 비어 있었다는 결과가 중요합니다. 대화가 자연스러웠다는 평가보다 실제로 남은 일이 줄었는지를 보여 주기 때문입니다.
▲ 여행과 일상 업무의 차이
재무 행정에서도 같은 기준을 적용할 수 있습니다. 이미 예약한 항공편의 가격이 내려갔는지 살펴보고 항공사에 연락해 여행 크레딧을 돌려받는 사례처럼, 이전에는 사용자가 확인하고 처리해야 했던 일을 대신 마치는 것입니다. 이는 투자 수익을 약속하는 기능과 다릅니다. 이미 받을 수 있는 혜택을 찾고 행정 절차를 처리하는 데 가깝습니다.
먼저 움직이되, 결정권은 넘지 않아야 합니다
도우미는 지시를 기다릴 수도 있고, 위임받은 범위에서 스스로 다음 단계를 진행하는 agent로 작동할 수도 있습니다. 후자가 시간을 더 아껴 줄 수 있지만, 무엇을 승인 없이 해도 되는지 정해 두지 않으면 신뢰를 잃기 쉽습니다.
예를 들어 메일 답장을 초안으로 만들거나 항공권 가격 변화를 확인하는 일은 사용자가 검토할 여지를 남깁니다. 반면 보험 상품이 더 저렴하다는 이유로 기존 계약을 해지하고 새 상품을 구매하는 일은 다릅니다. 이런 변경은 대안을 제시한 뒤 명시적인 승인을 받아야 합니다. 중요한 일을 한 번이라도 허락 없이 처리하면 이후에 다른 업무를 맡기기 어려워질 수 있습니다.
▲ 자동 실행과 승인 경계
따라서 자동화 수준을 높이는 것 자체가 목표가 되어서는 안 됩니다. 어디까지는 알아서 진행하고, 어느 단계에서 멈춰 확인할지를 과제별로 구분해야 합니다. 사용자가 매번 작업을 지켜봐야 한다면 자동화의 이점이 줄고, 확인이 필요한 결정을 건너뛴다면 맡길 근거가 사라집니다.
유료 상품이 많아도 구독 가치는 별개입니다
AssistantBench가 추적한 122개 가운데 35개는 처음부터 유료이고, 30개는 무료 사용량에 제한을 둔 부분 유료 상품입니다. 완전 무료 상품은 13개입니다. 유료 또는 부분 유료가 합쳐서 65개라는 사실은 가격을 받는 서비스가 이미 많다는 뜻이지, 그만큼의 가치가 검증됐다는 뜻은 아닙니다.
비용과 가격에 관한 전망도 구분해 볼 필요가 있습니다. 복잡한 브라우저 작업을 수행하는 도우미는 사용량이 많을 때 운영비가 사용자당 하루 약 $20에 이를 수 있다는 추정이 있습니다. 특정 분야에 깊이 맞춘 도우미라면 월 $200~300를 낼 수 있는 수요가 있다는 전망도 제시됩니다. 둘 다 모든 도우미의 비용이나 모든 이용자의 지불 의사를 뜻하지는 않습니다.
구독 전에는 내 업무 하나로 시험합니다
유료 도우미를 고른다면 기능 목록 대신 자주 미루는 업무 하나를 기준으로 삼는 편이 좋습니다. 메일 정리나 일정 조율처럼 결과를 확인할 수 있는 요청을 해 보고, 정보가 부족할 때 되묻는지, 실제로 어디까지 처리했는지 살펴봅니다. 이어서 초안 작성 같은 낮은 위험의 작업과 결제·계약 변경처럼 승인이 필요한 작업을 구분해 둡니다.
여행 예약 시연 한 번보다 반복 업무를 꾸준히 끝내는 성능이 구독료를 판단하는 데 더 직접적인 근거가 됩니다. 믿고 맡길 수 있는 범위가 명확하고, 그 범위 안에서 일이 완료될 때 개인용 AI 도우미는 유료 서비스로서 가치를 얻을 수 있습니다.