AI에게 투자를 맡겨 봤다는 영상, 결과는 얼마나 믿을 수 있나
AI 다섯 개에 1,000달러씩 맡겼더니 Claude가 2,400달러를 만들었다는 팟캐스트 영상이 조회 63만 회를 넘겼습니다. 이런 AI 대결 결과를 얼마나 믿을 수 있는지, 일반 사용자는 무엇을 해 볼 수 있는지 정리했습니다.
유튜브와 X, 인스타그램에는 "AI에게 투자를 시켜 봤다", "AI 다섯 개를 겨루게 했다" 같은 게시물이 자주 보입니다. 그중 조회 63만 회를 넘긴 것이 미국 팟캐스트 The Koerner Office Podcast가 2026년 7월 공개한 영상입니다. 출연자 Brandon Doyle은 ····Perplexity에 1,000달러씩 맡기고, 다른 넷을 이기지 못하면 그 회사의 유료 구독을 끊겠다고 했습니다.
Doyle이 영상에서 휴대폰 화면을 보며 읽어 준 결과는 Claude 2,400달러, ChatGPT 1,739달러, Perplexity 1,731달러, Grok 1,451달러, Gemini 445달러입니다. 계좌 증빙은 확인하지 못했습니다. 그럼 투자는 Claude에게 맡기면 될까요. 결론부터 말하면, 이 숫자만으로는 그렇게 말하기 어렵습니다.
이런 결과를 얼마나 믿을 수 있나
이유는 세 가지입니다.
첫째, 한 사람이 한 번 해 본 결과이고, 실험도 아직 진행 중입니다. 같은 모델도 조건이 바뀌면 결과가 크게 달라집니다. AI 연구 회사 Nof1은 AI 거래 대회 Alpha Arena의 두 번째 시즌(시즌 1.5)에 모델 여덟 개를 설정이 다른 대회 네 곳에 하나씩 내보냈습니다. 같은 Sonnet 4.5도 대회에 따라 수익률이 -19%에서 -72%까지 벌어졌습니다. 모델 여덟 개가 대회 네 곳에서 낸 결과 32개 가운데 수익률이 플러스인 것은 6개였습니다. Nof1은 첫 시즌을 소개하면서 "초반 성과는 운이 좋았던 덕일 수도 있다"고 적었습니다.
둘째, 조건이 처음부터 끝까지 같지 않았습니다. Doyle은 새 모델이 나올 때마다 최신 버전으로 바꿨습니다. 매주 각 AI에 보유 현황을 보여 주고 다음 매매를 물었는데, 처음에는 다른 AI가 산 종목도 자주 보여 주다가 도중에 한 달에 한 번으로 줄였습니다. 주문도 AI가 아니라 Doyle이 직접 넣었습니다.
셋째, 결과를 만든 것은 AI보다 지시와 상품일 수 있습니다. Doyle은 "최대한 위험하게 해도 되고 돈을 다 잃어도 괜찮다"고 지시했고, 모델들이 결국 레버리지 ETF 매매로 자리 잡았다고 말했습니다. 레버리지 ETF는 지수의 하루 변동폭을 몇 배로 따라가는 상품이라 오를 때 크게 벌고 내릴 때 크게 잃습니다. Doyle 말로는 Claude의 종목에도 반도체 종목을 3배로 따라가는 SOXL이 들어 있었습니다.
올린 사람도 함께 봐야 합니다. 이 영상의 출연자는 AI 솔루션·마케팅 회사 창업자이고, 영상 설명란에는 진행자의 유료 상품과 제휴 링크가 있습니다. 대결 영상이 틀렸다는 뜻은 아니지만, 결과가 화제가 될수록 이득을 보는 사람이 있다는 점은 알고 보는 편이 좋습니다.
일반 사용자가 해 볼 수 있는 것
투자 대결을 따라 실제 돈을 넣을 필요는 없습니다. 내가 쓸 AI를 고르는 비교는 집에서도 할 수 있습니다.
- 내가 실제로 하는 일 하나를 고릅니다. 메일 답장, 보고서 요약, 엑셀 수식처럼 잘했는지를 내가 판단할 수 있는 일이 좋습니다.
- 같은 지시문과 같은 자료를 여러 AI에 똑같이 넣습니다.
- 한 번이 아니라 세 번 이상 시켜 봅니다. 한 번의 좋은 답보다 매번 비슷하게 해내는지가 중요합니다.
- 어디서 틀렸는지를 적어 둡니다.
AI 비서처럼 일을 통째로 맡기는 도구를 고를 때도 같은 방법으로 비교할 수 있습니다. 남이 올린 AI 대결 게시물을 볼 때는 세 가지만 확인하면 됩니다.
- 결과를 계좌·거래 내역·작업 기록으로 확인할 수 있는가
- 모델 버전·지시·시기가 같았고, 몇 번 해 봤는가
- 올린 사람이 무엇을 파는가
