Jev와 거래하는 것이 좋을까요? 테스트 후 저의 결론
요약
본 글은 AI 모델 'Jev'의 트레이딩 적용 가능성을 비판적으로 분석합니다. 저자는 Jev가 데이터 내에 답이 명확히 존재하는 분류나 라벨링 작업에는 강점을 보이지만, 미래 시장 행동이나 실제 거래 경로를 예측하는 데는 약하다고 지적합니다. 따라서 현재로서는 백테스팅을 거치기 전까지 트레이딩 자체보다는 주변 서류 작업(태깅, 확인)에 활용할 것을 권고합니다.
핵심 포인트
- Jev는 데이터 내 답이 있는 분류/라벨링 작업에 강점을 보임.
- 미래 시장 행동 예측에는 약하며, 텍스트 학습 모델의 한계가 있음.
- AI 트레이딩 주장을 검증하기 위한 5가지 체크리스트를 제시함.
- 실제 적용 시 수수료(slippage) 등 비용과 백테스팅이 필수적임.
Jev와 거래해야 할까요? 가격 데이터에 대해서는 아직 아닙니다. 시장을 읽는 데 있어 단순한 모델보다 낫다는 것을 보여준 사람을 찾지 못했고, 제가 직접 테스트했을 때도 Bitcoin 지표를 잘못 해석했습니다. Jev가 유용해 보이는 영역은 답이 이미 데이터 안에 있는 작업들입니다: 분류(classifying), 확인(checking), 목록에서 라벨 읽기(reading a label off a list). 백테스팅(backtesting)을 할 때까지는 거래 경로에서는 사용하지 않는 것이 좋습니다.
이 시리즈가 밝히고자 했던 것
Jev는 2026년 9월에 어디에나 나타났고, 게임 데모 옆에는 트레이딩 봇들이 있었습니다. 저는 이것들 중 어떤 것이 시장에서 실제로 작동하는지 알고 싶어서 그 흔적을 따라갔습니다:
| 파트 | 질문 | 간단한 답변 |
|---|---|---|
| 1 | Jev와 거래하여 결과를 보여주는 사람이 있나요? | 19개의 프로젝트를 읽었습니다. 대부분 데모였고, Jev가 더 간단한 것과 비교된 것은 4개였으며 Jev는 이기지 못했습니다 |
| ... |
왜 과대광고(hype)와 증거가 일치하지 않는가
세 가지 이유가 있다고 생각합니다.
데모는 쉽고 보기 좋습니다. Jev에게
| 작업 | Jev | 비교 대상 |
|---|---|---|
| 은행 고객 의도 분석 (77개 레이블) | 92.4%, 건당 약 $0.00014 | fine-tuned BERT 93.66% |
| ... |
패턴: Jev는 답이 입력 내에 있고 그것을 찾거나 레이블링해야 하는 경우 성능이 좋습니다. 하지만 답이 미래에 존재하고 특정 시장의 실제 행동 방식에 의존하는 경우에는 약합니다. 이는 텍스트로 학습된 모델이 적합하게 훈련되지 않은 영역이기 때문입니다.
따라서 제가 트레이딩 사업에 이를 사용한다면, 거래 자체보다는 거래 주변 서류 작업(거래 태깅, 규칙과 장부를 대조 확인, 지원 이메일 분류)에 사용할 것입니다.
모든 "AI 트레이딩" 주장을 위한 체크리스트
Jev든 다른 것이든 상관없이, 돈을 맡기기 전에 다음 다섯 가지 질문에 대한 답변을 받고 싶습니다.
- 무엇과 비교했는가? 동일한 데이터셋에서 단순 규칙 또는 일반 모델과 비교했는지 여부.
- 본 적 없는 데이터로 테스트했는가? 미리 선택된 별도의 테스트 기간이 있는지 여부.
- 비용을 고려했는가? 스프레드, 수수료, 슬리피지(slippage) 등. 제가 테스트한 최고의 신호는 거래당 1 베이시스 포인트 미만이었지만, 수수료는 15~20%에 달합니다.
- 입력을 올바르게 읽는가? 알려진 답을 가진 제어 질문을 통해, 나쁜 결과가 파싱(parsing) 문제 때문인지 아닌지 알 수 있어야 합니다.
- 실패하거나 확신하지 못할 때는 어떻게 되는가? 만약 답이 "거래가 진행된다"라면, AI는 장식품에 불과합니다.
제가 직접 사용하는 EA에 적용할 것들
저는 MT4/MT5 EA를 작성하며, 이는 QuantDinger가 실행하는 것이 아니므로 이 내용은 무엇을 가져올 수 있는지에 대한 것입니다. Jev에 관한 이야기는 아닙니다. 제가 여기서 유지하고 있는 것은 part 3에서 가져온 화려하지 않은 부분으로, 거래당이 아닌 전체 EA의 자산(equity)에 대한 손절매(stop), 그리고 한 번이라도 성공한 거래가 있어야만 활성화되는 트레일링 스탑입니다. 그리고 나중에 제가 추가할 모든 항목에 대한 규칙은 다음과 같습니다. 모델을 주문 앞에 두기 전에, 동일한 틱 데이터로 모델 유무를 모두 백테스트해야 합니다.
제 마음을 바꿀 만한 것
- 동일한 테스트를 통과하는 새로운 Jev 버전이 나왔습니다. 코드는 공개되어 있습니다: github.com/truongxxxx/jev-btc-test. 새 모델 이름으로 다시 실행하면 약 $0.19가 소요됩니다.
- 기준선(baseline) 대비, 미확인 데이터(unseen data)를 사용하여 비용을 포함한 Jev 거래 결과를 발표하는 분이 계신가요? 제가 기꺼이 이를 정리해 드리겠습니다.
- 가격에 정보가 담겨있지 않은 작업(뉴스, 공시 자료, 오더 플로우 등)으로, 저는 아직 테스트하지 않았습니다.
여기에 있는 모든 내용은 2026년 9월 말 시점의 스냅샷입니다. Jev는 빠르게 움직이고 있으며, 새로운 버전이 출시될 때마다 비트코인 테스트를 다시 실행하는 비용은 저렴합니다.
AI 자동 생성 콘텐츠
본 콘텐츠는 Dev.to AI tag의 원문을 AI가 자동으로 요약·번역·분석한 것입니다. 원 저작권은 원저작자에게 있으며, 정확한 내용은 반드시 원문을 확인해 주세요.
원문 바로가기