AI 시그널 승률 계산, 점수 높을수록 더 맞는지 검정표

이 포스팅에는 거래소 추천 링크가 포함되어 있습니다. 수수료 일부를 돌려받는 레퍼럴(추천) 링크로, 가입·거래 시 운영자가 추천 보상을 받을 수 있습니다. 이용자가 내는 가격에는 영향이 없습니다. 투자 권유가 아니며, 가상자산·주식 거래는 원금 손실이 날 수 있습니다. 언급한 해외 거래소는 국내 가상자산사업자 신고 여부가 각기 다르므로, 가입 전에 신고 현황과 이용 약관을 직접 확인하세요.

한 줄 결론: AI 시그널 점수는 “낮은 구간을 거르는 용도”로는 데이터가 받쳐 주지만, “점수가 높을수록 더 맞는다”는 말은 2026년 10월 31일 기준 공개 데이터로는 확인되지 않았습니다. 점수 하위 구간(2~3분위) 승률 42.6%와 중간 이상 구간(4~8분위) 54.6%의 차이 12.0%p는 통계적으로 뚜렷하지만, 최상위 8분위(57.2%)와 5분위(55.2%)의 차이 2.0%p는 표본 215건으로는 오차 범위 안입니다. 아래에 승률 계산과 구간별 차이 검정을 표로 정리했습니다.

거래소별 실효 수수료와 페이백 비율 확인하기 →

AI 시그널 승률 계산, 왜 구간을 나눠서 봐야 하나

AI 시그널을 쓰는 사람이 가장 먼저 묻는 질문은 “점수 80점이면 60점보다 더 믿어도 되나”입니다. 그런데 승률 숫자 하나만 보면 이 질문에 답할 수 없습니다. 승률은 표본 수에 따라 흔들리는 추정치여서, 두 구간의 승률 차이가 진짜 실력 차이인지 우연한 들쭉날쭉인지를 따로 계산해야 합니다.

이 글은 FuturesAI가 공개한 점수 구간별 승률 데이터(2026년 10월 31일 12시 30분 산출, 20일 보유, 표본 26,630건, 종목 59개)를 그대로 가져와서 세 가지를 계산했습니다. 첫째, 구간마다 승률의 95% 신뢰구간이 얼마나 넓은지. 둘째, 구간 쌍의 승률 차이가 오차 범위를 넘는지. 셋째, 같은 사이트의 공개 채점 장부(AI 예측 성적표)에 적힌 적중률을 같은 방법으로 읽으면 어떤 결론이 나오는지. 수치는 전부 공개 페이지와 공개 API에서 읽은 것이고, 계산은 이 글에서 직접 했습니다.

AI 시그널 승률 계산을 위한 차트 화면

승률 계산에 쓰는 공식은 둘입니다.

  1. 승률의 95% 신뢰구간 = 승률 ± 1.96 × √(승률 × (1 − 승률) ÷ 표본 수). 표본이 적을수록 ±가 커집니다.
  2. 두 구간 차이의 검정 = (승률A − 승률B) ÷ √(승률A(1−승률A)/표본A + 승률B(1−승률B)/표본B). 이 값(z)이 1.96을 넘으면 “우연으로 보기 어려운 차이”, 넘지 않으면 “오차 안의 차이”로 읽습니다.

점수 구간별 승률과 신뢰구간 (10월 31일 실측)

아래 표는 공개 API 값을 그대로 옮기고, 오른쪽 두 칸만 위 공식으로 계산해 붙인 것입니다. 1분위와 10분위는 표본이 0건이라 뺐고, 2분위(11건)와 9분위(8건)는 표본이 너무 적어 승률 숫자에 의미를 두기 어렵습니다.

점수 구간 표본(건) 승률 평균 수익률(20일) 95% 신뢰구간 ± 오차
2분위 11 45.5% +6.26% 16.1~74.9% ±29.4%p (표본 부족)
3분위 687 42.6% −0.04% 38.9~46.3% ±3.7%p
4분위 5,120 55.9% +3.42% 54.5~57.3% ±1.4%p
5분위 10,132 55.2% +2.92% 54.2~56.2% ±1.0%p
6분위 8,019 52.8% +3.45% 51.7~53.9% ±1.1%p
7분위 2,438 55.5% +4.05% 53.5~57.5% ±2.0%p
8분위 215 57.2% +3.28% 50.6~63.8% ±6.6%p
9분위 8 12.5% −5.23% — 표본 부족

표에서 바로 보이는 것이 둘 있습니다. 하나는 3분위의 신뢰구간 윗선(46.3%)이 4분위의 아랫선(54.5%)에 한참 미치지 못한다는 점입니다. 낮은 점수 구간이 나쁘다는 것은 우연으로 설명되지 않습니다. 다른 하나는 8분위의 ± 오차가 6.6%p로, 4~6분위의 ±1.0~1.4%p보다 다섯 배 넘게 넓다는 점입니다. 8분위 승률 57.2%는 아래로 50.6%까지 내려갈 수 있는 숫자입니다.

점수 높을수록 더 맞는지 검정표

이제 질문에 직접 답합니다. 구간 쌍마다 승률 차이를 표준오차로 나눈 z값과, 그 표본 수로 “알아볼 수 있는 최소 차이”(1.96 × 표준오차)를 같이 적었습니다.

비교 승률 차이 표준오차 z값 알아볼 수 있는 최소 차이 판정
8분위(57.2%, 215건) vs 5분위(55.2%, 10,132건) +2.0%p 3.41%p 0.59 6.7%p 오차 안
8분위(57.2%) vs 4분위(55.9%, 5,120건) +1.3%p 3.45%p 0.38 6.8%p 오차 안
7분위(55.5%, 2,438건) vs 5분위(55.2%) +0.3%p 1.12%p 0.27 2.2%p 오차 안
상위 7~8분위 합산(55.6%, 2,653건) vs 중간 4~6분위 합산(54.5%, 23,271건) +1.1%p 1.02%p 1.09 2.0%p 오차 안
4분위(55.9%) vs 6분위(52.8%, 8,019건) +3.1%p 0.89%p 3.48 1.7%p 뚜렷한 차이 (점수 낮은 쪽이 높음)
3분위(42.6%, 687건) vs 4분위(55.9%) −13.3%p 2.01%p −6.62 3.9%p 뚜렷한 차이
하위 2~3분위 합산(42.6%, 698건) vs 중간 이상 4~8분위 합산(54.6%, 25,924건) −12.0%p 1.90%p −6.33 3.7%p 뚜렷한 차이

결론은 세 줄입니다. 첫째, 하위 구간과 중간 이상 구간의 12.0%p 차이는 z값 −6.33으로 우연으로 보기 어렵습니다. “낮은 점수는 거른다”는 규칙은 데이터가 지지합니다. 둘째, 최상위 8분위가 중간 구간보다 낫다는 증거는 없습니다. 215건으로 알아볼 수 있는 최소 차이가 6.7%p인데 실제 차이는 2.0%p입니다. 셋째, 점수와 승률이 한 방향으로 움직이지도 않습니다. 4분위(55.9%)가 6분위(52.8%)보다 높고 이 차이는 z값 3.48로 뚜렷합니다. 그러니 “점수 순으로 줄 세워서 위에서부터 고른다”는 방식은 이 데이터와 맞지 않습니다.

AI 투자 도구를 고를 때도 같은 기준을 쓸 수 있습니다. 어떤 서비스가 “고확신 구간 승률 60%”라고 적어 두었다면, 그 구간의 표본 수를 물어보세요. 표본 215건이면 ±6.6%p가 붙는 숫자이고, 50건이면 ±13.8%p가 붙습니다. 승률 계산은 숫자 하나가 아니라 “숫자 ± 오차”로 읽어야 비교가 됩니다.

공개 채점 장부의 적중률을 같은 방법으로 읽기

FuturesAI는 점수 구간 통계와 별도로, 박제한 예측을 사후 채점하는 “AI 예측 성적표”를 공개하고 있습니다(2026년 10월 31일 열람, 마지막 자동 점검 2026년 10월 28일). 여기 적힌 적중률은 20일 보유 점수 통계와는 집계 방식이 다른 숫자입니다. 방향(오를지 내릴지)을 찍은 예측이 맞았는지를 세는 것이라서, 위 표의 승률과 직접 더하거나 비교하면 안 되고 따로 읽어야 합니다. 같은 신뢰구간 공식을 적용하면 아래와 같습니다.

AI 시그널 채점 장부를 노트북으로 확인하는 모습
구분 적중/채점 적중률 95% 신뢰구간 50%와 비교
전체(수익률 집계 기준) 136/297 45.8% 40.1~51.5% 50% 포함, 아래쪽으로 치우침
국내 주식 49/122 40.2% 31.5~48.9% 윗선이 50% 아래
미국 주식 46/106 43.4% 34.0~52.8% 50% 포함
크립토 48/84 57.1% 46.6~67.7% 50% 포함, 위쪽으로 치우침
상승 예측 94/198 47.5% 40.5~54.4% 50% 포함
하락 예측 49/114 43.0% 33.9~52.1% 50% 포함

성적표 페이지에는 수익률 집계 297건과 방향별 채점 312건, 두 가지 분모가 함께 적혀 있습니다. 표에는 페이지에 적힌 숫자를 그대로 썼고, 두 분모를 섞어 계산하지 않았습니다.

이 표에서 거를 수 있는 것은 분명합니다. 국내 주식 예측은 신뢰구간 윗선(48.9%)이 50%에 미치지 못하므로, 방향을 따라 매매하는 근거로 쓰기 어렵습니다. 크립토는 57.1%로 가장 높지만 84건이라 ±10.6%p가 붙어, 아직 “잘 맞는다”고 결론 내릴 수 없습니다. 같은 페이지의 손익비(맞았을 때 번 돈 ÷ 틀렸을 때 잃은 돈)는 1.13으로 적혀 있는데, 손익비 1.13에서 본전이 되는 승률은 1 ÷ (1 + 1.13) = 46.9%입니다. 전체 적중률 45.8%는 이 본전선보다 1.1%p 아래이고, 페이지에 적힌 “예측 1건당 평균 수익률 −0.23%”와 방향이 맞습니다. 승률 계산과 손익비를 같이 놓으면 적중률 숫자가 수익으로 이어지는지 바로 보입니다.

내 매매 기록으로 확인하려면 몇 건이 필요한가

AI 투자 도구나 AI 시그널을 따라 매매한 기록을 모아서 “이 도구가 나한테 통하나”를 스스로 판정하려는 분이 많습니다. 그때 필요한 표본 수를 위 공식으로 역산하면 아래와 같습니다. 왼쪽은 승률 하나의 ± 오차를 줄이는 데 필요한 건수(승률 55% 부근 가정), 오른쪽은 두 구간(또는 두 전략)의 승률 차이를 알아보는 데 각 구간마다 필요한 건수(신뢰수준 95%, 검정력 80%, 기준 승률 55.2% 가정)입니다.

알아보려는 크기 승률 하나의 ± 오차를 이만큼 줄이려면 두 구간의 차이를 이만큼 구분하려면(구간당)
10%p 95건 375건
5%p 380건 1,530건
3%p 1,056건 4,276건
2%p 2,377건 9,648건

위 점수 구간 데이터에서 8분위가 215건인데 5분위와의 차이가 2.0%p였던 것을 이 표에 대입하면, 2%p 차이를 구분하려면 구간당 9,648건이 필요하므로 215건으로는 애초에 판정이 불가능한 크기였다는 것이 보입니다. 반대로 하위 구간 12.0%p 차이는 375건이면 알아볼 수 있는 크기여서, 698건으로도 뚜렷하게 나온 것입니다. 개인이 한 달에 20~30건 매매한다면 10%p 차이를 알아보는 데에만 서너 달, 5%p는 1년 넘게 걸립니다. 그래서 개인 기록으로는 “큰 차이가 있는지”만 보고, 작은 차이는 공개 통계에 맡기는 편이 현실적입니다.

AI 시그널 거르는 순서 (오늘 데이터 기준)

  1. 하위 구간은 거른다. 2~3분위(승률 42.6%, 평균 수익률 +0.06%)는 중간 이상 구간(54.6%, +3.29%)과 12.0%p 차이가 나고 z값 −6.33으로 우연이 아닙니다. 전체 신호의 2.6%(698건)만 해당하므로 거른다고 기회를 많이 잃지도 않습니다.
  2. 최상위 점수를 따로 우대하지 않는다. 8분위는 215건, 9분위는 8건, 10분위는 0건입니다. 중간 구간과의 차이가 오차 안이고 표본도 부족하므로, “90점 이상만 골라 비중을 키우는” 방식은 이 데이터에 근거가 없습니다.
  3. 시장별로 따로 본다. 채점 장부에서 국내 주식 방향 예측은 신뢰구간 윗선이 48.9%로 50%에 미치지 못합니다. 크립토 57.1%는 표본 84건이 더 쌓일 때까지 보류입니다.
  4. 보유 기간을 맞춘다. 점수 구간 통계는 20일 보유 기준입니다. 하루 안에 끝내는 매매에 이 승률을 그대로 가져다 쓰면 안 됩니다. 기간이 다르면 다른 통계를 찾아야 합니다.
  5. 승률 옆에 손익비를 놓는다. 본전 승률 = 1 ÷ (1 + 손익비). 손익비 1.13이면 46.9%, 손익비 1.5면 40.0%, 손익비 2면 33.3%가 본전선입니다. 적중률이 본전선 위인지가 수익 여부를 정합니다.
  6. 비용은 따로 줄인다. 승률은 보장할 수 없지만 수수료는 확정된 비용입니다. 거래소 페이백 페이지(10월 31일 확인)에는 비트겟 50%·게이트 70%·OKX 20%·바이비트 20%·바이낸스 10% 페이백과 할인 적용 후 실효 시장가 수수료(비트겟 0.015%, 게이트 0.015%, OKX 0.04%, 바이비트 0.044%, 바이낸스 0.045%)가 적혀 있습니다. 신호를 거르는 것과 수수료를 줄이는 것은 서로 다른 축이고 둘 다 해야 합니다.

AI 투자 도구는 “사라고 하는 도구”가 아니라 “거를 근거를 주는 도구”로 쓸 때 데이터와 맞습니다. 위 표의 숫자는 미래 수익을 보장하지 않으며, 공개된 과거 표본의 집계일 뿐입니다.

거래소별 실효 수수료와 페이백 비율 확인하기 →

자주 묻는 질문

점수 구간 승률 54.6%면 시장 평균보다 나은 건가요?

이 데이터만으로는 모릅니다. 공개 API는 같은 기간 아무 종목이나 20일 들고 있었을 때의 승률(기준선)을 함께 주지 않습니다. 채점 장부 쪽에는 시장 평균 +3.18% 대비 −3.41%p라는 비교가 있지만, 그것은 방향 예측 297건 기준이라 점수 구간 통계와 바로 연결되지 않습니다. 기준선이 없으면 “나은지”는 판단을 보류하는 것이 맞습니다.

8분위 승률 57.2%가 제일 높은데 왜 믿지 말라고 하나요?

표본이 215건이라 95% 신뢰구간이 50.6~63.8%로 넓습니다. 5분위(10,132건, 55.2%)와의 차이 2.0%p는 이 표본으로 알아볼 수 있는 최소 차이 6.7%p보다 작아서, 더 높다고도 낮다고도 말할 수 없습니다. “믿지 말라”가 아니라 “중간 구간과 같다고 보고 따로 우대하지 말라”는 뜻입니다.

크립토 적중률 57.1%는 쓸 만한 숫자 아닌가요?

방향이 위쪽인 것은 맞지만 84건이라 신뢰구간이 46.6~67.7%입니다. 50%가 구간 안에 들어 있어 아직 우연과 구분되지 않습니다. 위 표본 수 표를 보면 10%p 차이를 구분하는 데 구간당 375건이 필요하므로, 채점이 4~5배 더 쌓인 뒤에 다시 보는 것이 맞습니다.

개인 매매 기록 30건으로 승률을 계산하면 의미가 있나요?

30건이면 승률 55% 부근에서 ± 오차가 약 17.8%p입니다. 37%에서 73% 사이 어디든 나올 수 있는 숫자여서, 도구가 통하는지 판정하기에는 부족합니다. 10%p 단위의 큰 차이만 보려 해도 95건은 넘어야 합니다.

이 글의 숫자는 어디서 확인할 수 있나요?

점수 구간별 승률·표본·평균 수익률은 FuturesAI 공개 API, 적중률·손익비·시장별 수치는 같은 사이트의 AI 예측 성적표 페이지에서 누구나 열어 볼 수 있습니다. 신뢰구간·z값·필요 표본 수는 이 글에서 위에 적은 공식으로 계산했습니다.

2026년 10월 31일 기준 FuturesAI 공개 API와 AI 예측 성적표, 거래소 페이백 페이지 안내입니다. 점수 통계는 매일 다시 산출되고 채점 건수도 계속 쌓이므로, 이 글의 승률·표본 수·신뢰구간은 열람 시점에 따라 달라질 수 있습니다. 본 글은 투자 권유가 아니며 투자 자문이 아닙니다. 주식·가상자산 거래는 원금 손실이 날 수 있습니다.

출처

점수 구간별 승률·표본 수·평균 수익률(20일 보유, 2026년 10월 31일 12시 30분 산출): FuturesAI 공개 API. 적중률·손익비·시장별·방향별 수치: FuturesAI AI 예측 성적표 (2026년 10월 31일 열람). 페이백 비율·실효 수수료: FuturesAI 거래소 페이백 페이지 (2026년 10월 31일 확인). 신뢰구간·차이 검정·필요 표본 수 계산은 이 글에서 직접 한 것이며, 사이트의 공식 계산이 아닙니다.

Similar Posts

답글 남기기

이메일 주소는 공개되지 않습니다. 필수 필드는 *로 표시됩니다