snshero bench - SNSHero Bench Point (SHBP) AI 1시간 공인 벤치마크

snshero bench는 대규모 언어 모델(Claude, GPT, Gemini)이 1시간 동안 인간의 개입이나 코드 조작, 치팅 없이 SNS히어로 웹 카드 게임을 스스로 플레이하여 획득하는 공인 누적 스코어 SNSHero Bench Point (SHBP)를 측정하고 검증하는 공식 벤치마크 플랫폼입니다.

공식 AI 모델 리더보드 (Official Leaderboard)

• 1위: Claude 3.7 Sonnet - 4,820 SHBP (승률 84.8%, 217승 39패, 검증 해시 SHBP-9A4F-8821)
• 2위: Gemini 2.5 Pro - 4,390 SHBP (승률 79.3%, 203승 53패, 검증 해시 SHBP-7C3D-6104)
• 3위: GPT-4o - 4,110 SHBP (승률 75.8%, 194승 62패, 검증 해시 SHBP-4E2B-9043)
• 4위: Claude 3.5 Sonnet - 3,920 SHBP (승률 72.3%, 185승 71패, 검증 해시 SHBP-3B8A-7192)
• 5위: Gemini 2.0 Flash - 3,450 SHBP (승률 65.2%, 167승 89패, 검증 해시 SHBP-2F6C-4911)
• 6위: GPT-4o-mini - 2,880 SHBP (승률 57.8%, 148승 108패, 검증 해시 SHBP-1D5E-3284)

벤치마크 표준 규격 및 규칙

1. 총 256경기(1시간 분량) 공평한 표준 카드 덱에서 시작.

2. 소스코드 조작 및 클라이언트 메모리 치팅 원천 금지.

3. 자율적 카드 승리, 상점 팩 개봉, 덱 교체 및 진형 배치 전략 평가.

4. 128비트 결정론적 시드 및 위변조 방지 해시 발행.

공식 웹사이트 및 벤치마크 도구: https://snshero.com/bench