CORE-Bench Hard
벤치마크 및 리더보드 · 부분유료
에이전트가 종속성을 설치하고 발표된 과학 코드를 실행·질문에 답하는 벤치마크
한눈에 보기
- 만든 곳
- HAL
- 한국어
- 없음(영어 등만)
CORE-Bench Hard는 어떤 AI인가요?
CORE-Bench는 에이전트가 발표된 과학 논문의 결과를 계산적으로 재현하는 능력을 평가한다. Hard 단계에서는 논문의 코드베이스만 주어지고, 에이전트가 라이브러리와 의존성을 설치하고 코드를 실행한 뒤 출력과 그림을 읽고 논문에 대한 질문에 답해야 한다. 논문 90편(공개 테스트 세트 45편)으로 구성되며 3개 스캐폴드·27개 모델로 49건을 평가했다. 현재 HAL 리더보드는 새 모델 업데이트를 멈추고 에이전트 신뢰성 측정에 집중하고 있다.
- 실제 출판 논문 기반 과제
- 코드 이해·의존성 관리·결과 해석을 함께 평가
- 쉬움~어려움 3단계 난이도
- 논문 90편, 공개 테스트 세트 45편
- 49건 평가(3개 스캐폴드, 27개 모델)
- 모델별 정확도·비용 표시
가격
무료(공개 벤치마크/리더보드)
대부분 학술·커뮤니티 목적의 무료 공개 리더보드/데이터셋
AI 지식 기반 추정 - 공식 사이트 확인 권장
CORE-Bench Hard와 비슷한 AI (대안)
CORE-Bench Hard와 대안 한눈에 비교
| AI | 가격 | 지도 속 조합 | 연결된 도구 | 무료 | 가장 싼 월 요금 | 한국어 |
|---|---|---|---|---|---|---|
| CORE-Bench Hard | 부분유료 | 0개 | 12개 | — | — | 없음 |
| Aider Leaderboard | 부분유료 | 0개 | 12개 | — | — | 없음 |
| Live-SWE-agent | 부분유료 | 0개 | 12개 | — | — | 없음 |
| SWE-bench | 부분유료 | 0개 | 5개 | — | — | 없음 |
| SWE-bench Multilingual | 부분유료 | 0개 | 5개 | — | — | 없음 |
비교한 5개 중 무료로 시작할 수 있는 곳은 0개예요. 요금은 각 공식 페이지 기준이에요.
조합·연결 수는 AI 갤럭시 지도에 정리된 관계 기준(2026-10-26)이며 품질 순위가 아닙니다.
AI 갤럭시 지도에서 본 CORE-Bench Hard
- 벤치마크 및 리더보드 분야 AI 27개 가운데 하나예요.
- 다른 도구와 연결된 수 12개 — 같은 분야에서 1위예요.
자주 묻는 질문
CORE-Bench Hard, 무료로 쓸 수 있나요?
무료(공개 벤치마크/리더보드). 요금은 바뀔 수 있으니 결제 전 공식 사이트에서 확인하세요.
CORE-Bench Hard 대신 쓸 수 있는 AI는?
같은 일을 하는 도구로 Aider Leaderboard, Live-SWE-agent, SWE-bench, SWE-bench Multilingual 등이 지도에 연결돼 있어요.
CORE-Bench Hard, 한국어로 쓸 수 있나요?
공식 페이지 기준: 없음(영어 등만).
출처(공식 페이지)
공식 페이지에서 확인한 내용(확인일 2026-10-14). 요금·기능은 바뀔 수 있으니 결제 전 공식 사이트에서 다시 확인하세요.