MCP Atlas
벤치마크 및 리더보드 · 부분유료
MCP를 통한 언어모델의 실전 도구 사용 능력을 평가
한눈에 보기
- 만든 곳
- Scale AI
- 한국어
- 없음(영어 등만)
- 쓸 수 있는 곳
- 웹
- 오픈소스
- 오픈소스(라이선스 이름 미표기)
MCP Atlas는 어떤 AI인가요?
MCP-Atlas는 언어모델이 MCP로 실제 도구를 얼마나 잘 쓰는지 평가한다. 사람이 쓴 1,000개 과제(공개 500·비공개 500)가 실제 MCP 서버 36개와 도구 220개에 걸쳐 있고, 과제마다 도구 호출 3~6번이 필요하다. 모델은 방해 도구가 섞인 목록에서 맞는 도구를 찾고, 올바른 인자로 호출하고, 오류에서 회복해 최종 답을 내야 한다. 정답을 주장(claim) 단위로 나눠 LLM 판정자가 채점하며 커버리지 75% 이상이면 통과로 본다.
- 1,000개 과제(공개 500·비공개 500)
- 실제 MCP 서버 36개·도구 220개(Docker)
- 방해(distractor) 도구 포함 도구 노출
- 주장 단위 LLM 판정 채점·통과율 지표
- 과제당 최대 100회 도구 호출 예산
- 논문·HuggingFace 데이터셋·GitHub 하네스 공개
MCP Atlas, 이런 사람·일에 써요
- 모델 개발자가 도구 사용 에이전트 성능 비교
가격
무료(공개 벤치마크/리더보드)
대부분 학술·커뮤니티 목적의 무료 공개 리더보드/데이터셋
AI 지식 기반 추정 - 공식 사이트 확인 권장
MCP Atlas와 비슷한 AI (대안)
MCP Atlas와 대안 한눈에 비교
| AI | 가격 | 지도 속 조합 | 연결된 도구 | 무료 | 가장 싼 월 요금 | 한국어 |
|---|---|---|---|---|---|---|
| MCP Atlas | 부분유료 | 0개 | 11개 | — | — | 없음 |
| APEX-Agents | 부분유료 | 0개 | 11개 | — | — | 없음 |
| ARC-AGI-2 | 부분유료 | 0개 | 11개 | — | — | 없음 |
| Context-Bench | 부분유료 | 0개 | 11개 | — | — | 없음 |
| OSWorld | 부분유료 | 0개 | 5개 | — | — | — |
비교한 5개 중 무료로 시작할 수 있는 곳은 0개예요. 요금은 각 공식 페이지 기준이에요.
조합·연결 수는 AI 갤럭시 지도에 정리된 관계 기준(2026-10-26)이며 품질 순위가 아닙니다.
AI 갤럭시 지도에서 본 MCP Atlas
- 벤치마크 및 리더보드 분야 AI 27개 가운데 하나예요.
- 다른 도구와 연결된 수 11개 — 같은 분야에서 6위예요.
자주 묻는 질문
MCP Atlas, 무료로 쓸 수 있나요?
무료(공개 벤치마크/리더보드). 요금은 바뀔 수 있으니 결제 전 공식 사이트에서 확인하세요.
MCP Atlas 대신 쓸 수 있는 AI는?
같은 일을 하는 도구로 APEX-Agents, ARC-AGI-2, Context-Bench, OSWorld 등이 지도에 연결돼 있어요.
MCP Atlas, 한국어로 쓸 수 있나요?
공식 페이지 기준: 없음(영어 등만).
출처(공식 페이지)
공식 페이지에서 확인한 내용(확인일 2026-10-14). 요금·기능은 바뀔 수 있으니 결제 전 공식 사이트에서 다시 확인하세요.