관측성 및 평가 AI 27개
Observability & Evals 분야의 AI 서비스를 모았습니다. 이름을 누르면 자세한 설명·가격·대안을 볼 수 있어요.
관측성 및 평가 무료·요금·한국어 비교
공식 요금 자료가 있는 13개를 묶었어요. 무료로 시작할 수 있는 곳 12개, 한국어 화면이 있는 곳 0개예요. 유료 중 가장 싼 곳은 Opik($19/월)예요.
| 도구 | 무료 | 가장 싼 월 요금 | 한국어 | 쓰는 곳 |
|---|---|---|---|---|
| AgentOps | 있음 | $40/월 | 없음 | 웹, API |
| Arize AI | 있음 | $50/월 | 없음 | 웹, CLI |
| Braintrust | 있음 | $249/월 | 없음 | 웹, CLI, API |
| Evidently | 있음 | — | 없음 | 웹, API |
| Fiddler AI | 있음 | — | 없음 | 웹, API |
| Helicone | 있음 | $79/월 | 없음 | 웹, API |
| Langfuse | 있음 | $29/월 | 없음 | 웹, CLI, API |
| Opik | 있음 | $19/월 | 없음 | 웹, API |
| Phoenix (Arize) | 있음 | $50/월 | 없음 | CLI |
| Promptfoo | 있음 | — | 없음 | CLI, 웹 |
| PromptLayer | 있음 | $49/월 | 없음 | 웹, API |
| Traceloop | 있음 | — | 없음 | 웹, API |
| MMLU | 없음 | — | — | — |
각 도구 공식 요금 페이지 기준(2026-10-14까지 확인). '—'는 공식 페이지에 적혀 있지 않은 것이에요. 요금은 바뀌니 결제 전에 다시 확인하세요.
고르는 기준
- 먼저 무료가 있는 12곳 중에서 써 보고, 한도에 걸릴 때 유료를 보세요.
- 한국어 화면이 꼭 필요하면 한국어 칸이 '없음'이 아닌 0곳부터 보세요.
- 표는 월 결제 기준이에요. 연간 결제가 더 싼 곳이 많아요.
AgentOps
AI 에이전트 전용 관측성·디버깅 플랫폼
자세히 보기 →부분유료Arize AI
ML 관측성·모니터링 플랫폼
자세히 보기 →부분유료Braintrust
LLM 평가·프롬프트 관리 플랫폼
자세히 보기 →부분유료Captum
PyTorch용 모델 해석가능성 라이브러리
자세히 보기 →부분유료DeepEval
오픈소스 LLM 평가 프레임워크
자세히 보기 →부분유료EleutherAI LM Evaluation Harness
퓨샷 언어모델 평가 프레임워크
자세히 보기 →부분유료ELI5
ML 분류·회귀 모델 디버깅·설명
자세히 보기 →부분유료Evidently
ML 모델 모니터링과 데이터 품질 검사
자세히 보기 →부분유료Fiddler AI
ML 모델 성능 관리
자세히 보기 →무료Guidance
마이크로소프트의 제약 생성·프롬프트 제어
자세히 보기 →무료Helicone
오픈소스 LLM 관측성·프록시
자세히 보기 →부분유료HumanEval
코드 생성 평가를 위한 오픈AI의 벤치마크
자세히 보기 →부분유료InterpretML
마이크로소프트의 모델 해석가능성 툴킷
자세히 보기 →무료Langfuse
트레이싱과 평가를 위한 오픈소스 LLM 엔지니어링 플랫폼
자세히 보기 →부분유료LangSmith
LLM 앱 디버깅·평가 플랫폼
자세히 보기 →부분유료LIME
지역적 해석 가능한 모델 비의존적 설명
자세히 보기 →무료Opik
Comet의 오픈소스 LLM 평가·트레이싱
자세히 보기 →무료Phoenix (Arize)
오픈소스 AI 관측성·평가 플랫폼
자세히 보기 →무료Promptfoo
LLM 프롬프트를 테스트·평가·레드팀
자세히 보기 →부분유료PromptLayer
프롬프트 버전관리·관리 플랫폼
자세히 보기 →부분유료Ragas
RAG 파이프라인 평가 프레임워크
자세히 보기 →부분유료SHAP
게임이론 기반 ML 모델 출력 설명
자세히 보기 →부분유료Traceloop
OpenTelemetry 기반 LLM 관측성
자세히 보기 →부분유료HELM
언어모델의 총체적 평가
3D 지도에서 보기 →부분유료MMLU
대규모 다중작업 언어이해 벤치마크
3D 지도에서 보기 →부분유료PromptFlow
LLM 앱 개발 도구 모음
3D 지도에서 보기 →부분유료WhyLabs
AI 관측성·데이터 모니터링
3D 지도에서 보기 →