Braintrust
관측성 및 평가 · 부분유료
LLM 평가·프롬프트 관리 플랫폼
한눈에 보기
- 만든 곳
- Braintrust
- 한국어
- 없음(영어 등만)
- API
- 있음
- 쓸 수 있는 곳
- 웹, CLI, API
- 오픈소스
- 일부 오픈소스 라이브러리·도구(라이선스 이름은 페이지에 없음)
Braintrust는 어떤 AI인가요?
Braintrust는 에이전트를 계측하고 이해하고 개선하기 위한 능동 관측성 플랫폼이다. 에이전트 트레이스에 지능을 적용해 가장 중요한 패턴을 자동으로 드러내 운영 중 행동을 파악하게 한다. 실제 데이터셋으로 실험을 돌리고 프롬프트·모델을 나란히 비교하며 LLM·코드·사람으로 출력을 채점한다. 운영 트레이스를 한 번에 평가 데이터셋으로 바꾸고, MCP 서버·CLI·여러 언어 SDK로 개발 환경과 연결한다.
- 에이전트 트레이스·도구 호출 실시간 검사와 지연·비용·품질 추적
- LLM·코드·사람 채점 평가와 실험
- 자연어 트레이스 조사와 패턴 자동 발견(Patterns)
- 프롬프트·채점기·데이터셋을 자동 생성하는 Loop 에이전트
- 운영 트레이스를 원클릭으로 평가 데이터셋으로 변환
- IDE용 MCP 서버
- Python·TypeScript·Go·Ruby·C# SDK
- AI 데이터용 데이터베이스 Brainstore(하이브리드 배포)
Braintrust, 이런 사람·일에 써요
- 운영 중 에이전트 문제를 찾아 수정하고 나쁜 릴리스 차단
- 대규모 엔지니어 조직의 AI 평가(Notion 사례)
- AI 코드 리뷰 품질 관리(Graphite 사례)
가격
무료로 쓸 수 있는 범위 — 있음 (Starter $0: $10 크레딧, 처리 데이터 1GB, 점수 10k, 14일 보관, 사용자 무제한)
| 요금제 | 가격 | 주요 한도 |
|---|---|---|
| Starter | $0/월 | $10 크레딧+토큰 요금, 1GB 처리 데이터(+$4/GB), 10k 점수(+$2.50/1k), 14일 보관 |
| Pro | $249/월 | $100 크레딧, 5GB(+$3/GB), 50k 점수(+$1.50/1k), 30일 보관(+$0.50/GB/월) |
| Enterprise | 문의 | 맞춤 가격, 온프레미스 또는 호스팅 배포 |
공식 페이지에서 확인한 내용(확인일 2026-10-14). 요금·기능은 바뀔 수 있으니 결제 전 공식 사이트에서 다시 확인하세요. · 공식 요금 페이지
Braintrust와 비슷한 AI (대안)
Braintrust와 대안 한눈에 비교
| AI | 가격 | 지도 속 조합 | 연결된 도구 | 무료 | 가장 싼 월 요금 | 한국어 |
|---|---|---|---|---|---|---|
| Braintrust | 부분유료 | 0개 | 7개 | 있음 | $249/월 | 없음 |
| DeepEval | 부분유료 | 10개 | 7개 | — | — | 없음 |
| EleutherAI LM Evaluation Harness | 부분유료 | 0개 | 7개 | — | — | — |
| HumanEval | 부분유료 | 0개 | 7개 | — | — | — |
| LangSmith | 부분유료 | 10개 | 5개 | — | — | — |
비교한 5개 중 무료로 시작할 수 있는 곳은 1개예요. 유료 중 가장 싼 곳은 Braintrust($249/월)예요. 요금은 각 공식 페이지 기준이에요.
조합·연결 수는 AI 갤럭시 지도에 정리된 관계 기준(2026-10-26)이며 품질 순위가 아닙니다.
AI 갤럭시 지도에서 본 Braintrust
- 관측성 및 평가 분야 AI 27개 가운데 하나예요.
- 다른 도구와 연결된 수 7개 — 같은 분야에서 1위예요.
자주 묻는 질문
Braintrust, 무료로 쓸 수 있나요?
있음 (Starter $0: $10 크레딧, 처리 데이터 1GB, 점수 10k, 14일 보관, 사용자 무제한). 요금제: Starter $0, Pro $249, Enterprise. 공식 페이지 확인일 2026-10-14 기준이며, 결제 전 공식 사이트에서 다시 확인하세요.
Braintrust 대신 쓸 수 있는 AI는?
같은 일을 하는 도구로 DeepEval, EleutherAI LM Evaluation Harness, HumanEval, LangSmith 등이 지도에 연결돼 있어요.
Braintrust, 한국어로 쓸 수 있나요?
공식 페이지 기준: 없음(영어 등만).
출처(공식 페이지)
공식 페이지에서 확인한 내용(확인일 2026-10-14). 요금·기능은 바뀔 수 있으니 결제 전 공식 사이트에서 다시 확인하세요.