# Promptfoo

> AI 답변 시험 — AI에게 시킨 일이 실제로 어떻게 답하는지 표로 비교해 보는 시험 도구.

- 페이지: https://tesign.com/item/promptfoo/
- JSON: https://tesign.com/item/promptfoo/index.json
- 영어 마크다운: https://tesign.com/en/item/promptfoo/index.md
- 생성 시각: 2026-09-21 05:13 UTC

## 숫자

- 별 25,177 — GitHub에서 2026-09-16 13:42 UTC 확인
- 7일 +5은 GH Archive 관측 (기준 2026-09-21 00:00 UTC)
- 별 총합 = GitHub에서 마지막으로 확인한 값(stars_checked_at) + 그 뒤 GH Archive에서 관측한 증가. 24h·7d·30d 증가는 GH Archive 시간별 이벤트를 기준 시각(as_of)까지 합한 값. 우리 점수는 없습니다.

## 한눈에 보는 사실

- 라이선스: MIT (허용적) — https://spdx.org/licenses/MIT.html
- 사용 범위: 상업 이용·수정·재배포 가능. 저작권 고지는 유지.
- 오픈소스: 예
- 언어: TypeScript
- 플랫폼: cli
- 분류: AI · 개발 도구
- 태그: ai 시험 · 프롬프트 · 레드팀 · 개발자용
- 바로 쓰기: 설치해서 쓰기
- 출처: GitHub https://github.com/promptfoo/promptfoo
- INSTALL: https://promptfoo.dev/

## 활동

- 마지막 커밋: 2026-09-16 11:21 UTC
- 최근 릴리스: [확인 필요]
- 기여자: [확인 필요]
- 열린 이슈 (PR 포함): [확인 필요]
- 만든 이: [확인 필요]
- GitHub 확인 시각: 2026-09-16 13:42 UTC

## TESIGN TAKE

"좋아진 것 같다" 대신 표를 놓고 이야기하게 해 준다. MIT를 유지한 채 OpenAI에 합류했다고 저장소에 그대로 밝혀 두었다.

## 왜 볼 만한가

프롬프트를 고칠 때마다 결과가 좋아졌는지 감으로 판단하게 된다. Promptfoo는 같은 입력을 여러 모델과 여러 프롬프트에 넣고 답을 표로 나란히 놓는다. 취약점을 찾는 레드팀 점검도 같은 도구 안에 있다.

## 이걸로 무엇을 만들 수 있나

- 명령줄 도구이자 라이브러리다. npm·brew·pip로 설치하거나 설치 없이 npx로 바로 실행한다. 모델 제공사 키는 환경 변수로 직접 넣고, 실행 결과는 브라우저에서 표로 열어 본다. CI에 넣어 배포 때마다 회귀 검사로 쓸 수 있다.

## 누구에게 맞나

- AI 기능을 붙인 제품을 만드는 사람, 프롬프트를 고치면서 품질을 유지해야 하는 팀.

## 5분 안에 시작하기

```
# npx로 예제를 하나 만들어 실행한 뒤 결과 표를 열어 본다.
```

## 주의할 점

- Node.js 22.22 이상이 필요하다. 모델 호출은 각 회사 API 키로 이뤄지므로 시험을 많이 돌릴수록 그쪽 요금이 든다. 회사용 유료 버전이 따로 있다.

## 영수증

- TESIGN이 처음 본 시각: 2026-09-16 13:41 UTC
- 출처 등록: 2023-04-28 15:48 UTC
- 선정: 2026-09-21 05:13 UTC
- TESIGN 게재: 2026-09-21 05:13 UTC
- 소개 글 마지막 수정: 2026-09-21 05:13 UTC

## 읽는 법

- 이 파일은 tesign.com 항목 페이지와 같은 빌드에서 같은 데이터로 만들어졌습니다. 소개 글은 편집자가 쓴 것이고, 숫자는 저장된 관측값입니다.
- JSON의 null은 관측하지 않았다는 뜻입니다 — 0이 아닙니다. 마크다운에서는 [확인 필요]로 적습니다.
- 별 총합 = GitHub에서 마지막으로 확인한 값(stars_checked_at) + 그 뒤 GH Archive에서 관측한 증가. 24h·7d·30d 증가는 GH Archive 시간별 이벤트를 기준 시각(as_of)까지 합한 값. 우리 점수는 없습니다.
- 요약이며 법적 조언이 아닙니다.

[대표 이미지] https://tesign.com/img/promptfoo-ae5c81e911.png