TESIGN
저장한 것

KO · EN

  1. TESIGN / RADAR
  2. 2026.09.21
  3. Promptfoo

Promptfoo

AI 답변 시험

누가 쓰나AI 기능을 붙인 제품을 만드는 사람, 프롬프트를 고치면서 품질을 유지해야 하는 팀.

설치해서 쓰기

AI에게 시킨 일이 실제로 어떻게 답하는지 표로 비교해 보는 시험 도구.

★ 25.2k▲ +5 / 7d최근 14일의 일별 별 증가. 빈 막대는 관측 없음. 마지막 날은 일부일 수 있습니다.2026-09-08 관측 없음2026-09-09 +22026-09-10 관측 없음2026-09-11 +22026-09-12 +22026-09-13 관측 없음2026-09-14 관측 없음2026-09-15 +32026-09-16 +22026-09-17 관측 없음2026-09-18 관측 없음2026-09-19 관측 없음2026-09-20 관측 없음2026-09-21 관측 없음14일 중 가장 큰 하루 증가+3최근 14일 · 하루 별 증가빈칸 = 관측 없음

별 25,177 · GitHub에서 확인 GitHub 확인 111시간 지연 · 7일 +5은 GH Archive 관측 (기준 )

Promptfoo 평가 표. 가로로 프롬프트·모델을 놓고 세로로 시험 입력을 놓아 각 칸에 답과 통과 여부가 표시돼 있다.

TESIGN TAKE

"좋아진 것 같다" 대신 표를 놓고 이야기하게 해 준다. MIT를 유지한 채 OpenAI에 합류했다고 저장소에 그대로 밝혀 두었다.

INSTALL설치

한눈에 보는 사실

라이선스
MIT
사용 범위
상업 이용·수정·재배포 가능. 저작권 고지는 유지.
언어
TypeScript
플랫폼
cli
활동
마지막 커밋 4일 전 () · 최근 릴리스 [확인 필요]
커뮤니티
기여자 [확인 필요] · 열린 이슈 [확인 필요] · 만든 이: [확인 필요] 기준 시각 미확인
출처
GitHub
오픈소스
처음 본 시각
분류
AI · 개발 도구

요약이며 법적 조언이 아닙니다.

왜 볼 만한가

프롬프트를 고칠 때마다 결과가 좋아졌는지 감으로 판단하게 된다. Promptfoo는 같은 입력을 여러 모델과 여러 프롬프트에 넣고 답을 표로 나란히 놓는다. 취약점을 찾는 레드팀 점검도 같은 도구 안에 있다.

이걸로 무엇을 만들 수 있나

  • 명령줄 도구이자 라이브러리다. npm·brew·pip로 설치하거나 설치 없이 npx로 바로 실행한다. 모델 제공사 키는 환경 변수로 직접 넣고, 실행 결과는 브라우저에서 표로 열어 본다. CI에 넣어 배포 때마다 회귀 검사로 쓸 수 있다.

누구에게 맞나

AI 기능을 붙인 제품을 만드는 사람, 프롬프트를 고치면서 품질을 유지해야 하는 팀.

5분 안에 시작하기

# npx로 예제를 하나 만들어 실행한 뒤 결과 표를 열어 본다.

주의할 점

  • Node.js 22.22 이상이 필요하다. 모델 호출은 각 회사 API 키로 이뤄지므로 시험을 많이 돌릴수록 그쪽 요금이 든다. 회사용 유료 버전이 따로 있다.

영수증

처음 본 시각
출처 등록
선정
생성에서 포착까지
1236d
처음 봤을 때
25,177 ★
출처
GitHub

이 항목의 사실을 기계가 읽기 쉬운 형태로 — 마크다운으로 보기 · JSON

비슷한 도구

AI 분야에서 ★ 총합 순으로 최대 5개. 편집 항목 먼저, 그다음 저장소 카드이며 이 항목은 강조되어 있습니다. 순위와 같은 저장 스냅샷에서 뽑은 비교표이고 추천은 아닙니다.

이미지이름★ 총합▲ 7d라이선스플랫폼마지막 push
ECC 배너 그래픽. 'The operating system for AI agent harnesses' 헤드라인과 스킬·에이전트·명령 3열.
ecc에이전트 스킬·기억·보안 묶음★ 263k▲ +424MIT허용적windows · macos · linux · cli
Hermes Agent 랜딩. 파란 배경에 'THE AGENT THAT GROWS WITH YOU' 헤드라인과 날개 달린 인물 판화풍 삽화.
Hermes Agent개인용 스스로 자라는 에이전트★ 247k▲ +116MIT허용적linux · macos · windows · android · cli
DeepSeek Harness 랜딩. 파란 배경, 'Everything is a plugin' 헤드라인, npx 명령이 든 퀵스타트 상자.
DeepSeek Harness개발자용 플러그인 하네스★ 230k▲ +558MIT허용적web · cli
Promptfoo 평가 표. 가로로 프롬프트·모델을 놓고 세로로 시험 입력을 놓아 각 칸에 답과 통과 여부가 표시돼 있다.
PromptfooAI 답변 시험이 항목★ 25.2k▲ +5MIT허용적cli
mattpocock/skills카드★ 261k▲ +339MIT허용적

타임라인

  1. 저장소 생성
  2. TESIGN이 처음 본 시각
  3. TESIGN 게재

같은 날 고른 것

  1. 01

    Ruffle

    플래시 다시 보기

    사라진 플래시 게임과 애니메이션을 지금 브라우저에서 다시 돌려 주는 재생기.

    설치 없이 바로
    ★ 18.6k▲ +5 / 7d
  2. 02

    SuperSplat

    3D 스캔 다듬기

    사진으로 만든 3D 공간(가우시안 스플랫)을 브라우저에서 다듬고 내보내는 편집기.

    설치 없이 바로
    ★ 10.1k▲ +7 / 7d
  3. 03

    Acode

    폰에서 코딩

    휴대폰에서 코드를 고치고 바로 확인까지 하는 안드로이드용 편집기.

    설치해서 쓰기
    ★ 7k▲ +8 / 7d
  4. 04

    Monica

    비밀번호 보관

    비밀번호와 2차 인증 번호를 내 기기 안에 두고 쓰는 안드로이드 금고.

    설치해서 쓰기
    ★ 1k▲ +6 / 7d
  5. 05

    miu

    큰 파일 열기

    몇 기가짜리 파일도 곧바로 열리는 아주 가벼운 텍스트 편집기.

    설치해서 쓰기
    ★ 151▲ +6 / 7d
  6. 06

    Blurt

    맥 음성 입력

    키를 누른 채 말하면 지금 쓰고 있는 자리에 바로 글자가 들어가는 맥용 받아쓰기.

    설치해서 쓰기
    ★ 30▲ +6 / 7d
  7. 07

    Inspo

    AI 화면 참고

    AI가 화면을 만들기 전에 참고할 실제 웹사이트 자료를 정리해 넘겨 준다.

    설치해서 쓰기
    ★ 157▲ +26 / 7d
  8. 09

    Nuclei

    취약점 점검

    서버에 알려진 취약점이 남아 있는지 점검 목록대로 훑어 주는 검사 도구.

    설치해서 쓰기
    ★ 31.2k▲ +10 / 7d
  9. 10

    OpenSchool

    학교 업무 관리

    학생 기록부터 출결·시간표·성적·알림까지 학교 일을 한 시스템에 모으는 공개 플랫폼.

    직접 서버에
    ★ 26▲ +8 / 7d