세 가지 질문 방식
Jev에게는 세 가지 방식으로만 묻습니다. 무엇을 알고 싶은지에 따라 고르기, 점수, 예/아니오 중 하나를 씁니다.




| 방식 | 언제 쓰나 | 돌려받는 값 | 예시 질문 |
|---|---|---|---|
| Choice 고르기 | 정해진 목록 중 하나를 고를 때 | 고른 선택지, 선택지별 확률, 확신도 | 이 문의는 결제·기술·기타 중 무엇인가? |
| Score 점수 | 얼마나 잘 맞는지 단계로 매길 때 | 점수, 단계별 확률, 확신도 | 이 글은 질문에 얼마나 답하는가? (무관 → 직접 답함) |
| Noul 예/아니오 | 한 문장이 맞는지 아닌지 물을 때 | "예"일 확률(0~1) | 이 메시지는 환불을 요청하는가? |
잘 묻는 요령
고르기: 선택지마다 설명을
선택지 이름만 두지 말고 각각 무엇인지 적습니다. 목록이 빠짐없지 않을 수 있으면 "기타"를 꼭 넣습니다.
점수: 숫자보다 단계 설명
1~5점보다 "무관 / 일부 관련 / 직접 답함"처럼 단계마다 뜻을 적는 게 중요합니다. 점수는 정확한 양을 재는 값이 아닙니다.
예/아니오: 가운데 값은 "모름"
0.5 근처는 "어중간하다"가 아니라 "확신이 없다"는 뜻입니다. 이 경우를 어떻게 처리할지 내 쪽에서 정해 둡니다.
시연 · 문의 하나를 세 가지로 물어보기
쇼핑몰에 들어온 고객 문의 하나를 놓고, 위 만화처럼 세 가지 방식으로 Jev에게 물어봅니다. 진행자가 TypeSafe의 Playground(코드 없이 웹 화면에서 Jev에게 물어보는 곳)에서 보여 드립니다. OpenRouter 키가 있다면 자료실의 첫 요청 예시에서 글과 질문만 바꿔 따라 할 수 있습니다.
판단할 글을 넣습니다. 쇼핑몰 고객이 보낸 문의라고 생각하세요.
쇼핑몰 앱에 로그인이 안 돼요. 비밀번호를 바꿨는데도 계속 오류가 나요. 오늘 밤 할인 끝나기 전에 꼭 주문해야 하는데 빨리 도와주세요.
그렇다일 확률이 0~1 사이 숫자로 나옵니다.
이 메시지는 급한 내용인가?
보기 세 개를 주고 하나를 고르게 합니다. 보기마다 무엇인지 한 줄씩 적어 줍니다.
이 문의는 무엇에 관한 것인가? 보기: 결제(돈이 빠져나가거나 결제가 안 됨) / 기술(로그인·오류·설정) / 기타
"오늘 밤 할인 끝나기 전에 꼭 주문해야 하는데 빨리"를 지우고 "확인해 주세요"로 바꾼 뒤 2번 질문을 다시 합니다. 급할 확률이 어떻게 바뀌는지 봅니다.
실제로 물어본 결과
위 시연을 2026년 10월 12일 OpenRouter로 Jev(typesafe/jev-1.13)에 실제로 물어본 결과입니다.
| 질문 | 방식 | Jev의 답 |
|---|---|---|
| 이 문의는 무엇에 관한 것인가? (결제 / 기술 / 기타) | 고르기 | 기술 · 기술 1.0, 결제 0, 기타 0 · 확신도 1.0 |
| 이 메시지는 급한 내용인가? | 예/아니오 | 0.93 (그렇다일 확률) |
| 고객이 얼마나 불만스러운가? (차분함 / 조금 불편함 / 매우 불만) | 점수 | 1.67 · 매우 불만 0.67, 조금 불편함 0.33 · 확신도 0.5 |
| (4번) "할인 끝나기 전에… 빨리"를 뺀 뒤 급한가? | 예/아니오 | 0.53 · 0.93에서 뚝 떨어짐 |
로그인 문제라 "기술"은 망설임 없이 골랐습니다. 급할 확률은 "오늘 밤 할인 끝나기 전에"라는 마감 때문에 0.93이었는데, 그 문장을 빼자 0.53이 됐습니다. 만화 ④처럼 0.5 근처는 "급하다고도 아니라고도 하기 어렵다"는 뜻이라 사람이 보는 게 맞습니다. 질문 세 개를 한 번에 보낸 요청 비용은 0.00002달러였습니다.
목록에서 하나 고르기는 Choice, 단계로 매기기는 Score, 맞는지 아닌지는 Noul. 질문과 선택지 설명이 분명할수록 판단이 안정적입니다.