- 01 질문하기
- 02 심사
실제 채용공고 발췌
“Framework: Spring Boot, Spring AI, FastAPI, LiteLLM, LangChain, Ragas 등”
“엔지니어링 선택의 이유와 근거를 명확하게 설명할 수 있는 분”
PythonRagas답변 평가멀티 에이전트언어모델
평가 점수는 오르는데 문의는 그대로
장면 1 · 금요일 오전, 합류 두 달째, 사무실 안쪽 회의 부스
데이터 리드가 주간 평가 점수 그래프를 띄운 노트북을 내 쪽으로 돌려 놓는다.
데이터 리드
답변 평가 점수가 두 달째 오르고 있어요. 다음 달까지 여기서 더 올려 봅시다. 팀 목표로 걸어 두려고요.
네, 같은 기간 문의 쪽은 어떻게 움직였는지 같이 볼게요.
평가 점수는 두 달 사이 크게 올랐는데, 같은 기간 답이 이상하다는 고객 문의는 주당 20건대에서 줄지 않았다.
장면 2 · 같은 날 오후, 고객사 인사 담당자와의 통화
어떤 질문에서 답이 안 맞던가요?
고객사 인사 담당자
저희가 실제로 묻는 건 지점별로 조건이 섞인 질문이에요. 그런 건 거의 다 확인 필요로 돌아와요.
지난달 평가 세트를 짜던 때가 떠오른다. 손이 덜 가는 단일 조건 질문 위주로 채웠고 지점이 섞인 질문은 거의 넣지 않았다. 점수가 오른 구간도 대부분 그 단일 조건 질문이었다.
데이터 리드가 그래프 위쪽에 다음 달 목표선을 그어 넣고 화면을 저장한다.
데이터 리드
다음 주까지 목표 숫자만 정해 주세요. 확실하게요.