[카카오] AI 품질 평가 및 데이터 분류_어시스턴트

[카카오] AI 품질 평가 및 데이터 분류_어시스턴트

◆ 업무내용

1) 테스트 케이스(TC) 작성 및 관리

- 다양한 사용자 상황과 질의를 반영한 테스트 케이스 제작

- 모델 특성과 정책 변화에 따른 TC 업데이트 및 품질 기준 유지

- 효율적인 평가를 위한 TC 구조화·분류 작업 수행

2) 정성적 평가(Human evaluation)

- AI가 생성한 응답을 기준·루브릭에 따라 정성적으로 평가

- 부적합하거나 개선이 필요한 응답을 식별하고 개선 포인트 제안

- 일관된 평가를 위한 기준 준수 및 품질 모니터링 수행

◆ 지원자격

- 새로운 개념·정책·평가 기준을 빠르게 이해하고 적용할 수 있으신 분

- 텍스트 기반 작업(평가·라벨링·문서 작성)에 익숙하신 분

- 꼼꼼하고 세부 기준을 일관되게 적용할 수 있으신 분

- 반복적이거나 대량의 작업에서도 정확도를 유지할 수 있으신 분

- 피드백을 빠르게 반영하고 팀과 원활하게 소통할 수 있으신 분

◆ 지원프로세스

- 서류전형 > 1차 인터뷰