📖 프로젝트 개요

• 핀다이렉트는 알뜰폰(MVNO) 서비스를 제공하는 기업으로, 요금제, eSIM, 개통, 이벤트 등 다양한 고객 문의가 발생하는 환경입니다
• 기존 상담 프로세스는 반복적인 질문 대응이 많아 자동화 필요성이 존재했습니다
• 이를 해결하기 위해 AI 상담 서비스를 구축하고, 실제 업무 처리 수준의 상담이 가능하도록 설계했습니다

🙋‍♂️ 역할 및 운영

• FastAPI 기반 AI 상담 백엔드 설계 및 구축
• MCP 서버 설계를 통해 API(요금제, eSIM, 이벤트, FAQ 등) 연동
• AI Agent 구조 설계 및 서비스 적용
• LLM as a Judge 및 record / replay 기반 평가 시스템 구축
• 프롬프트 DB 기반 버전 관리 및 실험 환경 구성
• Airflow 기반 LLM 평가 자동화 및 주기적 리뷰를 통한 품질 개선

🎯 결과 및 성과

• AI 상담의 범위 확장 및 실제 업무 처리 수준의 응답 구조 구축
• 평가 및 테스트 시스템 도입으로 LLM 응답 품질 관리 체계 확보
• 입사 후 AI 단독 상담 처리율 +9%p 개선 (24.6% → 33.6%)

🖥️ 실제 서비스 화면

AI 답변