음성 파일 STT 스크립트 및 요약 정보 제공

1. 문제 정의

Problem 현재 문제

음성 파일을 학생 기록에 첨부할 수 있지만, 전체를 재생해 확인하는 시간이 소요된다.
모든 기록을 다 들어볼 수 없고, 모든 기록에 상세한 내용을 적게하는 것도 큰 허들이다.
특정 정보를 빠르게 확인하기 어렵다.
여러 작성자가 한 학생에 대한 학생 기록들을 작성할 수 있는데, 그러면 특정 사용자가 원하는 정보를 잘 찾을 수 있어야한다.
학생 기록 내용을 관리 및 활용하는데 비효율적이다.
작성할 때 모든 내용을 요약해서 작성하는 과정이 반복된다면 이 또한 업무 가중이 된다.

2. 목표

위의 문제를 해결하기 위해 아래와 같은 목표를 충족할 수 있어야합니다.

상위목표

음성 기록에서 핵심 정보를 빠르게 확인할 수 있어야 한다.
선생님의 업무 효율을 개선해 학생 록의 활용도를 높일 수 있어야 한다. (어떤 지표로 측정해볼 수 있을지 고민 필요)
학생 기록을 작성하는데 많은 리소스가 들지 않도록 도움을 주어야한다.
학생 기록을 확인하는데 많은 리소스가 들지 않도록 도움을 주어야한다.

하위 목표

초기 환불률, 초기 경험 개선의 Business Outcome 에 맞췄을때
판매에서 고객에게 안내된 정보가 선생님/원장님에게 전달 되지 않는다.
안내된 정보와 안내가 필요한 정보를 빠르고 정확하게 전달이 되어 고객을 빠르게 파악할 수 있어야 한다.
첫 상담을 할 때 판매팀 상담 기록 요약을 보고 온택트에서 상담이 가능한지 테스트를 해볼 수 있을 것이다.

3. 요구사항

1.
음성파일을 업로드하면 STT로 변환된 스크립트를 확인할 수 있다.
a.
작성중일 때, 저장 후일 때 모두 다 확인 가능
b.
화자가 누구인지 구별해 표기
i.
e.g.
고객 : 이게 언제부터 개강이 가능한가요?
관계자 : 가장 빠른 일정으로는 내일부터 가능해요.
c.
디테일 요구사항 (고려 필요)
i.
타임 스탬프별로 대사를 나눠줄 수 있는가? (내용을 시간대별로 확인할 수 있도록)
2.
첨부한 음성 파일의 요약본을 제공한다.
a.
요약을 하고 싶은 경우, 기능을 액티브
필요한 이유)
b.
해당 음성 파일(주로 상담에서 발생함) 에서 특히 알아야하는 정보를 위주로 요약 (정훈님께서 진행중)
c.
해당 요약의 근거가 어디였는지를 스크립트에서 특정해서 확인 (요약 근거 하이라이트?)
3.
요약 내용도 학생 기록의 검색 대상에 포함된다.
추가 고려사항들
변환되는 대기 시간 발생 시, 안내 ux 필요 (loading process라던가.. 그런거)
요약본
음성 파일의 순서를 지정할 수 있어야한다.
why? 전체 파일에 대한 요약을 제공하기 위해서는 대화 맥락이 중요함
음성 파일의 순서를 지정하기 용이하려면, 이미지 파일과 음성 파일 목록의 영역이 구분되어야한다. (뷰만 구분)
첨부 파일 목록은 D&D 또는 Up&Down 기능을 통해 순서 조정 기능이 필요하다.
음성 목록에서 특정 첨부파일 영역 선택 시, 스크립트를 볼 수 있고,
요약하기를 선택하면 첨부된 음성 파일 전체 요약하는 과정으로?
단, Edit 상태에서 진행한다면, 새로운 파일 추가 시, 생성된 요약이 사라질 수 있다는 안내 필요함

논의 해봐야할 사항들

하나의 게시글에 여러개의 음성 첨부파일을 추가할 수 있는 상황이다.
이때, 음성 첨부파일이 여러 건이 있을 때, 원하는 파일들만 선택해서 합쳐서 요약해야하는가?
아니면 각 음성파일별로 요약본이 나올 수 있도록 해야하는가?
case 확인 필요
→ 하나의 게시글인 경우, 요약본에서는 전체 음성 첨부파일에 대한 요약을 제공한다.
정훈님께서 작업해주신 요약은 판매팀이 상담할 때 언급이 필요한 내용들을 위주로 요약하는 방법으로 진행됐음. 그러나
어떤 분류 기준으로 프롬프트를 다르게 설정할지

솔루션

허브 사용성 측면에서 어떤 화면에 어떻게 배치할지는 아직 고민중
여러 가지 구성해본 후 팀장님들과 논의가 필요할 듯
STT 스크립트 제공
대상 : [판매팀 상담 기록], [학생 기록]에 첨부하는 음성 파일들
음성파일 내용 요약 제공
대상 : [판매팀 상담 기록]에 첨부하는 음성 파일들
판매팀 상담 내용 업로드 요약 기능 추가
Hub > 결제 내역 에서 녹취록 업로드시 요약 정보 제공
요약의 방식은 온택트에서 판매팀의 상담에서 얻고 싶은 정보 위주로 구성

스크립트 및 요약 AI 레퍼런스

지표 확인

지표
판매팀 녹취록 및 요약본 상담 활용 군과 상담 미활용군에 초기 환불률 비교
테스트 방법
필수 요청 사항에 대해서 확인 가능한지
선택 정보가 스크립트 요약에서 파악이 가능한지 확인

예상 결과

(좀 더 구체적인 지표 셋팅이 필요함)
1.
업무 효율성 향상
a.
선생님들이 학생 기록을 빠르게 확인하고 해당 학생을 파악해 수업이나 상담에 대응할 수 있다.
2.
사용자 만족도 증가
a.
직관적인 정보를 제공해 글 작성시 들었던 리소스를 줄여 시스템 만족도를 향상시킬 수 있다.
3.
데이터 활용성 증대
a.
학생 기록을 통해 학생의 히스토리를 파악할 수 있어, 기억에 의존하지 않고 데이터를 기반으로한 의사결정이 가능할 수 있다.