대시보드

1. 요약 통계량

서비스 운영과 개선에 필수적인 4가지 요소를 담았습니다.

특히, 폴백 메시지 비율, 상담사 전환율 그리고 폴백직후 종료율은 서비스 만족도와 밀접한 연관이 있어요. 해당 지표의 증감률을 통해서 비교 기간 대비 조회 기간에 얼마나 나아지고 있는지 확인해보세요.

  • 전체 메시지 수 : 조회 기간의 메시지 합계입니다.

  • 폴백 메시지 비율 : 조회 기간의 메시지 중 폴백 인텐트를 호출한 메시지 비율입니다.

  • 전체 세션 수 : 조회 기간에 발생한 세션 합계입니다. (상담사 전환 인텐트를 등록하지 않은 경우, 요약 통계량에서 제공합니다.)

  • 상담사 전환율 : 조회 기간에 발생한 세션 중 기등록한 상담사 전환 인텐트를 1회 이상 호출한 세션의 비율입니다.

  • 폴백직후 종료율 : 조회 기간 발생한 세션 중 폴백 응답을 받고 세션을 종료한 세션의 비율입니다.

폴백이 궁금하다면, 여기를 클릭하세요.

2. 서비스 평가

서비스 평가는 아래 3가지 항목을 기준으로 비교 기간과 조회 기간의 봇 상태를 진단합니다. 전체적으로 낮거나 편향된 형태라면 관련 지표에 대한 현황을 확인해보세요.

  • 유효 세션 비율 : 전체 세션 중 대화가 2턴 이상 지속된 세션의 비율입니다.

  • 인텐트 호출 메시지 비율 : 전체 메시지 중 폴백이 아닌 일반 인텐트를 호출한 메시지의 비율입니다.

  • 대화 완결률

    • 상담사 전환 인텐트를 등록한 경우: 전체 세션 중 세션을 시작해서 종료할 때까지 상담사 전환 인텐트를 호출하지 않은 세션의 비율입니다.

    • 상담사 전환 인텐트를 등록하지 않은 경우 : 세션 중 세션을 시작해서 종료할 때까지 폴백이 아닌 일반 인텐트 응답만 받은 세션의 비율입니다.

3. 서비스 현황

서비스 현황은 연결된 봇에서 발생하는 다양한 지표를 방문∙세션, 대화∙메시지로 나누어 제공합니다. 파트별 상세 지표들이 비교 기간대비 얼마나 증감했는지 확인해보세요.

  • 전체 방문 수 : 조회 기간내 고유한 유저 ID 수

  • 신규 방문 수 : 데이터 저장 기간내 방문 이력은 없지만, 조회 기간내 1회 이상 방문한 고유한 유저 ID 수

  • 재방문 수 : 데이터 저장 기간내 방문 이력이 있고, 조회 기간내 1회 이상 방문한 고유한 유저 ID 수

  • 전체 세션 수 : 조회 기간에 발생한 세션의 합계

  • 일평균 세션 수 : 조회 기간의 일평균 세션 수

  • 평균 세션 시간 : 조회 기간에 발생한 세션의 평균 지속 시간

  • 세션 초기 종료율 : 전체 세션 중 대화 1턴 이후 세션을 종료한 비율

  • 폴백직후 종료율 : 전체 세션 중 폴백 응답을 받고 세션을 종료한 비율

  • 폴백직후 종료율(세션 초기) : 전체 세션 중 1턴에서 폴백 응답을 받고 세션을 종료한 비율

  • 전체 메시지 수 : 조회 기간의 메시지 수의 합계

  • 평균 대화 턴 : 세션에서 발생한 대화 턴의 평균 값

  • 폴백 메시지 수 : 폴백 인텐트를 호출한 메시지 수

  • 연속 폴백 대화 비율 : 전체 세션 중 대화에서 2턴이상 연속적으로 폴백 응답을 받은 세션의 비율

  • 자연어 처리 메시지 수 : 자연어 처리 엔진을 거쳐 (인식 정확도를 가진) 인텐트를 호출한 메시지 수

  • 규칙기반 메시지 수 : 자연어 처리 엔진을 거치지 않고 (인식 정확도를 가지지 않은) 인텐트를 호출한 메시지 수

  • 평균 인식 정확도 : 자연어 처리 과정에서 호출된 인텐트의 평균 인식 정확도

4. TOP5 테이블

TOP5 테이블은 4가지 항목별 최다 사용된 TOP5를 확인할 수 있습니다.

  • TOP5 인텐트 : 조회 기간에 호출 수 기준 상위 5가지 인텐트에 대한 정보를 제공합니다.

  • TOP5 엔티티 : 조회 기간에 호출 수 기준 상위 5가지 엔티티에 대한 정보를 제공합니다. 엔티티 데이터가 없거나, 엔티티 데이터 연결이 해제된 경우에는 엔티티 데이터 정보 대신 안내 메시지가 출력됩니다. 안내에 따라, 엔티티 데이터를 연결하시면 TOP5 엔티티를 확인할 수 있습니다.

  • TOP5 폴백 키워드 : 조회 기간의 폴백 메시지에서 가장 많이 추출된 명사 5가지를 제공합니다. 전체 대비 폴백 메시지에 얼마나 포함되었는지 확인해보세요.

  • TOP5 키워드 : 조회 기간의 메시지에서 가장 많이 추출된 명사 5가지를 제공합니다.

Last updated