FAQ
코코너티브에 대해 자주 물어보시는 질문을 모았어요. 더 궁금한 내용이 있다면, 문의하기를 통해 연락해주세요.
폴백 인텐트는 무엇인가요?
폴백은 서비스가 방문자의 메시지를 이해하지 못한 상황을 의미합니다. 이런 경우에 서비스에서는 주로 ‘이해하지 못했습니다. 다시 말씀해주세요.’등의 응답을 제공하는데요. 이때 응답을 불러오는 인텐트가 ‘폴백 인텐트’입니다. 폴백 인텐트를 등록하지 않았거나, 실제 서비스의 폴백 인텐트와 다르게 등록했다면 분석 결과가 실제와 다를 수 있습니다.
유효 세션 비율이 무엇인가요?
유효 세션은 2턴 이상 대화가 지속된 세션입니다. 서비스에서 1턴 직후 세션을 바로 종료하지 않고, 서비스를 게속 이용했음을 보여줍니다. 유효 세션 비율은 전체 세션 중 해당 조건에 부합한 세션의 비율을 측정합니다.
인텐트 호출 메시지 비율은 무엇인가요?
서비스가 방문자의 메시지를 이해하고, 특정 인텐트를 호출한 메시지의 비율입니다. 인텐트 호출 메시지 비율이 높을수록, 폴백이 아닌 인텐트 호출을 통한 적절한 응답을 받았을 확률이 높음을 의미합니다.
대화 완결률은 무엇인가요?
대화 완결률은 서비스를 시작하고 종료할 때까지 적절한 응답을 받았는가에 대해 측정하는 지표입니다. 상담사 전환 인텐트 등록 여부에 따라, 다른 기준으로 대화 완결률을 측정합니다.
1. 상담사 전환 인텐트를 등록한 경우의 대화 완결률 : 상담사로 전환하지 않고 서비스에서 대화를 종결한 세션의 비율 2. 상담사 전환 인텐트를 등록하지 않은 경우의 대화 완결률 : 폴백 메시지없이, 인텐트 응 답으로 대화를 완결한 세션의 비율
신규 방문과 재방문의 기준을 알려주세요.
신규 방문은 데이터 저장 기간 내 방문 이력이 없지만 조회 기간에는 1회 이상 방문 이력이 있는 경우입니다. 재방문은 데이터 저장 기간과 조회 기간 모두 1회 이상 방문 이력이 있는 경우입니다. 방문 수는 조회 기간의 고유한 유저 ID 수로 산출합니다.
폴백직후 종료율이 2가지입니다. 무엇이 다른가요?
서비스 현황에서는 ‘폴백직후 종료율’과 ‘폴백직후 종료율(세션 초기)’가 있습니다. ‘폴백직후 종료율’은 전체 세션 중 폴백 응답직후 종료한 세션의 비율입니다. ‘폴백직후 종료율(세션 초기)’는 대화 1턴에서 폴백 응답을 받고 종료한 세션 비율입니다. 즉, 종료 직전의 폴백이 몇번째 대화 턴에서 발생했는지에 따라 2가지 항목을 구분할 수 있습니다.
자연어 처리와 규칙기반 처리의 차이는 무엇인가요?
자연어 처리와 규칙기반 처리는 인식 정확도의 유무에 따라 구분합니다. 메시지로 호출된 인텐트 혹은 폴백 인텐트에 인식 정확도 값이 있는 경우, 자연어 처리 엔진을 거친 결과로 간주하여 해당 메시지는 ‘자연어 처리 메시지’로 분류합니다. 그와 반대로, 규칙기반 처리는 호출된 인텐트 혹은 폴백 인텐트에 인식 정확도가 없는 경우, ‘규칙기반 처리 메시지’로 분류합니다.
평균 인식 정확도는 무엇인가요?
자연어 처리를 통해 호출한 인텐트와 폴백 인텐트 중 인텐트에 대한 인식 정확도의 평균값입니다. 자연어 처리된 폴백 인텐트와 규칙기반 처리를 통한 인텐트와 폴백 인텐트는 평균 인식 정확도 계산에서 제외합니다.
TOP5 엔티티 테이블이 나오지 않아요.
서비스의 엔티티 데이터 존재 여부와 정상적인 데이터 연결에 대한 확인이 필요합니다. 코코너티브 문의하기를 통해 문의해주세요.
대화 턴이 무엇인가요?
방문자가 전송한 메시지와 그에 대한 서비스 응답의 묶음을 하나의 대화 턴으로 정의합니다. 하나의 세션에서 3개의 방문자 메시지가 발생했다면, 그 때의 대화는 3턴까지 발생했다고 볼 수 있습니다. 세션 플로우에서는 그러한 대화 턴에 포함된 응답 기준으로 플로우를 구성합니다.
노드가 무엇인지, 노드의 정렬 기준이 무엇인지 궁금해요.
노드는 대화 턴에서 발생한 응답을 호출한 세션 집합입니다. 응답의 종류에 따라 크게 3가지로 분류합니다.
인텐트 응답 노드 : 대화 턴에서 인텐트 응답을 받은 세션의 집합
폴백 응답 노드 : 대화 턴에서 폴백 응답을 받은 세션의 집합
종료 노드 : 대화 턴에서 세션을 종료한 세션의 집합
턴마다의 출력 노드 개수가 다릅니다.
대화 턴별로 출력하는 노드의 종류는 총 8개로, 1~5순위 인텐트 응답 노드, 나머지 인텐트 응답 노드, 폴백 응답 노드, 종료 노드가 있습니다. 이 중에서 1~5순위 인텐트 응답 노드는 노드 조건에 맞는 세션이 없는 경우에 출력되지 않습니다. 즉, 대화 턴별로 응답 종류에 따라 최소 3개 (나머지 인텐트 응답 노드, 폴백 응답 노드, 종료 노드)에서 최대 8개의 노드를 출력합니다.
상위 인텐트 분석 차트에서 나머지 인텐트는 볼 수 없나요?
상위 인텐트 분석에서는 호출 수 기준 상위 10가지 인텐트를 다룹니다. 나머지 인텐트에 해당하는 인텐트가 궁금하다면, 인텐트 사용 현황을 확인해보세요. 인텐트 사용 현황에서는 조회 기간에 호출한 모든 인텐트를 제공합니다.
인식 정확도는 무엇인가요?
자연어 처리 엔진은 인텐트를 호출할 때 인텐트가 메시지에 얼마나 적절한지에 대해 확신하는 정도를 산출합니다. 이 때의 정도를 인식 정확도라고 하며, 인식 정확도가 높을수록 서비스가 보다 정확하게 메시지를 인식했다고 볼 수 있습니다.
평균, 최고, 최저 인식 정확도가 모두 100%이거나 0%입니다.
인식 정확도가 모두 100%이라면, 서비스에서 버튼을 통해 메시지를 입력했거나 전송된 메시지의 내용이 자연어 처리 엔진에 등록된 학습문장과 완전히 일치하는 경우로 볼 수 있습니다. 반대로, 인식 정확도가 모두 0%인 경우는 자연어 처리 엔진에 인텐트로 등록되지 않았지만 서비스 자체에서 특수하게 인텐트와 유사하게 처리하고 있는 값일 수 있습니다. 즉, 두 가지 케이스 모두 이상 케이스로 보기 어려우며, 서비스 설정에 따라 출력 가능한 값입니다.
엔티티 리스트가 나오지 않아요.
엔티티 사용 현황의 엔티티 리스트에 에러 메시지가 출력되거나 서비스의 엔티티가 아닌 샘플 엔티티 데이터가 출력된다면 아래 3가지를 점검해보세요.
1. 서비스 DB의 엔티티 존재 여부 서비스에 따라 엔티티를 사용할 수도, 엔티티를 사용하지 않을수도 있습니다.
2. 서비스 DB와 코코너티브의 연결 상태 서비스에서 정상적으로 데이터를 수집하고 있는 상태인가요? 그렇다면, 그 다음으로 서비스 DB와 코코너티브의 연결이 정상적인지 확인하세요. 다른 콘텐츠에서도 콘텐츠가 출력되지 않는다면 연결에 이상이 있을 수 있습니다. 연결에도 이상이 없다면, 코코너티브 문의하기를 통해 문의해주세요.
Last updated
