주제 구문을 입력할 때 적절한 엄격성 값을 선택하려면 어떻게 해야 합니까?

구문에 대한 최적의 엄격성을 결정하려면 기본 설정에서 시작한 다음 캡처된 이벤트를 평가하고 그에 따라 엄격성을 조정합니다. 실험은 정확도와 재현율 사이에서 적절한 균형을 찾는 데 중요합니다.

더 의미 있는 단어가 포함된 긴 구문은 덜 엄격한 일치가 필요한 경우가 많습니다. 예를 들어, 세 단어로 구성된 구문은 중간 엄격성(세 단어 중 두 단어)에서 효과적으로 일치할 수 있지만, 다섯 단어로 구성된 구문은 세 단어만 일치하면 될 수 있습니다(중간-낮음 엄격성). 이상적인 엄격함은 구체적인 문구와 의도된 용도에 따라 달라집니다.

아래는 엄격성을 조정함으로써 결과에 도움이 되거나 방해가 되는 몇 가지 예를 보여줍니다. 최상의 정밀도/재현율 균형을 위해 엄격성을 조정하는 것이 얼마나 중요한지 보여줍니다.

자세한 내용은 다음을 참조하세요. 주제와 함께 작업 , 그리고 구문을 사용하여 작업 .

엄격성을 높이면 실수를 피할 수 있는 예(정밀도 증가)

정의된 프로그램 구문	검출된 문구	주제가 일치함	선택된 엄격함	설명
저번에 전화했어요	저번에 거기 전화했어요	이전에 연락됨	중간	"거기"는 일치하는 주제와 관련이 없는 맥락을 제공합니다. 엄격성을 높이면 이 사건은 이전에 연락한 것과 '충분히 일치하지 않음'으로 간주됩니다.
나는 다시 전화했다	다시 전화드릴 수도 있어요	이전에 연락함	MedLow	"5월"은 일치하는 주제와 관련이 없는 맥락을 제공합니다. 엄격성을 높이면 이 사건은 이전에 연락한 것과 '충분히 일치하지 않음'으로 간주됩니다.
취소하고 싶습니다	취소하는 것과 같지는 않을 테니까	언급 취소	메드하이	"취소"의 맥락이 다르므로 일치하는 주제와 관련이 없습니다. 엄격성을 높이면 이 사건은 '언급 취소'에 대한 '충분히 일치하지 않음'으로 간주됩니다.

엄격성을 높이면 좋은 발생이 누락되는 예(회상률 감소)

정의된 프로그램 구문	검출된 문구	주제가 일치함	선택된 엄격함	설명
나는 얼마전에 전화했다	조금전에 전화했어요	이전에 연락함	중간-낮음	감지된 구문에 "약간"이 추가되었음에도 불구하고 이전에 연락한 내용이 올바르게 일치했습니다. 엄격성을 높이면 이 발생이 이전에 연락한 것과 "충분히 일치하지 않음"으로 분류됩니다.
나는 다른 사람과 이야기했다	내가 말한 사람	이전에 연락함	중간-낮음	감지된 구문에 "another"가 누락되었음에도 불구하고 이전에 연락한 내용이 올바르게 일치했습니다. 엄격성을 높이면 이 발생이 이전에 연락한 것과 "충분히 일치하지 않음"으로 분류됩니다.
취소하고 싶습니다	그냥 취소하고 싶어요	언급 취소	중간-낮음	감지된 구문에 "just"가 추가로 포함되어 있음에도 불구하고 언급이 올바르게 일치되었습니다. 엄격성을 높이면 이 사건은 언급 취소에 대해 "충분히 일치하지 않음"으로 분류됩니다.
주문 취소	송금수표를 취소하다	언급 취소	중간-낮음	감지된 문구에 추가 "돈"이 포함되어 있음에도 불구하고 언급이 올바르게 일치되었습니다. 엄격성을 높이면 이 사건은 언급 취소에 대해 "충분히 일치하지 않음"으로 분류됩니다.