CJK 言語の EDM トークン照合の例

CJK 言語の EDM トークン照合の例に、中国語、日本語、韓国語の EDM トークン照合の例を示します。すべての例で、キーワード条件の一致を語句全体に限定して設定されているものと想定しています。
トークン検証が有効になっている場合は、トークン検証で言語を認識するために十分な長さのメッセージが必要です。たとえば、「東京都市部の人口」というメッセージはメッセージとしては短すぎて、トークン検証処理はメッセージの言語を認識できません。次のメッセージはトークン検証処理に十分な長さです。
「今朝のニュースによると東京都市部の人口は増加傾向にあるとのことでした。全国的な人口減少の傾向の中、東京への一極集中を表しています。」
CJK の EDM トークン照合の例
言語
キーワード
トークン検証をオンにしたサーバーでの一致
トークン検証をオフにしたサーバーでの一致
中国語
通信
数字无线通信
数字无线通信 交通信息网站
日本語
京都市
京都府京都市左京区
京都府京都市左京区 東京都市部の人口
韓国語
정부
정부의 방침
정부의 방침 의정부 경전철