spaCy での Span 類似度

意味的な類似度を測ると、テキストをあらかじめ定義したカテゴリに分類したり、関連するテキストを検出したり、重複コンテンツにフラグを立てたりできます。この演習では、与えられた文書と、その文書内のスパンとの意味的類似度を計算する練習をします。目的は、canned dog food（犬用ウェット缶詰）に最も関連する、3 トークンからなる Span を見つけることです。

カテゴリ canned dog food は category に保存されています。テキスト文字列はすでに text に格納され、en_core_web_md は nlp として読み込まれています。text の Doc コンテナも作成済みで、document に保存されています。