ブロックリファレンス

BLOCKS Reference

文書(限定公開)

文書間のコサイン類似度を計算

概要

このブロックは、文書間のコサイン類似度を計算します。ここで言う文書とは、[文書のベクトル化(TF-IDF)]ブロックや[文書のベクトル化(doc2vec)]ブロックで、ベクトル化されたデータを指します。

対応する言語は、日本語と英語のみです。

文書間のコサイン類似度を計算ブロックの概要図
  • 「類似度の計算対象 BigQuery テーブル」には、文書を特定するキーを持つ key 列と文書のベクトルデータを持つ vector 列が必要です。
  • 「結果出力先 BigQuery テーブル」は、key1 列・key2 列・similarity 列で構成されます。

    • key1key2 列:各文書へのキーです。
    • similarity 列:key1key2 が示す文書間の類似度です。

セルフサービスプラン(無料トライアル含む)の場合は、このブロックを使用する前に、Dataflow API を有効にしてください。詳しくは、「基本操作ガイド > ヒント > Google API を有効にする」を参照してください。

文書カテゴリーのブロックはすべて限定公開です。文書カテゴリー各ブロックの利用を希望される場合は、「お問い合わせ」ページより問い合わせ願います。

プロパティ

プロパティ名 説明
ブロック名 ブロックの名前を指定します。ブロックに表示されます。
GCP サービスアカウント このブロックで使用する GCP サービスアカウントを選択します。
類似度の計算対象 BigQuery データセット

類似度の計算対象 BigQuery テーブル]プロパティで指定する BigQuery テーブルが属する BigQuery データセットの ID を指定します。

類似度の計算対象 BigQuery テーブル

文書間の類似度を計算したい文書(ベクトルデータ)が格納されている BigQuery テーブルの ID を指定します。

結果出力先 BigQuery データセット

結果出力先 BigQuery テーブル]プロパティで指定する BigQuery テーブルが属する BigQuery データセットの ID を指定します。

結果出力先 BigQuery テーブル

文書間のコサイン類似度を出力する BigQuery テーブルの ID を指定します。

ブロックメモ ブロックに対するコメントを指定します。
類似度の計算対象 BigQuery データセット(CROSS JOIN するテーブルのデータセット)

類似度の計算対象 BigQuery テーブル(CROSS JOIN するテーブル)]のデータセットの ID を指定します。

類似度の計算対象 BigQuery テーブル(CROSS JOIN するテーブル)

文書間の類似度を計算したい文書(ベクトルデータ)が格納されている BigQuery テーブルの ID を指定します。

このテーブルが指定された場合は、[類似度の計算対象 BigQuery テーブル]の文書との組合せの類似度のみ算出します。

類似度の計算対象 BigQuery テーブル]の文書内の組合せおよび、このテーブルの文書内の組合せは算出対象外です。