AI資格ドリル
資格を選ぶ

生成AIパスポート 用語解説

チャンクとは

RAGで、検索・参照しやすいようにあらかじめ文書を分割した小さな単位。分割した文書をベクトル化して蓄積する保存先であるベクトルデータベースとは、分割された単位そのものか、その格納先かという点で指す対象が異なる。

チャンクの意味と見分け方

チャンクは、生成AIパスポートの「第3章 現在の生成AI(ジェネレーティブAI)の動向」に出てくる用語です。定義だけでなく、どの場面で使う言葉か、何と混同しやすいか、問題文のどの表現で判断するかまで確認します。

情報源と編集区分

公式範囲を確認し、具体例・誤答例・判断手順は当サイトが編集。

公式シラバス(PDF)(公式)

試験での問われ方

01

定義の言い換え

用語そのものではなく、説明文の一部を言い換えて出されることがあります。

02

似た概念との比較

同じ章の用語と入れ替えた選択肢に注意します。対象、目的、使う場面を分けます。

03

具体例からの判断

問題文の事例が、定義のどの部分に対応しているかを先に確認します。

誤答しやすいポイント

「第3章 現在の生成AI(ジェネレーティブAI)の動向」の問題で、取り違えやすい組み合わせです。

  • RAGとファインチューニングの混同。RAGは外部知識(ベクトルデータベース)を検索して文脈に加える手法で、モデルの再学習はしない。ファインチューニングは追加学習。
  • ディープフェイクと偽情報(ディスインフォメーション)の混同。前者は人物の映像・音声を本物のように偽造する技術、後者は意図的に作られ拡散される偽情報そのもの。
  • 生成物の種類の取り違え。Soraは動画、Image Generationは画像、音声生成AIは音声。名前ではなく生成する対象で見分ける。

関連する確認問題

第3章 現在の生成AI(ジェネレーティブAI)の動向 / RAG(Retrieval Augmented Generation、検索拡張生成)

RAGの文書を固定長400トークンのチャンクへ分け、隣接チャンク間で100トークンを重複させる。最初の完全な2チャンクが覆う、重複を1回だけ数えた異なるトークン位置の合計はいくつか。

正解は「700トークン」です。最初のチャンクは400トークンを覆う。2番目のチャンクも長さは400トークンだが、その先頭100トークンは最初のチャンクの末尾100トークンと同じ位置を重複して含むため、新たに加わる位置は400-100=300トークンである。したがって異なる位置の合計は400+300=700トークンとなる。300は2番目のチャンクが新たに加える位置だけ、500は400へ重複100を足した値、800は2チャンクの長さを単純に足して重複100を二重に数えた値である。チャンク件数を数えるのではなく、各チャンクの長さと、隣接部分で繰り返される位置を分けることが要点である。重複はチャンク境界の文脈を保つために使われるが、異なる位置の総数には2回加えない。

第3章 現在の生成AI(ジェネレーティブAI)の動向 / RAG(Retrieval Augmented Generation、検索拡張生成)

RAG(Retrieval-Augmented Generation、検索拡張生成)の説明として正しいものはどれか。

正解は「外部の知識(ベクトルデータベース等)を検索し、その結果を文脈に加えて回答の精度を高める手法」である。RAGは質問に関連する情報を外部知識(ベクトルデータベースに格納したチャンク等)から検索し、その内容を文脈として与えて生成させることで精度を高める手法。他の選択肢のうち、ファインチューニングはモデルの重みを更新する手法、GAN(敵対的生成ネットワーク)は二つのネットワークを競わせて生成する手法の説明。 生成手法は更新する対象と処理順で区別する。GANは二つのネットワークを競わせ、動画補間はフレーム間を生成し、ファインチューニングはモデルのパラメータを更新する。RAGは質問時に外部知識を検索し、取得文を入力文脈へ加えるため重み更新を必須としない。

第3章 現在の生成AI(ジェネレーティブAI)の動向 / RAG(Retrieval Augmented Generation、検索拡張生成)

RAGで、検索対象の文書をあらかじめ扱いやすい小さな単位に分割したものを何というか。

正解は「チャンク」である。RAGでは、検索・参照しやすいように文書をあらかじめ小さな単位へ分割し、この単位をチャンクと呼ぶ。ベクトルデータベースは、分割した文書をベクトル化して格納しておく保存先であり、分割そのものの単位を指す語ではない。潜在ベクトルはVAEなどでデータを圧縮して表した表現で、文書を検索用に分割する処理とは無関係である。自己回帰モデルは文章を単語単位で順に生成していく方式を指す語であり、文書を分割する処理ではない。文書をあらかじめ小さな単位に分割したものという条件に当てはまるのはチャンクだけである。

同じ章で確認したい用語

到達チェック

  • チャンクを一文で説明できる
  • 同じ章の似た用語と違いを説明できる
  • 問題文の具体例から、チャンクに関係する論点を拾える
  • 関連問題を解き、誤答した選択肢の理由を確認できる

用語を体系的に学べる書籍(Amazon)

PR

執筆: AI資格ドリル編集部(運営者情報を見る)