Weaviate がどのように RAG アプリケーションを実現するのか見ていきます。まずは Retrieval-Augmentation-Generation の各ステップに慣れるため、手作業でエンドツーエンドの RAG ワークフローを構築します。この理解をもとに、第2章では Weaviate を使って堅牢で最適化された RAG ワークフローを実装できるようになります。

RAGで一気にレベルアップ！

LLM によるテキスト生成

テキスト埋め込みを作成する

テキスト埋め込みの比較

"R"、"A"、"G" を組み合わせよう

Weaviate で学ぶ RAG の基礎

手作業で RAG ワークフローを組むのも楽しいですが、Weaviate のようなツールが提供する最適化を活かせないかもしれません。この章では、埋め込み、保存、検索、応答生成まで、すべてを Weaviate で行います。

Weaviate で学ぶ RAG ワークフロー

PDFテキストの抽出とチャンク化

Weaviate のセットアップ

Weaviateでのクエリ

上から下までのRAG

Weaviate ではじめる End-to-End RAG

前の章では、PDF 文書のテキストを使ってドキュメントチャンクを作成しましたが、画像の内容は扱いませんでした。これは、検索や生成に役立つ多くのコンテキストを失うことにつながります。この章では、ColPali のマルチモーダルモデルを使って、テキストと画像の両方を埋め込み・生成し、モデルの応答により豊かなコンテキストを与えます。

テキストと画像で行うRAG

マルチモーダル RAG の準備

Weaviate でのマルチモーダル RAG

おめでとうございます！

マルチモーダル RAG

シンプルな LLM 呼び出しから、Weaviate を使ったマルチモーダル RAG ワークフローまで学びます。PDF 文書を処理して、段落、見出し、表などの主要なテキストを抽出する方法を身につけます。抽出したデータを埋め込み、Weaviate に保存して検索できるようにします。最後に、生成モデルへ渡す効果的な検索プロンプトを作成します。仕上げとして、PDF を画像として扱い、図やプロットから失われがちなコンテキストも取り込めるようにします。ColPali のマルチモーダル埋め込みモデルと、OpenAI のマルチモーダル生成モデルを組み合わせて、画像や文書と対話を始めましょう。

Working with the OpenAI API

WeaviateでRAGをマスター！テキストと画像を埋め込み、ベクトル、BM25、ハイブリッド検索を試そう。

WeaviateでRAGをマスターしよう！検索用のテキストと画像を埋め込み、ベクトル検索、BM25、ハイブリッド検索を試します。

マルチモーダル RAG の準備

Weaviate ではじめる End-to-End RAG

演習の手順

実践的なインタラクティブ演習