Entdecke, wie Weaviate RAG-Anwendungen ermöglicht! Du baust einen RAG-Workflow Schritt für Schritt von Hand auf, um die Schritte Retrieval–Augmentation–Generation kennenzulernen. Dieses Verständnis ermöglicht dir in Kapitel 2 robuste und optimierte RAG-Workflows mit Weaviate.

Von RAG zu Reichtum!

Textgenerierung mit LLMs

Text-Embeddings erstellen

Text-Embeddings vergleichen

Das "R", "A" und "G" zusammenführen

RAG-Grundlagen mit Weaviate

Auch wenn es Spaß macht, RAG-Workflows von Hand zu coden, verpasst du dabei möglicherweise Optimierungen durch Tools wie Weaviate. In diesem Kapitel erstellst du Embeddings, speicherst, rufst ab und generierst Antworten – alles mit Weaviate!

RAG-Workflows mit Weaviate

Extraktion und Chunking von PDF-Text

Weaviate einrichten

Abfragen in Weaviate

RAG von oben bis unten

End-to-End RAG mit Weaviate

Im letzten Kapitel hast du die Textinhalte der PDF-Dokumente genutzt, um deine Dokument-Chunks zu erstellen, die Bildinhalte jedoch außen vor gelassen. Dadurch geht wertvoller Kontext verloren, der fürs Retrieval und die Generierung hilfreich sein kann! In diesem Kapitel verwendest du die multimodalen ColPali-Modelle, um Text und Bilder zu embedden und zu generieren und so mehr Kontext für die Antworten deines Modells bereitzustellen.

RAG mit Text und Bildern

Vorbereitung für Multi-Modal RAG

Multi-Modal RAG mit Weaviate

Glückwunsch!

Multimodales RAG

Lerne, wie du von einfachen LLM-Aufrufen zu multimodalen RAG-Workflows mit Weaviate gelangst! Du lernst, PDF-Dokumente zu verarbeiten, um wichtige Textinhalte wie Absätze, Überschriften und Tabellen zu extrahieren. Du erstellst Embeddings und speicherst diese Daten zur Abfrage in Weaviate. Abschließend formulierst du effektive Retrieval-Prompts für generative Modelle. Zum krönenden Abschluss behandelst du PDFs als Bilder, um Kontext aus Grafiken und Diagrammen zu erhalten, der sonst verloren geht. Du nutzt das multimodale Embedding-Modell ColPali zusammen mit einem multimodalen Generationsmodell von OpenAI, um erste Unterhaltungen mit Bildern und Dokumenten zu führen!

Working with the OpenAI API

Meistere RAG mit Weaviate! Betten Sie Text und Bilder ein und testen Sie Vektor- und Hybridsuche.

Lerne RAG mit Weaviate kennen! Füge Text und Bilder zum Abrufen ein und probiere die Vektor-, BM25- und Hybridsuche aus.

Multi-Modal RAG mit Weaviate

Übungsanweisungen

Interaktive praktische Übung