Multi-Modal RAG mit Weaviate
Diese Übung ist Teil des Kurses
End-to-End RAG mit Weaviate
Anleitung zur Übung
- Instanziiere das Modell
ColIdefics3samt passendem Processor und berechne das Embedding für die angegebene Anfrage (query). - Verwende
query_embedding, um diepages-Kollektion mit einer Vektor-Suche zu abzufragen und die obersten3Seitenbilder zurückzugeben. - Erstelle einen multimodalen Prompt mit der Bildeigenschaft
"page_image"und verwende ihn zusammen mitquery_embedding, um diepages-Kollektion zu abfragen.
Hinweis: Wenn du DataLab im Restricted Mode verwendest, wird diese Übung derzeit noch nicht unterstützt. Wir arbeiten aktiv daran, sie in Zukunft verfügbar zu machen.
Interaktive Übung
In dieser interaktiven Übung kannst du die Theorie in die Praxis umsetzen.
Übung starten