This chapter provides an introduction to LLMOps and the ideation phase of LLM application development. It explains the basics of LLMOps, highlights the lifecycle stages of LLMs, and covers key activities in the ideation phase, such as data sourcing and selecting between open-source and proprietary LLMs.

Overview of LLMOps

LLMOps versus MLOps

Relevancy of LLMOps

Lifecycle of LLMs

The purpose of lifecycle phases

The application lifecycle

Ideation phase

Data sourcing

Proprietary versus open-source models

Selecting the right base model

Introduction to LLMOps & Ideation Phase

This chapter focuses on the development phase of LLM application creation. It covers prompt engineering, agents and chains, RAG versus fine-tuning techniques, and testing methods. 

Prompt engineering

The importance of prompt engineering

Trying out prompt engineering

Keeping track of prompts

Chains and agents

The difference between agents and chains

Choosing the right architecture

RAG versus fine-tuning

The RAG workflow

Compare RAG with fine-tuning

Testing

Choosing the right metric

The importance of testing

Development Phase

This chapter focuses on the operational phase of LLM application deployment and management. We will cover deployment strategies like CI/CD, scaling techniques, monitoring practices, cost management strategies, and governance and security considerations. Mastering these concepts will help you efficiently manage LLM applications in operational environments.

Despliegue

La necesidad de CI/CD

Opciones

Escalado horizontal

Escalado vertical

La estrategia de escalado adecuada

Monitorización y observabilidad

Monitorización de entradas

Monitorización funcional

Monitorización de salidas

Monitorizar tu aplicación

Gestión de alertas

Gestión de costes

ChatGPT

Compresión de prompts

Elaborar un pronóstico de costes

Gobernanza y seguridad

Prompt injection

Inyección de prompts

Envenenamiento de datos

Denegación de servicio

Estrategias de mitigación

Integridad de datos y envenenamiento

¡Enhorabuena!

Operational Phase

Emprende un recorrido por las operaciones con modelos de lenguaje grandes (LLMOps). Este curso, pensado tanto para entusiastas como para profesionales, te guía por los fundamentos, desde la idea hasta el despliegue operacional.

Profundizar en el ciclo de vida de las aplicaciones con LLM revelará su papel clave en las organizaciones. Conocerás los retos y consideraciones de cada etapa y cómo perfeccionar el desarrollo y asegurar un despliegue fluido, incorporando además gobernanza y seguridad de datos. Al finalizar, tendrás una base sólida de los conceptos de LLMOps y sabrás cómo aplicarlos a tus aplicaciones.

<h2> Introducción a los LLMOps </h2>

Embárcate en un viaje hacia las Operaciones con Grandes Modelos Lingüísticos (LLMOps). Este curso, diseñado tanto para entusiastas como para profesionales, te guía a través de los fundamentos, desde la ideación hasta el despliegue operativo.

<h2> Desbloquea lo esencial </h2>

Comienza tu exploración desentrañando los fundamentos de las LLMOps. Comprender su papel fundamental en el panorama organizativo y entender los conceptos básicos de los LLM y los LLMOps. El objetivo principal de este curso no es construir tu propio LLM fundacional. En cambio, está orientado a aprovechar las capacidades de un modelo fundacional para aplicarlo dentro de tu organización.

<h2> Navega por el ciclo de vida </h2>

Profundizar en el ciclo de vida de las aplicaciones LLM revelará su papel fundamental en las organizaciones. Conocerás los retos y consideraciones de cada fase y cómo perfeccionar el desarrollo y garantizar una implantación sin problemas, al tiempo que adoptas la gobernanza y la seguridad de los datos. 

Tras completar este curso, no sólo adquirirás una sólida comprensión de los LLMOps, sino que también serás capaz de aplicar con confianza estos conceptos en tu trabajo. Tanto si estás empezando como si deseas profundizar en tus conocimientos, este curso potenciará tus habilidades y te guiará hacia el dominio de los LLMOps.

Large Language Models (LLMs) Concepts

Aprende sobre LLMOps desde la idea hasta la implementación y cómo aplicarlo a tus aplicaciones.

Conceptos de LLMOps

Aprende sobre LLMOps desde la ideación hasta el despliegue y cómo aplicarlo a tus aplicaciones.

Associate AI Engineer para desarrolladores

Desarrollar grandes modelos lingüísticos

Elaborar un pronóstico de costes

Conceptos de LLMOps

ejercicio interactivo práctico