This chapter covers new Docker commands and details on how to share data between host system and containerized applications. Learn when and how to use persistent volumes and access host filesystems.

Intermediate Docker Commands

Help at a glance

Existing containers

Automatic container cleanup

Mounting the host filesystem

Passing a file to a running container

Gone, but not forgotten

Different methods, same result

Persistent volumes

Creating a container volume

Different containers, same volume

Commands and filesystems

Learn to expose networking services in Docker, create Docker networks, and use Dockerfiles to maintain network settings.

Networking refresher

What's my IP?

Valid ports

Making network services available in Docker

Mapping a port

Multiple containers, same host port?

Exposing ports with Dockerfiles

So many options

Mapping a container port

Using ephemeral mapping

Docker networks

Creating a docker network

Adding containers to a network

IP Ranges

Removing container networks

Networking

Learn to use Docker's advanced image management and build tools to create compact effective container images. Create multi-platform images capable of running on different processor architectures.

Optimizing Docker images

Contain your concerns

Docker image exploration

Determining the best image to use

Understanding layers

Layer cake

How many layers?

Multi-stage builds

Single-stage build

Multi-stage build

Understanding multi-stage builds

Multi-platform builds

Multi-platform steps

Multi-platform build

Building advanced container images

Combine the the volume, networking, and container handling capabilities of Docker into multi-container applications using Docker Compose. Update and manage application deployments via the docker-compose.yml file.

Introducción a Docker Compose

Gestionar una aplicación con Docker Compose

Solucionar problemas al iniciar la aplicación

Crear archivos compose.yaml

Escribir un archivo compose.yaml

Identificar secciones

¿Cuántos recursos hay?

Dependencias y resolución de problemas en Docker Compose

Orden de inicio de los recursos

Cálculo de dependencias

Orden de apagado

FROM python:3.12-alpine3.19
WORKDIR /code
RUN apk add --no-cache gcc musl-dev linux-headers
COPY requirements.txt requirements.txt
RUN pip install -r requirements.txt
COPY . .
CMD ["python3", "app.py"]


import time
import redis

cache = redis.Redis(host='redis', port=6379, socket_timeout=1)

def get_hit_count():
  retries = 5
  while True:
    try:
      return cache.incr('hits')
    except redis.exceptions.ConnectionError as exc:
      if retries == 0:
        raise exc
      retries -= 1
      time.sleep(0.5)

def hello():
  count = get_hit_count()
  return f'Successfully communicated {count} times.\n'

for i in range(0, 5):
  print(f"{hello()}")


services:
  app:
    build: .
  redis:
    image: "redis:alpine3.20"
    depends_on:
      - app


services:
  app:
    build: .
    depends_on:
      - redis
  redis:
    image: "redis:alpine3.20"


# Solution Steps:
  # 1. Run `docker compose up -d` to start the services
  # 2. Use `docker compose logs` to view the startup logs and identify errors
  # 3. Examine the compose.yaml file to find the dependency issue
  # 4. Update the compose.yaml to move depends_on from redis to app service
  # 5. Run `docker compose down` to stop all services
  # 6. Rerun `docker compose up -d` and verify you see "Successfully communicated" messages

Solución de problemas de dependencias

Crear un servicio de datos dentro de Docker

import duckdb
from flask import Flask

app = Flask(__name__)

@app.route("/tripcount")
def returndata():
  cursor = duckdb.connect()
  try:
    count = cursor.execute("select count(*) from read_parquet('/data/*.parquet')").fetchall()[0][0]
    return f"Total trips: {count}"
  except duckdb.duckdb.IOException:
    return f"Data files are not present", 503

@app.route("/first")
def returnfirst():
  cursor = duckdb.connect()
  try:
    first = cursor.execute("select min(tpep_pickup_datetime) from read_parquet('/data/*.parquet')").fetchall()[0][0]
    return f"First pickup: {first:%Y/%m/%d}" 
  except duckdb.duckdb.IOException:
    return f"Data files are not present", 503

@app.route("/last")
def returnlast():
  cursor = duckdb.connect()
  try:
    last = cursor.execute("select max(tpep_pickup_datetime) from read_parquet('/data/*.parquet')").fetchall()[0][0]
    return f"Last pickup: {last:%Y/%m/%d}" 
  except duckdb.duckdb.IOException:
    return f"Data files are not present", 503


FROM python:3.12-alpine3.19

#
# NOTE: Application reads contents of /data in container
# If not found, application returns errors.
# 

WORKDIR /app
ENV FLASK_RUN_HOST=0.0.0.0

COPY code/app.py .
COPY code/requirements.txt .

RUN pip install -r requirements.txt --root-user-action=ignore

EXPOSE 5000

CMD ["flask", "run"]


STATUS_CODE=$(curl --silent --head http://localhost:5000/tripcount | awk '/^HTTP/{print $2}')

if [ "$STATUS_CODE" == "503" ]; then
  echo "ERROR ACCESSING DATA SERVICE - PLEASE VERIFY DATA IS PRESENT"
  echo "Did you use a -v flag with your docker run command?"
elif [ "$STATUS_CODE" == "200" ]; then
  echo "SUCCESSFULLY ACCESSED DATA SERVICE!"
else
  echo "ERROR ACCESSING DATA SERVICE - PLEASE VERIFY SERVICE IS RUNNING"
  echo "Did you start your container with a -p flag?"
fi
  


There are several steps required to complete this exercise:

- Build the dataservice container using the following command in the terminal:

docker build . -t dataservice

- Run an instance of the Docker container as follows:

docker run -d -p5000:5000 -v ~/workspace/datasets:/data dataservice

- Verify that the service is working by running the ./app_test.sh on the terminal


Crear un backend de servicio de datos

Añadir un cliente de datos

services:
  ____:
    image: dataservice
    volumes:
      - /home/repl/datasets:/data
    networks: 
      data_net:
        ipv4_address: 10.11.12.2

  dataclient:
    image: ____
    depends_on: 
      - ____
    networks:
      data_net:
        ipv4_address: 10.11.12.3

# Ignore everything below this line
networks:
  data_net:
    driver: macvlan
    ipam:
      config:
        - subnet: "10.11.12.0/24"
    


services:
  dataservice:
    image: dataservice
    volumes:
      - /home/repl/workspace/datasets:/data
    networks: 
      data_net:
        ipv4_address: 10.11.12.2

  dataclient:
    image: dataclient
    depends_on: 
      - dataservice
    networks:
      data_net:
        ipv4_address: 10.11.12.3

# Ignore everything below this line
networks:
  data_net:
    driver: macvlan
    ipam:
      config:
        - subnet: "10.11.12.0/24"
    


- Update the compose.yaml file as shown.
- Run the following command:

  docker compose up -d
  
- Run the command:

  docker compose logs dataclient


Usar Docker Compose para definir una aplicación completa

¡Enhorabuena!

Docker Compose

Este curso amplía los fundamentos de Docker y la contenedorización del curso de Introducción a Docker. Profundizamos en los conceptos y herramientas vistos allí, añadiendo gestión y optimización de imágenes de contenedor, redes, comunicación del sistema de archivos, y aplicaciones multiplataforma y multicontenedor. Al finalizar, serás capaz de:

- Crear compilaciones multi-stage para optimizar el tamaño, la seguridad y la reutilización de aplicaciones en contenedores.
- Usar las herramientas y conceptos de redes de Docker para añadir comunicaciones entre contenedores y ofrecer servicios de red a la red local y al exterior.
- Compartir archivos y datos entre contenedores y la máquina anfitriona usando montajes de sistema de archivos y volúmenes de Docker.
- Crear despliegues de aplicaciones multicontenedor con Docker Compose, simplificando drásticamente la configuración de herramientas complejas comunes en entornos de ciencia de datos e ingeniería.

Aprovecharás al máximo este curso si ya has trabajado con contenedores sencillos y has creado algunos, pero quieres ampliar tu caja de herramientas de desarrollo, pruebas y distribución. Nos encantará acompañarte en tu camino de aprendizaje de Docker.

Este curso amplía los conocimientos adquiridos en el curso Introducción a Docker, profundizando en los conceptos y herramientas de contenedorización. Exploraremos temas avanzados como la gestión de imágenes de contenedores, las redes, la comunicación entre sistemas de archivos y el desarrollo de aplicaciones multiplataforma y multicontenedor.
<h2>Optimización de aplicaciones en contenedores</h2>
Aprende a crear compilaciones de varias etapas para mejorar el tamaño, la seguridad y la reutilización de las aplicaciones en contenedores. A través de ejercicios prácticos, domina las técnicas para optimizar las imágenes de contenedores, garantizando una implementación y gestión eficientes en diversos entornos.
<h2>Mejora de las implementaciones de contenedores con Docker Compose</h2>
Descubre cómo aprovechar las herramientas y conceptos de red de Docker para facilitar la comunicación entre contenedores y proporcionar servicios de red tanto a redes locales como externas. Explora los montajes y volúmenes del sistema de archivos para compartir datos sin problemas entre los contenedores y la máquina host. Además, adquiere dominio de Docker Compose para coordinar implementaciones de aplicaciones multicontener, lo que simplifica la configuración de herramientas complejas habituales en entornos de ingeniería y ciencia de datos.
<h2>Desarrollo e implementación proactivos</h2>
Este curso te proporciona las habilidades esenciales para mejorar tus procesos de desarrollo, pruebas y distribución. Aunque no es imprescindible, sacarás el máximo partido a este curso si has trabajado con contenedores sencillos y has creado algunos. Al finalizar el curso, tendrás los conocimientos y las herramientas necesarios para optimizar aplicaciones en contenedores, agilizar la comunicación entre contenedores e implementar aplicaciones multicontenedor con facilidad, lo que te permitirá avanzar en tu proceso de aprendizaje de Docker.

Introduction to Docker

Domina las compilaciones multi-etapa, herramientas de red de Docker y Docker Compose para apps óptimas.

Docker intermedio

Domina las compilaciones multietapa, las herramientas de red de Docker y Docker Compose para optimizar las aplicaciones en contenedores.

Orden de apagado

Docker intermedio

ejercicio interactivo práctico