En este capítulo, aprenderás qué es la ingeniería de datos y por qué está aumentando su demanda. A continuación, descubrirás dónde se sitúa la ingeniería de datos en relación con el ciclo de vida de la ciencia de datos, en qué se diferencian los ingenieros de datos de los científicos de datos, y tendrás una introducción a tu primera canalización de datos completa.

Ingeniería de datos y big data

Go with the flow (Déjate llevar)

Not responsible (No soy responsable)

Big time (Gran momento)

Ingenieros de datos frente a científicos de datos

Tell me the truth (Dime la verdad)

Who is it (Quién es)

La canalización de datos

It's not true (No es verdad)

Pipeline (Canalización)

¿Qué es la ingeniería de datos?

Es hora de hablar del almacenamiento de datos, una de las principales responsabilidades de un ingeniero de datos. En este capítulo, aprenderás cómo los ingenieros de datos gestionan diferentes estructuras de datos, trabajan en SQL (el lenguaje de programación preferido para consultar y almacenar datos) e implementan soluciones adecuadas de almacenamiento de datos con lagos de datos y almacenes de datos.

Estructuras de datos

Structures (Estructuras)

What's the difference (¿Cuál es la diferencia?)

Bases de datos SQL

We can work it out (Podemos solucionarlo)

Columns (Columnas)

Different breeds (Diferentes tipos)

Almacenes de datos frente a lagos de datos

Tell the truth (Di la verdad)

Our warehouse (in the middle of our street) (Nuestro almacén [en medio de nuestra calle])

Almacenamiento de datos

Los ingenieros de datos facilitan la vida a los científicos de datos preparando los datos brutos para el análisis mediante distintas técnicas de procesamiento en diferentes pasos. Estos pasos deben combinarse para crear canalizaciones, que es cuando entra en juego la automatización. Por último, los ingenieros de datos utilizan la computación paralela y en la nube para que las canalizaciones fluyan sin problemas.

Tratamiento de datos

Opciones

Extraer

Transformar

Cargar

Connect the dots (Une los puntos)

Datos de programación

Manual

Tiempo

Condición

Schedules (Programas)

Procesamiento por lotes (batching)

Procesamiento por flujo (streaming).

One or the other (Uno u otro)

Computación paralela

Whenever, whenever (Para cualquier ocasión)

Correcto

Incorrecto

Parallel Universe (Universo paralelo)

Computación en nube

Obscured by clouds (Oscurecido por las nubes)

Computacionales

Bases de datos

Somewhere I belong (Un lugar al que pertenezca)

We are the champions (Somos los campeones)

Mover y procesar datos

Lexicon

Course Glossary: Understanding Data Engineering

En 2019, el salario medio de los ingenieros de datos superó al de los científicos de datos. ¿Cómo ha ocurrido? Las empresas que querían encontrar el oro en sus datos se dieron cuenta de que no era posible si aún no habían construido la mina. Los ingenieros de datos sientan las bases que hacen posible la ciencia de datos.
<br /> <br />
En este curso, aprenderás cuáles son las principales responsabilidades de un ingeniero de datos, en qué se diferencian de los científicos de datos, y a facilitar el flujo de datos a través de una organización. Mediante ejercicios prácticos, seguirás a Spotflix, una empresa ficticia de streaming de música, para comprender cómo sus ingenieros de datos recopilan, limpian y catalogan sus datos. Al final del curso, comprenderás lo que hacen los ingenieros de datos de tu empresa, estarás preparado para mantener una conversación con un ingeniero de datos y tendrás una base sólida para iniciar tu propio viaje como ingeniero de datos.


<h2> Comprender los fundamentos de la ingeniería de datos </h2>
<br>
En este curso, aprenderás cuáles son las principales responsabilidades de un ingeniero de datos, en qué se diferencian de los científicos de datos, y a facilitar el flujo de datos a través de una organización. Mediante ejercicios prácticos, seguirás a Spotflix, una empresa ficticia de streaming de música, para comprender cómo sus ingenieros de datos recopilan, limpian y catalogan sus datos. 
<br><br>
<h2> Aplicar en casos personales</h2>
<br>
Al final del curso, comprenderás lo que hacen los ingenieros de datos de tu empresa, estarás preparado para mantener una conversación con un ingeniero de datos y tendrás una base sólida para iniciar tu propio viaje como ingeniero de datos.

Descubre cómo los ingenieros de datos sientan las bases para la ciencia de datos. ¡Sin programación!

Comprender la ingeniería de datos

Descubre cómo los ingenieros de datos sientan las bases que hacen posible la ciencia de datos. No necesitas.programar.

Ingeniero de Datos Asociado en SQL

Analista de datos en Databricks

Comprender los temas de datos

La computación en nube engloba soluciones de almacenamiento, bases de datos e informática.

Aprovechar la nube en lugar de tener nuestro propio centro de datos en las instalaciones nos permite utilizar solo los recursos que necesitamos, cuando los necesitamos.

Una solución multicloud reduce la dependencia de un único proveedor.

La computación en nube reduce todo tipo de riesgos.

EC2, S3 y RDS son soluciones ofrecidas por Microsoft Azure.

Las soluciones multicloud reducen los problemas de seguridad y gobernanza.

Obscured by clouds (Oscurecido por las nubes)

Comprender la ingeniería de datos

Ejercicio interactivo práctico