Crie uma base sólida de data warehousing com a Databricks Data Intelligence Platform! Você vai aprender como o Databricks e a arquitetura de lakehouse preparam sua organização para uma pilha moderna de SQL e BI. Você também vai explorar os principais componentes do produto Databricks SQL, desde técnicas de armazenamento de dados até otimizações de processamento.

SQL na Data Intelligence Platform

Benefícios do lakehouse para SQL

Explorando o Databricks SQL

Explorando alguns dados

Partner Connect

Principais ativos do Databricks SQL

Classificando os assets do Databricks SQL

Crie uma consulta

Criar uma visualização

Data Warehousing no Databricks

Construa uma base de dados sólida para a arquitetura de lakehouse! Você vai aprender a ingerir, transformar e modelar seus dados usando os recursos do Databricks SQL. Você vai explorar abordagens baseadas em interface gráfica e programáticas para construir a arquitetura de medalhão e criar um ecossistema de dados pronto para qualquer carga de trabalho analítica.

Ingerindo dados

Ingestão de dados via GUI

Hidratando o lakehouse

Fazer upload de dados manualmente

Usando COPY INTO

Aproveitando o Auto Loader

Transformando dados

SQL e a arquitetura de medalhões

Criando uma camada de dados de cafés

Limpando tabelas brutas

Criando a camada Silver

Criando uma tabela de sinistros com prêmio alto

Engenharia de dados com Databricks SQL

Crie insights poderosos com o Databricks SQL! Você vai aprender a escrever consultas, criar visualizações e alimentar painéis usando os recursos do Databricks na própria plataforma. Você vai praticar o uso de código SQL, filtros e parâmetros para criar uma aplicação analítica robusta para seus usuários finais.

Consultando na Data Intelligence Platform

Options

Query

Both

Visualization

Ativos analíticos no Databricks SQL

Consultando nosso conjunto de dados de café

Analisando sinistros de seguros

Complementando consultas com funções

Visualizando resultados de consultas

Criando um aplicativo de análise

O papel do Partner Connect

Um painel de dados de café

Adicionando filtros a painéis

Usando parâmetros em consultas

Crie um dashboard executivo

Análise de dados com Databricks SQL

No capítulo final, você vai aprender técnicas mais avançadas que aproveitam os principais diferenciais da plataforma Databricks. Você verá como lidar com dados de alta velocidade e em rápida mudança usando funções de janela e como mesclar conjuntos de dados à medida que eles chegam.

Padrões comuns de engenharia de dados

Append vs. CDC

Atualizando os dados de vendas de café

Otimização de dados com SQL

Usando INSERT

Usando MERGE

Padrões avançados de análise de dados

Entendendo funções de janela e subconsultas

Analisando vendas de café por loja

Escrevendo uma subconsulta

Usando uma window function

Usando janelas e subconsultas juntas

Recapitulação do curso

Padrões avançados com Databricks SQL

Toda organização precisa de uma solução de data warehousing para executar análises essenciais de business intelligence. Ao longo dos anos, surgiram várias ferramentas para atender a essas necessidades, mas muitas eram pilhas de tecnologia separadas que tinham dificuldade para acompanhar as demandas e a escala dos dados modernos.

O Databricks é uma poderosa Data Intelligence Platform que atende a muitas das necessidades analíticas de uma organização. Ao aproveitar o Databricks SQL, é possível utilizar um data warehouse altamente escalável e com ótimo desempenho diretamente na arquitetura de lakehouse.

Neste curso, você será apresentado aos principais componentes e fluxos de trabalho do Databricks SQL.

Primeiro, você vai aprender a usar o Databricks SQL para executar diferentes tarefas de engenharia de dados e mover seus dados pela arquitetura de medalhão para atender às equipes de dados. Você vai aprender as técnicas mais comuns usadas por muitos engenheiros de dados, como escolher entre diferentes técnicas de armazenamento e como manter seus dados atualizados.

Em seguida, você aprenderá a analisar seus dados no Databricks SQL, como muitos analistas de dados fazem no mercado. Você verá as funções e técnicas mais comuns usando SQL baseado em ANSI e, depois, criará visualizações e painéis dentro da plataforma para contar melhor a história dos seus dados.

Por fim, você aprenderá técnicas mais avançadas que aproveitam os principais diferenciais da plataforma Databricks. Você verá como lidar com dados de alta velocidade e em rápida mudança usando funções de janela e como mesclar conjuntos de dados à medida que eles chegam.

Toda organização precisa de um sistema de warehouse de dados para fazer análises importantes de inteligência de negócios. Ao longo dos anos, surgiram várias ferramentas diferentes para atender a essas necessidades, mas muitas vezes eram pilhas de tecnologia separadas que tinham dificuldade para acompanhar as necessidades e a escala dos dados modernos.

A Databricks é uma plataforma de inteligência de dados super eficiente que dá conta de várias necessidades analíticas de uma organização. Ao usar o Databricks SQL, uma organização pode usar uma solução de warehouse super escalável e com ótimo desempenho direto na arquitetura lakehouse.

Neste curso, você vai conhecer os principais componentes e fluxos de trabalho do Databricks SQL.

Primeiro, você vai aprender a usar o Databricks SQL para fazer várias tarefas de engenharia de dados e mover seus dados pela arquitetura medallion para ajudar as equipes de dados. Você vai aprender as técnicas comuns que muitos engenheiros de dados usam, como escolher entre diferentes técnicas de armazenamento de dados e como manter seus dados atualizados.

Depois, você vai aprender a analisar seus dados no Databricks SQL, como muitos analistas de dados fazem no setor. Você vai aprender as funções e técnicas comuns usando SQL baseado em ANSI e, em seguida, vai criar visualizações e painéis na plataforma para contar melhor a história dos seus dados.

Por fim, você vai aprender algumas técnicas mais avançadas que aproveitam os principais diferenciais da plataforma Databricks. Você vai aprender a lidar com dados que mudam rápido usando funções de janela e vai conseguir juntar conjuntos de dados conforme eles forem chegando.

Intermediate SQL

Introduction to Databricks

Aprenda Databricks SQL para engenharia de dados, análises e fluxos de dados em tempo real no lakehouse.

Introduction to Databricks SQL

Aprenda Databricks SQL para engenharia de dados, análise e fluxos de trabalho de dados em tempo real na arquitetura lakehouse.

Analista de Dados no Databricks

Data Manager

Querying our coffee dataset

Let's practice!

Análise de dados com Databricks SQL - Consultando nosso conjunto de dados de café

Consultando nosso conjunto de dados de café

Create Your Free Account