Lezen uit een database

Als data-engineer bij Sierra Publishing moet je vaak gegevenssets raadplegen van andere teams binnen je organisatie. In dit geval moet je gegevens inlezen over recente marketingcampagnes, die in de cloud in een Postgres-database zijn opgeslagen. Voorheen logde je in op de database en voerde je de query’s handmatig uit, maar nu wil je die data in een Databricks-notebook ophalen en met een Spark DataFrame verwerken.

Wat is je beste aanpak als je de data alleen rechtstreeks uit de database wilt lezen?