1. 学ぶ
    2. /
  2. コース
    3. /
  3. Pythonで学ぶ Spark SQL 入門
Connected

演習

集約を一歩ずつ

ドット記法とSQLのどちらを使うかは個人の好みです。ただし、動画の演習で示したように、SQLのほうが簡潔になる場合があります。また動画レッスンで示したとおり、ドット記法では直感に反する結果になることがあります。たとえば、同じ列に対して2回目の集約を行うと、先に行った集約が上書きされてしまう場合です。動画でも述べたように、pyspark の agg の基本構文では、1回の呼び出しにつき各列に対して1つの集約しか指定できません。

次の演習では、各路線の最初の出発時刻を計算します。

最初の2つのクエリは一致します。しかし、次の2つは一致しません。なぜか説明できますか？

指示

100 XP
  • 空欄を埋めて、最初の2つのコマンドが同一の結果を表示するようにしてください。
  • 4つ目の結果（result）は、直前の行を素朴に再現しようとしたものですが、直感に反して異なる結果になります。どのように違うでしょうか？ 空欄を埋めて、result の2番目の列名を出力してください。