PySpark के साथ डेटा फ़िल्टरिंग

इस अभ्यास में, हम एक फ़ाइल को lakehouse में अपलोड करेंगे और PySpark का उपयोग करके डेटा फ़िल्टर करेंगे। फ़ाइल में वीडियो गेम्स और उनके पब्लिशर्स की सूची है। हम डेटासेट को छोटा करना चाहते हैं ताकि हम केवल पब्लिशर Atari के वीडियो गेम्स पर काम करें.

नोट: यदि आपको API rate limit से संबंधित त्रुटि मिलती है, तो आमतौर पर इसका मतलब है कि कोई पिछला Fabric कार्य अभी पूरा नहीं हुआ है। आप बाएँ वर्टिकल मेनू में स्थित Monitor पेज से सक्रिय Fabric कार्य देख सकते हैं। Monitor पेज में पुराने Fabric कार्यों को रद्द करने से प्रायः rate limit त्रुटि हल हो जाती है.