مهندسی داده با اسپارک، دیتابریکس، دلتا لیک و لیک هاوس

مهندسی داده که یک مولفه حیاتی در کسب‌وکارهای داده‌محور مدرن است، توانایی پردازش، مدیریت و تحلیل مجموعه‌های داده در مقیاس بزرگ را به یک نیاز اصلی تبدیل می‌کند. در این دوره یاد می‌گیرید چگونه با استفاده از Apache Spark یک خط لوله داده را بر پایه معماری Lakehouse شرکت Databricks بسازید. این دوره تجربه عملی کار با Spark و مفاهیم Lakehouse را فراهم می‌کند و مهارت‌های لازم برای تبدیل شدن به یک مهندس داده با کارایی بالا در محیط‌های واقعی را می‌آموزد. در طول دوره، شما مهارت‌های زیر را کسب خواهید کرد: تحلیل با استفاده از پایتون و اسکالا با Spark، استفاده از Spark SQL و Databricks SQL برای تحلیل، توسعه یک خط لوله داده با Apache Spark، تسلط بر نسخه رایگان Databricks، مدیریت Delta table با دسترسی به تاریخچه نسخه، بازگردانی داده و استفاده از قابلیت زمان‌سفر، حجم‌های Unity Catalog برای ذخیره‌سازی فایل و عملیات مرتبط، بهبود عملکرد پرس‌وجو با Delta Cache، کار با Delta Tables و Databricks File System، کسب بینش از سناریوهای دنیای واقعی با مدرسین با تجربه.