برچسب Prashant Kumar Pandey

Udemy – Databricks Data Engineering with AWS 2026-7

Databricks Data Engineering with AWS، دوره آموزش مهندسی داده Databricks با AWS توسط آکادمی Udemy منتشر شده است.دیتابریکس (Databricks) به پلتفرم پیش‌فرض لیک‌هاوس برای مهندسی داده در بستر AWS تبدیل شده است و بیش از 60 درصد از شرکت‌های Fortune 500 از آن استفاده می‌کنند. این دوره یک مسیر کامل را از آموزش مفاهیم پایه تا استقرار سیستم‌های سطح تولید ارائه می‌دهد و مباحثی چون راه‌اندازی محیط کار، مدیریت و حاکمیت داده با Unity Catalog، مفاهیم داخلی Delta Lake (شامل تراکنش‌های ACID، امکان Time Travel، قیود و بهینه‌سازی عملکرد)، طراحی پایپ‌لاین‌های معماری مدالین (Medallion)، ورود داده با Lakeflow Connect (اتصال‌دهنده‌های SaaS، تکنولوژی CDC پایگاه داده و Auto Loader) و ارکستراسیون فرآیندها با Lakeflow Jobs را پوشش می‌دهد.

Udemy – Spark Streaming – Stream Processing in Lakehouse – PySpark 2024-7

Spark Streaming – Stream Processing in Lakehouse – PySpark، دوره آموزش اسپارک استریمینگ – پردازش استریم در Lakehouse با PySpark توسط آکادمی Udemy منتشر شده است.بر پردازش استریم ساختاریافته اسپارک (Spark Structured Streaming) با استفاده از پایتون (PySpark) در بستر ابری Azure Databricks همراه با یک پروژه کامل و جامع تسلط پیدا کنید. در این دوره کاربردی، شما مفاهیم پردازش استریم در زمان واقعی، APIها و معماری Spark Structured Streaming و همچنین یکپارچه‌سازی منابع و مقاصد داده مانند آپاچی کافکا و دلتا لیک را فرامی‌گیرید.