در حال حاضر محصولی در سبد خرید شما وجود ندارد.
مهندسی داده ها و خط لوله های معماری با استفاده از Snowflake و AWS Cloud
عنوان اصلی : Snowflake - Build & Architect Data pipelines using AWS
سرفصل های دوره :
مقدمه:
پیش نیازها و نحوه موفقیت در این دوره
Clone Github Repo
مقدمه ای بر Snowflake و AWS:
دو جنبه از اکوسیستم داده
آزمایشگاه - راه اندازی حساب آزمایشی Snowflake
معماری دانه های برف
سلسله مراتب اشیاء دانه برف
دانه برف - انبارهای مجازی
دانه برف - اجزای مختلف صورتحساب
دانه برف - میزان مصرف خود را پیگیری کنید
Snowflake- Resource Monitors
دانه برف - جداول:
مقدمه - جداول مختلف در Snowflake
آزمایشگاه - ایجاد جداول در Snowflake
دانه برف - نماها، نماهای مادی شده و نماهای ایمن
آزمایشگاه - ایجاد نماها در Snowflake
آزمایشگاه - ایجاد نماهای امن در Snowflake
بیشتر درباره Views در Snowflake
Snowflake - پارتیشن بندی، خوشه بندی و بهینه سازی عملکرد:
نمای کلی بخش
مقدمه ای بر پارتیشن ها و کلیدهای خوشه بندی
آزمایشگاه - میکروپارتیشن ها و کلیدهای خوشه بندی
مزایای ریز پارتیشن ها و خوشه بندی
درک عمق خوشه‌بندی و همپوشانی خوشه‌ها
Lab - انتخاب کلیدهای خوشه بندی شما
آزمایشگاه - نمایه و سابقه پرس و جو را بررسی کنید
آزمایشگاه - پردازش پرس و جو و ذخیره سازی
ویژگی بهینه سازی جستجو
دانه برف - بارگیری/بلع و استخراج داده:
نمای کلی بخش
آزمایشگاه - ایجاد یک شیء ادغام برای اتصال Snowflake با AWS S3
آزمایشگاه - CSV را از S3 به Snowflake وارد کنید
آزمایشگاه - JSON را از S3 به Snowflake وارد کنید
مقدمه ای بر مصرف مداوم داده در Snowflake
Lab - ایجاد و پیاده سازی Snowpipe
Snowpipe - برآورد صورتحساب و ملاحظات کلیدی برای جذب داده
آزمایشگاه - استخراج/تخلیه داده ها از Snowflake به S3
Snowflake - Tasks and Query Scheduling:
نمای کلی بخش
مقدمه ای بر Tasks
آزمایشگاه - درخت وظایف مستقل و وابسته را ایجاد کنید
آزمایشگاه - صورتحساب و تاریخچه پرس و جو برای Tasks
Snowflake - جریان و تغییر ضبط داده:
نمای کلی بخش
آزمایشگاه - اجرای جریانهای استاندارد
آزمایشگاه - اجرای جریانهای فقط پیوست
آزمایشگاه - جریان در یک تراکنش
جریان ها - حفظ و بیات بودن داده ها
آزمایشگاه - تغییر ردیابی با استفاده از "تغییرات"
نمای کلی پروژه
آزمایشگاه - ایجاد جریان - راه حل پروژه قسمت 1
آزمایشگاه - ایجاد جریان - ادامه قسمت 1
آزمایشگاه - خط لوله پایان به انتها در عمل
Snowflake - توابع تعریف شده توسط کاربر:
مقدمه ای بر توابع تعریف شده توسط کاربر و انواع UDF
Lab - یک Scalar UDF بنویسید و پیاده سازی کنید
Lab - UDF جدولی را در SQL بنویسید
Lab - UDF های جاوا اسکریپت را پیاده سازی کنید
Pushdown در UDF چیست؟
آزمایشگاه - چگونه pushdown می‌تواند داده‌های زیربنایی را آشکار کند؟
آزمایشگاه - UDF های امن بنویسید
Snowflake - عملکردهای خارجی:
نمای کلی بخش
Lab - تابع Deploy AWS Lambda را بنویسید
Lab - ایجاد دروازه API
آزمایشگاه - ایمن سازی و استقرار دروازه API
آزمایشگاه - ایجاد عملکرد خارجی در Snowflake
دانه برف با پایتون، اسپارک و جریان هوا در AWS:
نمای کلی بخش
آزمایشگاه - پایتون را با Snowflake در دستگاه محلی خود وصل کنید
مقدمه ای بر چسب AWS
Lab - استقرار و اجرای اسکریپت پایتون در AWS Glue
آزمایشگاه - اسکریپت پایتون خود را روی چسب AWS پارامتر کنید
آزمایشگاه - پانداهای پایتون با دانه‌ی برف روی چسب AWS
Pushdown در Spark 3.1 چیست؟
آزمایشگاه - یک اسکریپت Pyspark را با استفاده از چسب AWS اجرا کنید
آزمایشگاه - راه اندازی خوشه جریان هوای مدیریت شده در AWS
آزمایشگاه - پیکربندی اتصال دانه برف در جریان هوا
آزمایشگاه - یک کار تبدیل PySpark را در چسب AWS اجرا کنید
آزمایشگاه - راه اندازی جریان هوا DAG
استریم در زمان واقعی با کافکا و دانه برف:
نمای کلی بخش
Lab - فایل های JAR لازم را دانلود کنید
آزمایشگاه - کافکا را در سیستم محلی خود راه اندازی کنید
آزمایشگاه - کانکتور کافکا برف ریزه را راه اندازی کنید
آزمایشگاه - تنظیم کلیدهای رمزگذاری برای اتصال کافکا-برف
آزمایشگاه - جریان داده در عمل
Snowflake - حفاظت از داده ها و مدیریت:
نمای کلی بخش
TimeTravel و Failsafe در Snowflake چیست؟
آزمایشگاه - سفر در زمان و بازیابی اطلاعات
آزمایشگاه - پوشش داده پویا در سطح ستون
امنیت سطح ردیف چیست؟
Lab - خط مشی دسترسی سطح ردیف را ایجاد و اجرا کنید
با تشکر از شما و موارد دیگر
Snowflake - Build & Architect Data pipelines using AWS
در این روش نیاز به افزودن محصول به سبد خرید و تکمیل اطلاعات نیست و شما پس از وارد کردن ایمیل خود و طی کردن مراحل پرداخت لینک های دریافت محصولات را در ایمیل خود دریافت خواهید کرد.
