بوت کمپ مهندسی تجزیه و تحلیل

تبدیل شدن به یک متخصص مهندس تحلیلی با یک دوره. یادگیری مدل سازی داده ها، DBT، Google Bigquery و بسیاری دیگر!

عنوان اصلی : Analytics Engineering Bootcamp

سرفصل های دوره :

مقدمه:
منابع
پایگاه داده چیست؟ :
معرفی پایگاه داده
تعریف پایگاه داده
مثال SQL
کاربرگ در مقابل پایگاه داده
OLTP
OLTP ACID
OLAP
خلاصه OLTP در مقابل OLAP
معرفی NoSQL
فروشگاه ارزش کلیدی
فروشگاه اسناد
ستون های عریض
پایگاه داده گراف
موتورهای جستجو
SQL در مقابل NoSQL
On-Prem vs Cloud
آزمون
انبار داده چیست؟ :
معرفی انبار داده
تعریف انبار داده
مزایای انبار داده
معماری انبار داده
منبع داده
دریاچه داده
لایه انبار داده
معرفی هوش تجاری
ETL - مقدمه ELT
ETL
ELT
ETL در مقابل ELT
آزمون
مدل‌سازی داده و نمادهای ERD:
مقدمه مدلسازی داده و نمودار رابطه موجودیت (ERD)
مروری بر مدل سازی داده ها
نمای کلی ERD
روابط ویژگی های موجودیت
مراحل ایجاد ERD
ERD را با استفاده از سبک نشانه گذاری Chen بسازید
ساخت ERD با استفاده از شیوه نمادگذاری مهندسی اطلاعات
مفاهیم مدلسازی داده
انواع مختلف کلیدها
ابزارهای توصیه شده برای ایجاد ERD
آزمون
نرمال‌سازی و غیرعادی‌سازی:
هنجارسازی چیست؟
اولین فرم عادی
دومین فرم عادی
سومین فرم عادی
مزایا و معایب مدل نرمال شده
تکنیک های عادی سازی
مزایا و معایب مدل غیر عادی
آزمون
روش‌های طراحی انبار داده:
مقدمه روش های طراحی انبار داده
روش شناسی اینمون
معماری کارخانه اطلاعات شرکتی (CIF) توضیح داده شد
معماری اینمون
مزایا و معایب روش Inmon
روش کیمبال
معماری کیمبال
مزایا و معایب روش کیمبال
اینمون در مقابل کیمبال
معماری ترکیبی
مقدمه روش شناسی خزانه داده
اجزای خزانه داده
معماری و مثال Data Vault
مزایا و معایب Data Vault
اینمون در مقابل کیمبال مقابل دیتا والت
یک میز بزرگ (OBT) / میز عریض
مزایا و معایب OBT
مدل سازی داده ها در آن زمان، اکنون و بعد
آزمون
مدلسازی ابعادی:
مقدمه مدلسازی بعدی
مدلسازی بعدی چیست؟
مروری بر چرخه حیات انبار داده
برنامه ریزی/برنامه ریزی پروژه
جمع آوری نیازمندی ها
مفهوم و مراحل مدلسازی ابعادی
فرآیند کسب و کار را انتخاب کنید و دانه را اعلام کنید
ابعاد (انواع)
ابعاد منطبق
ابعاد ناخواسته
ابعاد منحط
ابعاد نقش آفرینی
تغییر آهسته ابعاد (SCD) - مقدمه
نوع 0 - SCD (ابعاد در حال تغییر به آرامی)
نوع 1 - SCD (ابعاد در حال تغییر به آرامی)
نوع 2 - SCD (ابعاد در حال تغییر به آرامی)
نوع 3 - SCD (ابعاد در حال تغییر به آرامی)
نوع 4 - SCD (ابعاد در حال تغییر به آرامی)
SCD - ذخیره به عنوان عکس فوری
جداول پل
حقایق
حقایق افزودنی
حقایق نیمه افزودنی
حقایق غیرافزودنی
جدول حقایق تراکنش
جدول اطلاعات دوره ای
جدول اطلاعات انباشته
طرحواره ستاره
طرحواره دانه های برف
آزمون
(dbt عملی) ساخت انبار داده ابعادی:
مقدمه
نمای کلی عملی
معرفی مورد استفاده
بحث تفصیلی مورد استفاده
جمع آوری نیازمندی ها
پروفایلینگ داده ها - مقدمه
پروفایل داده - تکمیل شد
کتاب کار AE - مرور
ماتریس اتوبوس - نهادهای سطح بالا
مدل مفهومی
طراحی معماری
مقدمه مدلسازی بعدی
جزئیات ماتریس اتوبوس
نقشه برداری از منبع به هدف (منبع BQ Data Lake)
منبع به نقشه‌برداری هدف (BQ Data Lake تا Staging)
مدل بعدی (ویژگی‌ها و معیارها)
منبع به نقشه برداری هدف (دریاچه داده به انبار داده)
منبع به نقشه برداری هدف (انبار داده به OBT)
طراحی مدل منطقی
طراحی مدل فیزیکی
نمای کلی dbt
اجرای فیزیکی (لایه مرحله‌بندی)
اجرای فیزیکی (لایه مرحله‌بندی) ادامه
جداول کم نور پیاده سازی فیزیکی (لایه انبار داده)
جدول واقعیت پیاده سازی فیزیکی (لایه انبار داده)
اجرای فیزیکی (Analytics OBT)
اشکال‌زدایی (dbt)
افزودن تست ها (dbt)
تکمیل عملی
تنظیم محیط‌ها:
معرفی BigQuery Setup
تنظیم جداول BigQuery با استفاده از CSV
تنظیم جداول BigQuery با استفاده از اسکریپت SQL
راه اندازی WSL2 برای ویندوز
تنظیم مخزن Git
راه اندازی و نصب dbt
واژه نامه:
واژه نامه