مسلط شدن بر Amazon Redshift و مبحث Serverless

یک دوره جامع در مورد تسلط بر redshift آمازون از جمله سرور برای مهندسان داده برای ساخت انبار داده

عنوان اصلی : Mastering Amazon Redshift and Serverless for Data Engineers

سرفصل های دوره :

مقدمه ای بر تسلط بر Amazon Redshift و سرور بدون سرور برای مهندسان داده:
مقدمه ای بر تسلط بر Amazon Redshift و Serverless برای مهندسان داده
شروع با Amazon Redshift:
پرس و جوها را در مقابل جداول Redshift با استفاده از ویرایشگر کوئری اجرا کنید
جدول Redshift را با استفاده از کلید اصلی ایجاد کنید
درج داده ها در جداول Redshift
به‌روزرسانی داده‌ها در جداول Redshift
حذف داده ها از جداول Redshift
جستجوهای ذخیره شده را با استفاده از ویرایشگر پرس و جو به Redshift کنید
حذف Redshift Cluster
Redshift Cluster را از Snapshot بازیابی کنید
کپی داده ها از s3 در Redshift Tables:
کپی داده ها از s3 به Redshift - مقدمه
داده ها را در s3 برای Redshift Copy تنظیم کنید
ایجاد پایگاه داده و جدول برای Redshift Copy Command
کاربر IAM را با دسترسی کامل در s3 برای Redshift Copy ایجاد کنید
برای کپی کردن داده ها از s3 به Redshift، دستور Copy Command را اجرا کنید
عیب یابی خطاهای مربوط به Redshift Copy Command
برای کپی کردن از جدول s3 به Redshift، دستور Copy را اجرا کنید
اعتبارسنجی با استفاده از پرس و جوها در برابر جدول Redshift
نمای کلی از Redshift Copy Command
برای دسترسی به s3، نقش IAM را برای Redshift ایجاد کنید
داده ها را از s3 به جدول Redshift با استفاده از IAM Role کپی کنید
تنظیم JSON Dataset در s3 برای Redshift Copy Command
داده‌های JSON را از s3 به جدول Redshift با استفاده از IAM Role کپی کنید
برنامه های پایتون را با استفاده از Redshift Cluster توسعه دهید:
توسعه برنامه با استفاده از Redshift Cluster - مقدمه
Ip الاستیک را برای Redshift Cluster اختصاص دهید
دسترسی عمومی را برای Redshift Cluster فعال کنید
برای دسترسی به Redshift Cluster، قوانین ورودی را در Security Group به روز کنید
ایجاد پایگاه داده و کاربر در Redshift Cluster
با استفاده از psql به پایگاه داده در Redshift متصل شوید
تغییر مالک در جداول Redshift
فایل Redshift JDBC Jar را دانلود کنید
با استفاده از IDE هایی مانند SQL Workbench به پایگاه های داده Redshift متصل شوید
محیط مجازی پایتون را برای Redshift تنظیم کنید
Simple Query را در مقابل جدول پایگاه داده Redshift با استفاده از پایتون اجرا کنید
جدول Redshift را با استفاده از پایتون کوتاه کنید
کاربر IAM را برای کپی کردن از s3 به جداول Redshift ایجاد کنید
اعتبار دسترسی کاربر IAM را با استفاده از Boto3 تأیید کنید
دستور Redshift Copy را با استفاده از پایتون اجرا کنید
جدول Redshift با Distkeys و Sortkeys:
جداول Redshift با Distkeys و Sortkeys - مقدمه
بررسی سریع معماری Redshift
خوشه Redshift چند گره ای ایجاد کنید
با استفاده از Query Editor به Redshift Cluster متصل شوید
پایگاه داده Redshift ایجاد کنید
کاربر پایگاه داده Redshift ایجاد کنید
ایجاد طرحواره پایگاه داده Redshift
سبک توزیع پیش‌فرض جدول Redshift
اعطای مجوزهای انتخاب در کاتالوگ به کاربر پایگاه داده Redshift
مسیر جستجو را برای درخواست جداول سیستم Redshift به روز کنید
تأیید جدول با DISTSTYLE AUTO
Cluster را از Snapshot به حالت اولیه ایجاد کنید
نمای کلی Node Slices در Redshift Cluster
مروری بر سبک های توزیع
استراتژی های توزیع برای جداول خرده فروشی در Redshift
جدول Redshift را با سبک توزیع همه ایجاد کنید
عیب‌یابی و رفع خطاهای بارگیری یا کپی کردن
جدول Redshift را با خودکار سبک توزیع ایجاد کنید
جداول Redshift را با استفاده از کلید سبک توزیع ایجاد کنید
حذف خوشه با عکس فوری دستی
پرسش‌ها و طیف فدرال Redshift:
پرس و جوها و طیف فدرال Redshift - مقدمه
مروری بر ادغام RDS و Redshift برای جستجوهای فدرال
نقش IAM را برای Redshift Cluster ایجاد کنید
سرور پایگاه داده Postgres را برای پرس و جوهای فدرال Redshift راه اندازی کنید
جداول را در پایگاه داده Postgres برای Queries Federated Redshift ایجاد کنید
ایجاد راز با استفاده از Secrets Manager برای پایگاه داده Postgres
دسترسی به جزئیات مخفی با استفاده از Python Boto3
خواندن داده‌های Json در Dataframe با استفاده از پاندا
داده های JSON را با استفاده از پانداها در جداول پایگاه داده بنویسید
سیاست IAM را برای Secret ایجاد کنید و با Redshift Role ارتباط برقرار کنید
خوشه Redshift را با استفاده از نقش IAM با مجوزهای مخفی ایجاد کنید
طرحواره خارجی Redshift را در پایگاه داده Postgres ایجاد کنید
تنظیمات شبکه Redshift Cluster را برای جستجوهای فدرال به‌روزرسانی کنید
اجرای ETL با استفاده از Redshift Federated Queries
پاک کردن منابع اضافه شده برای Redshift Federated Queries
اعطای دسترسی به کاتالوگ داده چسب به Redshift Cluster for Spectrum
خوشه های Redshift را برای اجرای پرس و جوها با استفاده از Spectrum راه اندازی کنید
بازنویسی سریع پایگاه داده و جداول کاتالوگ چسب برای طیف Redshift
طرحواره خارجی را با استفاده از Redshift Spectrum ایجاد کنید
پرس و جوها را با استفاده از Redshift Spectrum اجرا کنید
خوشه Redshift را پاک کنید