آموزش انجام کارهای پیشرفته بر روی داده ها بوسیله Hadoop and Azure HDInsight

Apache Hadoop چارچوبی است که امکان پردازش توزیع شده مجموعه داده های بزرگ را در خوشه های رایانه ها با استفاده از مدل های برنامه نویسی ساده فراهم می کند. این طراحی شده است تا از سرورهای منفرد به هزاران دستگاه ، که هر کدام محاسبات و ذخیره سازی محلی را ارائه می دهند ، مقیاس بندی شود. با حرکت بسیاری از سازمان ها به داده های بزرگ ، تقاضا برای متخصصان Hadoop به طور گسترده ای افزایش یافته است. بنابراین ، Hadoop یکی از با ارزش ترین مهارت های یادگیری در دنیای امروز است.
در این دوره ، شما با یادگیری اساسی اکوسیستم Hadoop و 3 بلوک اصلی ساختمان شروع خواهید کرد. سپس ، شما به چالش های Hadoop و چگونگی حل HDInsight این چالش ها را بررسی خواهید کرد. شما همچنین انواع خوشه ای ، معماری HDInsight و سایر جنبه های مهم Azure HDInsight را یاد خواهید گرفت. پس از آن ، شما داده ها را از دریاچه Data دریافت خواهید کرد ، آن را از طریق Hive پردازش می کنید ، و بعداً داده ها را در SQL Server ذخیره خواهید کرد. داده ها را از دریاچه داده ها بدست آورید ، آن را از طریق Hive پردازش کنید ، و بعداً داده ها را در SQL Server ذخیره می کنید.
تا پایان این دوره ، شما درک کاملی از چالش هایی که با داده های بزرگ و نحوه حل آن وجود دارد ، خواهید داشت آنها با استفاده از Hadoop و Hdinsight. شما می توانید داده ها را از دریاچه داده استخراج کرده و آن را از طریق Hive و بعداً داده ها را در یک سرور SQL پردازش کنید.
پرونده های منابع در مخزن GitHub در https://github.com/packtpublishing/learn بارگذاری می شوند. -hadoop-and-azure-hdinsight-basics-this-evening-in-2-hr

عنوان اصلی : Learn Hadoop and Azure HDInsight Basics this Evening (in 2 hours)

سرفصل های دوره :

مقدمه:
مقدمه
مقدمه محاسبات ابری لاجورد:
اشتراک بدون لاجورد
نمای کلی پورتال لاجورد
نمای کلی خدمات لاجورد
گروه مدیریت منابع و اشتراک
گروه های منابع
برچسب زدن
منابع را حذف کرده و بودجه تعیین کنید
مقدمه ای برای بررسی اجمالی Hadoop:
بررسی اجمالی Hadoop
چرا ما به توزیع محاسبات نیاز داریم؟
دو راه برای ساخت سیستم
معرفی Hadoop
Hadoop در مقابل RDBMS
خلاصه Hadoop
مقدمه HDInsight:
چرا Hadoop سخت است
چگونه Hdinsight Hadoop را آسان می کند
جنبه های مهم HDInsight
انواع خوشه HDinsight
معماری HDinsight
نسخه ی نمایشی hdinsight:
نمای کلی نسخه ی نمایشی
Data Data Data Lake Storage Gen 2 (منبع) و SQL Server (مقصد)
آنچه هویت مدیریت شده است
هویت مدیریت شده را به حساب های Gen2 و پایگاه داده اضافه کنید
خوشه پرس و جو تعاملی HDInsight ایجاد کنید
نمای کلی Ambari و UI
داده ها را به ذخیره سازی دریاچه داده وارد کنید
استخراج داده ها با کندو
تحول داده با کندو
صادرات داده با استفاده از SQOOP
خلاصه