دوره آموزشی اصول برنامه نویسی کلان داده ها مبتنی بر اسپارک و هادوپ
دوره آموزشی اصول برنامه نویسی کلان داده ها مبتنی بر اسپارک و هادوپ
شرکت پویش داده نوین با همکاری استاد برجسته حوزه فناوری اطلاعات جناب آقای دکتر نظارات، دوره آموزشی کلان داده ها و هدوپ را برگزار می کند.
هادوپ، یک ابزار مهم متنباز برای ذخیره و پردازش کارای دادههای عظیم به صورت توزیعشده است. در حال حاضر، خانوادهای از فناوریها در اطراف هادوپ شکل گرفتهاند و امکانات مختلفی را در زمینه دادههای عظیم ارائه میکنند. این خانواده که به اکوسیستم هادوپ معروف هستند، در کنار هم امکاناتی کارا و مقیاسپذیر برای ذخیره سریع، بازیابی با بار زیاد و پردازش توزیعشده را فراهم میسازند. در این کارگاه، مخاطبان با فناوری هادوپ و امکانات پیرامون آن آشنا میشوند و به صورت عملی یک سناریوی فرضی ذخیره و پردازشی با کمک هادوپ پیادهسازی میشود. همچنین با کاربردها و ابزارهای جدید این خانواده و جایگاه آنها آشنا میشویم، و بایدها و نبایدهای استفاده صحیح از این فناوریها را در چارچوب بیان تجارب موفق مرور میکنیم.
رئوس مطالبی که طی دوره ارائه می شود به شرح زیر می باشد:
- آشنایی با اجزای تشکیل دهنده Hadoop شامل HDFS و MapReduce
- آموزش تنظیم محیط برنامه نویسی هادوپ
- آموزش کارکردن با فایل سیستم هادوپ
- آموزش ایجاد کردن محیط لازم برای کار بر روی هادوپ
- آموزش اجرا و دنبال کردن Job های هادوپ
- آموزش بهینه سازی MapReduce
- آموزش کار با Hive و HBase
- آموزش ایجاد نمودن Workflow های مورد نیاز
- آموزش استفاده از کتابخانه های کمکی هادوپ مواردی مانند Impala , Mahout , Storm
- آشنایی با Spark و آموزش کار با آن
- آشنایی با کتابخانه یادگیری ماشین در اسپارک شامل MlLib
- آموزش مصور سازی داده های خروجی گرفته شده از هادوپ
- نصب و راه اندازی کلاستر Hadoop
- نصب و راه اندازی کلاستر Spark
لازم به ذکر است که:
- مدرس دوره جناب آقای دکتر نظارات می باشند. رزومه علمی و پژوهشی ایشان از طریق کلیک بر روی این متن قابل دانلود است.
- کلیه مطالب دوره همراه با یک مثال فرضی توضیح داده می شود.
- در حین دوره کارآموزان امکان استفاده از کلاستر واقعی هدوپ با توان محاسباتی 448 هسته CPU و حدود 1 TB حافظه را دارند.
- مدت دوره: دو روز از ساعت 8 تا 13 می باشد.
- مواردی که باید همراه داشته باشید:
- لب تاپ
- فلش مموری
- پیشنیاز دوره: آشنایی با سیستم عامل لینوکس و زبان برنامه نویسی جاوا
سایر اطلاعات دوره آموزشی به شرح ذیل می باشد.
- زمان برگزاری دوره: 2 و 3 دیماه 1395
- مکان برگزاری: سالن A پارک فناوری اقبال
- ویژه دانشجویان، اساتید و کارفرمایان محترم شرکت پویش داده نوین: 950000 ریال
- سایر شرکت کنندگان: 1250000 ریال
- علاقمندان به منظور شرکت در این دوره آموزشی می توانند هزینه دوره را به شماره کارت / حساب ذیل نزد بانک تجارت به نام شرکت پویش داده نوین واریز نمایند.
- 5859-8370-0010-9658 / 2013053513
- لطفا تصویر فیش واریزی را در فرم ثبت نام بارگذاری نمایید.