۴.۴ شناخت توزیع های هادوپ و Cloudera

دوره آموزش هادوپ سید محمدامین ساجدی

در این ویدئو به توضیح اجمالی درباره توزیع های آپاچی و کلودرا می پردازیم. این ویدئو قسمتی از ویدئوهای دوره اموزشی Hadoop Fundamentals از لیندا هست که توسط خودم ترجمه و دوبله شده.

 

 

تا اینجا درباره اکوسیستم هادوپ و کتابخونه های مختلف اون صحبت کردیم. حتما منتظر این هستید که بدونید چطور باید شروع کنید. همونطور که قبلا گفتم می تونید از نسخه رایگان و متن باز اون استفاده کنید. سایت اصلی برای دانلود اون هم hadoop.apache.org هست. 0:16

می تونید اخرین نسخه منتشر شده رو بصورت باینری دانلود کنید و برای خودتون راه اندازی کنید. نصب هادوپ روی لینوکس یکم زمان بره و برای اینکه زمان زیادی صرف نشه می خوایم از یه ماشین مجازی استفاده کنیم که خیلی سریعتر اجرا می شه. اما به هرحال باید درباره سایت بهتون توضیح می دادم. قبل از اینکه بریم سراغ ماشین مجازی می خوام درباره این فیل زرد رنگ که لوگوی هادوپ هست براتون توضیح بدم. 0:39

من خودم به شخصه تونستم توسعه دهنده اصلی هادوپ رو از نزدیک ملاقات کنم و ازش داستان این لوگو رو بپرسم. داستانش اینه که هنگامیکه داشت سیستم فایل گوگل یعنی GFS و MapReduce رو برای خودش ترجمه می کرد تا هادوپ رو طراحی کنه، پسر کوچیکش داشت با یه فیل زرد رنگ بازی می کرد و به اون فیل هادوپ می گفت و این شد که اون هم اسم این سیستم رو هادوپ گذاشت. اون اوایل درباره اینکه هادوپ درسته یا هدوپ کلی بحث بود. البته مهم نیست ولی پسرش بهش می گفت هادوپ نه هدوپ. به هرحال 1:16

گفتیم که برای دریافت نسخه متن باز از اینجا استفاده کنید اما توی این دوره می خوایم از توزیع های مختلف استفاده کنیم. که کارکردن با اون ها خیلی ساده تره. خب می خوایم با cloudera شروع کنیم. 1:28

توجه داشته باشید که اکثر این توزیع های تجاری نسخه رایگان و سبک برای دانلود دارن و نسخه های کامل و حرفه ای رو بفروش می رسونن. خب باید به قسمت products بریم 1:41

می بینید که نسخه Enterprise داره. که برای دریافت اون باید هزینش رو پرداخت کنید. اما همچنین نسخه Express هم موجوده. بعدا می بینید که نسخه Live هم داره. این نسخه رو حتما امتحان کنید چون تجربه خیلی خوبی به شما میده. به شما امکان کار با داده ها روی بستر هادوپ رو از طریق مرورگر می ده. و عملا یک quick start بحساب میاد. نه فقط cloudera بلکه بقیه توزیع ها مثل hortonworks هم نسخه مرورگر دارن که می تونید اون ها رو امتجان کنید.2:15

مخصوصا شما که می خواین تمرین های این دوره رو انجام بدید می تونید از این نسخه ها استفاده کنید.


دیگر سرفصل های دوره آموزشی هادوپ

1 مقدمه
2 چرا از پایگاه داده های رابطه ای دور شویم؟
3 هادوپ چیست؟
4 درک اجزای اساسی هادوپ
5 راه اندازی محیط توسعه هادوپ
6 درک MapReduce
7 پیکربندی MapReduce
8 درک MapReduce 2.0 YARN
9 درک Hive
10 درک Pig
11 شناخت روند کار و متصل کننده ها
12 دیگر کتابخانه های هادوپ
13 شناخت Spark
14 بصری سازی خروجی هادوپ به همراه ابزارها
15 نتیجه گیری