سوال:
میں بڑے ڈیٹا کا تجزیہ کرنے کے لئے ہڈوپ کا استعمال کس طرح سیکھ سکتا ہوں؟
A:ہاڈوپ کے نام سے جانا جاتا اپاچی سافٹ ویئر سیٹ بڑے ڈیٹا سیٹوں سے نمٹنے کے لئے ایک بہت ہی مقبول وسائل بنتا جارہا ہے۔ اس طرح کے ڈیٹا ہینڈلنگ سوفٹویئر فریم ورک کو ایسے ڈیزائنوں کی بنیاد پر مخصوص انداز میں مجموعی ڈیٹا کی مدد کے لئے بنایا گیا تھا جس سے کچھ طرح کے ڈیٹا پراجیکٹس کو زیادہ موثر بنایا جاسکتا ہے۔ اس نے کہا ، ہيڈوپ بڑے اعداد و شمار کے سیٹوں کو سنبھالنے کے لئے بہت سارے ٹولز میں سے ایک ہے۔
ہڈوپ کے ساتھ بڑے اعداد و شمار کے تجزیے کے بارے میں جاننے کے لئے سب سے پہلے اور سب سے بنیادی طریقوں میں سے ایک یہ ہے کہ ہدوپ کے اعلی سطح کے کچھ اجزاء کو سمجھنا اور کیا کرتا ہے۔ ان میں ایک ہڈوپ یارن "ریسورس مینجمنٹ پلیٹ فارم" شامل ہے جو مخصوص قسم کے نیٹ ورک سیٹ اپ پر لاگو ہوسکتا ہے ، نیز ہڈوپ میپریڈوسیس کا سیٹ جو بڑے ڈیٹا سیٹوں پر لاگو ہوتا ہے۔ ایک ہڈوپ تقسیم شدہ فائل سسٹم (ایچ ڈی ایف ایس) بھی ہے ، جو تقسیم شدہ سسٹمز میں ڈیٹا اسٹور کرنے میں مدد کرتا ہے تاکہ اسے جلدی اور موثر انداز میں انڈیکس یا بازیافت کیا جاسکے۔
اس سے آگے ، جو لوگ ہڈوپ سے زیادہ واقف ہونا چاہتے ہیں وہ پیشہ ور افراد کے ل individual انفرادی اشاعت شدہ وسائل پر نگاہ ڈال سکتے ہیں جو سافٹ وئیر کو متعلقہ سطح پر واضح کرتے ہیں۔ ایک ذاتی بلاگ میں کرس اسٹوچیو کی یہ مثال ہڈوپ اور ڈیٹا اسکیل کے بارے میں ایک بہترین نکات فراہم کرتی ہے۔ بنیادی اختیارات میں سے ایک یہ ہے کہ ہڈوپ ضروری سے کہیں زیادہ عام طور پر استعمال ہوسکتا ہے ، اور یہ کسی فرد پروجیکٹ کے لئے بہترین حل نہیں ہوسکتا ہے۔ اس قسم کے وسائل کا جائزہ لینے سے پیشہ ور افراد کو کسی بھی منظر نامے میں ہڈوپ استعمال کرنے کی تفصیلات سے زیادہ واقف ہونے میں مدد ملے گی۔ اسٹوچیو ہڈوپ کے افعال کو مخصوص جسمانی کاموں سے متعلقہ استعارے بھی فراہم کرتا ہے۔ یہاں ، مثال کے طور پر کسی لائبریری میں کتابوں کی تعداد گنتی ہے ، جب کہ ایک ہڈوپ فنکشن اس لائبریری کو حصوں میں تقسیم کرسکتا ہے ، اور انفرادی شمار فراہم کرتا ہے جو اعداد و شمار کے ایک مجموعی نتیجے میں مل جاتے ہیں۔
پیشہ ور افراد ہاڈوپ کے بارے میں مزید معلومات حاصل کرسکتے ہیں اور بڑے اعداد و شمار پر اس کا اطلاق مخصوص تربیت کے وسائل اور پروگراموں کے ذریعے کرتے ہیں۔ مثال کے طور پر ، آن لائن سیکھنے والی کمپنی کلوڈیرہ ، جو دور دراز کے ٹریننگ سیشنوں کی ایک ممتاز فراہم کنندہ ہے ، کے پاس ہڈوپ استعمال اور اسی طرح کے ڈیٹا ہینڈلنگ کے آس پاس متعدد دلچسپ اختیارات ہیں۔
