ہاٹ میل ایک نیا اسٹوریج سسٹم بنتا ہے - یہ اب بھی تیزی سے بنا رہا ہے!

ہاٹ میل ہر روز اربوں ای میل پیغامات وصول کرتے ہیں اور انہیں محفوظ طریقے سے ذخیرہ کرنا پڑتا ہے. آسانی سے مؤثر طریقے سے دستیاب بنائے جائیں. ہاٹ میل کے کلاؤڈ کی بنیاد پر سٹوریج کا نظام ایک بلین میل باکس سے زائد ہوتا ہے اور سینکڑوں پیٹابیٹس ڈیٹا (ایک پٹابیٹ ایک ملین گیگابایٹس ہے) کی حمایت کرتا ہے. اور اس پیمانے پر مؤثر طریقے سے بیک وقت لاکھوں بیک وقت معاملات کو سنبھالنے کے لئے انجینئرنگ چیلنج ہے. اسٹوریج سسٹم مائیکروسافٹ ٹیکنیکس کا استعمال کرتے ہوئے بنایا گیا ہے، بشمول ونڈوز سرور اور مائیکروسافٹ SQL سرور.

مائیکروسافٹ اس ذخیرہ کے نظام میں بڑے اپ گریڈ پر کام کر رہا ہے. اس سال کے آغاز سے، ہاٹ میل میں تیار کردہ ٹیکنالوجیز پر مبنی ایک نیا نظام مائیکروسافٹ کے ملازمین کے ذاتی اکاؤنٹس کے ذریعے ایک پائلٹ کلسٹر چل رہا ہے. اور سخت ٹیسٹنگ کے بعد نئے نظام کو تصدیق کی گئی ہے جس میں نمایاں قیمت میں نمایاں وشوسنییتا فراہم کرتا ہے.

ہم ہاٹ میل کی طرف سے استعمال کردہ ان نئی ٹیکنالوجیوں کو دیکھیں.

RAID کو تبدیل کرنے کے لئے JBOD کو لاگو کرنا:

"RAID سستے ڈسک کے سایے) ایک ٹیکنالوجی ہے جو کئی ہارڈ ڈرائیوز کو ایک کنٹرولر بورڈ سے منسلک کرنے کی اجازت دیتا ہے، جو انہیں ایک بڑی اور زیادہ قابل اعتماد ہارڈ ڈرائیو کی طرح نظر آتا ہے (کبھی کبھی "منطقی یونٹ" کہا جاتا ہے) سٹوریج کا نظام. "

ہاٹ میل ایک طویل عرصہ تک RAID کا استعمال کر رہا ہے. ای میل ایک سے زیادہ RAID گروپوں پر رکھا گیا تھا لہذا جب پورے RAID میں ناکام ہوجاتا ہے تو، پیغامات کو بحال کیا جا سکتا ہے. ہاٹ میل 1 terabyte سے زیادہ صلاحیت کی ڈرائیوز کی وشوسنییتا نقطہ نظر کا مطالعہ کیا اور پایا کہ یہ قابل اعتماد نقطہ نظر سے پیسہ قابل نہیں تھا. جیسا کہ RAID کے نظام کو واحد نظام پر اثر انداز ہونے والے مسائل سے نمٹنے کے لئے آسان ہے لیکن جب پوری مشین یا RAID کنٹرولر مشکلات میں چلتا ہے. ہاٹ میل نے محسوس کیا کہ کنٹرولر کا اشتراک نہ ہونے والی مختلف مشین پر کاپیاں نہ صرف زیادہ قابل اعتماد بلکہ RAID ترتیب کی ترتیب سے زیادہ مہنگی تھی.

لہذا انہوں نے JBOD (صرف ایک گروپ کے ڈسکس) کو تیار کیا جہاں ڈیٹا کی نقلیں آزاد رہتی ہیں. ڈرائیوز، کنٹرولر، اور مشینیں. اس طرح ہارڈ ڈرائیو کنٹرولر تقریبا راستے سے باہر نکلتا ہے اور سافٹ ویئر کو کنٹرول کرنے کے حوالے کر دیتا ہے. یہ JBOD نظام سافٹ ویئر ہاٹ میل کی طرف سے تیار کیا گیا تھا.

یہ JBOD سافٹ ویئر کو ناکامیوں کے لئے مسلسل نگرانی کرتا ہے اور اس طرح ایک انتباہ اٹھاتا ہے جب اس کی بحالی کی مرمت کا عمل مل جاتا ہے. اس کی مرمت کا عمل کسی مشین کو دوبارہ شروع یا ایک عمل کو دوبارہ شروع کر سکتا ہے، اعداد و شمار کے بدعنوانی کو حل کرنے یا انسانی ضروری مداخلت میں شامل ہونے پر بھی. سافٹ ویئر کا استعمال کرنے کا بنیادی فائدہ یہ ہے کہ یہ کم کاپیاں ڈھونڈتی ہیں تو یہ مرمت کی کارروائی کو ترجیح دیتے ہوئے میلوں کی اچھی کاپی برقرار رکھتا ہے. اس سافٹ ویئر کا استعمال کرتے ہوئے، نقل خود کو آسان کیا گیا تھا

"اسٹوریج کا نظام ایک مشینوں کی سیٹ پر مشتمل ہے، جن میں سے ہر ایک کا ای میل پیغام اور اس کی آمدنی کی تاریخ کی طرف سے منظم ہونے والے ایک جرنل ریکارڈنگ کا پیغام ہے. مشینوں کو ایک دوسرے سے وقت وقت سے بات کرتے ہیں، ان کے جرنلز کا موازنہ کریں اور کسی بھی پیغام کو کاپی کریں جو انہیں احساس ہے کہ تمام مشینوں پر کاپی نہیں کیا گیا. "

ہارڈ ڈرائیونگ کے بجائے ٹھوس اسٹیٹ ڈرائیو (ایس ایس ڈی) کو لاگو کرنا.

ہم جانتے ہیں کہ ہارڈ ڈرائیوز کے مقابلے میں ایس ایس ڈی بہت تیزی سے ہیں. اگرچہ بڑے ڈرائیوز بڑے اور سستا درخواستوں کی شرح کو سنبھالنے میں سست ہیں.

"ایک معمولی ہارڈ ڈرائیو فی سیکنڈ سے زائد سے زائد پڑھنے / لکھنا آپریشن فی سیکنڈ کر سکتے ہیں، جبکہ کچھ تیز ترین SSD کر سکتے ہیں فی سیکنڈ ایک لاکھ آپریشن. "

اگرچہ اس رفتار کی قیمت پر آتا ہے کیونکہ وہ زیادہ مہنگا / گیگیابٹی ہیں جیسے مشکل ڈرائیوروں کے مقابلے میں.

ایس ایس ڈی ہمیشہ موثر تبدیلی سے ہینڈل کرتا ہے. یہ ہاٹ میل کے طور پر وضاحت کی جاسکتی ہے نہ صرف ای میل پیغامات کو اسٹور کرتا ہے بلکہ مختلف مسلسل بدلنے والی میٹا ڈیٹا کا ٹریک رکھتا ہے جیسے پیغام میں پیغامات کی فہرست، پیغامات کی پڑھ / غیر پڑھنے کی حیثیت، بات چیت کی تزئین وغیرہ وغیرہ. یہ میٹا ڈیٹا ڈیٹا اسٹوریج کی جگہ کا ایک چھوٹا حصہ ہے ہمیشہ بدلنے والے فطرت کی وجہ سے ہارڈ ڈرائیوز پر زیادہ سے زیادہ بوجھ رکھتا ہے. لہذا پیغامات کے لئے میٹا ڈیٹا اور ہارڈ ڈسک کو ذخیرہ کرنے کے لئے SSDs کا استعمال کرتے ہوئے ایک بہتر اور موثر مجموعہ بناتا ہے.

ان بہتریوں کے علاوہ ہاٹ میل مستقبل میں خطوط میں بہت زیادہ ظاہر کرے گا. نئے اسٹوریج سسٹم کا رول پہلے ہی شروع ہو چکا ہے اور نئے کلسٹرز جے بیڈ پر مبنی ہوں گے. پہلے سے ہی 30 ملین صارفین JBOD پر ہیں جبکہ 100 ملین ایک دوسرے کے وقت میں منتقل ہو جائیں گے.

اگر آپ نے محسوس کیا ہے تو، ہاٹ میل واقعی تیزی سے تیز ہوگیا ہے. اگر آپ نے ابھی نہیں - اب اسے کوشش کریں.