क्लस्टर आणि सुपर कॉम्प्यूटर्समध्ये वापरल्या जाणार्‍या फाईल सिस्टमपैकी एक ल्युस्टर

चमक ही एक मुक्त स्त्रोत वितरित फाइल सिस्टम आहे, सामान्य मोठ्या प्रमाणात क्लस्टर्समध्ये वापरले. हे नाव लिनक्स आणि क्लस्टर्सचे मिश्रण आहे.

प्रकल्प स्टोरेज क्षमतेच्या पेटाबाइट्ससह हजारो नोड्सच्या क्लस्टर्ससाठी फाइल सिस्टम प्रदान करण्याचा प्रयत्न करतो, वेग किंवा सुरक्षिततेशी तडजोड न करता आणि जीएनयू जीपीएल अंतर्गत उपलब्ध आहे.

क्लस्टर फाइल सिस्टम हे लुस्टरचे डिझाइनर, विकसक आणि देखभाल करणारे आहेत ज्यात इतर कंपन्या आणि व्यक्तींचे योगदान आहे.

लस्टर बद्दल

जगातील बर्‍याच वेगवान सुपर कंप्यूटर असे क्लस्टर आहेत जे ल्युस्टर फाईल सिस्टमला ओआरएनएल, पीएनएनएल, एलएलएनएल आणि लॅनएल सारख्या स्टोरेज म्हणून वापरतात.

ही प्रणाली लुस्टर फाईल सिस्टममध्ये संग्रहित प्रत्येक फाईलला ऑब्जेक्ट मानते. Luster सर्व ग्राहकांना मानक POSIX शब्दांकाची आणि सामायिक ऑब्जेक्ट्ससाठी समवर्ती वाचन आणि लेखन प्रवेशाची ओळख करुन देतो. लस्टर फाईल सिस्टममध्ये चार फंक्शनल युनिट्स असतात.

मेटाडेटा संचयित करण्यासाठी हे मेटा डेटा सर्व्हर (एमडीएस) आहेत; वास्तविक डेटा जतन करण्यासाठी ऑब्जेक्ट स्टोरेज लक्ष्य (OST); ओएसटी व्यवस्थापित करण्यासाठी ऑब्जेक्ट स्टोरेज सर्व्हर (ओएसएस); डेटामध्ये प्रवेश आणि वापरण्यासाठी ग्राहक

ओएसटी ब्लॉक उपकरणे आहेत. एक एमडीएस, ओएसएस आणि ओएसटी समान नोडवर किंवा भिन्न नोड्सवर राहू शकतात.

लस्टर ओएसटीचे थेट व्यवस्थापन करीत नाही आणि मोठ्या क्लस्टर्स आणि सुपर कॉम्प्यूटरसाठी स्केलेबिलिटी सुनिश्चित करण्यासाठी ओएसएसला ही जबाबदारी सोपवते.

मॅसिव्हली पॅरलल प्रोसेसर (एमपीपी) मध्ये, प्रोसेसर ल्युस्टर क्लायंट म्हणून कॉन्फिगर केले असल्यास कार्य I / O विनंत्या टास्क लाँचर सेवेद्वारे पुनर्निर्देशित करून लस्टर फाइल सिस्टममध्ये प्रवेश करू शकतात.

जरी ही सर्वात सोपी पद्धत आहे, तरीही ही सामान्यत: खराब कार्यक्षमता प्रदान करते. अतिशय चांगली एकूण कार्यक्षमता प्रदान करण्याचा थोडा अधिक क्लिष्ट मार्ग म्हणजे लिब्लस्टर लायब्ररी वापरणे.

सर्व्हिस नोडवर पुनर्निर्देशन टाकून लिब्लिस्टर एक वापरकर्ता-स्तरीय लायब्ररी आहे जी प्रोसेसरला क्लायटर म्हणून लस्टर फाइल सिस्टम आरोहित आणि वापरण्यास परवानगी देते.

लिब्लस्टरचा वापर करून, प्रोसेसर लस्टर फाइल सिस्टममध्ये प्रवेश करू शकतात, जरी ज्या सर्व्हिस नोडवर नोकरी सुरू केली गेली होती तो लस्टर क्लायंट नसला तरीही.

लिब्लिस्टर लाइटवेट कोरद्वारे डेटा कॉपी करण्याची आवश्यकता न करता अ‍ॅप्लिकेशन स्पेस आणि लस्टर ओएसएस दरम्यान थेट डेटा हलविण्याची एक यंत्रणा प्रदान करते, अशा प्रकारे ल्युस्टर फाइल सिस्टममध्ये प्रोसेसरच्या थेट प्रवेशामध्ये कमी विलंबपणा आणि उच्च बँडविड्थ मिळते.

लस्टरची नवीन आवृत्ती

अलीकडे Luster 2.12 ची नवीन आवृत्ती प्रकाशीत केली गेली ज्यामध्ये काही नवीन फंक्शन्स आणि वरील सर्व बग फिक्स समाविष्ट केले गेले आहे सुपर कॉम्प्युटरसाठी वापरल्या जाणार्‍या काही लिनक्स वितरकांसाठी.

लस्टर २.१२ ची मुख्य नवीन वैशिष्ट्ये

या नवीन रिलीझसह वितरित नेमस्पेसच्या विद्यमान मोठ्या डिरेक्टरीज स्पेसिंगचे कार्य जोडले (डीएनई, वितरित नेमस्पेस) एका मेटाडेटा स्टोरेज ऑब्जेक्ट (डीटीएम, मेटाडेटा लक्ष्य) कित्येकांना (भिन्न डीटीएमद्वारे भिन्न डीएनई विभागांचे अंतर).

नवीन वैशिष्ट्य विद्यमान एफएससाठी नवीन एमडीटीची ओळख आणि एमडीटीमधील लोडचे मॅन्युअल रीबॅलेंसिंग सुलभ करते.

मेटाडेटा रिपॉझिटरीज (एमडीटी) साठी, »आळशी आकार« मोड लागू केला गेला आहे, ज्यामुळे गती जास्त वेगवान असेल अशा परिस्थितीत पॉलिसी इंजिनद्वारे थेट एमडीटी स्कॅन करतेवेळी फायलींचा अचूक आकार न घेता आपण अंदाजे आकार त्वरित परत आणू शकता. अचूकता

लस्टर 2.12 च्या या नवीन आवृत्तीमध्ये, एकाधिक एलनेट नेटवर्क इंटरफेससह असलेल्या कॉन्फिगरेशनसाठी «एलनेट नेटवर्क हेल्थ» फंक्शन जोडले गेले आहे, विनंती प्रथमच पाठविल्या गेल्यानंतर दुसर्‍या नेटवर्क इंटरफेसद्वारे पुन्हा प्रवेश करण्याचा पर्याय लागू करते.

या व्यतिरिक्त, च्या आवृत्त्यांसाठी सर्व्हर समर्थन जोडले गेले आरएचईएल 7.6 (3.10.0-957.el7) आणि एसएलईएस 12 एसपी 3 (4.4.162-94.69). न पाठविलेल्या आरएचईएल 7.6 (3.10.0-957.el7), एसएलईएस 12 एसपी 3 (4.4.162-94.69) आणि उबंटू 18.04 (4.15.0-32) कर्नल्ससाठी क्लायंट समर्थन समाविष्ट केले.