Luster See on avatud lähtekoodiga hajutatud failisüsteem, normalmente kasutatakse suuremahulistes klastrites. Nimi on segu Linuxist ja klastritest.
El proyecto üritab pakkuda failisüsteemi kümnete tuhandete sõlmede klastrite jaoks, kus on petabaiti mahtu, kiirust ja turvalisust ohustamata ning see on saadaval GNU GPLi all.
Klastrifailisüsteemid on Lusteri disainerid, arendajad ja hooldajad, teiste ettevõtete ja üksikisikute panusega.
Lusteri kohta
Paljud maailma kõige kiirematest superarvutitest on klastrid, mis kasutavad failisüsteemi Luster salvestusruumina, näiteks ORNL, PNNL, LLNL ja LANL süsteemid.
See süsteem peab iga Lusteri failisüsteemi salvestatud faili objektiks. Luster tutvustab kõigile klientidele standardset POSIX-semantikat ning samaaegset lugemis- ja kirjutusjuurdepääsu jagatud objektidele. Lusteri failisüsteemis on neli funktsionaalset üksust.
Need on metaandmeserver (MDS) metaandmete salvestamiseks; objekti salvestamise sihtmärk (OST) tegelike andmete salvestamiseks; objekti salvestusserver (OSS) OST-de haldamiseks; klient (id) andmetele juurde pääseda ja neid kasutada.
OST-d on blokeeritud seadmed. MDS, OSS ja OST võivad asuda ühes või erinevas sõlmes.
Luster ei halda otseselt OST-sid ja delegeerib selle vastutuse OSS-idele, et tagada suurte klastrite ja superarvutite mastaapsus.
Massiivselt paralleelselt töötavas protsessoris (MPP) pääsevad protsessorid ligi Lusteri failisüsteemile, suunates oma sisend- ja väljunditaotlused ülesande käivitaja teenusega sõlme, kui see on konfigureeritud Lusteri kliendiks.
Kuigi see on kõige lihtsam meetod, tagab see üldiselt halva jõudluse. Veidi keerulisem viis väga hea üldise jõudluse tagamiseks on kasutada hiilgavat teeki.
Libluster on kasutaja tasemel teek, mis võimaldab protsessoritel Lusteri failisüsteemi kliendina ühendada ja kasutada, ümbersuunamisest teenusesõlmesse.
Kasutades hiilgavust, pääsevad protsessorid ligi Lusteri failisüsteemile, isegi kui teenuse sõlm, millel töö käivitati, pole Lusteri klient.
Libluster pakub mehhanismi andmete teisaldamiseks otse rakenduseruumi ja Lusteri OSS-ide vahel, ilma et oleks vaja teha kerge koore kaudu andmekoopiat, saavutades seeläbi madala latentsuse ja suure ribalaiuse protsessorite otsese juurdepääsu korral Lusteri failisüsteemile.
Lusteri uus versioon
Recientemente ilmus Luster 2.12 uus versioon, millega on lisatud mõned uued funktsioonid ja ennekõike veaparandused mõnede superarvutite jaoks kasutatavate Linuxi distributsioonide jaoks.
Luster 2.12 peamised uudised
Selle uue väljaandega lisas funktsiooni jaotatud nimeruumi olemasolevatele suurtele kataloogidele (DNE, Distributed Namespace) ühest metaandmete salvestusobjektist (DTM, metaandmete sihtmärgid) paljudeks (erinevate DNE segmentide vaheline kaugus erinevate DTM-ide vahel).
Uus funktsioon lihtsustab uute MDT-de kasutuselevõttu olemasolevate FS-de jaoks ja koormuse käsitsi tasakaalustamist MDT-s.
Metaandmete hoidlate (MDT) jaoks on rakendatud režiim »Laisk suurus», mis võimaldab teil MDT otse skannimisel poliitikamootori kaudu kiiresti tagastada failide ligikaudne suurus, mitte täpne suurus olukordades, kus kiirus on olulisem kui täpsus.
Mitme LNet-võrguliidesega konfiguratsioonide jaoks selles Luster 2.12 uues versioonis lisatakse funktsioon LNet Network Health, mis rakendab võimalust uuesti pöörduda RPC-le teise võrguliidese kaudu rikke korral, kui taotlus esimest korda saadetakse.
Lisaks sellele lisati serveri tugi versioonidele RHEL 7.6 (3.10.0-957.el7) ja SLES12 SP3 (4.4.162-94.69). Lisatud klienditoe täitmata RHEL 7.6 (3.10.0-957.el7), SLES12 SP3 (4.4.162-94.69) ja Ubuntu 18.04 (4.15.0-32) tuumade jaoks.