Discovery znanje
/ Knowledge Discovery >> Discovery znanje >> tech >> računalnik >> internet >> internet osnove >>

Kako Google File System Works

kos. To je varnostni ukrep - uporabniki lahko preverite na smeti kos, preden je izbrisan trajno in preprečili nezaželene izbrisi

Da bi preprečili korupcijo podatkov je GFS uporablja sistem, imenovan preverjanje kontrolne.. Sistem zlomi vsak 64 MB kos v blokih 64 kilobajtov (KB). Vsak blok v kos ima svojo 32-bitni checksum, ki je nekako tako kot prstni odtis. Glavni strežnik spremlja kose, ki jih je videti na kontrolne. Če kontrolna replike ne ujema s kontrolno vsoto v glavni strežnik pomnilniku, glavni strežnik izbriše repliko in ustvari novo, da ga zamenja.

Kakšno strojno opremo Google uporablja v svojem GFS? Ugotovite, v naslednjem poglavju.
Google File System Strojna oprema

Google pravi, malo o strojni opremi se trenutno uporablja za zagon drugih GFS, kot je zbirka off-the-polici, poceni Linux strežnikov. Toda v uradnem GFS poročila, Google razkril specifikacije opremi, ki jo uporablja za zagon nekaj testov primerjalne analize na GFS uspešnosti. Medtem ko je preskusna oprema morda ni pravi prikaz trenutnega GFS strojne opreme, da vam idejo vrste računalnikov Google uporablja za ročaj ogromne količine podatkov, ki jih trgovin in manipulira.

testne opreme vključen en glavni strežnik, dva master replike, 16 strank in 16 chunkservers. Vsi izmed njih uporabljajo enako strojno opremo z enakimi specifikacijami, in vsi tekel na operacijskih sistemih Linux. Vsak je imel dvojno 1.4 GHz Pentium III, 2 GB pomnilnika in dva 80 GB trdih diskov. V primerjavi s tem je več prodajalci trenutno ponujajo potrošniške računalnikov, ki so več kot dvakrat tako močan kot strežniki Google, ki se uporabljajo pri preizkusih. Google Code je izkazalo, da bi lahko GFS učinkovito delo s skromno opremo.

Mreža povezuje stroje skupaj sestavljalo 100 megabajtov na sekundo (Mbps) polno-duplex povezavo Ethernet in dva Hewlett Packard 2524 mrežnih stikal. Razvijalci GFS priključen odjemalec strojev na eno stikalo 16 in druga 19 stroji za drugo stikalo. So povezani dve stikali skupaj z enim (Gbps) povezavi gigabajta na sekundo.

Z zaostaja rob strojne tehnologije, lahko Google nakup opreme in sestavnih delov po ugodnih cenah. Struktura GFS je takšna, da je enostavno dodati več strojev v vsakem trenutku. Če grozd začne približati polno zmogljivost, lahko Google dodati več poceni strojne opreme za sistem in uravnotežiti delovno obremenitev. Če je mojster strežnika spomin preveč obdavčene, lahko Google nadgradnjo glavnega strežnika z več

Page [1] [2] [3] [4] [5] [6] [7]