Korkean käytettävyyden jaetut asemat, joissa käytetään Vultr Block Storagea ja GlusterFS:ää

GlusterFS:n määrittäminen

Tärkeä huomautus uudelleenasennuksesta

Tärkeä huomautus varmuuskopioinnista

FAQ

GlusterFS on verkkoon liitetty tiedostojärjestelmä, jonka avulla voit tehokkaasti jakaa kaksi asemaa useiden verkon laitteiden välillä. Tämä tiedostojärjestelmä sopii täydellisesti Vultrin lohkotallennustarjoukseen, koska voit jakaa aseman verkon yli, mikä ei ole mahdollista heti valmiina.

Ominaisuuksien, laajennettavuuden ja luotettavuuden suhteen GlusterFS on osoittautunut yhdeksi kehittyneimmistä ja vakaimmista saatavilla olevista tiedostojärjestelmistä.

Kun yhden palvelimen asemaan tehdään muutoksia, ne replikoidaan automaattisesti toiselle palvelimelle reaaliajassa. Tämän saavuttamiseksi ja tämän oppaan noudattamiseksi tarvitset:

• Kaksi Vultr-pilvi-instanssia, joissa on mielellään sama käyttöjärjestelmä.
• Kaksi samankokoista lohkotallennusasemaa.

Kun olet tilannut nämä kaksi lohkotallennusasemaa, sinun tulee liittää ne VM 1:een ja VM 2:een. Koska käytämme molempia lohkotallennusasemia samassa tiedostojärjestelmässä, jakamalla molempien asemien kokonaiskoon kahdella saat käyttökelpoisen määrän. GB:stä. Jos sinulla on esimerkiksi kaksi 100 Gt:n asemaa, 100 Gt on käytettävissä (100 * 2 / 2).

Lisäksi molempien virtuaalikoneiden on oltava samassa paikassa, jotta ne voivat olla samassa yksityisessä verkossa. Yhdistämme palvelimiin käyttämällä niiden sisäisiä IP-osoitteita. Huomaa, että pyyhimme lohkotallennusaseman tiedot. Varmista, että ne ovat aivan uusia ja alustamattomia.

Tässä oppaassa käytämme storage1ja storage2vastaavasti yksityisten IP-osoitteiden 10.0.99.10 ja 10.0.99.11. Palvelimesi nimet ja IP-osoitteet todennäköisesti vaihtelevat, joten muista muuttaa ne GlusterFS:n asennuksen yhteydessä.

Tämä opas on kirjoitettu CentOS / RHEL 7 mielessä. GlusterFS on kuitenkin suhteellisen ristiin yhteensopiva useiden Linux-jakelujen välillä.

GlusterFS:n määrittäminen

Vaihe 1: Muuta /etc/hoststiedostoa

Jotta voimme muodostaa nopeasti yhteyden vastaaviin esiintymiin, meidän tulee lisätä tiedostoon helposti muistettavia nimiä hosts. Avaa /etc/hoststiedosto ja lisää seuraavat rivit sen alaosaan:

10.0.99.10 storage1
10.0.99.11 storage2

Vaihe 2: Lisää levy storage1

SSH storage1ja suorita seuraavat komennot. Oletusarvoisesti liitetyt lohkotallennusasemat asennetaan muodossa /dev/vdb. Jos tämä jostain syystä poikkeaa sinun tapauksessasi, sinun tulee muuttaa se alla olevissa komennoissa.

Alusta levy:

fdisk /dev/vdb

Paina "enter" seuraaville kolmelle kysymykselle (koskien osion kokoa ja muita vastaavia, haluamme käyttää kaiken vapaan tilan lohkotallennusasemilla) ja kirjoita "w" kirjoittaaksesi nämä muutokset levylle. Kun tämä on suoritettu onnistuneesti, kirjoita:

/sbin/mkfs.ext4 /dev/vdb1

Olemme edenneet ja luoneet tiedostojärjestelmän nyt, koska Vultr ei luo oletusarvoisesti tiedostojärjestelmiä lohkotallennustilaan.

Seuraavaksi aiomme luoda kansion, johon tallennamme tiedostomme. Voit muuttaa tätä nimeä, mutta et näe sitä kovin usein, joten monimutkaisuuden poistamiseksi suosittelen jättämään sen rauhaan.

mkdir /glusterfs1

Liitä asema automaattisesti käynnistyksen yhteydessä avaamalla /etc/fstabja lisäämällä seuraava rivi tiedoston alaosaan:

/dev/vdb1 /glusterfs1      ext4    defaults        1 2

Asenna lopuksi asema:

mount -a

Kiinnitys pysyy jatkuvana uudelleenkäynnistysten ajan, joten kun käynnistät palvelimen uudelleen, asema liitetään automaattisesti uudelleen.

Vaihe 3: Lisää levy päälle storage2

Nyt kun levy on lisätty ja asennettu storage1, meidän on luotava myös levy storage2. Komennot tuskin eroavat toisistaan. Varten fdisk, noudata ylläolevia ohjeita.

fdisk /dev/sdb
/sbin/mkfs.ext4 /dev/sdb1
mkdir /glusterfs2

Muokkaa /etc/fstabja lisää seuraava rivi:

/dev/vdb1 /glusterfs2      ext4    defaults        1 2

Aivan kuten kohdassa storage1, asema asennetaan automaattisesti uudelleenkäynnistyksen yhteydessä.

Kiinnitä asema:

mount -a

Lopuksi tarkistetaan, näemmekö osion ilmestyvän:

df -h

Sinun pitäisi nähdä ajomatkasi täällä. Jos ei, yritä noudattaa yllä olevia ohjeita.

Vaihe 4: GlusterFS:n asentaminen storage1jastorage2

Seuraavaksi meidän on asennettava GlusterFS. Lisää arkisto ja asenna GlusterFS:

rpm  -ivh  http://dl.fedoraproject.org/pub/epel/7/x86_64/e/epel-release-7-5.noarch.rpm
wget -P /etc/yum.repos.d http://download.gluster.org/pub/gluster/glusterfs/3.7/3.7.5/CentOS/glusterfs-epel.repo
yum -y install glusterfs glusterfs-fuse glusterfs-server

On mahdollista, että saat virheilmoituksen, yumkoska arkiston allekirjoitus ei ole oikea. Siinä tapauksessa on turvallista pakottaa olemaan tarkistamatta GPG-allekirjoitusta:

yum -y install glusterfs glusterfs-fuse glusterfs-server --nogpgcheck

Suorita molemmilla palvelimilla seuraavat komennot käynnistääksesi GlusterFS heti ja käynnistääksesi sen automaattisesti uudelleenkäynnistyksen jälkeen:

systemctl enable glusterd.service
systemctl start glusterd.service

Jos käytät vanhempaa CentOS-versiota, voit käyttää serviceja chkconfig-komentoja:

chkconfig glusterd on
service glusterd start

Vaihe 5: Poista palomuuri käytöstä storage1jastorage2

Vaikka se ei sinänsä ole paras ratkaisu, on hyvä idea sammuttaa palomuuri mahdollisten ristiriitojen poistamiseksi estettyjen porttien kanssa. Jos et halua tehdä tätä, voit vapaasti muuttaa sääntöjä mielesi mukaan, mutta GlusterFS:n luonteen vuoksi suosittelen palomuurin poistamista käytöstä. Koska yksityinen verkko on itse asiassa yksityinen Vultrissa (eikä sinun tarvitse palomuurilla muita asiakkaita), voit yksinkertaisesti estää kaiken saapuvan liikenteen Internetistä ja rajoittaa sallittuja yhteyksiä yksityiseen verkkoon. Kuitenkin palomuurin sammuttaminen ja muiden järjestelmäkokoonpanojen muuttaminen riittäisi myös:

systemctl stop firewalld.service
systemctl disable firewalld.service

Jos käytät vanhempaa CentOS-versiota, joka ei tue systemctl, käytä serviceja chkconfigkomentoja:

service firewalld stop
chkconfig firewalld off

Jos et käytä firewalld, yritä poistaa käytöstä iptables:

service iptables stop
chkconfig iptables off

Vaihe 6: Lisää palvelimia tallennuspooliin

Palomuurin sammuttamisen jälkeen voimme lisätä molemmat palvelimet tallennuspooliin. Tämä on allas, joka koostuu kaikista käytettävissä olevista säilytystiloista. Suorita seuraava komento kohteessa storage1:

gluster peer probe storage2

Tämä komento lisää storage2sen omaan tallennusvarastoonsa. Suorittamalla seuraavan komennon storage2, molemmat asemat ovat synkronoituja:

gluster peer probe storage1

Kun tämä on suoritettu molemmilla palvelimilla, meidän tulee tarkistaa tila molemmilla palvelimilla:

gluster peer status

Molempien palvelimien tulee näyttää tila "Peers: 1". Yleinen virhe on se, että ihmiset odottavat näkevänsä Peers: 2, mutta he eivät vertaile itseään , kuten storage1katsotaan storage2ja päinvastoin. Siksi Peers: 1tarvitsemme sitä.

Vaihe 7: Jaetun Driven luominen storage1

Nyt kun molemmat palvelimet voivat muodostaa yhteyden toisiinsa GlusterFS:n kautta, aiomme luoda jaetun aseman.

Päällä storage1, suorita:

gluster volume create mailrep-volume replica 2  storage1:/glusterfs1/files  storage2:/glusterfs2/files force

Volyymi on nyt luotu. GlusterFS:ssä sinun on "käynnistettävä" taltio, jotta se jaetaan aktiivisesti useiden laitteiden kesken. Aloitetaan se:

gluster volume start mailrep-volume

Valitse seuraavaksi kansio, jonka pitäisi olla taltiolla ja replikoitua molemmissa palvelimissa. Tässä opetusohjelmassa käytämme kansiota /var/files. Luonnollisesti tämä voi olla mitä tahansa haluat. Luo se storage1 vain :

mkdir /var/files

Seuraavaksi asenna se:

mount.glusterfs storage1:/mailrep-volume /var/files/

Päivitä, /etc/fstabjotta asema asennetaan automaattisesti käynnistyksen yhteydessä. Lisää seuraavat:

storage1:/mailrep-volume /var/files glusterfs defaults,_netdev 0 0

Asenna asema uudelleen:

mount -a

Vaihe 8: Jaetun aseman luominen storage2

Nyt kun olemme luoneet jaetun Driven sovellukseen storage1, meidän on luotava sellainen storage2myös. Luo kansio, jolla on sama sijainti/polku ja nimi:

mkdir /var/files
mount.glusterfs storage2:/mailrep-volume /var/files/

Aivan kuten kohdassa storage1, lisää seuraava rivi kohtaan /etc/fstab:

storage2:/mailrep-volume /var/files glusterfs defaults,_netdev 0 0

Asenna asema uudelleen:

mount -a

Vaihe 9: Testaa jaettua tallennustilaa

Siirry /var/fileskansioon storage1ja luo tiedosto:

cd /var/files
touch created_on_storage1

Siirry seuraavaksi storage2palvelimelle. Suorita ls -laja sinun pitäisi nähdä tiedoston näyttöön created_on_storage1.

Käytössä storage2, siirry /var/fileskansioon ja luoda tiedoston:

cd /var/files
touch created_on_storage2

Palaa kohtaan storage1ja suorita ls -la /var/files. Tiedoston pitäisi created_on_storage2näkyä täällä.

Vaihe 10: Käynnistä kaikki palvelimet uudelleen (valinnainen)

Jotta voit tarkistaa, pysyvätkö asetuksesi pysyvinä uudelleenkäynnistyksen aikana, sinun tulee käynnistää kaikki palvelimet uudelleen. Kuten mainittiin, sinun tulee odottaa, että yksi palvelin on päällä ja käynnistää sitten toinen uudelleen, jotta jaettu asema liitetään automaattisesti.

Käynnistä storage1ensin uudelleen , odota sen käynnistymistä ja käynnistä sitten uudelleen storage2. Kirjaudu nyt sisään ja suorita molemmilla palvelimilla:

cd /var/files
ls -la

Sinun pitäisi nyt nähdä molemmat tiedostot. Varmista, että aloitat ilman tiedostoja taltiolla, joten poista luomamme testitiedostot. Voit tehdä tämän storage1, storage2tai molempia. Muutokset toistetaan välittömästi:

cd /var/files
rm created_on_storage1
rm created_on_storage2

Sinulla pitäisi olla identtinen jaettu taltio molemmissa palvelimissa molempien taltioiden toiminnoista riippumatta.

Olet nyt määrittänyt täysimittaisen GlusterFS-asennuksen, jossa on 100 Gt (tai enemmän) käytettävissä olevaa tilaa. Jos tarvitset lisää tulevaisuudessa, asennus on helposti skaalattavissa lisäämään kapasiteettia ja/tai palvelimia, jos työmääräsi vaatii sitä.

Kiitos, että luit!

---

Tärkeä huomautus uudelleenasennuksesta

GlusterFS mahdollistaa tietosi pitämisen ajan tasalla kahdella asemalla. Huomaa kuitenkin, että kun molemmat palvelimet käynnistetään uudelleen samanaikaisesti , sinun on pakko liittää asemat molempiin palvelimiin. Sinun on pakotettava kiinnitys manuaalisesti suorittamalla seuraava komento:

gluster volume start mailrep-volume force

Tämä johtuu siitä, että toinen palvelimista toimii palvelimena ja toinen asiakkaana. Vaikka ero ei käytännössä ole kovin helposti havaittavissa, tämä tarkoittaa, että kun sinun on käynnistettävä molemmat palvelimet uudelleen, sinun tulee käynnistää toinen, odottaa, kunnes se on valmis, ja käynnistää sitten toinen.

Tärkeä huomautus varmuuskopioinnista

Vaikka tietosi replikoidaan kahdelle asemalle, sinun tulee kopioida tietosi vähintään kolme kertaa. Vaikka tietosi on paremmin suojattu tietojen vioittumiselta ja vastaavilta, sinun tulee huomioida, että muutokset ovat välittömiä, etkä ole millään tavalla suojattu inhimillisiltä virheiltä. Kun poistat kaikki tiedostot yhdeltä asemalta, nämä muutokset replikoidaan välittömästi toiseen asemaan, mikä tarkoittaa, että tietosi pyyhitään molemmissa tapauksissa.

Onneksi tämän välttämiseksi on useita tapoja. Ensinnäkin suosittelen, että otat varmuuskopiot käyttöön itse pilvi-esiintymässäsi. Vaikka nämä varmuuskopiot eivät sisällä tietoja lohkotallennustilasta, ne suojaavat itse esiintymän tietoja.

Mitä tulee itse lohkotallennustiedon varmuuskopiointiin, suosittelen erillisen esiintymän (esimerkiksi SATA-suunnitelman) muodostamista, jotta voit tehdä varmuuskopion esimerkiksi yhdeltä kahdesta liitetystä palvelimesta joka ilta. Näin tietosi ovat turvassa toisella erillisellä laitteella.

FAQ

Voinko lisätä levytilaani?

Voit suurentaa lohkon tallennuskokoa Vultr-ohjauspaneelista. Sinun tulisi muuttaa käyttöjärjestelmän sisällä olevan levyn kokoa tämän jälkeen, mutta se ei kuulu tämän artikkelin soveltamisalaan.

Voinko liittää lohkotallennustilan yli kahteen palvelimeen?

Vaikka tämä opas on kirjoitettu kahdelle palvelimelle (eli molempiin palvelimiin on kytketty kaksi lohkotallennusasemaa), mutta on mahdollista ottaa tämä opas ja käyttää sitä myös yli kahdelle palvelimelle. Asennus, jossa on yli kaksi palvelinta/asemaa, voisi näyttää tältä kuudelle palvelimelle, esimerkiksi:

VM: storage1
VM: storage2
VM: storage3
VM: storage4
Block Storage: attached to storage1
Block Storage: attached to storage2
Block Storage: attached to storage3
Block Storage: attached to storage4

Kun otetaan huomioon, että kaikkien lohkotallennusasemien kapasiteetti on esim. 200 Gt, saataisiin 200 * 4 / 4. Toisin sanoen käytettävissä oleva tila on aina yhden lohkon tallennusaseman kapasiteetti. Tämä johtuu siitä, että GlusterFS käsittelee yhtä palvelinta, johon on liitetty lohkotallennus, "isäntänä" ja se replikoituu muille palvelimille. Asennus on kuitenkin rakennettu selviytymään ilman pääpalvelinta, mikä tekee siitä niin redundantin ja luotettavan, vakaan ratkaisun.