CRM (konfigurace zdrojů)
CRM (Cluster Resource Management) pracuje se "zdroji" (resource). "Zdroje" jsou ve své podstatě pojmenované konfigurace agentů, co zajišťují běh různých, vzájemně na sobě závislých služeb. Agent je ve své podstatě spustitelný skript, připravený takto pojmenovanou konfiguraci zpracovat a na základě výsledku jejího zpracování pak vrací hodnotu, kterou crm zobrazuje jako stav zdroje.
Takovým zdrojem je kupř. služba která zajistí nahození IP adresy, spuštění webového serveru, namountování adresáře do určitého bodu, aj.
Jednotlivé zdroje mohou (ale nemusí) být na sobě závislé. Některé mohou být vázané jen na učité stroje a u jiných zase může být důležité pořadí spouštění - tohle všechno řeší Pacemaker.
init skripty (LSB) versus zdroje
Při použití Pacemakeru by se měly prostřednictvím init skriptů automaticky spouštět pouze služby, které jsou nezbytné pro jeho nahození. Spouštění ostatních služeb by již měla ošetřit jeho konfigurace.
Je třeba si uvědomit, že init skripty jsou určeny k lokálnímu použití a samy o sobě nemají k dispozici prostředky k tomu, aby mohly zajistit, po spuštění nedojde ke konfliktu s konfigurací jiného stroje.
Pacemaker - díky tomu, že využívá v rámci infrastruktury clusteru komunikační vrstvu (corosync nebo Heartbeat) - ví o tom, kde co zrovna běží a tak může potencionálnímu konfliktu včas zabránit. Pochopitelně pouze v případě, že jde o službu kterou spravuje.CIB
Interně jsou veškerá data clusteru, včetně konfigurace a stavových informací, uchovávána v XML souboru zvaném CIB ( zkratka z angl. Cluster Information Base ).
Ten je lokálně uložen jako /var/lib/heartbeat/crm/cib.xml a průběžně replikován démonem /usr/lib/heartbeat/cib mezi ostatní nody.
Celá konfigurace a aktuální stav clusteru je rozparcelována v CIB souboru do dílčích elementů, se kterými lze pracovat jako s tzv. scope
- configuration - Obsahuje konfigurační nastavení, které lze upravovat také přes CLI
- crm_config - nastavení clusteru
- nodes - nody
- resources - zdroje
- constraints - pořadí spouštění a lokace zdrojů
- status - Obsahuje informace o aktuální situaci zdrojů na jednotlivých nodech
- node_state
- lrm - pro každý nod existuje samostatný element
- lrm_resources - elementy s informacemi o aktuálním stav zdrojů na příslušném nodu
- lrm - pro každý nod existuje samostatný element
- node_state
|
Veškeré operace s CIB se provádí výhradně prostřednictvím nástrojů k tomu určených. Při každé změně se totiž původní CIB soubor přejmenuje a místo něj se zapíše pod stejným názvem CIB nový. Současně se při tom vygeneruje jeho kontrolní součet. Pokud by došlo k dodatečné editaci, tak by se stal tento kontrolní součet neplatný, což by Pacemaker vyhodnotil jako chybu - proto se důrazně nedoporučuje editovat tyto soubory přímo! |
Ke správě CIB souboru lze použít buď přímo konzolové nástroje k tomu určené (cibadmin, crm_attribute, ...) nebo CLI rozhraní, které je z hlediska administrace intuitivnější. Ze CLI rozhraní se nejčastěji používá shellový crmsh, který se spouští příkazem crm, ale lze použít také nástroj pcs, napsaný v jazyce python (Red Hat).
|
SUSE Linux Enterprise má pro crmsh navíc k dispozici také webové rozhraní Hawk (HA Web Konsole), naprogramované v programovacím jazyce ruby. |
cibadmin
Lze brát jako základní nástroj pro manipulaci s CIB souborem. Jeho prostřednictvím lze nejenom data z CIB souboru získat, ale také měnit. V jistém smyslu se jedná o XML editor, který může pracovat v několika módech, specifikovaných jako atribut.
- --query | -Q
- Umožňuje z CIB souboru vypsat určitou oblast (scope), která odpovídá příslušnému XML elementu, ale také obsah všech XML elementů, které vyhoví předanému Xpath výrazu.
|
Výpis elementu rsc_order s identifikačním jménem or-test
nod-1:~# cibadmin --query --xpath "//rsc_order[@id='or-test']"
<rsc_order id="or-test" first="fs-users" then="test-ip"/>
Položka je součástí oblasti nod-1:~# cibadmin --query --scope constraints
<constraints>
...
<rsc_order id="or-test" first="fs-users" then="test-ip"/>
...
</constraints>
|
- --delete | -D
- Odstraní první element, který vyhoví předaným parametrům
|
|
Odstranění elementu rsc_order s identifikačním jménem or-test
nod-1:~# cibadmin --delete --xml-text '<rsc_order id="or-test"/>'
|
- --erase | -E
- Na rozdíl od --delete odstraní všechny elementy, které vyhoví předanému parametru.
- --create | -C
- Umožní vytvořit nový element v určité oblasti. Jeho syntaxe však musí být správná. Pokud syntaxe nového uzlu obsahuje chybu, nebo položku, která z hlediska syntaxe do elementu nepatří, pak změna realizována není. Příkaz nejprve vypíše chybu a za ní vysype celý XML obsah CIB souboru. Z chyby však lze vyčíst proč ke vložení uzlu nedošlo.
|
|
Vložení elementu rsc_order s identifikačním jménem or-test, kterým se nastaví pořadí spouštění zdrojů test-ip a fs-users
nod-1:~# cibadmin -C --scope constraints --xml-text '<rsc_order id="or-test" first="fs-users" then="test-ip"/>'
|
- --modify | -M
- Umožňuje element upravit (nemám odzkoušeno)
- --replace | -R
- Umožňuje nahradit buď obsah celého CIB souboru, nebo jenom jeho vybrané oblasti či elementu obsahem předaným jako XML buď přímo na řádce jako hodnota atributu --xml-text, nebo ze souboru s modifikovaným obsahem přes atribut --xml-file, kde se jako hodnota předá cesta k modifikovanému XML obsahu.
|
|
Nahrazením elementu resources elementem bez potomků dojde ke zrušení všech nakonfigurovaných nodů
nod-1:~# cibadmin --replace --scope resources --xml-text '<resources/>'
Ale naimportováním upraveného obsahu nod-1:~# cibadmin --query --scope resources > resources.xml
nod-1:~# vi resources.xml
...
nod-1:~# cibadmin --replace --scope resources --xml-file $HOME/resources.xml
|
- --patch | -P
- --upgrade | -u
- --bump | -B
crm_attribute
Pro rychlou práci s atributy v konfiguraci CRM - k jejich vytvoření, i následnému dotazování, lze použít nástroj crm_attribute. Příkladem použití příkazu crm_attribute může být např. níže uvedený postup přidání poznámky do konfigurace ke stroji nod-2..
Použití
|
|
nod-2:~# crm_attribute -t nodes -N nod-2 -n note -v 'Stroj v racku 5'
nod-2:~# crm_attribute --type nodes --node-uname snoopy --attr-name note --get-value
scope=nodes name=note value=Stroj v racku 5
nod-2:~# crm configure show
node nod-1
node nod-2 \
attributes note="Stroj v racku 5"
property $id="cib-bootstrap-options" \
dc-version="1.1.5-f91f06164622c14af01409655773c66dea21a4d9" \
cluster-infrastructure="openais" \
expected-quorum-votes="2" \
no-quorum-policy="ignore" \
stonith-enabled="false" \
last-lrm-refresh="1303922378"
nod-2:~# crm_attribute --type nodes --node-uname nod-2 --attr-name note --delete
Deleted nodes attribute: id=nodes-nod-2-note name=note
nod-2:~# crm configure show
node nod-1
node nod-2
property $id="cib-bootstrap-options" \
dc-version="1.1.5-f91f06164622c14af01409655773c66dea21a4d9" \
cluster-infrastructure="openais" \
expected-quorum-votes="2" \
no-quorum-policy="ignore" \
stonith-enabled="false" \
last-lrm-refresh="1303922378"
|
|
|
* není-li uveden parametr --type, pracuje se přímo s atributy nastavení celého clusteru (sekce property)
|
Stejná operace realizovaná prostřednictvím crm
|
|
crm(live)node# attribute snoopy set note 'Stroj v racku 10'
crm(live)node# attribute snoopy show note
scope=nodes name=note value=Stroj v racku 10
crm(live)node# show
charlie-brown: normal
snoopy: normal
note: Příliš žluťoučký kůň
|