https://ims.ut.ee/api.php?action=feedcontributions&feedformat=atom&user=Imreoolberg Intelligent Materials and Systems Lab - User contributions [en] 2026-05-04T12:52:26Z User contributions MediaWiki 1.38.2 https://ims.ut.ee/index.php?title=Eab_infra&diff=8964 Eab infra 2011-11-02T14:06:53Z <p>Imreoolberg: /* Kasulikud lisamaterjalid */</p> <hr /> <div>===Sissejuhatus===<br /> <br /> Käesoleva teksti eesmärgiks on kirjeldada EAP projekti juures toimuvat riistvara, võrgu, operatsioonisüsteemi keskkonna ja rakendustarkvara kasutamist.<br /> <br /> ===Riistvara===<br /> <br /> Projektis kasutatakse sellist riistavara<br /> <br /> * Powerware 5115 UPS<br /> * 2 x S3420GP emaplaadiga Ordi arvutid<br /> * mõlemad arvutid sisaldavad 4 x 2 TB kõvakettaid<br /> * generic kohtvõrgu kommutaator<br /> <br /> ===Tarkvara===<br /> <br /> Projekti arvutites kasutatakse järgmist tarkvara<br /> <br /> * Debian Squeeze v. 6 64bit operatsioonisüsteem<br /> * XEN v. 4 virtualiseerimise tarkvara<br /> * Apache veebiserver<br /> * PostgreSQL andmebaas<br /> * Zabbix monitooringutarkvara<br /> * OpenVPN kaugligipääsu tarkvara<br /> * rsnapshot ja EMC Networker varundustarkvara<br /> * plokkseadmete haldamiseks mdadm ja LVM tarkvara<br /> <br /> ===Võrgutopoloogia===<br /> <br /> _____<br /> 195.80.35.1 | | ülikooli võrguseade<br /> ----------------------------------------------|----------------------------------------------| |<br /> | |_____|<br /> | | 172.17.35.1<br /> | 195.80.35.96 |<br /> | 2001:bb8:2002:2300:7231:40ff:fe03:5128 | <br /> _____ __|__ |<br /> | | | | |<br /> | F | | V | | <br /> |_____| at-dom0.ims |_____| fw.ims |<br /> | os: 172.17.35.21 | 172.17.35.18 |<br /> | 2001:bb8:2002:2300:21e:67ff:fe03:c3c0 | 2001:bb8:2002:2300:7221:17ff:fe03:5018 |<br /> | impi: 172.17.35.20 | |<br /> --|-------------------------------|-------------------|-----------------------|-------------------------|------ <br /> | |<br /> __|__ __|__<br /> | | | |<br /> | F | | V |<br /> |_____| |_____|<br /> <br /> varundus.ims eap.ims<br /> os: 172.17.35.19 172.17.35.22<br /> 2001:bb8:2002:2300:21e:67ff:fe03:a0f9 2001:bb8:2002:2300:7221:17ff:fe03:5022<br /> ipmi: 172.17.35.5<br /> <br /> kus<br /> <br /> * at-dom0.ims - füüsiline virtualiseerimise arvuti<br /> * varundus.ims - füüsiline varunduse arvuti<br /> * fw.ims (fw.ims.ut.ee) - virtuaalne arvuti<br /> * eap.ims - virtuaalne arvuti<br /> <br /> Märkused<br /> <br /> * Füüsilistel arvutitel on lisaks operatsioonisüsteemi ip aadressile ka füüsilise riistvara kaughalduse ipmi aadress<br /> * Operatsioonisüsteemid omandavad automaatselt oma mac aadresside abil ipv6 aadressid, neid kasutatakse EMC Networkeriga varundamisel<br /> * 172.17.35 võrgu arvutitest 195.80.35.96 poole pöördudes toimub asümmeetriline ruuting (kuna ülikooli võrguseade ei tee 172.17.35 -&gt; 195.80.35.1 nat teisendust)<br /> <br /> ===Riistvara kaughaldus===<br /> <br /> Riistvaraliste arvutite kaughalduseks kasutatakse IMPI protokolli onboard BMC kontrolliriga suhtlemiseks. Muu hulgas võimaldab see ligipääsu arvuti BIOSile ning virtuaalse järjestikpordi kaudu serial konsoolile (st operatsioonisüsteemile). IPMI kasutamist on kirjeldatud aadressil http://kuutorvaja.eenet.ee/wiki/HP_BladeSystem_c7000_seadmeriiul#IPMI_kasutamine<br /> <br /> ===Plokkseadmete haldamine===<br /> <br /> Plokkseadmete haldamiseks kasutatakse mdadm ja LVM tarkvara. Mõlemas füüsilises arvutis töötavad neli samade parameetritega kõvaketast on ühendatud RAID massiividesse; RAID ressurssi hallatakse edasi LVM abil kasutamiseks failisüsteemide ja saaleala jaoks. mdadm kasutamist on kirjeldatud aadressil http://www.auul.pri.ee/wiki/Tarkvaralise_mdadm_RAID_kasutamine_operatsioonis%C3%BCsteemiga_Debian_Squeeze ja LVM kasutamist aadressil http://kuutorvaja.eenet.ee/wiki/LVM.<br /> <br /> ===Virtualiseerimine===<br /> <br /> Efektiivsemaks ja paindlikumaks riistavaralise ressursi kasutamiseks on teenusserverid eap.ims ja fw.ims juurutatud virtuaalsete arvutitena. Neile saab kasutamiseks anda sobiva hulga protsessori, mälu, plokkseadme ja võrguressurssi. Projektis kasutatakse XEN virtualiseerimise tarkvara, mille kasutamist on kirjeldatud nt aadressidel<br /> <br /> * http://www.auul.pri.ee/wiki/Xen_ja_Debian_Squeeze<br /> * http://kuutorvaja.eenet.ee/wiki/Unix_keskkonna_administreerimine#Virtualiseerimine<br /> <br /> ====XEN host====<br /> <br /> XEN hostile vastav operatsioonisüsteemi eksemplar töötab füüsilisel riistvaral ja selle seest tõimub virtuaalsete arvutite juhtimine. Kui välja arvata XEN hosti alglaaduri seadistused ja mõned virtualiseerimisega seotud protsessid on tegu tavalise Debian Squeeze operatsioonisüsteemiga. <br /> <br /> ====XEN guest====<br /> <br /> XEN guestid on virtuaalsed operatsioonisüsteemid, mis töötavad XEN hosti kontrolli all ja mis kasutavad XEN hostist neile eraldatud ressursse.<br /> <br /> ===at-dom0 host===<br /> <br /> ====mdadm kasutamine====<br /> <br /> Neli füüsilist kõvaketast on partitsioneeritud sarnaselt<br /> <br /> root@at-dom0:~# parted /dev/sda p<br /> Model: ATA WDC WD2003FYYS-0 (scsi)<br /> Disk /dev/sda: 2000GB<br /> Sector size (logical/physical): 512B/512B<br /> Partition Table: msdos<br /> <br /> Number Start End Size Type File system Flags<br /> 1 1049kB 269MB 268MB primary ext3 boot<br /> 2 269MB 69.0GB 68.7GB primary<br /> 3 69.0GB 1169GB 1100GB primary<br /> <br /> mdadm abil on <br /> <br /> * kõigi kõvaketaste esimesed partitsioonid ühendatud /dev/md/boot raid1 lülitusse (at-dom0 operatsioonisüsteemi jaoks)<br /> * kõigi kõvaketaste teised partitsioonid ühendatud /dev/md/system raid5 lülitusse (at-dom0 operatsioonisüsteemi jaoks)<br /> * kõigi kõvaketaste teised partitsioonid ühendatud /dev/md/data raid5 lülitusse (virtuaalsete arvutite jaoks)<br /> <br /> ====LVM kasutamine====<br /> <br /> at-dom0 enda operatsioonisüsteemi jaoks kasutuses sellised plokkseadmed<br /> <br /> * /boot - /dev/md/boot (mdadm ressurss)<br /> * / - /dev/system/root (LVM ressurss)<br /> <br /> at-dom0.ims arvutil töötavad kaks virtuaalset arvutit<br /> <br /> ====Võrgu kasutamine====<br /> <br /> Kaks arvuti võrgukaarti on kasutusel selliselt<br /> <br /> * peth0 - esimene füüsiline võrgukaart<br /> * peth1 - teine füüsiline võrgukaart<br /> * eth0 - esimest füüsilist võrgukaarti sisaldav sild (fiktiivne aadress 10.101.101.21)<br /> * eth1 - teist füüsilist võrgukaarti sisaldav sild (172.17.35.21)<br /> * vaikelüüs 172.17.35.1<br /> <br /> ====XEN kasutamine====<br /> <br /> XEN guestide seadistusfailid on<br /> <br /> /etc/xen/eap.cfg<br /> /etc/xen/fw.cfg<br /> <br /> ===eap.ims guest===<br /> <br /> eap.ims kasutab selliseid hosti ressursse<br /> <br /> Plokkseade<br /> <br /> /dev/data/eap_root<br /> /dev/data/eap_home<br /> /dev/data/eap_data_backup<br /> /dev/data/eap_data_postgresql<br /> /dev/data/eap_swap<br /> <br /> Võrk<br /> <br /> guesti seade eth0 (172.17.35.22) on muu võrguga ühenduses hosti eth1 silla kaudu<br /> <br /> Põhiline eap.ims arvutis töötav rakendustarkvara on PostgreSQL v. 9.0 andmebaas<br /> <br /> /etc/postgresql/9.0/main - seadistusfailid<br /> /var/log/postgresql - logi<br /> /data/postgresql (ehk /var/lib/postgresql/9.0/main) - andmeklaster<br /> /data/backup/postgresql/archive-logs - wal logid<br /> <br /> PostgreSQL andmebaasi kasutamist on kirjeldatud aadressil http://www.auul.pri.ee/wiki/PostgreSQL.<br /> <br /> eap.ims arvutile no külge monteeritud sellised failisüsteemid üle võrgu<br /> <br /> fw.ims:/home -&gt; /home (NFS)<br /> //172.17.35.222/eap4space -&gt; /opt/postgres/eap4space (CIFS)<br /> <br /> ===fw.ims guest===<br /> <br /> fw.ims kasutab selliseid hosti ressursse<br /> <br /> Plokkseade<br /> <br /> /dev/data/fw_root<br /> /dev/data/fw_home<br /> /dev/data/fw_data_backup<br /> /dev/data/fw_data_postgresql<br /> /dev/data/fw_swap <br /> <br /> Võrk<br /> <br /> guesti seade eth0 (193.40.35.96) on muu võrguga ühenduses hosti eth0 silla kaudu<br /> guesti seade eth1 (172.17.35.18) on muu võrguga ühenduses hosti eth1 silla kaudu<br /> <br /> Peamised fw.ims arvutis töötavad rakendusprogrammid on<br /> <br /> * PostgreSQL v. 9.0 andmebaas<br /> <br /> /etc/postgresql/9.0/main - seadistusfailid<br /> /var/log/postgresql - logi<br /> /data/postgresql (ehk /var/lib/postgresql/9.0/main) - andmeklaster<br /> /data/backup/postgresql/archive-logs - wal logi<br /> <br /> * Apache veebiserver<br /> <br /> /etc/apache2 - seadistusfailid<br /> /var/log/apache2 - logid<br /> <br /> * NFS failiserver, mis jagab /home kataloogi eap.ims arvutisse<br /> * fw.ims arvutile on külge ühendatud sellised CIFS failisüsteemid üle võrgu<br /> <br /> //172.17.35.14/Data -&gt; /opt/postgres/Pardata<br /> //172.17.35.222/Users/Hitachi/Desktop/Pildid -&gt; /opt/postgres/Sempildid<br /> //172.17.35.222/eap4space -&gt; /opt/postgres/eap4space<br /> <br /> ===varundus.ims===<br /> <br /> ====mdadm kasutamine====<br /> <br /> Neli füüsilist kõvaketast on partitsioneeritud sarnaselt<br /> <br /> root@varundus:~# parted /dev/sda p<br /> Model: ATA WDC WD2003FYYS-0 (scsi)<br /> Disk /dev/sda: 2000GB<br /> Sector size (logical/physical): 512B/512B<br /> Partition Table: msdos<br /> <br /> Number Start End Size Type File system Flags<br /> 1 1049kB 269MB 268MB primary ext3 boot<br /> 2 269MB 2000GB 2000GB primary<br /> <br /> mdadm abil on<br /> <br /> * kõigi kõvaketaste esimesed partitsioonid ühendatud /dev/md/boot raid1 lülitusse<br /> * kõigi kõvaketaste teised partitsioonid ühendatud /dev/md/system raid5 lülitusse<br /> <br /> ====LVM kasutamine====<br /> <br /> varundus arvutis kasutuses sellised plokkseadmed<br /> <br /> * /boot - /dev/md/boot (mdadm ressurss)<br /> * / - /dev/system/root (LVM ressurss)<br /> * /srv/backup - /dev/system/backup (LVM ressurss)<br /> <br /> ====Võrgu kasutamine====<br /> <br /> Kaks arvuti võrgukaarti on kasutusel selliselt<br /> <br /> * eth0 - 172.17.35.19<br /> * vaikelüüs 172.17.35.1<br /> <br /> ====rsnapshot kasutamine====<br /> <br /> rsnapshot tarkvara tööd juhib seadistusfail /etc/rsnapshot.conf ja varundatud andmed asuvad kataloogis /srv/backup/rsnapshot avutite nimelistes kataloogides. Üldiselt varundatakse kõiki failisüsteeme välja arvatud mõned kataloogid<br /> <br /> /dev<br /> /proc<br /> /tmp<br /> /sys<br /> /mnt<br /> <br /> Varundatud andmeid roteeritakse selliselt, et säilitatakse seisud<br /> <br /> * viimased 28 päeva<br /> * viimased 12 nädalat<br /> * viimased 24 kuud<br /> <br /> rsnapshot tarkvara kasutamist on kirjeldatud aadressil http://www.auul.pri.ee/wiki/Rsnapshot.<br /> <br /> Full backup: kord nädalas nublu.chem.ut.ee 2-le eraldi kõvakettale (mitteredundantsed), säilitatakse 4-5 viimast täiskoopiat.<br /> <br /> Full backupi ligikaudne maht (24.01.2011): 35 GB<br /> <br /> <br /> Iga päeva WAL logid (säilitatakse kahe full backupi vahel tekkinud WAL logid (nädala WAL logide ligikaudne maht (24.01.2011): 18 GB<br /> <br /> Tarmo virtuaalserverist hetkel backuppi ei tehta.<br /> <br /> ===Monitooring===<br /> <br /> Monitooringuks kasutatakse Zabbix tarkvara, igasse operatsioonisüsteemi on paigaldatud Zabbix agent, mida juhib seadistusfail /etc/zabbix/zabbix_agentd.conf. Zabbix server asub eemal, aadressil 84.50.96.138 ja pöördub monitooritavate poole kahel viisil<br /> <br /> * üle ülikooli OpenVPN võrgu otse kõigi operatsioonisüsteemide poole, et monitoorida süsteemi üldisi omadusi (failisüsteemide täituvus, cpu load jne)<br /> * üle ülikooli OpenVPN võrgu otse mõlema füüsilise arvuti poole üle IPMI liidese, et monitoorida füüsilise riistvara omadusi (nt emaplaadi temperatuur)<br /> * üle avaliku võrgu, et monitoorida http://fw.ims.ut.ee/ veebikoha kättesaadavust<br /> <br /> Kuna Zabbix serveri ip aadress täna OpenVPN ühendusele võib muutuda ja Zabbix agent eeldab, et Zabbix serveri ip on fikseeritud, siis töötab igas arvutis simpleproxy programm, mille abil näidatakse agendile, et Zabbix server pöörduks justkui localhostilt.<br /> <br /> Zabbix tarkvara kasutamist on kirjeldatud aadressil http://www.auul.pri.ee/wiki/Zabbix_kasutamine_Debian_operatsioonis%C3%BCsteemiga.<br /> <br /> ===EMC Networker kliendi kasutamine===<br /> <br /> Arvuteid eap.ims ja fw.ims varundatakse ülikooli EMC Networker süsteemi. EMC Networker kliendi kasutamist kirjeldatakse aadressil http://www.auul.pri.ee/wiki/EMC_Networker_client.<br /> <br /> ===Kasulikud lisamaterjalid===<br /> <br /> * http://www.auul.pri.ee/wiki/NUT_tarkvara_kasutamine_Debian_Squeeze_operatsioonis%C3%BCsteemiga<br /> * http://www.auul.pri.ee/wiki/EMC_Networker_client<br /> * http://www.auul.pri.ee/wiki/Tarkvaralise_mdadm_RAID_kasutamine_operatsioonis%C3%BCsteemiga_Debian_Squeeze</div> Imreoolberg https://ims.ut.ee/index.php?title=Eab_infra&diff=8960 Eab infra 2011-11-02T09:07:01Z <p>Imreoolberg: /* Võrgu kasutamine */</p> <hr /> <div>===Sissejuhatus===<br /> <br /> Käesoleva teksti eesmärgiks on kirjeldada EAP projekti juures toimuvat riistvara, võrgu, operatsioonisüsteemi keskkonna ja rakendustarkvara kasutamist.<br /> <br /> ===Riistvara===<br /> <br /> Projektis kasutatakse sellist riistavara<br /> <br /> * Powerware 5115 UPS<br /> * 2 x S3420GP emaplaadiga Ordi arvutid<br /> * mõlemad arvutid sisaldavad 4 x 2 TB kõvakettaid<br /> * generic kohtvõrgu kommutaator<br /> <br /> ===Tarkvara===<br /> <br /> Projekti arvutites kasutatakse järgmist tarkvara<br /> <br /> * Debian Squeeze v. 6 64bit operatsioonisüsteem<br /> * XEN v. 4 virtualiseerimise tarkvara<br /> * Apache veebiserver<br /> * PostgreSQL andmebaas<br /> * Zabbix monitooringutarkvara<br /> * OpenVPN kaugligipääsu tarkvara<br /> * rsnapshot ja EMC Networker varundustarkvara<br /> * plokkseadmete haldamiseks mdadm ja LVM tarkvara<br /> <br /> ===Võrgutopoloogia===<br /> <br /> _____<br /> 195.80.35.1 | | ülikooli võrguseade<br /> ----------------------------------------------|----------------------------------------------| |<br /> | |_____|<br /> | | 172.17.35.1<br /> | 195.80.35.96 |<br /> | 2001:bb8:2002:2300:7231:40ff:fe03:5128 | <br /> _____ __|__ |<br /> | | | | |<br /> | F | | V | | <br /> |_____| at-dom0.ims |_____| fw.ims |<br /> | os: 172.17.35.21 | 172.17.35.18 |<br /> | 2001:bb8:2002:2300:21e:67ff:fe03:c3c0 | 2001:bb8:2002:2300:7221:17ff:fe03:5018 |<br /> | impi: 172.17.35.20 | |<br /> --|-------------------------------|-------------------|-----------------------|-------------------------|------ <br /> | |<br /> __|__ __|__<br /> | | | |<br /> | F | | V |<br /> |_____| |_____|<br /> <br /> varundus.ims eap.ims<br /> os: 172.17.35.19 172.17.35.22<br /> 2001:bb8:2002:2300:21e:67ff:fe03:a0f9 2001:bb8:2002:2300:7221:17ff:fe03:5022<br /> ipmi: 172.17.35.5<br /> <br /> kus<br /> <br /> * at-dom0.ims - füüsiline virtualiseerimise arvuti<br /> * varundus.ims - füüsiline varunduse arvuti<br /> * fw.ims (fw.ims.ut.ee) - virtuaalne arvuti<br /> * eap.ims - virtuaalne arvuti<br /> <br /> Märkused<br /> <br /> * Füüsilistel arvutitel on lisaks operatsioonisüsteemi ip aadressile ka füüsilise riistvara kaughalduse ipmi aadress<br /> * Operatsioonisüsteemid omandavad automaatselt oma mac aadresside abil ipv6 aadressid, neid kasutatakse EMC Networkeriga varundamisel<br /> * 172.17.35 võrgu arvutitest 195.80.35.96 poole pöördudes toimub asümmeetriline ruuting (kuna ülikooli võrguseade ei tee 172.17.35 -&gt; 195.80.35.1 nat teisendust)<br /> <br /> ===Riistvara kaughaldus===<br /> <br /> Riistvaraliste arvutite kaughalduseks kasutatakse IMPI protokolli onboard BMC kontrolliriga suhtlemiseks. Muu hulgas võimaldab see ligipääsu arvuti BIOSile ning virtuaalse järjestikpordi kaudu serial konsoolile (st operatsioonisüsteemile). IPMI kasutamist on kirjeldatud aadressil http://kuutorvaja.eenet.ee/wiki/HP_BladeSystem_c7000_seadmeriiul#IPMI_kasutamine<br /> <br /> ===Plokkseadmete haldamine===<br /> <br /> Plokkseadmete haldamiseks kasutatakse mdadm ja LVM tarkvara. Mõlemas füüsilises arvutis töötavad neli samade parameetritega kõvaketast on ühendatud RAID massiividesse; RAID ressurssi hallatakse edasi LVM abil kasutamiseks failisüsteemide ja saaleala jaoks. mdadm kasutamist on kirjeldatud aadressil http://www.auul.pri.ee/wiki/Tarkvaralise_mdadm_RAID_kasutamine_operatsioonis%C3%BCsteemiga_Debian_Squeeze ja LVM kasutamist aadressil http://kuutorvaja.eenet.ee/wiki/LVM.<br /> <br /> ===Virtualiseerimine===<br /> <br /> Efektiivsemaks ja paindlikumaks riistavaralise ressursi kasutamiseks on teenusserverid eap.ims ja fw.ims juurutatud virtuaalsete arvutitena. Neile saab kasutamiseks anda sobiva hulga protsessori, mälu, plokkseadme ja võrguressurssi. Projektis kasutatakse XEN virtualiseerimise tarkvara, mille kasutamist on kirjeldatud nt aadressidel<br /> <br /> * http://www.auul.pri.ee/wiki/Xen_ja_Debian_Squeeze<br /> * http://kuutorvaja.eenet.ee/wiki/Unix_keskkonna_administreerimine#Virtualiseerimine<br /> <br /> ====XEN host====<br /> <br /> XEN hostile vastav operatsioonisüsteemi eksemplar töötab füüsilisel riistvaral ja selle seest tõimub virtuaalsete arvutite juhtimine. Kui välja arvata XEN hosti alglaaduri seadistused ja mõned virtualiseerimisega seotud protsessid on tegu tavalise Debian Squeeze operatsioonisüsteemiga. <br /> <br /> ====XEN guest====<br /> <br /> XEN guestid on virtuaalsed operatsioonisüsteemid, mis töötavad XEN hosti kontrolli all ja mis kasutavad XEN hostist neile eraldatud ressursse.<br /> <br /> ===at-dom0 host===<br /> <br /> ====mdadm kasutamine====<br /> <br /> Neli füüsilist kõvaketast on partitsioneeritud sarnaselt<br /> <br /> root@at-dom0:~# parted /dev/sda p<br /> Model: ATA WDC WD2003FYYS-0 (scsi)<br /> Disk /dev/sda: 2000GB<br /> Sector size (logical/physical): 512B/512B<br /> Partition Table: msdos<br /> <br /> Number Start End Size Type File system Flags<br /> 1 1049kB 269MB 268MB primary ext3 boot<br /> 2 269MB 69.0GB 68.7GB primary<br /> 3 69.0GB 1169GB 1100GB primary<br /> <br /> mdadm abil on <br /> <br /> * kõigi kõvaketaste esimesed partitsioonid ühendatud /dev/md/boot raid1 lülitusse (at-dom0 operatsioonisüsteemi jaoks)<br /> * kõigi kõvaketaste teised partitsioonid ühendatud /dev/md/system raid5 lülitusse (at-dom0 operatsioonisüsteemi jaoks)<br /> * kõigi kõvaketaste teised partitsioonid ühendatud /dev/md/data raid5 lülitusse (virtuaalsete arvutite jaoks)<br /> <br /> ====LVM kasutamine====<br /> <br /> at-dom0 enda operatsioonisüsteemi jaoks kasutuses sellised plokkseadmed<br /> <br /> * /boot - /dev/md/boot (mdadm ressurss)<br /> * / - /dev/system/root (LVM ressurss)<br /> <br /> at-dom0.ims arvutil töötavad kaks virtuaalset arvutit<br /> <br /> ====Võrgu kasutamine====<br /> <br /> Kaks arvuti võrgukaarti on kasutusel selliselt<br /> <br /> * peth0 - esimene füüsiline võrgukaart<br /> * peth1 - teine füüsiline võrgukaart<br /> * eth0 - esimest füüsilist võrgukaarti sisaldav sild (fiktiivne aadress 10.101.101.21)<br /> * eth1 - teist füüsilist võrgukaarti sisaldav sild (172.17.35.21)<br /> * vaikelüüs 172.17.35.1<br /> <br /> ====XEN kasutamine====<br /> <br /> XEN guestide seadistusfailid on<br /> <br /> /etc/xen/eap.cfg<br /> /etc/xen/fw.cfg<br /> <br /> ===eap.ims guest===<br /> <br /> eap.ims kasutab selliseid hosti ressursse<br /> <br /> Plokkseade<br /> <br /> /dev/data/eap_root<br /> /dev/data/eap_home<br /> /dev/data/eap_data_backup<br /> /dev/data/eap_data_postgresql<br /> /dev/data/eap_swap<br /> <br /> Võrk<br /> <br /> guesti seade eth0 (172.17.35.22) on muu võrguga ühenduses hosti eth1 silla kaudu<br /> <br /> Põhiline eap.ims arvutis töötav rakendustarkvara on PostgreSQL v. 9.0 andmebaas<br /> <br /> /etc/postgresql/9.0/main - seadistusfailid<br /> /var/log/postgresql - logi<br /> /data/postgresql (ehk /var/lib/postgresql/9.0/main) - andmeklaster<br /> /data/backup/postgresql/archive-logs - wal logid<br /> <br /> PostgreSQL andmebaasi kasutamist on kirjeldatud aadressil http://www.auul.pri.ee/wiki/PostgreSQL.<br /> <br /> eap.ims arvutile no külge monteeritud sellised failisüsteemid üle võrgu<br /> <br /> fw.ims:/home -&gt; /home (NFS)<br /> //172.17.35.222/eap4space -&gt; /opt/postgres/eap4space (CIFS)<br /> <br /> ===fw.ims guest===<br /> <br /> fw.ims kasutab selliseid hosti ressursse<br /> <br /> Plokkseade<br /> <br /> /dev/data/fw_root<br /> /dev/data/fw_home<br /> /dev/data/fw_data_backup<br /> /dev/data/fw_data_postgresql<br /> /dev/data/fw_swap <br /> <br /> Võrk<br /> <br /> guesti seade eth0 (193.40.35.96) on muu võrguga ühenduses hosti eth0 silla kaudu<br /> guesti seade eth1 (172.17.35.18) on muu võrguga ühenduses hosti eth1 silla kaudu<br /> <br /> Peamised fw.ims arvutis töötavad rakendusprogrammid on<br /> <br /> * PostgreSQL v. 9.0 andmebaas<br /> <br /> /etc/postgresql/9.0/main - seadistusfailid<br /> /var/log/postgresql - logi<br /> /data/postgresql (ehk /var/lib/postgresql/9.0/main) - andmeklaster<br /> /data/backup/postgresql/archive-logs - wal logi<br /> <br /> * Apache veebiserver<br /> <br /> /etc/apache2 - seadistusfailid<br /> /var/log/apache2 - logid<br /> <br /> * NFS failiserver, mis jagab /home kataloogi eap.ims arvutisse<br /> * fw.ims arvutile on külge ühendatud sellised CIFS failisüsteemid üle võrgu<br /> <br /> //172.17.35.14/Data -&gt; /opt/postgres/Pardata<br /> //172.17.35.222/Users/Hitachi/Desktop/Pildid -&gt; /opt/postgres/Sempildid<br /> //172.17.35.222/eap4space -&gt; /opt/postgres/eap4space<br /> <br /> ===varundus.ims===<br /> <br /> ====mdadm kasutamine====<br /> <br /> Neli füüsilist kõvaketast on partitsioneeritud sarnaselt<br /> <br /> root@varundus:~# parted /dev/sda p<br /> Model: ATA WDC WD2003FYYS-0 (scsi)<br /> Disk /dev/sda: 2000GB<br /> Sector size (logical/physical): 512B/512B<br /> Partition Table: msdos<br /> <br /> Number Start End Size Type File system Flags<br /> 1 1049kB 269MB 268MB primary ext3 boot<br /> 2 269MB 2000GB 2000GB primary<br /> <br /> mdadm abil on<br /> <br /> * kõigi kõvaketaste esimesed partitsioonid ühendatud /dev/md/boot raid1 lülitusse<br /> * kõigi kõvaketaste teised partitsioonid ühendatud /dev/md/system raid5 lülitusse<br /> <br /> ====LVM kasutamine====<br /> <br /> varundus arvutis kasutuses sellised plokkseadmed<br /> <br /> * /boot - /dev/md/boot (mdadm ressurss)<br /> * / - /dev/system/root (LVM ressurss)<br /> * /srv/backup - /dev/system/backup (LVM ressurss)<br /> <br /> ====Võrgu kasutamine====<br /> <br /> Kaks arvuti võrgukaarti on kasutusel selliselt<br /> <br /> * eth0 - 172.17.35.19<br /> * vaikelüüs 172.17.35.1<br /> <br /> ====rsnapshot kasutamine====<br /> <br /> rsnapshot tarkvara tööd juhib seadistusfail /etc/rsnapshot.conf ja varundatud andmed asuvad kataloogis /srv/backup/rsnapshot avutite nimelistes kataloogides. Üldiselt varundatakse kõiki failisüsteeme välja arvatud mõned kataloogid<br /> <br /> /dev<br /> /proc<br /> /tmp<br /> /sys<br /> /mnt<br /> <br /> Varundatud andmeid roteeritakse selliselt, et säilitatakse seisud<br /> <br /> * viimased 28 päeva<br /> * viimased 12 nädalat<br /> * viimased 24 kuud<br /> <br /> rsnapshot tarkvara kasutamist on kirjeldatud aadressil http://www.auul.pri.ee/wiki/Rsnapshot.<br /> <br /> Full backup: kord nädalas nublu.chem.ut.ee 2-le eraldi kõvakettale (mitteredundantsed), säilitatakse 4-5 viimast täiskoopiat.<br /> <br /> Full backupi ligikaudne maht (24.01.2011): 35 GB<br /> <br /> <br /> Iga päeva WAL logid (säilitatakse kahe full backupi vahel tekkinud WAL logid (nädala WAL logide ligikaudne maht (24.01.2011): 18 GB<br /> <br /> Tarmo virtuaalserverist hetkel backuppi ei tehta.<br /> <br /> ===Monitooring===<br /> <br /> Monitooringuks kasutatakse Zabbix tarkvara, igasse operatsioonisüsteemi on paigaldatud Zabbix agent, mida juhib seadistusfail /etc/zabbix/zabbix_agentd.conf. Zabbix server asub eemal, aadressil 84.50.96.138 ja pöördub monitooritavate poole kahel viisil<br /> <br /> * üle ülikooli OpenVPN võrgu otse kõigi operatsioonisüsteemide poole, et monitoorida süsteemi üldisi omadusi (failisüsteemide täituvus, cpu load jne)<br /> * üle ülikooli OpenVPN võrgu otse mõlema füüsilise arvuti poole üle IPMI liidese, et monitoorida füüsilise riistvara omadusi (nt emaplaadi temperatuur)<br /> * üle avaliku võrgu, et monitoorida http://fw.ims.ut.ee/ veebikoha kättesaadavust<br /> <br /> Kuna Zabbix serveri ip aadress täna OpenVPN ühendusele võib muutuda ja Zabbix agent eeldab, et Zabbix serveri ip on fikseeritud, siis töötab igas arvutis simpleproxy programm, mille abil näidatakse agendile, et Zabbix server pöörduks justkui localhostilt.<br /> <br /> Zabbix tarkvara kasutamist on kirjeldatud aadressil http://www.auul.pri.ee/wiki/Zabbix_kasutamine_Debian_operatsioonis%C3%BCsteemiga.<br /> <br /> ===Kasulikud lisamaterjalid===<br /> <br /> * http://www.auul.pri.ee/wiki/NUT_tarkvara_kasutamine_Debian_Squeeze_operatsioonis%C3%BCsteemiga<br /> * http://www.auul.pri.ee/wiki/EMC_Networker_client<br /> * http://www.auul.pri.ee/wiki/Tarkvaralise_mdadm_RAID_kasutamine_operatsioonis%C3%BCsteemiga_Debian_Squeeze</div> Imreoolberg https://ims.ut.ee/index.php?title=Eab_infra&diff=8959 Eab infra 2011-11-02T09:03:16Z <p>Imreoolberg: /* Monitooring */</p> <hr /> <div>===Sissejuhatus===<br /> <br /> Käesoleva teksti eesmärgiks on kirjeldada EAP projekti juures toimuvat riistvara, võrgu, operatsioonisüsteemi keskkonna ja rakendustarkvara kasutamist.<br /> <br /> ===Riistvara===<br /> <br /> Projektis kasutatakse sellist riistavara<br /> <br /> * Powerware 5115 UPS<br /> * 2 x S3420GP emaplaadiga Ordi arvutid<br /> * mõlemad arvutid sisaldavad 4 x 2 TB kõvakettaid<br /> * generic kohtvõrgu kommutaator<br /> <br /> ===Tarkvara===<br /> <br /> Projekti arvutites kasutatakse järgmist tarkvara<br /> <br /> * Debian Squeeze v. 6 64bit operatsioonisüsteem<br /> * XEN v. 4 virtualiseerimise tarkvara<br /> * Apache veebiserver<br /> * PostgreSQL andmebaas<br /> * Zabbix monitooringutarkvara<br /> * OpenVPN kaugligipääsu tarkvara<br /> * rsnapshot ja EMC Networker varundustarkvara<br /> * plokkseadmete haldamiseks mdadm ja LVM tarkvara<br /> <br /> ===Võrgutopoloogia===<br /> <br /> _____<br /> 195.80.35.1 | | ülikooli võrguseade<br /> ----------------------------------------------|----------------------------------------------| |<br /> | |_____|<br /> | | 172.17.35.1<br /> | 195.80.35.96 |<br /> | 2001:bb8:2002:2300:7231:40ff:fe03:5128 | <br /> _____ __|__ |<br /> | | | | |<br /> | F | | V | | <br /> |_____| at-dom0.ims |_____| fw.ims |<br /> | os: 172.17.35.21 | 172.17.35.18 |<br /> | 2001:bb8:2002:2300:21e:67ff:fe03:c3c0 | 2001:bb8:2002:2300:7221:17ff:fe03:5018 |<br /> | impi: 172.17.35.20 | |<br /> --|-------------------------------|-------------------|-----------------------|-------------------------|------ <br /> | |<br /> __|__ __|__<br /> | | | |<br /> | F | | V |<br /> |_____| |_____|<br /> <br /> varundus.ims eap.ims<br /> os: 172.17.35.19 172.17.35.22<br /> 2001:bb8:2002:2300:21e:67ff:fe03:a0f9 2001:bb8:2002:2300:7221:17ff:fe03:5022<br /> ipmi: 172.17.35.5<br /> <br /> kus<br /> <br /> * at-dom0.ims - füüsiline virtualiseerimise arvuti<br /> * varundus.ims - füüsiline varunduse arvuti<br /> * fw.ims (fw.ims.ut.ee) - virtuaalne arvuti<br /> * eap.ims - virtuaalne arvuti<br /> <br /> Märkused<br /> <br /> * Füüsilistel arvutitel on lisaks operatsioonisüsteemi ip aadressile ka füüsilise riistvara kaughalduse ipmi aadress<br /> * Operatsioonisüsteemid omandavad automaatselt oma mac aadresside abil ipv6 aadressid, neid kasutatakse EMC Networkeriga varundamisel<br /> * 172.17.35 võrgu arvutitest 195.80.35.96 poole pöördudes toimub asümmeetriline ruuting (kuna ülikooli võrguseade ei tee 172.17.35 -&gt; 195.80.35.1 nat teisendust)<br /> <br /> ===Riistvara kaughaldus===<br /> <br /> Riistvaraliste arvutite kaughalduseks kasutatakse IMPI protokolli onboard BMC kontrolliriga suhtlemiseks. Muu hulgas võimaldab see ligipääsu arvuti BIOSile ning virtuaalse järjestikpordi kaudu serial konsoolile (st operatsioonisüsteemile). IPMI kasutamist on kirjeldatud aadressil http://kuutorvaja.eenet.ee/wiki/HP_BladeSystem_c7000_seadmeriiul#IPMI_kasutamine<br /> <br /> ===Plokkseadmete haldamine===<br /> <br /> Plokkseadmete haldamiseks kasutatakse mdadm ja LVM tarkvara. Mõlemas füüsilises arvutis töötavad neli samade parameetritega kõvaketast on ühendatud RAID massiividesse; RAID ressurssi hallatakse edasi LVM abil kasutamiseks failisüsteemide ja saaleala jaoks. mdadm kasutamist on kirjeldatud aadressil http://www.auul.pri.ee/wiki/Tarkvaralise_mdadm_RAID_kasutamine_operatsioonis%C3%BCsteemiga_Debian_Squeeze ja LVM kasutamist aadressil http://kuutorvaja.eenet.ee/wiki/LVM.<br /> <br /> ===Virtualiseerimine===<br /> <br /> Efektiivsemaks ja paindlikumaks riistavaralise ressursi kasutamiseks on teenusserverid eap.ims ja fw.ims juurutatud virtuaalsete arvutitena. Neile saab kasutamiseks anda sobiva hulga protsessori, mälu, plokkseadme ja võrguressurssi. Projektis kasutatakse XEN virtualiseerimise tarkvara, mille kasutamist on kirjeldatud nt aadressidel<br /> <br /> * http://www.auul.pri.ee/wiki/Xen_ja_Debian_Squeeze<br /> * http://kuutorvaja.eenet.ee/wiki/Unix_keskkonna_administreerimine#Virtualiseerimine<br /> <br /> ====XEN host====<br /> <br /> XEN hostile vastav operatsioonisüsteemi eksemplar töötab füüsilisel riistvaral ja selle seest tõimub virtuaalsete arvutite juhtimine. Kui välja arvata XEN hosti alglaaduri seadistused ja mõned virtualiseerimisega seotud protsessid on tegu tavalise Debian Squeeze operatsioonisüsteemiga. <br /> <br /> ====XEN guest====<br /> <br /> XEN guestid on virtuaalsed operatsioonisüsteemid, mis töötavad XEN hosti kontrolli all ja mis kasutavad XEN hostist neile eraldatud ressursse.<br /> <br /> ===at-dom0 host===<br /> <br /> ====mdadm kasutamine====<br /> <br /> Neli füüsilist kõvaketast on partitsioneeritud sarnaselt<br /> <br /> root@at-dom0:~# parted /dev/sda p<br /> Model: ATA WDC WD2003FYYS-0 (scsi)<br /> Disk /dev/sda: 2000GB<br /> Sector size (logical/physical): 512B/512B<br /> Partition Table: msdos<br /> <br /> Number Start End Size Type File system Flags<br /> 1 1049kB 269MB 268MB primary ext3 boot<br /> 2 269MB 69.0GB 68.7GB primary<br /> 3 69.0GB 1169GB 1100GB primary<br /> <br /> mdadm abil on <br /> <br /> * kõigi kõvaketaste esimesed partitsioonid ühendatud /dev/md/boot raid1 lülitusse (at-dom0 operatsioonisüsteemi jaoks)<br /> * kõigi kõvaketaste teised partitsioonid ühendatud /dev/md/system raid5 lülitusse (at-dom0 operatsioonisüsteemi jaoks)<br /> * kõigi kõvaketaste teised partitsioonid ühendatud /dev/md/data raid5 lülitusse (virtuaalsete arvutite jaoks)<br /> <br /> ====LVM kasutamine====<br /> <br /> at-dom0 enda operatsioonisüsteemi jaoks kasutuses sellised plokkseadmed<br /> <br /> * /boot - /dev/md/boot (mdadm ressurss)<br /> * / - /dev/system/root (LVM ressurss)<br /> <br /> at-dom0.ims arvutil töötavad kaks virtuaalset arvutit<br /> <br /> ====Võrgu kasutamine====<br /> <br /> Kaks arvuti võrgukaarti on kasutusel selliselt<br /> <br /> * peth0 - esimene füüsiline võrgukaart<br /> * peth1 - teine füüsiline võrgukaart<br /> * eth0 - esimest füüsilist võrgukaarti sisaldav sild (fiktiivne aadress 10.101.101.21)<br /> * eth1 - teist füüsilist võrgukaarti sisaldav sild (172.17.35.21)<br /> * vaikelüüs 172.17.35.1<br /> <br /> ===eap.ims guest===<br /> <br /> eap.ims kasutab selliseid hosti ressursse<br /> <br /> Plokkseade<br /> <br /> /dev/data/eap_root<br /> /dev/data/eap_home<br /> /dev/data/eap_data_backup<br /> /dev/data/eap_data_postgresql<br /> /dev/data/eap_swap<br /> <br /> Võrk<br /> <br /> guesti seade eth0 (172.17.35.22) on muu võrguga ühenduses hosti eth1 silla kaudu<br /> <br /> Põhiline eap.ims arvutis töötav rakendustarkvara on PostgreSQL v. 9.0 andmebaas<br /> <br /> /etc/postgresql/9.0/main - seadistusfailid<br /> /var/log/postgresql - logi<br /> /data/postgresql (ehk /var/lib/postgresql/9.0/main) - andmeklaster<br /> /data/backup/postgresql/archive-logs - wal logid<br /> <br /> PostgreSQL andmebaasi kasutamist on kirjeldatud aadressil http://www.auul.pri.ee/wiki/PostgreSQL.<br /> <br /> eap.ims arvutile no külge monteeritud sellised failisüsteemid üle võrgu<br /> <br /> fw.ims:/home -&gt; /home (NFS)<br /> //172.17.35.222/eap4space -&gt; /opt/postgres/eap4space (CIFS)<br /> <br /> ===fw.ims guest===<br /> <br /> fw.ims kasutab selliseid hosti ressursse<br /> <br /> Plokkseade<br /> <br /> /dev/data/fw_root<br /> /dev/data/fw_home<br /> /dev/data/fw_data_backup<br /> /dev/data/fw_data_postgresql<br /> /dev/data/fw_swap <br /> <br /> Võrk<br /> <br /> guesti seade eth0 (193.40.35.96) on muu võrguga ühenduses hosti eth0 silla kaudu<br /> guesti seade eth1 (172.17.35.18) on muu võrguga ühenduses hosti eth1 silla kaudu<br /> <br /> Peamised fw.ims arvutis töötavad rakendusprogrammid on<br /> <br /> * PostgreSQL v. 9.0 andmebaas<br /> <br /> /etc/postgresql/9.0/main - seadistusfailid<br /> /var/log/postgresql - logi<br /> /data/postgresql (ehk /var/lib/postgresql/9.0/main) - andmeklaster<br /> /data/backup/postgresql/archive-logs - wal logi<br /> <br /> * Apache veebiserver<br /> <br /> /etc/apache2 - seadistusfailid<br /> /var/log/apache2 - logid<br /> <br /> * NFS failiserver, mis jagab /home kataloogi eap.ims arvutisse<br /> * fw.ims arvutile on külge ühendatud sellised CIFS failisüsteemid üle võrgu<br /> <br /> //172.17.35.14/Data -&gt; /opt/postgres/Pardata<br /> //172.17.35.222/Users/Hitachi/Desktop/Pildid -&gt; /opt/postgres/Sempildid<br /> //172.17.35.222/eap4space -&gt; /opt/postgres/eap4space<br /> <br /> ===varundus.ims===<br /> <br /> ====mdadm kasutamine====<br /> <br /> Neli füüsilist kõvaketast on partitsioneeritud sarnaselt<br /> <br /> root@varundus:~# parted /dev/sda p<br /> Model: ATA WDC WD2003FYYS-0 (scsi)<br /> Disk /dev/sda: 2000GB<br /> Sector size (logical/physical): 512B/512B<br /> Partition Table: msdos<br /> <br /> Number Start End Size Type File system Flags<br /> 1 1049kB 269MB 268MB primary ext3 boot<br /> 2 269MB 2000GB 2000GB primary<br /> <br /> mdadm abil on<br /> <br /> * kõigi kõvaketaste esimesed partitsioonid ühendatud /dev/md/boot raid1 lülitusse<br /> * kõigi kõvaketaste teised partitsioonid ühendatud /dev/md/system raid5 lülitusse<br /> <br /> ====LVM kasutamine====<br /> <br /> varundus arvutis kasutuses sellised plokkseadmed<br /> <br /> * /boot - /dev/md/boot (mdadm ressurss)<br /> * / - /dev/system/root (LVM ressurss)<br /> * /srv/backup - /dev/system/backup (LVM ressurss)<br /> <br /> ====Võrgu kasutamine====<br /> <br /> Kaks arvuti võrgukaarti on kasutusel selliselt<br /> <br /> * eth0 - 172.17.35.19<br /> * vaikelüüs 172.17.35.1<br /> <br /> ====rsnapshot kasutamine====<br /> <br /> rsnapshot tarkvara tööd juhib seadistusfail /etc/rsnapshot.conf ja varundatud andmed asuvad kataloogis /srv/backup/rsnapshot avutite nimelistes kataloogides. Üldiselt varundatakse kõiki failisüsteeme välja arvatud mõned kataloogid<br /> <br /> /dev<br /> /proc<br /> /tmp<br /> /sys<br /> /mnt<br /> <br /> Varundatud andmeid roteeritakse selliselt, et säilitatakse seisud<br /> <br /> * viimased 28 päeva<br /> * viimased 12 nädalat<br /> * viimased 24 kuud<br /> <br /> rsnapshot tarkvara kasutamist on kirjeldatud aadressil http://www.auul.pri.ee/wiki/Rsnapshot.<br /> <br /> Full backup: kord nädalas nublu.chem.ut.ee 2-le eraldi kõvakettale (mitteredundantsed), säilitatakse 4-5 viimast täiskoopiat.<br /> <br /> Full backupi ligikaudne maht (24.01.2011): 35 GB<br /> <br /> <br /> Iga päeva WAL logid (säilitatakse kahe full backupi vahel tekkinud WAL logid (nädala WAL logide ligikaudne maht (24.01.2011): 18 GB<br /> <br /> Tarmo virtuaalserverist hetkel backuppi ei tehta.<br /> <br /> ===Monitooring===<br /> <br /> Monitooringuks kasutatakse Zabbix tarkvara, igasse operatsioonisüsteemi on paigaldatud Zabbix agent, mida juhib seadistusfail /etc/zabbix/zabbix_agentd.conf. Zabbix server asub eemal, aadressil 84.50.96.138 ja pöördub monitooritavate poole kahel viisil<br /> <br /> * üle ülikooli OpenVPN võrgu otse kõigi operatsioonisüsteemide poole, et monitoorida süsteemi üldisi omadusi (failisüsteemide täituvus, cpu load jne)<br /> * üle ülikooli OpenVPN võrgu otse mõlema füüsilise arvuti poole üle IPMI liidese, et monitoorida füüsilise riistvara omadusi (nt emaplaadi temperatuur)<br /> * üle avaliku võrgu, et monitoorida http://fw.ims.ut.ee/ veebikoha kättesaadavust<br /> <br /> Kuna Zabbix serveri ip aadress täna OpenVPN ühendusele võib muutuda ja Zabbix agent eeldab, et Zabbix serveri ip on fikseeritud, siis töötab igas arvutis simpleproxy programm, mille abil näidatakse agendile, et Zabbix server pöörduks justkui localhostilt.<br /> <br /> Zabbix tarkvara kasutamist on kirjeldatud aadressil http://www.auul.pri.ee/wiki/Zabbix_kasutamine_Debian_operatsioonis%C3%BCsteemiga.<br /> <br /> ===Kasulikud lisamaterjalid===<br /> <br /> * http://www.auul.pri.ee/wiki/NUT_tarkvara_kasutamine_Debian_Squeeze_operatsioonis%C3%BCsteemiga<br /> * http://www.auul.pri.ee/wiki/EMC_Networker_client<br /> * http://www.auul.pri.ee/wiki/Tarkvaralise_mdadm_RAID_kasutamine_operatsioonis%C3%BCsteemiga_Debian_Squeeze</div> Imreoolberg https://ims.ut.ee/index.php?title=Eab_infra&diff=8958 Eab infra 2011-11-02T08:58:36Z <p>Imreoolberg: /* eap.ims guest */</p> <hr /> <div>===Sissejuhatus===<br /> <br /> Käesoleva teksti eesmärgiks on kirjeldada EAP projekti juures toimuvat riistvara, võrgu, operatsioonisüsteemi keskkonna ja rakendustarkvara kasutamist.<br /> <br /> ===Riistvara===<br /> <br /> Projektis kasutatakse sellist riistavara<br /> <br /> * Powerware 5115 UPS<br /> * 2 x S3420GP emaplaadiga Ordi arvutid<br /> * mõlemad arvutid sisaldavad 4 x 2 TB kõvakettaid<br /> * generic kohtvõrgu kommutaator<br /> <br /> ===Tarkvara===<br /> <br /> Projekti arvutites kasutatakse järgmist tarkvara<br /> <br /> * Debian Squeeze v. 6 64bit operatsioonisüsteem<br /> * XEN v. 4 virtualiseerimise tarkvara<br /> * Apache veebiserver<br /> * PostgreSQL andmebaas<br /> * Zabbix monitooringutarkvara<br /> * OpenVPN kaugligipääsu tarkvara<br /> * rsnapshot ja EMC Networker varundustarkvara<br /> * plokkseadmete haldamiseks mdadm ja LVM tarkvara<br /> <br /> ===Võrgutopoloogia===<br /> <br /> _____<br /> 195.80.35.1 | | ülikooli võrguseade<br /> ----------------------------------------------|----------------------------------------------| |<br /> | |_____|<br /> | | 172.17.35.1<br /> | 195.80.35.96 |<br /> | 2001:bb8:2002:2300:7231:40ff:fe03:5128 | <br /> _____ __|__ |<br /> | | | | |<br /> | F | | V | | <br /> |_____| at-dom0.ims |_____| fw.ims |<br /> | os: 172.17.35.21 | 172.17.35.18 |<br /> | 2001:bb8:2002:2300:21e:67ff:fe03:c3c0 | 2001:bb8:2002:2300:7221:17ff:fe03:5018 |<br /> | impi: 172.17.35.20 | |<br /> --|-------------------------------|-------------------|-----------------------|-------------------------|------ <br /> | |<br /> __|__ __|__<br /> | | | |<br /> | F | | V |<br /> |_____| |_____|<br /> <br /> varundus.ims eap.ims<br /> os: 172.17.35.19 172.17.35.22<br /> 2001:bb8:2002:2300:21e:67ff:fe03:a0f9 2001:bb8:2002:2300:7221:17ff:fe03:5022<br /> ipmi: 172.17.35.5<br /> <br /> kus<br /> <br /> * at-dom0.ims - füüsiline virtualiseerimise arvuti<br /> * varundus.ims - füüsiline varunduse arvuti<br /> * fw.ims (fw.ims.ut.ee) - virtuaalne arvuti<br /> * eap.ims - virtuaalne arvuti<br /> <br /> Märkused<br /> <br /> * Füüsilistel arvutitel on lisaks operatsioonisüsteemi ip aadressile ka füüsilise riistvara kaughalduse ipmi aadress<br /> * Operatsioonisüsteemid omandavad automaatselt oma mac aadresside abil ipv6 aadressid, neid kasutatakse EMC Networkeriga varundamisel<br /> * 172.17.35 võrgu arvutitest 195.80.35.96 poole pöördudes toimub asümmeetriline ruuting (kuna ülikooli võrguseade ei tee 172.17.35 -&gt; 195.80.35.1 nat teisendust)<br /> <br /> ===Riistvara kaughaldus===<br /> <br /> Riistvaraliste arvutite kaughalduseks kasutatakse IMPI protokolli onboard BMC kontrolliriga suhtlemiseks. Muu hulgas võimaldab see ligipääsu arvuti BIOSile ning virtuaalse järjestikpordi kaudu serial konsoolile (st operatsioonisüsteemile). IPMI kasutamist on kirjeldatud aadressil http://kuutorvaja.eenet.ee/wiki/HP_BladeSystem_c7000_seadmeriiul#IPMI_kasutamine<br /> <br /> ===Plokkseadmete haldamine===<br /> <br /> Plokkseadmete haldamiseks kasutatakse mdadm ja LVM tarkvara. Mõlemas füüsilises arvutis töötavad neli samade parameetritega kõvaketast on ühendatud RAID massiividesse; RAID ressurssi hallatakse edasi LVM abil kasutamiseks failisüsteemide ja saaleala jaoks. mdadm kasutamist on kirjeldatud aadressil http://www.auul.pri.ee/wiki/Tarkvaralise_mdadm_RAID_kasutamine_operatsioonis%C3%BCsteemiga_Debian_Squeeze ja LVM kasutamist aadressil http://kuutorvaja.eenet.ee/wiki/LVM.<br /> <br /> ===Virtualiseerimine===<br /> <br /> Efektiivsemaks ja paindlikumaks riistavaralise ressursi kasutamiseks on teenusserverid eap.ims ja fw.ims juurutatud virtuaalsete arvutitena. Neile saab kasutamiseks anda sobiva hulga protsessori, mälu, plokkseadme ja võrguressurssi. Projektis kasutatakse XEN virtualiseerimise tarkvara, mille kasutamist on kirjeldatud nt aadressidel<br /> <br /> * http://www.auul.pri.ee/wiki/Xen_ja_Debian_Squeeze<br /> * http://kuutorvaja.eenet.ee/wiki/Unix_keskkonna_administreerimine#Virtualiseerimine<br /> <br /> ====XEN host====<br /> <br /> XEN hostile vastav operatsioonisüsteemi eksemplar töötab füüsilisel riistvaral ja selle seest tõimub virtuaalsete arvutite juhtimine. Kui välja arvata XEN hosti alglaaduri seadistused ja mõned virtualiseerimisega seotud protsessid on tegu tavalise Debian Squeeze operatsioonisüsteemiga. <br /> <br /> ====XEN guest====<br /> <br /> XEN guestid on virtuaalsed operatsioonisüsteemid, mis töötavad XEN hosti kontrolli all ja mis kasutavad XEN hostist neile eraldatud ressursse.<br /> <br /> ===at-dom0 host===<br /> <br /> ====mdadm kasutamine====<br /> <br /> Neli füüsilist kõvaketast on partitsioneeritud sarnaselt<br /> <br /> root@at-dom0:~# parted /dev/sda p<br /> Model: ATA WDC WD2003FYYS-0 (scsi)<br /> Disk /dev/sda: 2000GB<br /> Sector size (logical/physical): 512B/512B<br /> Partition Table: msdos<br /> <br /> Number Start End Size Type File system Flags<br /> 1 1049kB 269MB 268MB primary ext3 boot<br /> 2 269MB 69.0GB 68.7GB primary<br /> 3 69.0GB 1169GB 1100GB primary<br /> <br /> mdadm abil on <br /> <br /> * kõigi kõvaketaste esimesed partitsioonid ühendatud /dev/md/boot raid1 lülitusse (at-dom0 operatsioonisüsteemi jaoks)<br /> * kõigi kõvaketaste teised partitsioonid ühendatud /dev/md/system raid5 lülitusse (at-dom0 operatsioonisüsteemi jaoks)<br /> * kõigi kõvaketaste teised partitsioonid ühendatud /dev/md/data raid5 lülitusse (virtuaalsete arvutite jaoks)<br /> <br /> ====LVM kasutamine====<br /> <br /> at-dom0 enda operatsioonisüsteemi jaoks kasutuses sellised plokkseadmed<br /> <br /> * /boot - /dev/md/boot (mdadm ressurss)<br /> * / - /dev/system/root (LVM ressurss)<br /> <br /> at-dom0.ims arvutil töötavad kaks virtuaalset arvutit<br /> <br /> ====Võrgu kasutamine====<br /> <br /> Kaks arvuti võrgukaarti on kasutusel selliselt<br /> <br /> * peth0 - esimene füüsiline võrgukaart<br /> * peth1 - teine füüsiline võrgukaart<br /> * eth0 - esimest füüsilist võrgukaarti sisaldav sild (fiktiivne aadress 10.101.101.21)<br /> * eth1 - teist füüsilist võrgukaarti sisaldav sild (172.17.35.21)<br /> * vaikelüüs 172.17.35.1<br /> <br /> ===eap.ims guest===<br /> <br /> eap.ims kasutab selliseid hosti ressursse<br /> <br /> Plokkseade<br /> <br /> /dev/data/eap_root<br /> /dev/data/eap_home<br /> /dev/data/eap_data_backup<br /> /dev/data/eap_data_postgresql<br /> /dev/data/eap_swap<br /> <br /> Võrk<br /> <br /> guesti seade eth0 (172.17.35.22) on muu võrguga ühenduses hosti eth1 silla kaudu<br /> <br /> Põhiline eap.ims arvutis töötav rakendustarkvara on PostgreSQL v. 9.0 andmebaas<br /> <br /> /etc/postgresql/9.0/main - seadistusfailid<br /> /var/log/postgresql - logi<br /> /data/postgresql (ehk /var/lib/postgresql/9.0/main) - andmeklaster<br /> /data/backup/postgresql/archive-logs - wal logid<br /> <br /> PostgreSQL andmebaasi kasutamist on kirjeldatud aadressil http://www.auul.pri.ee/wiki/PostgreSQL.<br /> <br /> eap.ims arvutile no külge monteeritud sellised failisüsteemid üle võrgu<br /> <br /> fw.ims:/home -&gt; /home (NFS)<br /> //172.17.35.222/eap4space -&gt; /opt/postgres/eap4space (CIFS)<br /> <br /> ===fw.ims guest===<br /> <br /> fw.ims kasutab selliseid hosti ressursse<br /> <br /> Plokkseade<br /> <br /> /dev/data/fw_root<br /> /dev/data/fw_home<br /> /dev/data/fw_data_backup<br /> /dev/data/fw_data_postgresql<br /> /dev/data/fw_swap <br /> <br /> Võrk<br /> <br /> guesti seade eth0 (193.40.35.96) on muu võrguga ühenduses hosti eth0 silla kaudu<br /> guesti seade eth1 (172.17.35.18) on muu võrguga ühenduses hosti eth1 silla kaudu<br /> <br /> Peamised fw.ims arvutis töötavad rakendusprogrammid on<br /> <br /> * PostgreSQL v. 9.0 andmebaas<br /> <br /> /etc/postgresql/9.0/main - seadistusfailid<br /> /var/log/postgresql - logi<br /> /data/postgresql (ehk /var/lib/postgresql/9.0/main) - andmeklaster<br /> /data/backup/postgresql/archive-logs - wal logi<br /> <br /> * Apache veebiserver<br /> <br /> /etc/apache2 - seadistusfailid<br /> /var/log/apache2 - logid<br /> <br /> * NFS failiserver, mis jagab /home kataloogi eap.ims arvutisse<br /> * fw.ims arvutile on külge ühendatud sellised CIFS failisüsteemid üle võrgu<br /> <br /> //172.17.35.14/Data -&gt; /opt/postgres/Pardata<br /> //172.17.35.222/Users/Hitachi/Desktop/Pildid -&gt; /opt/postgres/Sempildid<br /> //172.17.35.222/eap4space -&gt; /opt/postgres/eap4space<br /> <br /> ===varundus.ims===<br /> <br /> ====mdadm kasutamine====<br /> <br /> Neli füüsilist kõvaketast on partitsioneeritud sarnaselt<br /> <br /> root@varundus:~# parted /dev/sda p<br /> Model: ATA WDC WD2003FYYS-0 (scsi)<br /> Disk /dev/sda: 2000GB<br /> Sector size (logical/physical): 512B/512B<br /> Partition Table: msdos<br /> <br /> Number Start End Size Type File system Flags<br /> 1 1049kB 269MB 268MB primary ext3 boot<br /> 2 269MB 2000GB 2000GB primary<br /> <br /> mdadm abil on<br /> <br /> * kõigi kõvaketaste esimesed partitsioonid ühendatud /dev/md/boot raid1 lülitusse<br /> * kõigi kõvaketaste teised partitsioonid ühendatud /dev/md/system raid5 lülitusse<br /> <br /> ====LVM kasutamine====<br /> <br /> varundus arvutis kasutuses sellised plokkseadmed<br /> <br /> * /boot - /dev/md/boot (mdadm ressurss)<br /> * / - /dev/system/root (LVM ressurss)<br /> * /srv/backup - /dev/system/backup (LVM ressurss)<br /> <br /> ====Võrgu kasutamine====<br /> <br /> Kaks arvuti võrgukaarti on kasutusel selliselt<br /> <br /> * eth0 - 172.17.35.19<br /> * vaikelüüs 172.17.35.1<br /> <br /> ====rsnapshot kasutamine====<br /> <br /> rsnapshot tarkvara tööd juhib seadistusfail /etc/rsnapshot.conf ja varundatud andmed asuvad kataloogis /srv/backup/rsnapshot avutite nimelistes kataloogides. Üldiselt varundatakse kõiki failisüsteeme välja arvatud mõned kataloogid<br /> <br /> /dev<br /> /proc<br /> /tmp<br /> /sys<br /> /mnt<br /> <br /> Varundatud andmeid roteeritakse selliselt, et säilitatakse seisud<br /> <br /> * viimased 28 päeva<br /> * viimased 12 nädalat<br /> * viimased 24 kuud<br /> <br /> rsnapshot tarkvara kasutamist on kirjeldatud aadressil http://www.auul.pri.ee/wiki/Rsnapshot.<br /> <br /> Full backup: kord nädalas nublu.chem.ut.ee 2-le eraldi kõvakettale (mitteredundantsed), säilitatakse 4-5 viimast täiskoopiat.<br /> <br /> Full backupi ligikaudne maht (24.01.2011): 35 GB<br /> <br /> <br /> Iga päeva WAL logid (säilitatakse kahe full backupi vahel tekkinud WAL logid (nädala WAL logide ligikaudne maht (24.01.2011): 18 GB<br /> <br /> Tarmo virtuaalserverist hetkel backuppi ei tehta.<br /> <br /> ===Monitooring===<br /> <br /> Monitooringuks kasutatakse Zabbix tarkvara, igasse operatsioonisüsteemi on paigaldatud Zabbix agent, mida juhib seadistusfail /etc/zabbix/zabbix_agentd.conf. Zabbix server asub eemal, aadressil 84.50.96.138 ja pöördub monitooritavate poole kahel viisil<br /> <br /> * üle ülikooli OpenVPN võrgu otse kõigi operatsioonisüsteemide poole, et monitoorida süsteemi üldisi omadusi (failisüsteemide täituvus, cpu load jne)<br /> * üle ülikooli OpenVPN võrgu otse mõlema füüsilise arvuti poole üle IPMI liidese, et monitoorida füüsilise riistvara omadusi (nt emaplaadi temperatuur)<br /> * üle avaliku võrgu, et monitoorida http://fw.ims.ut.ee/ veebikoha kättesaadavust<br /> <br /> Zabbix tarkvara kasutamist on kirjeldatud aadressil http://www.auul.pri.ee/wiki/Zabbix_kasutamine_Debian_operatsioonis%C3%BCsteemiga.<br /> <br /> ===Kasulikud lisamaterjalid===<br /> <br /> * http://www.auul.pri.ee/wiki/NUT_tarkvara_kasutamine_Debian_Squeeze_operatsioonis%C3%BCsteemiga<br /> * http://www.auul.pri.ee/wiki/EMC_Networker_client<br /> * http://www.auul.pri.ee/wiki/Tarkvaralise_mdadm_RAID_kasutamine_operatsioonis%C3%BCsteemiga_Debian_Squeeze</div> Imreoolberg https://ims.ut.ee/index.php?title=Eab_infra&diff=8957 Eab infra 2011-11-02T08:57:09Z <p>Imreoolberg: /* fw.ims guest */</p> <hr /> <div>===Sissejuhatus===<br /> <br /> Käesoleva teksti eesmärgiks on kirjeldada EAP projekti juures toimuvat riistvara, võrgu, operatsioonisüsteemi keskkonna ja rakendustarkvara kasutamist.<br /> <br /> ===Riistvara===<br /> <br /> Projektis kasutatakse sellist riistavara<br /> <br /> * Powerware 5115 UPS<br /> * 2 x S3420GP emaplaadiga Ordi arvutid<br /> * mõlemad arvutid sisaldavad 4 x 2 TB kõvakettaid<br /> * generic kohtvõrgu kommutaator<br /> <br /> ===Tarkvara===<br /> <br /> Projekti arvutites kasutatakse järgmist tarkvara<br /> <br /> * Debian Squeeze v. 6 64bit operatsioonisüsteem<br /> * XEN v. 4 virtualiseerimise tarkvara<br /> * Apache veebiserver<br /> * PostgreSQL andmebaas<br /> * Zabbix monitooringutarkvara<br /> * OpenVPN kaugligipääsu tarkvara<br /> * rsnapshot ja EMC Networker varundustarkvara<br /> * plokkseadmete haldamiseks mdadm ja LVM tarkvara<br /> <br /> ===Võrgutopoloogia===<br /> <br /> _____<br /> 195.80.35.1 | | ülikooli võrguseade<br /> ----------------------------------------------|----------------------------------------------| |<br /> | |_____|<br /> | | 172.17.35.1<br /> | 195.80.35.96 |<br /> | 2001:bb8:2002:2300:7231:40ff:fe03:5128 | <br /> _____ __|__ |<br /> | | | | |<br /> | F | | V | | <br /> |_____| at-dom0.ims |_____| fw.ims |<br /> | os: 172.17.35.21 | 172.17.35.18 |<br /> | 2001:bb8:2002:2300:21e:67ff:fe03:c3c0 | 2001:bb8:2002:2300:7221:17ff:fe03:5018 |<br /> | impi: 172.17.35.20 | |<br /> --|-------------------------------|-------------------|-----------------------|-------------------------|------ <br /> | |<br /> __|__ __|__<br /> | | | |<br /> | F | | V |<br /> |_____| |_____|<br /> <br /> varundus.ims eap.ims<br /> os: 172.17.35.19 172.17.35.22<br /> 2001:bb8:2002:2300:21e:67ff:fe03:a0f9 2001:bb8:2002:2300:7221:17ff:fe03:5022<br /> ipmi: 172.17.35.5<br /> <br /> kus<br /> <br /> * at-dom0.ims - füüsiline virtualiseerimise arvuti<br /> * varundus.ims - füüsiline varunduse arvuti<br /> * fw.ims (fw.ims.ut.ee) - virtuaalne arvuti<br /> * eap.ims - virtuaalne arvuti<br /> <br /> Märkused<br /> <br /> * Füüsilistel arvutitel on lisaks operatsioonisüsteemi ip aadressile ka füüsilise riistvara kaughalduse ipmi aadress<br /> * Operatsioonisüsteemid omandavad automaatselt oma mac aadresside abil ipv6 aadressid, neid kasutatakse EMC Networkeriga varundamisel<br /> * 172.17.35 võrgu arvutitest 195.80.35.96 poole pöördudes toimub asümmeetriline ruuting (kuna ülikooli võrguseade ei tee 172.17.35 -&gt; 195.80.35.1 nat teisendust)<br /> <br /> ===Riistvara kaughaldus===<br /> <br /> Riistvaraliste arvutite kaughalduseks kasutatakse IMPI protokolli onboard BMC kontrolliriga suhtlemiseks. Muu hulgas võimaldab see ligipääsu arvuti BIOSile ning virtuaalse järjestikpordi kaudu serial konsoolile (st operatsioonisüsteemile). IPMI kasutamist on kirjeldatud aadressil http://kuutorvaja.eenet.ee/wiki/HP_BladeSystem_c7000_seadmeriiul#IPMI_kasutamine<br /> <br /> ===Plokkseadmete haldamine===<br /> <br /> Plokkseadmete haldamiseks kasutatakse mdadm ja LVM tarkvara. Mõlemas füüsilises arvutis töötavad neli samade parameetritega kõvaketast on ühendatud RAID massiividesse; RAID ressurssi hallatakse edasi LVM abil kasutamiseks failisüsteemide ja saaleala jaoks. mdadm kasutamist on kirjeldatud aadressil http://www.auul.pri.ee/wiki/Tarkvaralise_mdadm_RAID_kasutamine_operatsioonis%C3%BCsteemiga_Debian_Squeeze ja LVM kasutamist aadressil http://kuutorvaja.eenet.ee/wiki/LVM.<br /> <br /> ===Virtualiseerimine===<br /> <br /> Efektiivsemaks ja paindlikumaks riistavaralise ressursi kasutamiseks on teenusserverid eap.ims ja fw.ims juurutatud virtuaalsete arvutitena. Neile saab kasutamiseks anda sobiva hulga protsessori, mälu, plokkseadme ja võrguressurssi. Projektis kasutatakse XEN virtualiseerimise tarkvara, mille kasutamist on kirjeldatud nt aadressidel<br /> <br /> * http://www.auul.pri.ee/wiki/Xen_ja_Debian_Squeeze<br /> * http://kuutorvaja.eenet.ee/wiki/Unix_keskkonna_administreerimine#Virtualiseerimine<br /> <br /> ====XEN host====<br /> <br /> XEN hostile vastav operatsioonisüsteemi eksemplar töötab füüsilisel riistvaral ja selle seest tõimub virtuaalsete arvutite juhtimine. Kui välja arvata XEN hosti alglaaduri seadistused ja mõned virtualiseerimisega seotud protsessid on tegu tavalise Debian Squeeze operatsioonisüsteemiga. <br /> <br /> ====XEN guest====<br /> <br /> XEN guestid on virtuaalsed operatsioonisüsteemid, mis töötavad XEN hosti kontrolli all ja mis kasutavad XEN hostist neile eraldatud ressursse.<br /> <br /> ===at-dom0 host===<br /> <br /> ====mdadm kasutamine====<br /> <br /> Neli füüsilist kõvaketast on partitsioneeritud sarnaselt<br /> <br /> root@at-dom0:~# parted /dev/sda p<br /> Model: ATA WDC WD2003FYYS-0 (scsi)<br /> Disk /dev/sda: 2000GB<br /> Sector size (logical/physical): 512B/512B<br /> Partition Table: msdos<br /> <br /> Number Start End Size Type File system Flags<br /> 1 1049kB 269MB 268MB primary ext3 boot<br /> 2 269MB 69.0GB 68.7GB primary<br /> 3 69.0GB 1169GB 1100GB primary<br /> <br /> mdadm abil on <br /> <br /> * kõigi kõvaketaste esimesed partitsioonid ühendatud /dev/md/boot raid1 lülitusse (at-dom0 operatsioonisüsteemi jaoks)<br /> * kõigi kõvaketaste teised partitsioonid ühendatud /dev/md/system raid5 lülitusse (at-dom0 operatsioonisüsteemi jaoks)<br /> * kõigi kõvaketaste teised partitsioonid ühendatud /dev/md/data raid5 lülitusse (virtuaalsete arvutite jaoks)<br /> <br /> ====LVM kasutamine====<br /> <br /> at-dom0 enda operatsioonisüsteemi jaoks kasutuses sellised plokkseadmed<br /> <br /> * /boot - /dev/md/boot (mdadm ressurss)<br /> * / - /dev/system/root (LVM ressurss)<br /> <br /> at-dom0.ims arvutil töötavad kaks virtuaalset arvutit<br /> <br /> ====Võrgu kasutamine====<br /> <br /> Kaks arvuti võrgukaarti on kasutusel selliselt<br /> <br /> * peth0 - esimene füüsiline võrgukaart<br /> * peth1 - teine füüsiline võrgukaart<br /> * eth0 - esimest füüsilist võrgukaarti sisaldav sild (fiktiivne aadress 10.101.101.21)<br /> * eth1 - teist füüsilist võrgukaarti sisaldav sild (172.17.35.21)<br /> * vaikelüüs 172.17.35.1<br /> <br /> ===eap.ims guest===<br /> <br /> eap.ims kasutab selliseid hosti ressursse<br /> <br /> Plokkseade<br /> <br /> /dev/data/eap_root<br /> /dev/data/eap_home<br /> /dev/data/eap_data_backup<br /> /dev/data/eap_data_postgresql<br /> /dev/data/eap_swap<br /> <br /> Võrk<br /> <br /> guesti seade eth0 (172.17.35.22) on muu võrguga ühenduses hosti eth1 silla kaudu<br /> <br /> Põhiline eap.ims arvutis töötav rakendustarkvara on PostgreSQL v. 9.0 andmebaas<br /> <br /> /etc/postgresql/9.0/main - seadistusfailid<br /> /var/log/postgresql - logi<br /> /data/postgresql (ehk /var/lib/postgresql/9.0/main) - andmeklaster<br /> /data/backup/postgresql/archive-logs - wal logid<br /> <br /> PostgreSQL andmebaasi kasutamist on kirjeldatud aadressil http://www.auul.pri.ee/wiki/PostgreSQL.<br /> <br /> ===fw.ims guest===<br /> <br /> fw.ims kasutab selliseid hosti ressursse<br /> <br /> Plokkseade<br /> <br /> /dev/data/fw_root<br /> /dev/data/fw_home<br /> /dev/data/fw_data_backup<br /> /dev/data/fw_data_postgresql<br /> /dev/data/fw_swap <br /> <br /> Võrk<br /> <br /> guesti seade eth0 (193.40.35.96) on muu võrguga ühenduses hosti eth0 silla kaudu<br /> guesti seade eth1 (172.17.35.18) on muu võrguga ühenduses hosti eth1 silla kaudu<br /> <br /> Peamised fw.ims arvutis töötavad rakendusprogrammid on<br /> <br /> * PostgreSQL v. 9.0 andmebaas<br /> <br /> /etc/postgresql/9.0/main - seadistusfailid<br /> /var/log/postgresql - logi<br /> /data/postgresql (ehk /var/lib/postgresql/9.0/main) - andmeklaster<br /> /data/backup/postgresql/archive-logs - wal logi<br /> <br /> * Apache veebiserver<br /> <br /> /etc/apache2 - seadistusfailid<br /> /var/log/apache2 - logid<br /> <br /> * NFS failiserver, mis jagab /home kataloogi eap.ims arvutisse<br /> * fw.ims arvutile on külge ühendatud sellised CIFS failisüsteemid üle võrgu<br /> <br /> //172.17.35.14/Data -&gt; /opt/postgres/Pardata<br /> //172.17.35.222/Users/Hitachi/Desktop/Pildid -&gt; /opt/postgres/Sempildid<br /> //172.17.35.222/eap4space -&gt; /opt/postgres/eap4space<br /> <br /> ===varundus.ims===<br /> <br /> ====mdadm kasutamine====<br /> <br /> Neli füüsilist kõvaketast on partitsioneeritud sarnaselt<br /> <br /> root@varundus:~# parted /dev/sda p<br /> Model: ATA WDC WD2003FYYS-0 (scsi)<br /> Disk /dev/sda: 2000GB<br /> Sector size (logical/physical): 512B/512B<br /> Partition Table: msdos<br /> <br /> Number Start End Size Type File system Flags<br /> 1 1049kB 269MB 268MB primary ext3 boot<br /> 2 269MB 2000GB 2000GB primary<br /> <br /> mdadm abil on<br /> <br /> * kõigi kõvaketaste esimesed partitsioonid ühendatud /dev/md/boot raid1 lülitusse<br /> * kõigi kõvaketaste teised partitsioonid ühendatud /dev/md/system raid5 lülitusse<br /> <br /> ====LVM kasutamine====<br /> <br /> varundus arvutis kasutuses sellised plokkseadmed<br /> <br /> * /boot - /dev/md/boot (mdadm ressurss)<br /> * / - /dev/system/root (LVM ressurss)<br /> * /srv/backup - /dev/system/backup (LVM ressurss)<br /> <br /> ====Võrgu kasutamine====<br /> <br /> Kaks arvuti võrgukaarti on kasutusel selliselt<br /> <br /> * eth0 - 172.17.35.19<br /> * vaikelüüs 172.17.35.1<br /> <br /> ====rsnapshot kasutamine====<br /> <br /> rsnapshot tarkvara tööd juhib seadistusfail /etc/rsnapshot.conf ja varundatud andmed asuvad kataloogis /srv/backup/rsnapshot avutite nimelistes kataloogides. Üldiselt varundatakse kõiki failisüsteeme välja arvatud mõned kataloogid<br /> <br /> /dev<br /> /proc<br /> /tmp<br /> /sys<br /> /mnt<br /> <br /> Varundatud andmeid roteeritakse selliselt, et säilitatakse seisud<br /> <br /> * viimased 28 päeva<br /> * viimased 12 nädalat<br /> * viimased 24 kuud<br /> <br /> rsnapshot tarkvara kasutamist on kirjeldatud aadressil http://www.auul.pri.ee/wiki/Rsnapshot.<br /> <br /> Full backup: kord nädalas nublu.chem.ut.ee 2-le eraldi kõvakettale (mitteredundantsed), säilitatakse 4-5 viimast täiskoopiat.<br /> <br /> Full backupi ligikaudne maht (24.01.2011): 35 GB<br /> <br /> <br /> Iga päeva WAL logid (säilitatakse kahe full backupi vahel tekkinud WAL logid (nädala WAL logide ligikaudne maht (24.01.2011): 18 GB<br /> <br /> Tarmo virtuaalserverist hetkel backuppi ei tehta.<br /> <br /> ===Monitooring===<br /> <br /> Monitooringuks kasutatakse Zabbix tarkvara, igasse operatsioonisüsteemi on paigaldatud Zabbix agent, mida juhib seadistusfail /etc/zabbix/zabbix_agentd.conf. Zabbix server asub eemal, aadressil 84.50.96.138 ja pöördub monitooritavate poole kahel viisil<br /> <br /> * üle ülikooli OpenVPN võrgu otse kõigi operatsioonisüsteemide poole, et monitoorida süsteemi üldisi omadusi (failisüsteemide täituvus, cpu load jne)<br /> * üle ülikooli OpenVPN võrgu otse mõlema füüsilise arvuti poole üle IPMI liidese, et monitoorida füüsilise riistvara omadusi (nt emaplaadi temperatuur)<br /> * üle avaliku võrgu, et monitoorida http://fw.ims.ut.ee/ veebikoha kättesaadavust<br /> <br /> Zabbix tarkvara kasutamist on kirjeldatud aadressil http://www.auul.pri.ee/wiki/Zabbix_kasutamine_Debian_operatsioonis%C3%BCsteemiga.<br /> <br /> ===Kasulikud lisamaterjalid===<br /> <br /> * http://www.auul.pri.ee/wiki/NUT_tarkvara_kasutamine_Debian_Squeeze_operatsioonis%C3%BCsteemiga<br /> * http://www.auul.pri.ee/wiki/EMC_Networker_client<br /> * http://www.auul.pri.ee/wiki/Tarkvaralise_mdadm_RAID_kasutamine_operatsioonis%C3%BCsteemiga_Debian_Squeeze</div> Imreoolberg https://ims.ut.ee/index.php?title=Eab_infra&diff=8956 Eab infra 2011-11-02T08:55:51Z <p>Imreoolberg: /* eap.ims guest */</p> <hr /> <div>===Sissejuhatus===<br /> <br /> Käesoleva teksti eesmärgiks on kirjeldada EAP projekti juures toimuvat riistvara, võrgu, operatsioonisüsteemi keskkonna ja rakendustarkvara kasutamist.<br /> <br /> ===Riistvara===<br /> <br /> Projektis kasutatakse sellist riistavara<br /> <br /> * Powerware 5115 UPS<br /> * 2 x S3420GP emaplaadiga Ordi arvutid<br /> * mõlemad arvutid sisaldavad 4 x 2 TB kõvakettaid<br /> * generic kohtvõrgu kommutaator<br /> <br /> ===Tarkvara===<br /> <br /> Projekti arvutites kasutatakse järgmist tarkvara<br /> <br /> * Debian Squeeze v. 6 64bit operatsioonisüsteem<br /> * XEN v. 4 virtualiseerimise tarkvara<br /> * Apache veebiserver<br /> * PostgreSQL andmebaas<br /> * Zabbix monitooringutarkvara<br /> * OpenVPN kaugligipääsu tarkvara<br /> * rsnapshot ja EMC Networker varundustarkvara<br /> * plokkseadmete haldamiseks mdadm ja LVM tarkvara<br /> <br /> ===Võrgutopoloogia===<br /> <br /> _____<br /> 195.80.35.1 | | ülikooli võrguseade<br /> ----------------------------------------------|----------------------------------------------| |<br /> | |_____|<br /> | | 172.17.35.1<br /> | 195.80.35.96 |<br /> | 2001:bb8:2002:2300:7231:40ff:fe03:5128 | <br /> _____ __|__ |<br /> | | | | |<br /> | F | | V | | <br /> |_____| at-dom0.ims |_____| fw.ims |<br /> | os: 172.17.35.21 | 172.17.35.18 |<br /> | 2001:bb8:2002:2300:21e:67ff:fe03:c3c0 | 2001:bb8:2002:2300:7221:17ff:fe03:5018 |<br /> | impi: 172.17.35.20 | |<br /> --|-------------------------------|-------------------|-----------------------|-------------------------|------ <br /> | |<br /> __|__ __|__<br /> | | | |<br /> | F | | V |<br /> |_____| |_____|<br /> <br /> varundus.ims eap.ims<br /> os: 172.17.35.19 172.17.35.22<br /> 2001:bb8:2002:2300:21e:67ff:fe03:a0f9 2001:bb8:2002:2300:7221:17ff:fe03:5022<br /> ipmi: 172.17.35.5<br /> <br /> kus<br /> <br /> * at-dom0.ims - füüsiline virtualiseerimise arvuti<br /> * varundus.ims - füüsiline varunduse arvuti<br /> * fw.ims (fw.ims.ut.ee) - virtuaalne arvuti<br /> * eap.ims - virtuaalne arvuti<br /> <br /> Märkused<br /> <br /> * Füüsilistel arvutitel on lisaks operatsioonisüsteemi ip aadressile ka füüsilise riistvara kaughalduse ipmi aadress<br /> * Operatsioonisüsteemid omandavad automaatselt oma mac aadresside abil ipv6 aadressid, neid kasutatakse EMC Networkeriga varundamisel<br /> * 172.17.35 võrgu arvutitest 195.80.35.96 poole pöördudes toimub asümmeetriline ruuting (kuna ülikooli võrguseade ei tee 172.17.35 -&gt; 195.80.35.1 nat teisendust)<br /> <br /> ===Riistvara kaughaldus===<br /> <br /> Riistvaraliste arvutite kaughalduseks kasutatakse IMPI protokolli onboard BMC kontrolliriga suhtlemiseks. Muu hulgas võimaldab see ligipääsu arvuti BIOSile ning virtuaalse järjestikpordi kaudu serial konsoolile (st operatsioonisüsteemile). IPMI kasutamist on kirjeldatud aadressil http://kuutorvaja.eenet.ee/wiki/HP_BladeSystem_c7000_seadmeriiul#IPMI_kasutamine<br /> <br /> ===Plokkseadmete haldamine===<br /> <br /> Plokkseadmete haldamiseks kasutatakse mdadm ja LVM tarkvara. Mõlemas füüsilises arvutis töötavad neli samade parameetritega kõvaketast on ühendatud RAID massiividesse; RAID ressurssi hallatakse edasi LVM abil kasutamiseks failisüsteemide ja saaleala jaoks. mdadm kasutamist on kirjeldatud aadressil http://www.auul.pri.ee/wiki/Tarkvaralise_mdadm_RAID_kasutamine_operatsioonis%C3%BCsteemiga_Debian_Squeeze ja LVM kasutamist aadressil http://kuutorvaja.eenet.ee/wiki/LVM.<br /> <br /> ===Virtualiseerimine===<br /> <br /> Efektiivsemaks ja paindlikumaks riistavaralise ressursi kasutamiseks on teenusserverid eap.ims ja fw.ims juurutatud virtuaalsete arvutitena. Neile saab kasutamiseks anda sobiva hulga protsessori, mälu, plokkseadme ja võrguressurssi. Projektis kasutatakse XEN virtualiseerimise tarkvara, mille kasutamist on kirjeldatud nt aadressidel<br /> <br /> * http://www.auul.pri.ee/wiki/Xen_ja_Debian_Squeeze<br /> * http://kuutorvaja.eenet.ee/wiki/Unix_keskkonna_administreerimine#Virtualiseerimine<br /> <br /> ====XEN host====<br /> <br /> XEN hostile vastav operatsioonisüsteemi eksemplar töötab füüsilisel riistvaral ja selle seest tõimub virtuaalsete arvutite juhtimine. Kui välja arvata XEN hosti alglaaduri seadistused ja mõned virtualiseerimisega seotud protsessid on tegu tavalise Debian Squeeze operatsioonisüsteemiga. <br /> <br /> ====XEN guest====<br /> <br /> XEN guestid on virtuaalsed operatsioonisüsteemid, mis töötavad XEN hosti kontrolli all ja mis kasutavad XEN hostist neile eraldatud ressursse.<br /> <br /> ===at-dom0 host===<br /> <br /> ====mdadm kasutamine====<br /> <br /> Neli füüsilist kõvaketast on partitsioneeritud sarnaselt<br /> <br /> root@at-dom0:~# parted /dev/sda p<br /> Model: ATA WDC WD2003FYYS-0 (scsi)<br /> Disk /dev/sda: 2000GB<br /> Sector size (logical/physical): 512B/512B<br /> Partition Table: msdos<br /> <br /> Number Start End Size Type File system Flags<br /> 1 1049kB 269MB 268MB primary ext3 boot<br /> 2 269MB 69.0GB 68.7GB primary<br /> 3 69.0GB 1169GB 1100GB primary<br /> <br /> mdadm abil on <br /> <br /> * kõigi kõvaketaste esimesed partitsioonid ühendatud /dev/md/boot raid1 lülitusse (at-dom0 operatsioonisüsteemi jaoks)<br /> * kõigi kõvaketaste teised partitsioonid ühendatud /dev/md/system raid5 lülitusse (at-dom0 operatsioonisüsteemi jaoks)<br /> * kõigi kõvaketaste teised partitsioonid ühendatud /dev/md/data raid5 lülitusse (virtuaalsete arvutite jaoks)<br /> <br /> ====LVM kasutamine====<br /> <br /> at-dom0 enda operatsioonisüsteemi jaoks kasutuses sellised plokkseadmed<br /> <br /> * /boot - /dev/md/boot (mdadm ressurss)<br /> * / - /dev/system/root (LVM ressurss)<br /> <br /> at-dom0.ims arvutil töötavad kaks virtuaalset arvutit<br /> <br /> ====Võrgu kasutamine====<br /> <br /> Kaks arvuti võrgukaarti on kasutusel selliselt<br /> <br /> * peth0 - esimene füüsiline võrgukaart<br /> * peth1 - teine füüsiline võrgukaart<br /> * eth0 - esimest füüsilist võrgukaarti sisaldav sild (fiktiivne aadress 10.101.101.21)<br /> * eth1 - teist füüsilist võrgukaarti sisaldav sild (172.17.35.21)<br /> * vaikelüüs 172.17.35.1<br /> <br /> ===eap.ims guest===<br /> <br /> eap.ims kasutab selliseid hosti ressursse<br /> <br /> Plokkseade<br /> <br /> /dev/data/eap_root<br /> /dev/data/eap_home<br /> /dev/data/eap_data_backup<br /> /dev/data/eap_data_postgresql<br /> /dev/data/eap_swap<br /> <br /> Võrk<br /> <br /> guesti seade eth0 (172.17.35.22) on muu võrguga ühenduses hosti eth1 silla kaudu<br /> <br /> Põhiline eap.ims arvutis töötav rakendustarkvara on PostgreSQL v. 9.0 andmebaas<br /> <br /> /etc/postgresql/9.0/main - seadistusfailid<br /> /var/log/postgresql - logi<br /> /data/postgresql (ehk /var/lib/postgresql/9.0/main) - andmeklaster<br /> /data/backup/postgresql/archive-logs - wal logid<br /> <br /> PostgreSQL andmebaasi kasutamist on kirjeldatud aadressil http://www.auul.pri.ee/wiki/PostgreSQL.<br /> <br /> ===fw.ims guest===<br /> <br /> fw.ims kasutab selliseid hosti ressursse<br /> <br /> Plokkseade<br /> <br /> /dev/data/fw_root<br /> /dev/data/fw_home<br /> /dev/data/fw_data_backup<br /> /dev/data/fw_data_postgresql<br /> /dev/data/fw_swap <br /> <br /> Võrk<br /> <br /> guesti seade eth0 (193.40.35.96) on muu võrguga ühenduses hosti eth0 silla kaudu<br /> guesti seade eth1 (172.17.35.18) on muu võrguga ühenduses hosti eth1 silla kaudu<br /> <br /> Peamised fw.ims arvutis töötavad rakendusprogrammid on<br /> <br /> * PostgreSQL v. 9.0 andmebaas<br /> <br /> /etc/postgresql/9.0/main - seadistusfailid<br /> /var/log/postgresql - logi<br /> /data/postgresql (ehk /var/lib/postgresql/9.0/main) - andmeklaster<br /> /data/backup/postgresql/archive-logs - wal logi<br /> <br /> * Apache veebiserver<br /> <br /> /etc/apache2 - seadistusfailid<br /> /var/log/apache2 - logid<br /> <br /> * NFS failiserver, mis jagab /home kataloogi eap.ims arvutisse<br /> <br /> ===varundus.ims===<br /> <br /> ====mdadm kasutamine====<br /> <br /> Neli füüsilist kõvaketast on partitsioneeritud sarnaselt<br /> <br /> root@varundus:~# parted /dev/sda p<br /> Model: ATA WDC WD2003FYYS-0 (scsi)<br /> Disk /dev/sda: 2000GB<br /> Sector size (logical/physical): 512B/512B<br /> Partition Table: msdos<br /> <br /> Number Start End Size Type File system Flags<br /> 1 1049kB 269MB 268MB primary ext3 boot<br /> 2 269MB 2000GB 2000GB primary<br /> <br /> mdadm abil on<br /> <br /> * kõigi kõvaketaste esimesed partitsioonid ühendatud /dev/md/boot raid1 lülitusse<br /> * kõigi kõvaketaste teised partitsioonid ühendatud /dev/md/system raid5 lülitusse<br /> <br /> ====LVM kasutamine====<br /> <br /> varundus arvutis kasutuses sellised plokkseadmed<br /> <br /> * /boot - /dev/md/boot (mdadm ressurss)<br /> * / - /dev/system/root (LVM ressurss)<br /> * /srv/backup - /dev/system/backup (LVM ressurss)<br /> <br /> ====Võrgu kasutamine====<br /> <br /> Kaks arvuti võrgukaarti on kasutusel selliselt<br /> <br /> * eth0 - 172.17.35.19<br /> * vaikelüüs 172.17.35.1<br /> <br /> ====rsnapshot kasutamine====<br /> <br /> rsnapshot tarkvara tööd juhib seadistusfail /etc/rsnapshot.conf ja varundatud andmed asuvad kataloogis /srv/backup/rsnapshot avutite nimelistes kataloogides. Üldiselt varundatakse kõiki failisüsteeme välja arvatud mõned kataloogid<br /> <br /> /dev<br /> /proc<br /> /tmp<br /> /sys<br /> /mnt<br /> <br /> Varundatud andmeid roteeritakse selliselt, et säilitatakse seisud<br /> <br /> * viimased 28 päeva<br /> * viimased 12 nädalat<br /> * viimased 24 kuud<br /> <br /> rsnapshot tarkvara kasutamist on kirjeldatud aadressil http://www.auul.pri.ee/wiki/Rsnapshot.<br /> <br /> Full backup: kord nädalas nublu.chem.ut.ee 2-le eraldi kõvakettale (mitteredundantsed), säilitatakse 4-5 viimast täiskoopiat.<br /> <br /> Full backupi ligikaudne maht (24.01.2011): 35 GB<br /> <br /> <br /> Iga päeva WAL logid (säilitatakse kahe full backupi vahel tekkinud WAL logid (nädala WAL logide ligikaudne maht (24.01.2011): 18 GB<br /> <br /> Tarmo virtuaalserverist hetkel backuppi ei tehta.<br /> <br /> ===Monitooring===<br /> <br /> Monitooringuks kasutatakse Zabbix tarkvara, igasse operatsioonisüsteemi on paigaldatud Zabbix agent, mida juhib seadistusfail /etc/zabbix/zabbix_agentd.conf. Zabbix server asub eemal, aadressil 84.50.96.138 ja pöördub monitooritavate poole kahel viisil<br /> <br /> * üle ülikooli OpenVPN võrgu otse kõigi operatsioonisüsteemide poole, et monitoorida süsteemi üldisi omadusi (failisüsteemide täituvus, cpu load jne)<br /> * üle ülikooli OpenVPN võrgu otse mõlema füüsilise arvuti poole üle IPMI liidese, et monitoorida füüsilise riistvara omadusi (nt emaplaadi temperatuur)<br /> * üle avaliku võrgu, et monitoorida http://fw.ims.ut.ee/ veebikoha kättesaadavust<br /> <br /> Zabbix tarkvara kasutamist on kirjeldatud aadressil http://www.auul.pri.ee/wiki/Zabbix_kasutamine_Debian_operatsioonis%C3%BCsteemiga.<br /> <br /> ===Kasulikud lisamaterjalid===<br /> <br /> * http://www.auul.pri.ee/wiki/NUT_tarkvara_kasutamine_Debian_Squeeze_operatsioonis%C3%BCsteemiga<br /> * http://www.auul.pri.ee/wiki/EMC_Networker_client<br /> * http://www.auul.pri.ee/wiki/Tarkvaralise_mdadm_RAID_kasutamine_operatsioonis%C3%BCsteemiga_Debian_Squeeze</div> Imreoolberg https://ims.ut.ee/index.php?title=Eab_infra&diff=8955 Eab infra 2011-11-02T08:55:39Z <p>Imreoolberg: /* fw.ims guest */</p> <hr /> <div>===Sissejuhatus===<br /> <br /> Käesoleva teksti eesmärgiks on kirjeldada EAP projekti juures toimuvat riistvara, võrgu, operatsioonisüsteemi keskkonna ja rakendustarkvara kasutamist.<br /> <br /> ===Riistvara===<br /> <br /> Projektis kasutatakse sellist riistavara<br /> <br /> * Powerware 5115 UPS<br /> * 2 x S3420GP emaplaadiga Ordi arvutid<br /> * mõlemad arvutid sisaldavad 4 x 2 TB kõvakettaid<br /> * generic kohtvõrgu kommutaator<br /> <br /> ===Tarkvara===<br /> <br /> Projekti arvutites kasutatakse järgmist tarkvara<br /> <br /> * Debian Squeeze v. 6 64bit operatsioonisüsteem<br /> * XEN v. 4 virtualiseerimise tarkvara<br /> * Apache veebiserver<br /> * PostgreSQL andmebaas<br /> * Zabbix monitooringutarkvara<br /> * OpenVPN kaugligipääsu tarkvara<br /> * rsnapshot ja EMC Networker varundustarkvara<br /> * plokkseadmete haldamiseks mdadm ja LVM tarkvara<br /> <br /> ===Võrgutopoloogia===<br /> <br /> _____<br /> 195.80.35.1 | | ülikooli võrguseade<br /> ----------------------------------------------|----------------------------------------------| |<br /> | |_____|<br /> | | 172.17.35.1<br /> | 195.80.35.96 |<br /> | 2001:bb8:2002:2300:7231:40ff:fe03:5128 | <br /> _____ __|__ |<br /> | | | | |<br /> | F | | V | | <br /> |_____| at-dom0.ims |_____| fw.ims |<br /> | os: 172.17.35.21 | 172.17.35.18 |<br /> | 2001:bb8:2002:2300:21e:67ff:fe03:c3c0 | 2001:bb8:2002:2300:7221:17ff:fe03:5018 |<br /> | impi: 172.17.35.20 | |<br /> --|-------------------------------|-------------------|-----------------------|-------------------------|------ <br /> | |<br /> __|__ __|__<br /> | | | |<br /> | F | | V |<br /> |_____| |_____|<br /> <br /> varundus.ims eap.ims<br /> os: 172.17.35.19 172.17.35.22<br /> 2001:bb8:2002:2300:21e:67ff:fe03:a0f9 2001:bb8:2002:2300:7221:17ff:fe03:5022<br /> ipmi: 172.17.35.5<br /> <br /> kus<br /> <br /> * at-dom0.ims - füüsiline virtualiseerimise arvuti<br /> * varundus.ims - füüsiline varunduse arvuti<br /> * fw.ims (fw.ims.ut.ee) - virtuaalne arvuti<br /> * eap.ims - virtuaalne arvuti<br /> <br /> Märkused<br /> <br /> * Füüsilistel arvutitel on lisaks operatsioonisüsteemi ip aadressile ka füüsilise riistvara kaughalduse ipmi aadress<br /> * Operatsioonisüsteemid omandavad automaatselt oma mac aadresside abil ipv6 aadressid, neid kasutatakse EMC Networkeriga varundamisel<br /> * 172.17.35 võrgu arvutitest 195.80.35.96 poole pöördudes toimub asümmeetriline ruuting (kuna ülikooli võrguseade ei tee 172.17.35 -&gt; 195.80.35.1 nat teisendust)<br /> <br /> ===Riistvara kaughaldus===<br /> <br /> Riistvaraliste arvutite kaughalduseks kasutatakse IMPI protokolli onboard BMC kontrolliriga suhtlemiseks. Muu hulgas võimaldab see ligipääsu arvuti BIOSile ning virtuaalse järjestikpordi kaudu serial konsoolile (st operatsioonisüsteemile). IPMI kasutamist on kirjeldatud aadressil http://kuutorvaja.eenet.ee/wiki/HP_BladeSystem_c7000_seadmeriiul#IPMI_kasutamine<br /> <br /> ===Plokkseadmete haldamine===<br /> <br /> Plokkseadmete haldamiseks kasutatakse mdadm ja LVM tarkvara. Mõlemas füüsilises arvutis töötavad neli samade parameetritega kõvaketast on ühendatud RAID massiividesse; RAID ressurssi hallatakse edasi LVM abil kasutamiseks failisüsteemide ja saaleala jaoks. mdadm kasutamist on kirjeldatud aadressil http://www.auul.pri.ee/wiki/Tarkvaralise_mdadm_RAID_kasutamine_operatsioonis%C3%BCsteemiga_Debian_Squeeze ja LVM kasutamist aadressil http://kuutorvaja.eenet.ee/wiki/LVM.<br /> <br /> ===Virtualiseerimine===<br /> <br /> Efektiivsemaks ja paindlikumaks riistavaralise ressursi kasutamiseks on teenusserverid eap.ims ja fw.ims juurutatud virtuaalsete arvutitena. Neile saab kasutamiseks anda sobiva hulga protsessori, mälu, plokkseadme ja võrguressurssi. Projektis kasutatakse XEN virtualiseerimise tarkvara, mille kasutamist on kirjeldatud nt aadressidel<br /> <br /> * http://www.auul.pri.ee/wiki/Xen_ja_Debian_Squeeze<br /> * http://kuutorvaja.eenet.ee/wiki/Unix_keskkonna_administreerimine#Virtualiseerimine<br /> <br /> ====XEN host====<br /> <br /> XEN hostile vastav operatsioonisüsteemi eksemplar töötab füüsilisel riistvaral ja selle seest tõimub virtuaalsete arvutite juhtimine. Kui välja arvata XEN hosti alglaaduri seadistused ja mõned virtualiseerimisega seotud protsessid on tegu tavalise Debian Squeeze operatsioonisüsteemiga. <br /> <br /> ====XEN guest====<br /> <br /> XEN guestid on virtuaalsed operatsioonisüsteemid, mis töötavad XEN hosti kontrolli all ja mis kasutavad XEN hostist neile eraldatud ressursse.<br /> <br /> ===at-dom0 host===<br /> <br /> ====mdadm kasutamine====<br /> <br /> Neli füüsilist kõvaketast on partitsioneeritud sarnaselt<br /> <br /> root@at-dom0:~# parted /dev/sda p<br /> Model: ATA WDC WD2003FYYS-0 (scsi)<br /> Disk /dev/sda: 2000GB<br /> Sector size (logical/physical): 512B/512B<br /> Partition Table: msdos<br /> <br /> Number Start End Size Type File system Flags<br /> 1 1049kB 269MB 268MB primary ext3 boot<br /> 2 269MB 69.0GB 68.7GB primary<br /> 3 69.0GB 1169GB 1100GB primary<br /> <br /> mdadm abil on <br /> <br /> * kõigi kõvaketaste esimesed partitsioonid ühendatud /dev/md/boot raid1 lülitusse (at-dom0 operatsioonisüsteemi jaoks)<br /> * kõigi kõvaketaste teised partitsioonid ühendatud /dev/md/system raid5 lülitusse (at-dom0 operatsioonisüsteemi jaoks)<br /> * kõigi kõvaketaste teised partitsioonid ühendatud /dev/md/data raid5 lülitusse (virtuaalsete arvutite jaoks)<br /> <br /> ====LVM kasutamine====<br /> <br /> at-dom0 enda operatsioonisüsteemi jaoks kasutuses sellised plokkseadmed<br /> <br /> * /boot - /dev/md/boot (mdadm ressurss)<br /> * / - /dev/system/root (LVM ressurss)<br /> <br /> at-dom0.ims arvutil töötavad kaks virtuaalset arvutit<br /> <br /> ====Võrgu kasutamine====<br /> <br /> Kaks arvuti võrgukaarti on kasutusel selliselt<br /> <br /> * peth0 - esimene füüsiline võrgukaart<br /> * peth1 - teine füüsiline võrgukaart<br /> * eth0 - esimest füüsilist võrgukaarti sisaldav sild (fiktiivne aadress 10.101.101.21)<br /> * eth1 - teist füüsilist võrgukaarti sisaldav sild (172.17.35.21)<br /> * vaikelüüs 172.17.35.1<br /> <br /> ===eap.ims guest===<br /> <br /> eap.ims kasutab selliseid hosti ressursse<br /> <br /> Plokkseade<br /> <br /> /dev/data/eap_root<br /> /dev/data/eap_home<br /> /dev/data/eap_data_backup<br /> /dev/data/eap_data_postgresql<br /> /dev/data/eap_swap<br /> <br /> Võrk<br /> <br /> guesti seade eth0 (172.17.35.22) on muu võrguga ühenduses hosti eth1 silla kaudu<br /> <br /> Põhiline eap.ims arvutis töötav rakendustarkvara on PostgreSQL v. 9.0 andmebaas<br /> <br /> * /etc/postgresql/9.0/main - seadistusfailid<br /> * /var/log/postgresql - logi<br /> * /data/postgresql (ehk /var/lib/postgresql/9.0/main) - andmeklaster<br /> * /data/backup/postgresql/archive-logs - wal logid<br /> <br /> PostgreSQL andmebaasi kasutamist on kirjeldatud aadressil http://www.auul.pri.ee/wiki/PostgreSQL.<br /> <br /> ===fw.ims guest===<br /> <br /> fw.ims kasutab selliseid hosti ressursse<br /> <br /> Plokkseade<br /> <br /> /dev/data/fw_root<br /> /dev/data/fw_home<br /> /dev/data/fw_data_backup<br /> /dev/data/fw_data_postgresql<br /> /dev/data/fw_swap <br /> <br /> Võrk<br /> <br /> guesti seade eth0 (193.40.35.96) on muu võrguga ühenduses hosti eth0 silla kaudu<br /> guesti seade eth1 (172.17.35.18) on muu võrguga ühenduses hosti eth1 silla kaudu<br /> <br /> Peamised fw.ims arvutis töötavad rakendusprogrammid on<br /> <br /> * PostgreSQL v. 9.0 andmebaas<br /> <br /> /etc/postgresql/9.0/main - seadistusfailid<br /> /var/log/postgresql - logi<br /> /data/postgresql (ehk /var/lib/postgresql/9.0/main) - andmeklaster<br /> /data/backup/postgresql/archive-logs - wal logi<br /> <br /> * Apache veebiserver<br /> <br /> /etc/apache2 - seadistusfailid<br /> /var/log/apache2 - logid<br /> <br /> * NFS failiserver, mis jagab /home kataloogi eap.ims arvutisse<br /> <br /> ===varundus.ims===<br /> <br /> ====mdadm kasutamine====<br /> <br /> Neli füüsilist kõvaketast on partitsioneeritud sarnaselt<br /> <br /> root@varundus:~# parted /dev/sda p<br /> Model: ATA WDC WD2003FYYS-0 (scsi)<br /> Disk /dev/sda: 2000GB<br /> Sector size (logical/physical): 512B/512B<br /> Partition Table: msdos<br /> <br /> Number Start End Size Type File system Flags<br /> 1 1049kB 269MB 268MB primary ext3 boot<br /> 2 269MB 2000GB 2000GB primary<br /> <br /> mdadm abil on<br /> <br /> * kõigi kõvaketaste esimesed partitsioonid ühendatud /dev/md/boot raid1 lülitusse<br /> * kõigi kõvaketaste teised partitsioonid ühendatud /dev/md/system raid5 lülitusse<br /> <br /> ====LVM kasutamine====<br /> <br /> varundus arvutis kasutuses sellised plokkseadmed<br /> <br /> * /boot - /dev/md/boot (mdadm ressurss)<br /> * / - /dev/system/root (LVM ressurss)<br /> * /srv/backup - /dev/system/backup (LVM ressurss)<br /> <br /> ====Võrgu kasutamine====<br /> <br /> Kaks arvuti võrgukaarti on kasutusel selliselt<br /> <br /> * eth0 - 172.17.35.19<br /> * vaikelüüs 172.17.35.1<br /> <br /> ====rsnapshot kasutamine====<br /> <br /> rsnapshot tarkvara tööd juhib seadistusfail /etc/rsnapshot.conf ja varundatud andmed asuvad kataloogis /srv/backup/rsnapshot avutite nimelistes kataloogides. Üldiselt varundatakse kõiki failisüsteeme välja arvatud mõned kataloogid<br /> <br /> /dev<br /> /proc<br /> /tmp<br /> /sys<br /> /mnt<br /> <br /> Varundatud andmeid roteeritakse selliselt, et säilitatakse seisud<br /> <br /> * viimased 28 päeva<br /> * viimased 12 nädalat<br /> * viimased 24 kuud<br /> <br /> rsnapshot tarkvara kasutamist on kirjeldatud aadressil http://www.auul.pri.ee/wiki/Rsnapshot.<br /> <br /> Full backup: kord nädalas nublu.chem.ut.ee 2-le eraldi kõvakettale (mitteredundantsed), säilitatakse 4-5 viimast täiskoopiat.<br /> <br /> Full backupi ligikaudne maht (24.01.2011): 35 GB<br /> <br /> <br /> Iga päeva WAL logid (säilitatakse kahe full backupi vahel tekkinud WAL logid (nädala WAL logide ligikaudne maht (24.01.2011): 18 GB<br /> <br /> Tarmo virtuaalserverist hetkel backuppi ei tehta.<br /> <br /> ===Monitooring===<br /> <br /> Monitooringuks kasutatakse Zabbix tarkvara, igasse operatsioonisüsteemi on paigaldatud Zabbix agent, mida juhib seadistusfail /etc/zabbix/zabbix_agentd.conf. Zabbix server asub eemal, aadressil 84.50.96.138 ja pöördub monitooritavate poole kahel viisil<br /> <br /> * üle ülikooli OpenVPN võrgu otse kõigi operatsioonisüsteemide poole, et monitoorida süsteemi üldisi omadusi (failisüsteemide täituvus, cpu load jne)<br /> * üle ülikooli OpenVPN võrgu otse mõlema füüsilise arvuti poole üle IPMI liidese, et monitoorida füüsilise riistvara omadusi (nt emaplaadi temperatuur)<br /> * üle avaliku võrgu, et monitoorida http://fw.ims.ut.ee/ veebikoha kättesaadavust<br /> <br /> Zabbix tarkvara kasutamist on kirjeldatud aadressil http://www.auul.pri.ee/wiki/Zabbix_kasutamine_Debian_operatsioonis%C3%BCsteemiga.<br /> <br /> ===Kasulikud lisamaterjalid===<br /> <br /> * http://www.auul.pri.ee/wiki/NUT_tarkvara_kasutamine_Debian_Squeeze_operatsioonis%C3%BCsteemiga<br /> * http://www.auul.pri.ee/wiki/EMC_Networker_client<br /> * http://www.auul.pri.ee/wiki/Tarkvaralise_mdadm_RAID_kasutamine_operatsioonis%C3%BCsteemiga_Debian_Squeeze</div> Imreoolberg https://ims.ut.ee/index.php?title=Eab_infra&diff=8954 Eab infra 2011-11-02T08:54:26Z <p>Imreoolberg: /* fw.ims guest */</p> <hr /> <div>===Sissejuhatus===<br /> <br /> Käesoleva teksti eesmärgiks on kirjeldada EAP projekti juures toimuvat riistvara, võrgu, operatsioonisüsteemi keskkonna ja rakendustarkvara kasutamist.<br /> <br /> ===Riistvara===<br /> <br /> Projektis kasutatakse sellist riistavara<br /> <br /> * Powerware 5115 UPS<br /> * 2 x S3420GP emaplaadiga Ordi arvutid<br /> * mõlemad arvutid sisaldavad 4 x 2 TB kõvakettaid<br /> * generic kohtvõrgu kommutaator<br /> <br /> ===Tarkvara===<br /> <br /> Projekti arvutites kasutatakse järgmist tarkvara<br /> <br /> * Debian Squeeze v. 6 64bit operatsioonisüsteem<br /> * XEN v. 4 virtualiseerimise tarkvara<br /> * Apache veebiserver<br /> * PostgreSQL andmebaas<br /> * Zabbix monitooringutarkvara<br /> * OpenVPN kaugligipääsu tarkvara<br /> * rsnapshot ja EMC Networker varundustarkvara<br /> * plokkseadmete haldamiseks mdadm ja LVM tarkvara<br /> <br /> ===Võrgutopoloogia===<br /> <br /> _____<br /> 195.80.35.1 | | ülikooli võrguseade<br /> ----------------------------------------------|----------------------------------------------| |<br /> | |_____|<br /> | | 172.17.35.1<br /> | 195.80.35.96 |<br /> | 2001:bb8:2002:2300:7231:40ff:fe03:5128 | <br /> _____ __|__ |<br /> | | | | |<br /> | F | | V | | <br /> |_____| at-dom0.ims |_____| fw.ims |<br /> | os: 172.17.35.21 | 172.17.35.18 |<br /> | 2001:bb8:2002:2300:21e:67ff:fe03:c3c0 | 2001:bb8:2002:2300:7221:17ff:fe03:5018 |<br /> | impi: 172.17.35.20 | |<br /> --|-------------------------------|-------------------|-----------------------|-------------------------|------ <br /> | |<br /> __|__ __|__<br /> | | | |<br /> | F | | V |<br /> |_____| |_____|<br /> <br /> varundus.ims eap.ims<br /> os: 172.17.35.19 172.17.35.22<br /> 2001:bb8:2002:2300:21e:67ff:fe03:a0f9 2001:bb8:2002:2300:7221:17ff:fe03:5022<br /> ipmi: 172.17.35.5<br /> <br /> kus<br /> <br /> * at-dom0.ims - füüsiline virtualiseerimise arvuti<br /> * varundus.ims - füüsiline varunduse arvuti<br /> * fw.ims (fw.ims.ut.ee) - virtuaalne arvuti<br /> * eap.ims - virtuaalne arvuti<br /> <br /> Märkused<br /> <br /> * Füüsilistel arvutitel on lisaks operatsioonisüsteemi ip aadressile ka füüsilise riistvara kaughalduse ipmi aadress<br /> * Operatsioonisüsteemid omandavad automaatselt oma mac aadresside abil ipv6 aadressid, neid kasutatakse EMC Networkeriga varundamisel<br /> * 172.17.35 võrgu arvutitest 195.80.35.96 poole pöördudes toimub asümmeetriline ruuting (kuna ülikooli võrguseade ei tee 172.17.35 -&gt; 195.80.35.1 nat teisendust)<br /> <br /> ===Riistvara kaughaldus===<br /> <br /> Riistvaraliste arvutite kaughalduseks kasutatakse IMPI protokolli onboard BMC kontrolliriga suhtlemiseks. Muu hulgas võimaldab see ligipääsu arvuti BIOSile ning virtuaalse järjestikpordi kaudu serial konsoolile (st operatsioonisüsteemile). IPMI kasutamist on kirjeldatud aadressil http://kuutorvaja.eenet.ee/wiki/HP_BladeSystem_c7000_seadmeriiul#IPMI_kasutamine<br /> <br /> ===Plokkseadmete haldamine===<br /> <br /> Plokkseadmete haldamiseks kasutatakse mdadm ja LVM tarkvara. Mõlemas füüsilises arvutis töötavad neli samade parameetritega kõvaketast on ühendatud RAID massiividesse; RAID ressurssi hallatakse edasi LVM abil kasutamiseks failisüsteemide ja saaleala jaoks. mdadm kasutamist on kirjeldatud aadressil http://www.auul.pri.ee/wiki/Tarkvaralise_mdadm_RAID_kasutamine_operatsioonis%C3%BCsteemiga_Debian_Squeeze ja LVM kasutamist aadressil http://kuutorvaja.eenet.ee/wiki/LVM.<br /> <br /> ===Virtualiseerimine===<br /> <br /> Efektiivsemaks ja paindlikumaks riistavaralise ressursi kasutamiseks on teenusserverid eap.ims ja fw.ims juurutatud virtuaalsete arvutitena. Neile saab kasutamiseks anda sobiva hulga protsessori, mälu, plokkseadme ja võrguressurssi. Projektis kasutatakse XEN virtualiseerimise tarkvara, mille kasutamist on kirjeldatud nt aadressidel<br /> <br /> * http://www.auul.pri.ee/wiki/Xen_ja_Debian_Squeeze<br /> * http://kuutorvaja.eenet.ee/wiki/Unix_keskkonna_administreerimine#Virtualiseerimine<br /> <br /> ====XEN host====<br /> <br /> XEN hostile vastav operatsioonisüsteemi eksemplar töötab füüsilisel riistvaral ja selle seest tõimub virtuaalsete arvutite juhtimine. Kui välja arvata XEN hosti alglaaduri seadistused ja mõned virtualiseerimisega seotud protsessid on tegu tavalise Debian Squeeze operatsioonisüsteemiga. <br /> <br /> ====XEN guest====<br /> <br /> XEN guestid on virtuaalsed operatsioonisüsteemid, mis töötavad XEN hosti kontrolli all ja mis kasutavad XEN hostist neile eraldatud ressursse.<br /> <br /> ===at-dom0 host===<br /> <br /> ====mdadm kasutamine====<br /> <br /> Neli füüsilist kõvaketast on partitsioneeritud sarnaselt<br /> <br /> root@at-dom0:~# parted /dev/sda p<br /> Model: ATA WDC WD2003FYYS-0 (scsi)<br /> Disk /dev/sda: 2000GB<br /> Sector size (logical/physical): 512B/512B<br /> Partition Table: msdos<br /> <br /> Number Start End Size Type File system Flags<br /> 1 1049kB 269MB 268MB primary ext3 boot<br /> 2 269MB 69.0GB 68.7GB primary<br /> 3 69.0GB 1169GB 1100GB primary<br /> <br /> mdadm abil on <br /> <br /> * kõigi kõvaketaste esimesed partitsioonid ühendatud /dev/md/boot raid1 lülitusse (at-dom0 operatsioonisüsteemi jaoks)<br /> * kõigi kõvaketaste teised partitsioonid ühendatud /dev/md/system raid5 lülitusse (at-dom0 operatsioonisüsteemi jaoks)<br /> * kõigi kõvaketaste teised partitsioonid ühendatud /dev/md/data raid5 lülitusse (virtuaalsete arvutite jaoks)<br /> <br /> ====LVM kasutamine====<br /> <br /> at-dom0 enda operatsioonisüsteemi jaoks kasutuses sellised plokkseadmed<br /> <br /> * /boot - /dev/md/boot (mdadm ressurss)<br /> * / - /dev/system/root (LVM ressurss)<br /> <br /> at-dom0.ims arvutil töötavad kaks virtuaalset arvutit<br /> <br /> ====Võrgu kasutamine====<br /> <br /> Kaks arvuti võrgukaarti on kasutusel selliselt<br /> <br /> * peth0 - esimene füüsiline võrgukaart<br /> * peth1 - teine füüsiline võrgukaart<br /> * eth0 - esimest füüsilist võrgukaarti sisaldav sild (fiktiivne aadress 10.101.101.21)<br /> * eth1 - teist füüsilist võrgukaarti sisaldav sild (172.17.35.21)<br /> * vaikelüüs 172.17.35.1<br /> <br /> ===eap.ims guest===<br /> <br /> eap.ims kasutab selliseid hosti ressursse<br /> <br /> Plokkseade<br /> <br /> /dev/data/eap_root<br /> /dev/data/eap_home<br /> /dev/data/eap_data_backup<br /> /dev/data/eap_data_postgresql<br /> /dev/data/eap_swap<br /> <br /> Võrk<br /> <br /> guesti seade eth0 (172.17.35.22) on muu võrguga ühenduses hosti eth1 silla kaudu<br /> <br /> Põhiline eap.ims arvutis töötav rakendustarkvara on PostgreSQL v. 9.0 andmebaas<br /> <br /> * /etc/postgresql/9.0/main - seadistusfailid<br /> * /var/log/postgresql - logi<br /> * /data/postgresql (ehk /var/lib/postgresql/9.0/main) - andmeklaster<br /> * /data/backup/postgresql/archive-logs - wal logid<br /> <br /> PostgreSQL andmebaasi kasutamist on kirjeldatud aadressil http://www.auul.pri.ee/wiki/PostgreSQL.<br /> <br /> ===fw.ims guest===<br /> <br /> fw.ims kasutab selliseid hosti ressursse<br /> <br /> Plokkseade<br /> <br /> /dev/data/fw_root<br /> /dev/data/fw_home<br /> /dev/data/fw_data_backup<br /> /dev/data/fw_data_postgresql<br /> /dev/data/fw_swap <br /> <br /> Võrk<br /> <br /> guesti seade eth0 (193.40.35.96) on muu võrguga ühenduses hosti eth0 silla kaudu<br /> guesti seade eth1 (172.17.35.18) on muu võrguga ühenduses hosti eth1 silla kaudu<br /> <br /> Peamised fw.ims arvutis töötavad rakendusprogrammid on<br /> <br /> * PostgreSQL v. 9.0 andmebaas<br /> * Apache veebiserver<br /> * NFS failiserver, mis jagab /home kataloogi eap.ims arvutisse<br /> <br /> PostgreSQL v. 9.0 andmebaasi puudutav failisüsteemi kasutus<br /> <br /> * /etc/postgresql/9.0/main - seadistusfailid<br /> * /var/log/postgresql - logi<br /> * /data/postgresql (ehk /var/lib/postgresql/9.0/main) - andmeklaster<br /> * /data/backup/postgresql/archive-logs - wal logid<br /> <br /> ===varundus.ims===<br /> <br /> ====mdadm kasutamine====<br /> <br /> Neli füüsilist kõvaketast on partitsioneeritud sarnaselt<br /> <br /> root@varundus:~# parted /dev/sda p<br /> Model: ATA WDC WD2003FYYS-0 (scsi)<br /> Disk /dev/sda: 2000GB<br /> Sector size (logical/physical): 512B/512B<br /> Partition Table: msdos<br /> <br /> Number Start End Size Type File system Flags<br /> 1 1049kB 269MB 268MB primary ext3 boot<br /> 2 269MB 2000GB 2000GB primary<br /> <br /> mdadm abil on<br /> <br /> * kõigi kõvaketaste esimesed partitsioonid ühendatud /dev/md/boot raid1 lülitusse<br /> * kõigi kõvaketaste teised partitsioonid ühendatud /dev/md/system raid5 lülitusse<br /> <br /> ====LVM kasutamine====<br /> <br /> varundus arvutis kasutuses sellised plokkseadmed<br /> <br /> * /boot - /dev/md/boot (mdadm ressurss)<br /> * / - /dev/system/root (LVM ressurss)<br /> * /srv/backup - /dev/system/backup (LVM ressurss)<br /> <br /> ====Võrgu kasutamine====<br /> <br /> Kaks arvuti võrgukaarti on kasutusel selliselt<br /> <br /> * eth0 - 172.17.35.19<br /> * vaikelüüs 172.17.35.1<br /> <br /> ====rsnapshot kasutamine====<br /> <br /> rsnapshot tarkvara tööd juhib seadistusfail /etc/rsnapshot.conf ja varundatud andmed asuvad kataloogis /srv/backup/rsnapshot avutite nimelistes kataloogides. Üldiselt varundatakse kõiki failisüsteeme välja arvatud mõned kataloogid<br /> <br /> /dev<br /> /proc<br /> /tmp<br /> /sys<br /> /mnt<br /> <br /> Varundatud andmeid roteeritakse selliselt, et säilitatakse seisud<br /> <br /> * viimased 28 päeva<br /> * viimased 12 nädalat<br /> * viimased 24 kuud<br /> <br /> rsnapshot tarkvara kasutamist on kirjeldatud aadressil http://www.auul.pri.ee/wiki/Rsnapshot.<br /> <br /> Full backup: kord nädalas nublu.chem.ut.ee 2-le eraldi kõvakettale (mitteredundantsed), säilitatakse 4-5 viimast täiskoopiat.<br /> <br /> Full backupi ligikaudne maht (24.01.2011): 35 GB<br /> <br /> <br /> Iga päeva WAL logid (säilitatakse kahe full backupi vahel tekkinud WAL logid (nädala WAL logide ligikaudne maht (24.01.2011): 18 GB<br /> <br /> Tarmo virtuaalserverist hetkel backuppi ei tehta.<br /> <br /> ===Monitooring===<br /> <br /> Monitooringuks kasutatakse Zabbix tarkvara, igasse operatsioonisüsteemi on paigaldatud Zabbix agent, mida juhib seadistusfail /etc/zabbix/zabbix_agentd.conf. Zabbix server asub eemal, aadressil 84.50.96.138 ja pöördub monitooritavate poole kahel viisil<br /> <br /> * üle ülikooli OpenVPN võrgu otse kõigi operatsioonisüsteemide poole, et monitoorida süsteemi üldisi omadusi (failisüsteemide täituvus, cpu load jne)<br /> * üle ülikooli OpenVPN võrgu otse mõlema füüsilise arvuti poole üle IPMI liidese, et monitoorida füüsilise riistvara omadusi (nt emaplaadi temperatuur)<br /> * üle avaliku võrgu, et monitoorida http://fw.ims.ut.ee/ veebikoha kättesaadavust<br /> <br /> Zabbix tarkvara kasutamist on kirjeldatud aadressil http://www.auul.pri.ee/wiki/Zabbix_kasutamine_Debian_operatsioonis%C3%BCsteemiga.<br /> <br /> ===Kasulikud lisamaterjalid===<br /> <br /> * http://www.auul.pri.ee/wiki/NUT_tarkvara_kasutamine_Debian_Squeeze_operatsioonis%C3%BCsteemiga<br /> * http://www.auul.pri.ee/wiki/EMC_Networker_client<br /> * http://www.auul.pri.ee/wiki/Tarkvaralise_mdadm_RAID_kasutamine_operatsioonis%C3%BCsteemiga_Debian_Squeeze</div> Imreoolberg https://ims.ut.ee/index.php?title=Eab_infra&diff=8953 Eab infra 2011-11-02T08:53:31Z <p>Imreoolberg: /* eap.ims guest */</p> <hr /> <div>===Sissejuhatus===<br /> <br /> Käesoleva teksti eesmärgiks on kirjeldada EAP projekti juures toimuvat riistvara, võrgu, operatsioonisüsteemi keskkonna ja rakendustarkvara kasutamist.<br /> <br /> ===Riistvara===<br /> <br /> Projektis kasutatakse sellist riistavara<br /> <br /> * Powerware 5115 UPS<br /> * 2 x S3420GP emaplaadiga Ordi arvutid<br /> * mõlemad arvutid sisaldavad 4 x 2 TB kõvakettaid<br /> * generic kohtvõrgu kommutaator<br /> <br /> ===Tarkvara===<br /> <br /> Projekti arvutites kasutatakse järgmist tarkvara<br /> <br /> * Debian Squeeze v. 6 64bit operatsioonisüsteem<br /> * XEN v. 4 virtualiseerimise tarkvara<br /> * Apache veebiserver<br /> * PostgreSQL andmebaas<br /> * Zabbix monitooringutarkvara<br /> * OpenVPN kaugligipääsu tarkvara<br /> * rsnapshot ja EMC Networker varundustarkvara<br /> * plokkseadmete haldamiseks mdadm ja LVM tarkvara<br /> <br /> ===Võrgutopoloogia===<br /> <br /> _____<br /> 195.80.35.1 | | ülikooli võrguseade<br /> ----------------------------------------------|----------------------------------------------| |<br /> | |_____|<br /> | | 172.17.35.1<br /> | 195.80.35.96 |<br /> | 2001:bb8:2002:2300:7231:40ff:fe03:5128 | <br /> _____ __|__ |<br /> | | | | |<br /> | F | | V | | <br /> |_____| at-dom0.ims |_____| fw.ims |<br /> | os: 172.17.35.21 | 172.17.35.18 |<br /> | 2001:bb8:2002:2300:21e:67ff:fe03:c3c0 | 2001:bb8:2002:2300:7221:17ff:fe03:5018 |<br /> | impi: 172.17.35.20 | |<br /> --|-------------------------------|-------------------|-----------------------|-------------------------|------ <br /> | |<br /> __|__ __|__<br /> | | | |<br /> | F | | V |<br /> |_____| |_____|<br /> <br /> varundus.ims eap.ims<br /> os: 172.17.35.19 172.17.35.22<br /> 2001:bb8:2002:2300:21e:67ff:fe03:a0f9 2001:bb8:2002:2300:7221:17ff:fe03:5022<br /> ipmi: 172.17.35.5<br /> <br /> kus<br /> <br /> * at-dom0.ims - füüsiline virtualiseerimise arvuti<br /> * varundus.ims - füüsiline varunduse arvuti<br /> * fw.ims (fw.ims.ut.ee) - virtuaalne arvuti<br /> * eap.ims - virtuaalne arvuti<br /> <br /> Märkused<br /> <br /> * Füüsilistel arvutitel on lisaks operatsioonisüsteemi ip aadressile ka füüsilise riistvara kaughalduse ipmi aadress<br /> * Operatsioonisüsteemid omandavad automaatselt oma mac aadresside abil ipv6 aadressid, neid kasutatakse EMC Networkeriga varundamisel<br /> * 172.17.35 võrgu arvutitest 195.80.35.96 poole pöördudes toimub asümmeetriline ruuting (kuna ülikooli võrguseade ei tee 172.17.35 -&gt; 195.80.35.1 nat teisendust)<br /> <br /> ===Riistvara kaughaldus===<br /> <br /> Riistvaraliste arvutite kaughalduseks kasutatakse IMPI protokolli onboard BMC kontrolliriga suhtlemiseks. Muu hulgas võimaldab see ligipääsu arvuti BIOSile ning virtuaalse järjestikpordi kaudu serial konsoolile (st operatsioonisüsteemile). IPMI kasutamist on kirjeldatud aadressil http://kuutorvaja.eenet.ee/wiki/HP_BladeSystem_c7000_seadmeriiul#IPMI_kasutamine<br /> <br /> ===Plokkseadmete haldamine===<br /> <br /> Plokkseadmete haldamiseks kasutatakse mdadm ja LVM tarkvara. Mõlemas füüsilises arvutis töötavad neli samade parameetritega kõvaketast on ühendatud RAID massiividesse; RAID ressurssi hallatakse edasi LVM abil kasutamiseks failisüsteemide ja saaleala jaoks. mdadm kasutamist on kirjeldatud aadressil http://www.auul.pri.ee/wiki/Tarkvaralise_mdadm_RAID_kasutamine_operatsioonis%C3%BCsteemiga_Debian_Squeeze ja LVM kasutamist aadressil http://kuutorvaja.eenet.ee/wiki/LVM.<br /> <br /> ===Virtualiseerimine===<br /> <br /> Efektiivsemaks ja paindlikumaks riistavaralise ressursi kasutamiseks on teenusserverid eap.ims ja fw.ims juurutatud virtuaalsete arvutitena. Neile saab kasutamiseks anda sobiva hulga protsessori, mälu, plokkseadme ja võrguressurssi. Projektis kasutatakse XEN virtualiseerimise tarkvara, mille kasutamist on kirjeldatud nt aadressidel<br /> <br /> * http://www.auul.pri.ee/wiki/Xen_ja_Debian_Squeeze<br /> * http://kuutorvaja.eenet.ee/wiki/Unix_keskkonna_administreerimine#Virtualiseerimine<br /> <br /> ====XEN host====<br /> <br /> XEN hostile vastav operatsioonisüsteemi eksemplar töötab füüsilisel riistvaral ja selle seest tõimub virtuaalsete arvutite juhtimine. Kui välja arvata XEN hosti alglaaduri seadistused ja mõned virtualiseerimisega seotud protsessid on tegu tavalise Debian Squeeze operatsioonisüsteemiga. <br /> <br /> ====XEN guest====<br /> <br /> XEN guestid on virtuaalsed operatsioonisüsteemid, mis töötavad XEN hosti kontrolli all ja mis kasutavad XEN hostist neile eraldatud ressursse.<br /> <br /> ===at-dom0 host===<br /> <br /> ====mdadm kasutamine====<br /> <br /> Neli füüsilist kõvaketast on partitsioneeritud sarnaselt<br /> <br /> root@at-dom0:~# parted /dev/sda p<br /> Model: ATA WDC WD2003FYYS-0 (scsi)<br /> Disk /dev/sda: 2000GB<br /> Sector size (logical/physical): 512B/512B<br /> Partition Table: msdos<br /> <br /> Number Start End Size Type File system Flags<br /> 1 1049kB 269MB 268MB primary ext3 boot<br /> 2 269MB 69.0GB 68.7GB primary<br /> 3 69.0GB 1169GB 1100GB primary<br /> <br /> mdadm abil on <br /> <br /> * kõigi kõvaketaste esimesed partitsioonid ühendatud /dev/md/boot raid1 lülitusse (at-dom0 operatsioonisüsteemi jaoks)<br /> * kõigi kõvaketaste teised partitsioonid ühendatud /dev/md/system raid5 lülitusse (at-dom0 operatsioonisüsteemi jaoks)<br /> * kõigi kõvaketaste teised partitsioonid ühendatud /dev/md/data raid5 lülitusse (virtuaalsete arvutite jaoks)<br /> <br /> ====LVM kasutamine====<br /> <br /> at-dom0 enda operatsioonisüsteemi jaoks kasutuses sellised plokkseadmed<br /> <br /> * /boot - /dev/md/boot (mdadm ressurss)<br /> * / - /dev/system/root (LVM ressurss)<br /> <br /> at-dom0.ims arvutil töötavad kaks virtuaalset arvutit<br /> <br /> ====Võrgu kasutamine====<br /> <br /> Kaks arvuti võrgukaarti on kasutusel selliselt<br /> <br /> * peth0 - esimene füüsiline võrgukaart<br /> * peth1 - teine füüsiline võrgukaart<br /> * eth0 - esimest füüsilist võrgukaarti sisaldav sild (fiktiivne aadress 10.101.101.21)<br /> * eth1 - teist füüsilist võrgukaarti sisaldav sild (172.17.35.21)<br /> * vaikelüüs 172.17.35.1<br /> <br /> ===eap.ims guest===<br /> <br /> eap.ims kasutab selliseid hosti ressursse<br /> <br /> Plokkseade<br /> <br /> /dev/data/eap_root<br /> /dev/data/eap_home<br /> /dev/data/eap_data_backup<br /> /dev/data/eap_data_postgresql<br /> /dev/data/eap_swap<br /> <br /> Võrk<br /> <br /> guesti seade eth0 (172.17.35.22) on muu võrguga ühenduses hosti eth1 silla kaudu<br /> <br /> Põhiline eap.ims arvutis töötav rakendustarkvara on PostgreSQL v. 9.0 andmebaas<br /> <br /> * /etc/postgresql/9.0/main - seadistusfailid<br /> * /var/log/postgresql - logi<br /> * /data/postgresql (ehk /var/lib/postgresql/9.0/main) - andmeklaster<br /> * /data/backup/postgresql/archive-logs - wal logid<br /> <br /> PostgreSQL andmebaasi kasutamist on kirjeldatud aadressil http://www.auul.pri.ee/wiki/PostgreSQL.<br /> <br /> ===fw.ims guest===<br /> <br /> fw.ims kasutab selliseid hosti ressursse<br /> <br /> Plokkseade<br /> <br /> /dev/data/fw_root<br /> /dev/data/fw_home<br /> /dev/data/fw_data_backup<br /> /dev/data/fw_data_postgresql<br /> /dev/data/fw_swap <br /> <br /> Võrk<br /> <br /> guesti seade eth0 (193.40.35.96) on muu võrguga ühenduses hosti eth0 silla kaudu<br /> guesti seade eth1 (172.17.35.18) on muu võrguga ühenduses hosti eth1 silla kaudu<br /> <br /> Peamised fw.ims arvutis töötavad rakendusprogrammid on<br /> <br /> * PostgreSQL v. 9.0 andmebaas<br /> * Apache veebiserver<br /> * NFS failiserver, mis jagab /home kataloogi eap.ims arvutisse<br /> <br /> ===varundus.ims===<br /> <br /> ====mdadm kasutamine====<br /> <br /> Neli füüsilist kõvaketast on partitsioneeritud sarnaselt<br /> <br /> root@varundus:~# parted /dev/sda p<br /> Model: ATA WDC WD2003FYYS-0 (scsi)<br /> Disk /dev/sda: 2000GB<br /> Sector size (logical/physical): 512B/512B<br /> Partition Table: msdos<br /> <br /> Number Start End Size Type File system Flags<br /> 1 1049kB 269MB 268MB primary ext3 boot<br /> 2 269MB 2000GB 2000GB primary<br /> <br /> mdadm abil on<br /> <br /> * kõigi kõvaketaste esimesed partitsioonid ühendatud /dev/md/boot raid1 lülitusse<br /> * kõigi kõvaketaste teised partitsioonid ühendatud /dev/md/system raid5 lülitusse<br /> <br /> ====LVM kasutamine====<br /> <br /> varundus arvutis kasutuses sellised plokkseadmed<br /> <br /> * /boot - /dev/md/boot (mdadm ressurss)<br /> * / - /dev/system/root (LVM ressurss)<br /> * /srv/backup - /dev/system/backup (LVM ressurss)<br /> <br /> ====Võrgu kasutamine====<br /> <br /> Kaks arvuti võrgukaarti on kasutusel selliselt<br /> <br /> * eth0 - 172.17.35.19<br /> * vaikelüüs 172.17.35.1<br /> <br /> ====rsnapshot kasutamine====<br /> <br /> rsnapshot tarkvara tööd juhib seadistusfail /etc/rsnapshot.conf ja varundatud andmed asuvad kataloogis /srv/backup/rsnapshot avutite nimelistes kataloogides. Üldiselt varundatakse kõiki failisüsteeme välja arvatud mõned kataloogid<br /> <br /> /dev<br /> /proc<br /> /tmp<br /> /sys<br /> /mnt<br /> <br /> Varundatud andmeid roteeritakse selliselt, et säilitatakse seisud<br /> <br /> * viimased 28 päeva<br /> * viimased 12 nädalat<br /> * viimased 24 kuud<br /> <br /> rsnapshot tarkvara kasutamist on kirjeldatud aadressil http://www.auul.pri.ee/wiki/Rsnapshot.<br /> <br /> Full backup: kord nädalas nublu.chem.ut.ee 2-le eraldi kõvakettale (mitteredundantsed), säilitatakse 4-5 viimast täiskoopiat.<br /> <br /> Full backupi ligikaudne maht (24.01.2011): 35 GB<br /> <br /> <br /> Iga päeva WAL logid (säilitatakse kahe full backupi vahel tekkinud WAL logid (nädala WAL logide ligikaudne maht (24.01.2011): 18 GB<br /> <br /> Tarmo virtuaalserverist hetkel backuppi ei tehta.<br /> <br /> ===Monitooring===<br /> <br /> Monitooringuks kasutatakse Zabbix tarkvara, igasse operatsioonisüsteemi on paigaldatud Zabbix agent, mida juhib seadistusfail /etc/zabbix/zabbix_agentd.conf. Zabbix server asub eemal, aadressil 84.50.96.138 ja pöördub monitooritavate poole kahel viisil<br /> <br /> * üle ülikooli OpenVPN võrgu otse kõigi operatsioonisüsteemide poole, et monitoorida süsteemi üldisi omadusi (failisüsteemide täituvus, cpu load jne)<br /> * üle ülikooli OpenVPN võrgu otse mõlema füüsilise arvuti poole üle IPMI liidese, et monitoorida füüsilise riistvara omadusi (nt emaplaadi temperatuur)<br /> * üle avaliku võrgu, et monitoorida http://fw.ims.ut.ee/ veebikoha kättesaadavust<br /> <br /> Zabbix tarkvara kasutamist on kirjeldatud aadressil http://www.auul.pri.ee/wiki/Zabbix_kasutamine_Debian_operatsioonis%C3%BCsteemiga.<br /> <br /> ===Kasulikud lisamaterjalid===<br /> <br /> * http://www.auul.pri.ee/wiki/NUT_tarkvara_kasutamine_Debian_Squeeze_operatsioonis%C3%BCsteemiga<br /> * http://www.auul.pri.ee/wiki/EMC_Networker_client<br /> * http://www.auul.pri.ee/wiki/Tarkvaralise_mdadm_RAID_kasutamine_operatsioonis%C3%BCsteemiga_Debian_Squeeze</div> Imreoolberg https://ims.ut.ee/index.php?title=Eab_infra&diff=8952 Eab infra 2011-11-02T08:50:50Z <p>Imreoolberg: /* Monitooring */</p> <hr /> <div>===Sissejuhatus===<br /> <br /> Käesoleva teksti eesmärgiks on kirjeldada EAP projekti juures toimuvat riistvara, võrgu, operatsioonisüsteemi keskkonna ja rakendustarkvara kasutamist.<br /> <br /> ===Riistvara===<br /> <br /> Projektis kasutatakse sellist riistavara<br /> <br /> * Powerware 5115 UPS<br /> * 2 x S3420GP emaplaadiga Ordi arvutid<br /> * mõlemad arvutid sisaldavad 4 x 2 TB kõvakettaid<br /> * generic kohtvõrgu kommutaator<br /> <br /> ===Tarkvara===<br /> <br /> Projekti arvutites kasutatakse järgmist tarkvara<br /> <br /> * Debian Squeeze v. 6 64bit operatsioonisüsteem<br /> * XEN v. 4 virtualiseerimise tarkvara<br /> * Apache veebiserver<br /> * PostgreSQL andmebaas<br /> * Zabbix monitooringutarkvara<br /> * OpenVPN kaugligipääsu tarkvara<br /> * rsnapshot ja EMC Networker varundustarkvara<br /> * plokkseadmete haldamiseks mdadm ja LVM tarkvara<br /> <br /> ===Võrgutopoloogia===<br /> <br /> _____<br /> 195.80.35.1 | | ülikooli võrguseade<br /> ----------------------------------------------|----------------------------------------------| |<br /> | |_____|<br /> | | 172.17.35.1<br /> | 195.80.35.96 |<br /> | 2001:bb8:2002:2300:7231:40ff:fe03:5128 | <br /> _____ __|__ |<br /> | | | | |<br /> | F | | V | | <br /> |_____| at-dom0.ims |_____| fw.ims |<br /> | os: 172.17.35.21 | 172.17.35.18 |<br /> | 2001:bb8:2002:2300:21e:67ff:fe03:c3c0 | 2001:bb8:2002:2300:7221:17ff:fe03:5018 |<br /> | impi: 172.17.35.20 | |<br /> --|-------------------------------|-------------------|-----------------------|-------------------------|------ <br /> | |<br /> __|__ __|__<br /> | | | |<br /> | F | | V |<br /> |_____| |_____|<br /> <br /> varundus.ims eap.ims<br /> os: 172.17.35.19 172.17.35.22<br /> 2001:bb8:2002:2300:21e:67ff:fe03:a0f9 2001:bb8:2002:2300:7221:17ff:fe03:5022<br /> ipmi: 172.17.35.5<br /> <br /> kus<br /> <br /> * at-dom0.ims - füüsiline virtualiseerimise arvuti<br /> * varundus.ims - füüsiline varunduse arvuti<br /> * fw.ims (fw.ims.ut.ee) - virtuaalne arvuti<br /> * eap.ims - virtuaalne arvuti<br /> <br /> Märkused<br /> <br /> * Füüsilistel arvutitel on lisaks operatsioonisüsteemi ip aadressile ka füüsilise riistvara kaughalduse ipmi aadress<br /> * Operatsioonisüsteemid omandavad automaatselt oma mac aadresside abil ipv6 aadressid, neid kasutatakse EMC Networkeriga varundamisel<br /> * 172.17.35 võrgu arvutitest 195.80.35.96 poole pöördudes toimub asümmeetriline ruuting (kuna ülikooli võrguseade ei tee 172.17.35 -&gt; 195.80.35.1 nat teisendust)<br /> <br /> ===Riistvara kaughaldus===<br /> <br /> Riistvaraliste arvutite kaughalduseks kasutatakse IMPI protokolli onboard BMC kontrolliriga suhtlemiseks. Muu hulgas võimaldab see ligipääsu arvuti BIOSile ning virtuaalse järjestikpordi kaudu serial konsoolile (st operatsioonisüsteemile). IPMI kasutamist on kirjeldatud aadressil http://kuutorvaja.eenet.ee/wiki/HP_BladeSystem_c7000_seadmeriiul#IPMI_kasutamine<br /> <br /> ===Plokkseadmete haldamine===<br /> <br /> Plokkseadmete haldamiseks kasutatakse mdadm ja LVM tarkvara. Mõlemas füüsilises arvutis töötavad neli samade parameetritega kõvaketast on ühendatud RAID massiividesse; RAID ressurssi hallatakse edasi LVM abil kasutamiseks failisüsteemide ja saaleala jaoks. mdadm kasutamist on kirjeldatud aadressil http://www.auul.pri.ee/wiki/Tarkvaralise_mdadm_RAID_kasutamine_operatsioonis%C3%BCsteemiga_Debian_Squeeze ja LVM kasutamist aadressil http://kuutorvaja.eenet.ee/wiki/LVM.<br /> <br /> ===Virtualiseerimine===<br /> <br /> Efektiivsemaks ja paindlikumaks riistavaralise ressursi kasutamiseks on teenusserverid eap.ims ja fw.ims juurutatud virtuaalsete arvutitena. Neile saab kasutamiseks anda sobiva hulga protsessori, mälu, plokkseadme ja võrguressurssi. Projektis kasutatakse XEN virtualiseerimise tarkvara, mille kasutamist on kirjeldatud nt aadressidel<br /> <br /> * http://www.auul.pri.ee/wiki/Xen_ja_Debian_Squeeze<br /> * http://kuutorvaja.eenet.ee/wiki/Unix_keskkonna_administreerimine#Virtualiseerimine<br /> <br /> ====XEN host====<br /> <br /> XEN hostile vastav operatsioonisüsteemi eksemplar töötab füüsilisel riistvaral ja selle seest tõimub virtuaalsete arvutite juhtimine. Kui välja arvata XEN hosti alglaaduri seadistused ja mõned virtualiseerimisega seotud protsessid on tegu tavalise Debian Squeeze operatsioonisüsteemiga. <br /> <br /> ====XEN guest====<br /> <br /> XEN guestid on virtuaalsed operatsioonisüsteemid, mis töötavad XEN hosti kontrolli all ja mis kasutavad XEN hostist neile eraldatud ressursse.<br /> <br /> ===at-dom0 host===<br /> <br /> ====mdadm kasutamine====<br /> <br /> Neli füüsilist kõvaketast on partitsioneeritud sarnaselt<br /> <br /> root@at-dom0:~# parted /dev/sda p<br /> Model: ATA WDC WD2003FYYS-0 (scsi)<br /> Disk /dev/sda: 2000GB<br /> Sector size (logical/physical): 512B/512B<br /> Partition Table: msdos<br /> <br /> Number Start End Size Type File system Flags<br /> 1 1049kB 269MB 268MB primary ext3 boot<br /> 2 269MB 69.0GB 68.7GB primary<br /> 3 69.0GB 1169GB 1100GB primary<br /> <br /> mdadm abil on <br /> <br /> * kõigi kõvaketaste esimesed partitsioonid ühendatud /dev/md/boot raid1 lülitusse (at-dom0 operatsioonisüsteemi jaoks)<br /> * kõigi kõvaketaste teised partitsioonid ühendatud /dev/md/system raid5 lülitusse (at-dom0 operatsioonisüsteemi jaoks)<br /> * kõigi kõvaketaste teised partitsioonid ühendatud /dev/md/data raid5 lülitusse (virtuaalsete arvutite jaoks)<br /> <br /> ====LVM kasutamine====<br /> <br /> at-dom0 enda operatsioonisüsteemi jaoks kasutuses sellised plokkseadmed<br /> <br /> * /boot - /dev/md/boot (mdadm ressurss)<br /> * / - /dev/system/root (LVM ressurss)<br /> <br /> at-dom0.ims arvutil töötavad kaks virtuaalset arvutit<br /> <br /> ====Võrgu kasutamine====<br /> <br /> Kaks arvuti võrgukaarti on kasutusel selliselt<br /> <br /> * peth0 - esimene füüsiline võrgukaart<br /> * peth1 - teine füüsiline võrgukaart<br /> * eth0 - esimest füüsilist võrgukaarti sisaldav sild (fiktiivne aadress 10.101.101.21)<br /> * eth1 - teist füüsilist võrgukaarti sisaldav sild (172.17.35.21)<br /> * vaikelüüs 172.17.35.1<br /> <br /> ===eap.ims guest===<br /> <br /> eap.ims kasutab selliseid hosti ressursse<br /> <br /> Plokkseade<br /> <br /> /dev/data/eap_root<br /> /dev/data/eap_home<br /> /dev/data/eap_data_backup<br /> /dev/data/eap_data_postgresql<br /> /dev/data/eap_swap<br /> <br /> Võrk<br /> <br /> guesti seade eth0 (172.17.35.22) on muu võrguga ühenduses hosti eth1 silla kaudu<br /> <br /> Põhiline eap.ims arvutis töötav rakendustarkvara on PostgreSQL v. 9.0 andmebaas.<br /> <br /> * WAL logid salvestatakse iga 30 minuti järel RAID1 (redundantne) kõvaketastele (andmebaasi serveril)<br /> <br /> ===fw.ims guest===<br /> <br /> fw.ims kasutab selliseid hosti ressursse<br /> <br /> Plokkseade<br /> <br /> /dev/data/fw_root<br /> /dev/data/fw_home<br /> /dev/data/fw_data_backup<br /> /dev/data/fw_data_postgresql<br /> /dev/data/fw_swap <br /> <br /> Võrk<br /> <br /> guesti seade eth0 (193.40.35.96) on muu võrguga ühenduses hosti eth0 silla kaudu<br /> guesti seade eth1 (172.17.35.18) on muu võrguga ühenduses hosti eth1 silla kaudu<br /> <br /> Peamised fw.ims arvutis töötavad rakendusprogrammid on<br /> <br /> * PostgreSQL v. 9.0 andmebaas<br /> * Apache veebiserver<br /> * NFS failiserver, mis jagab /home kataloogi eap.ims arvutisse<br /> <br /> ===varundus.ims===<br /> <br /> ====mdadm kasutamine====<br /> <br /> Neli füüsilist kõvaketast on partitsioneeritud sarnaselt<br /> <br /> root@varundus:~# parted /dev/sda p<br /> Model: ATA WDC WD2003FYYS-0 (scsi)<br /> Disk /dev/sda: 2000GB<br /> Sector size (logical/physical): 512B/512B<br /> Partition Table: msdos<br /> <br /> Number Start End Size Type File system Flags<br /> 1 1049kB 269MB 268MB primary ext3 boot<br /> 2 269MB 2000GB 2000GB primary<br /> <br /> mdadm abil on<br /> <br /> * kõigi kõvaketaste esimesed partitsioonid ühendatud /dev/md/boot raid1 lülitusse<br /> * kõigi kõvaketaste teised partitsioonid ühendatud /dev/md/system raid5 lülitusse<br /> <br /> ====LVM kasutamine====<br /> <br /> varundus arvutis kasutuses sellised plokkseadmed<br /> <br /> * /boot - /dev/md/boot (mdadm ressurss)<br /> * / - /dev/system/root (LVM ressurss)<br /> * /srv/backup - /dev/system/backup (LVM ressurss)<br /> <br /> ====Võrgu kasutamine====<br /> <br /> Kaks arvuti võrgukaarti on kasutusel selliselt<br /> <br /> * eth0 - 172.17.35.19<br /> * vaikelüüs 172.17.35.1<br /> <br /> ====rsnapshot kasutamine====<br /> <br /> rsnapshot tarkvara tööd juhib seadistusfail /etc/rsnapshot.conf ja varundatud andmed asuvad kataloogis /srv/backup/rsnapshot avutite nimelistes kataloogides. Üldiselt varundatakse kõiki failisüsteeme välja arvatud mõned kataloogid<br /> <br /> /dev<br /> /proc<br /> /tmp<br /> /sys<br /> /mnt<br /> <br /> Varundatud andmeid roteeritakse selliselt, et säilitatakse seisud<br /> <br /> * viimased 28 päeva<br /> * viimased 12 nädalat<br /> * viimased 24 kuud<br /> <br /> rsnapshot tarkvara kasutamist on kirjeldatud aadressil http://www.auul.pri.ee/wiki/Rsnapshot.<br /> <br /> Full backup: kord nädalas nublu.chem.ut.ee 2-le eraldi kõvakettale (mitteredundantsed), säilitatakse 4-5 viimast täiskoopiat.<br /> <br /> Full backupi ligikaudne maht (24.01.2011): 35 GB<br /> <br /> <br /> Iga päeva WAL logid (säilitatakse kahe full backupi vahel tekkinud WAL logid (nädala WAL logide ligikaudne maht (24.01.2011): 18 GB<br /> <br /> Tarmo virtuaalserverist hetkel backuppi ei tehta.<br /> <br /> ===Monitooring===<br /> <br /> Monitooringuks kasutatakse Zabbix tarkvara, igasse operatsioonisüsteemi on paigaldatud Zabbix agent, mida juhib seadistusfail /etc/zabbix/zabbix_agentd.conf. Zabbix server asub eemal, aadressil 84.50.96.138 ja pöördub monitooritavate poole kahel viisil<br /> <br /> * üle ülikooli OpenVPN võrgu otse kõigi operatsioonisüsteemide poole, et monitoorida süsteemi üldisi omadusi (failisüsteemide täituvus, cpu load jne)<br /> * üle ülikooli OpenVPN võrgu otse mõlema füüsilise arvuti poole üle IPMI liidese, et monitoorida füüsilise riistvara omadusi (nt emaplaadi temperatuur)<br /> * üle avaliku võrgu, et monitoorida http://fw.ims.ut.ee/ veebikoha kättesaadavust<br /> <br /> Zabbix tarkvara kasutamist on kirjeldatud aadressil http://www.auul.pri.ee/wiki/Zabbix_kasutamine_Debian_operatsioonis%C3%BCsteemiga.<br /> <br /> ===Kasulikud lisamaterjalid===<br /> <br /> * http://www.auul.pri.ee/wiki/NUT_tarkvara_kasutamine_Debian_Squeeze_operatsioonis%C3%BCsteemiga<br /> * http://www.auul.pri.ee/wiki/EMC_Networker_client<br /> * http://www.auul.pri.ee/wiki/Tarkvaralise_mdadm_RAID_kasutamine_operatsioonis%C3%BCsteemiga_Debian_Squeeze</div> Imreoolberg https://ims.ut.ee/index.php?title=Eab_infra&diff=8951 Eab infra 2011-11-02T08:50:13Z <p>Imreoolberg: /* rsnapshot kasutamine */</p> <hr /> <div>===Sissejuhatus===<br /> <br /> Käesoleva teksti eesmärgiks on kirjeldada EAP projekti juures toimuvat riistvara, võrgu, operatsioonisüsteemi keskkonna ja rakendustarkvara kasutamist.<br /> <br /> ===Riistvara===<br /> <br /> Projektis kasutatakse sellist riistavara<br /> <br /> * Powerware 5115 UPS<br /> * 2 x S3420GP emaplaadiga Ordi arvutid<br /> * mõlemad arvutid sisaldavad 4 x 2 TB kõvakettaid<br /> * generic kohtvõrgu kommutaator<br /> <br /> ===Tarkvara===<br /> <br /> Projekti arvutites kasutatakse järgmist tarkvara<br /> <br /> * Debian Squeeze v. 6 64bit operatsioonisüsteem<br /> * XEN v. 4 virtualiseerimise tarkvara<br /> * Apache veebiserver<br /> * PostgreSQL andmebaas<br /> * Zabbix monitooringutarkvara<br /> * OpenVPN kaugligipääsu tarkvara<br /> * rsnapshot ja EMC Networker varundustarkvara<br /> * plokkseadmete haldamiseks mdadm ja LVM tarkvara<br /> <br /> ===Võrgutopoloogia===<br /> <br /> _____<br /> 195.80.35.1 | | ülikooli võrguseade<br /> ----------------------------------------------|----------------------------------------------| |<br /> | |_____|<br /> | | 172.17.35.1<br /> | 195.80.35.96 |<br /> | 2001:bb8:2002:2300:7231:40ff:fe03:5128 | <br /> _____ __|__ |<br /> | | | | |<br /> | F | | V | | <br /> |_____| at-dom0.ims |_____| fw.ims |<br /> | os: 172.17.35.21 | 172.17.35.18 |<br /> | 2001:bb8:2002:2300:21e:67ff:fe03:c3c0 | 2001:bb8:2002:2300:7221:17ff:fe03:5018 |<br /> | impi: 172.17.35.20 | |<br /> --|-------------------------------|-------------------|-----------------------|-------------------------|------ <br /> | |<br /> __|__ __|__<br /> | | | |<br /> | F | | V |<br /> |_____| |_____|<br /> <br /> varundus.ims eap.ims<br /> os: 172.17.35.19 172.17.35.22<br /> 2001:bb8:2002:2300:21e:67ff:fe03:a0f9 2001:bb8:2002:2300:7221:17ff:fe03:5022<br /> ipmi: 172.17.35.5<br /> <br /> kus<br /> <br /> * at-dom0.ims - füüsiline virtualiseerimise arvuti<br /> * varundus.ims - füüsiline varunduse arvuti<br /> * fw.ims (fw.ims.ut.ee) - virtuaalne arvuti<br /> * eap.ims - virtuaalne arvuti<br /> <br /> Märkused<br /> <br /> * Füüsilistel arvutitel on lisaks operatsioonisüsteemi ip aadressile ka füüsilise riistvara kaughalduse ipmi aadress<br /> * Operatsioonisüsteemid omandavad automaatselt oma mac aadresside abil ipv6 aadressid, neid kasutatakse EMC Networkeriga varundamisel<br /> * 172.17.35 võrgu arvutitest 195.80.35.96 poole pöördudes toimub asümmeetriline ruuting (kuna ülikooli võrguseade ei tee 172.17.35 -&gt; 195.80.35.1 nat teisendust)<br /> <br /> ===Riistvara kaughaldus===<br /> <br /> Riistvaraliste arvutite kaughalduseks kasutatakse IMPI protokolli onboard BMC kontrolliriga suhtlemiseks. Muu hulgas võimaldab see ligipääsu arvuti BIOSile ning virtuaalse järjestikpordi kaudu serial konsoolile (st operatsioonisüsteemile). IPMI kasutamist on kirjeldatud aadressil http://kuutorvaja.eenet.ee/wiki/HP_BladeSystem_c7000_seadmeriiul#IPMI_kasutamine<br /> <br /> ===Plokkseadmete haldamine===<br /> <br /> Plokkseadmete haldamiseks kasutatakse mdadm ja LVM tarkvara. Mõlemas füüsilises arvutis töötavad neli samade parameetritega kõvaketast on ühendatud RAID massiividesse; RAID ressurssi hallatakse edasi LVM abil kasutamiseks failisüsteemide ja saaleala jaoks. mdadm kasutamist on kirjeldatud aadressil http://www.auul.pri.ee/wiki/Tarkvaralise_mdadm_RAID_kasutamine_operatsioonis%C3%BCsteemiga_Debian_Squeeze ja LVM kasutamist aadressil http://kuutorvaja.eenet.ee/wiki/LVM.<br /> <br /> ===Virtualiseerimine===<br /> <br /> Efektiivsemaks ja paindlikumaks riistavaralise ressursi kasutamiseks on teenusserverid eap.ims ja fw.ims juurutatud virtuaalsete arvutitena. Neile saab kasutamiseks anda sobiva hulga protsessori, mälu, plokkseadme ja võrguressurssi. Projektis kasutatakse XEN virtualiseerimise tarkvara, mille kasutamist on kirjeldatud nt aadressidel<br /> <br /> * http://www.auul.pri.ee/wiki/Xen_ja_Debian_Squeeze<br /> * http://kuutorvaja.eenet.ee/wiki/Unix_keskkonna_administreerimine#Virtualiseerimine<br /> <br /> ====XEN host====<br /> <br /> XEN hostile vastav operatsioonisüsteemi eksemplar töötab füüsilisel riistvaral ja selle seest tõimub virtuaalsete arvutite juhtimine. Kui välja arvata XEN hosti alglaaduri seadistused ja mõned virtualiseerimisega seotud protsessid on tegu tavalise Debian Squeeze operatsioonisüsteemiga. <br /> <br /> ====XEN guest====<br /> <br /> XEN guestid on virtuaalsed operatsioonisüsteemid, mis töötavad XEN hosti kontrolli all ja mis kasutavad XEN hostist neile eraldatud ressursse.<br /> <br /> ===at-dom0 host===<br /> <br /> ====mdadm kasutamine====<br /> <br /> Neli füüsilist kõvaketast on partitsioneeritud sarnaselt<br /> <br /> root@at-dom0:~# parted /dev/sda p<br /> Model: ATA WDC WD2003FYYS-0 (scsi)<br /> Disk /dev/sda: 2000GB<br /> Sector size (logical/physical): 512B/512B<br /> Partition Table: msdos<br /> <br /> Number Start End Size Type File system Flags<br /> 1 1049kB 269MB 268MB primary ext3 boot<br /> 2 269MB 69.0GB 68.7GB primary<br /> 3 69.0GB 1169GB 1100GB primary<br /> <br /> mdadm abil on <br /> <br /> * kõigi kõvaketaste esimesed partitsioonid ühendatud /dev/md/boot raid1 lülitusse (at-dom0 operatsioonisüsteemi jaoks)<br /> * kõigi kõvaketaste teised partitsioonid ühendatud /dev/md/system raid5 lülitusse (at-dom0 operatsioonisüsteemi jaoks)<br /> * kõigi kõvaketaste teised partitsioonid ühendatud /dev/md/data raid5 lülitusse (virtuaalsete arvutite jaoks)<br /> <br /> ====LVM kasutamine====<br /> <br /> at-dom0 enda operatsioonisüsteemi jaoks kasutuses sellised plokkseadmed<br /> <br /> * /boot - /dev/md/boot (mdadm ressurss)<br /> * / - /dev/system/root (LVM ressurss)<br /> <br /> at-dom0.ims arvutil töötavad kaks virtuaalset arvutit<br /> <br /> ====Võrgu kasutamine====<br /> <br /> Kaks arvuti võrgukaarti on kasutusel selliselt<br /> <br /> * peth0 - esimene füüsiline võrgukaart<br /> * peth1 - teine füüsiline võrgukaart<br /> * eth0 - esimest füüsilist võrgukaarti sisaldav sild (fiktiivne aadress 10.101.101.21)<br /> * eth1 - teist füüsilist võrgukaarti sisaldav sild (172.17.35.21)<br /> * vaikelüüs 172.17.35.1<br /> <br /> ===eap.ims guest===<br /> <br /> eap.ims kasutab selliseid hosti ressursse<br /> <br /> Plokkseade<br /> <br /> /dev/data/eap_root<br /> /dev/data/eap_home<br /> /dev/data/eap_data_backup<br /> /dev/data/eap_data_postgresql<br /> /dev/data/eap_swap<br /> <br /> Võrk<br /> <br /> guesti seade eth0 (172.17.35.22) on muu võrguga ühenduses hosti eth1 silla kaudu<br /> <br /> Põhiline eap.ims arvutis töötav rakendustarkvara on PostgreSQL v. 9.0 andmebaas.<br /> <br /> * WAL logid salvestatakse iga 30 minuti järel RAID1 (redundantne) kõvaketastele (andmebaasi serveril)<br /> <br /> ===fw.ims guest===<br /> <br /> fw.ims kasutab selliseid hosti ressursse<br /> <br /> Plokkseade<br /> <br /> /dev/data/fw_root<br /> /dev/data/fw_home<br /> /dev/data/fw_data_backup<br /> /dev/data/fw_data_postgresql<br /> /dev/data/fw_swap <br /> <br /> Võrk<br /> <br /> guesti seade eth0 (193.40.35.96) on muu võrguga ühenduses hosti eth0 silla kaudu<br /> guesti seade eth1 (172.17.35.18) on muu võrguga ühenduses hosti eth1 silla kaudu<br /> <br /> Peamised fw.ims arvutis töötavad rakendusprogrammid on<br /> <br /> * PostgreSQL v. 9.0 andmebaas<br /> * Apache veebiserver<br /> * NFS failiserver, mis jagab /home kataloogi eap.ims arvutisse<br /> <br /> ===varundus.ims===<br /> <br /> ====mdadm kasutamine====<br /> <br /> Neli füüsilist kõvaketast on partitsioneeritud sarnaselt<br /> <br /> root@varundus:~# parted /dev/sda p<br /> Model: ATA WDC WD2003FYYS-0 (scsi)<br /> Disk /dev/sda: 2000GB<br /> Sector size (logical/physical): 512B/512B<br /> Partition Table: msdos<br /> <br /> Number Start End Size Type File system Flags<br /> 1 1049kB 269MB 268MB primary ext3 boot<br /> 2 269MB 2000GB 2000GB primary<br /> <br /> mdadm abil on<br /> <br /> * kõigi kõvaketaste esimesed partitsioonid ühendatud /dev/md/boot raid1 lülitusse<br /> * kõigi kõvaketaste teised partitsioonid ühendatud /dev/md/system raid5 lülitusse<br /> <br /> ====LVM kasutamine====<br /> <br /> varundus arvutis kasutuses sellised plokkseadmed<br /> <br /> * /boot - /dev/md/boot (mdadm ressurss)<br /> * / - /dev/system/root (LVM ressurss)<br /> * /srv/backup - /dev/system/backup (LVM ressurss)<br /> <br /> ====Võrgu kasutamine====<br /> <br /> Kaks arvuti võrgukaarti on kasutusel selliselt<br /> <br /> * eth0 - 172.17.35.19<br /> * vaikelüüs 172.17.35.1<br /> <br /> ====rsnapshot kasutamine====<br /> <br /> rsnapshot tarkvara tööd juhib seadistusfail /etc/rsnapshot.conf ja varundatud andmed asuvad kataloogis /srv/backup/rsnapshot avutite nimelistes kataloogides. Üldiselt varundatakse kõiki failisüsteeme välja arvatud mõned kataloogid<br /> <br /> /dev<br /> /proc<br /> /tmp<br /> /sys<br /> /mnt<br /> <br /> Varundatud andmeid roteeritakse selliselt, et säilitatakse seisud<br /> <br /> * viimased 28 päeva<br /> * viimased 12 nädalat<br /> * viimased 24 kuud<br /> <br /> rsnapshot tarkvara kasutamist on kirjeldatud aadressil http://www.auul.pri.ee/wiki/Rsnapshot.<br /> <br /> Full backup: kord nädalas nublu.chem.ut.ee 2-le eraldi kõvakettale (mitteredundantsed), säilitatakse 4-5 viimast täiskoopiat.<br /> <br /> Full backupi ligikaudne maht (24.01.2011): 35 GB<br /> <br /> <br /> Iga päeva WAL logid (säilitatakse kahe full backupi vahel tekkinud WAL logid (nädala WAL logide ligikaudne maht (24.01.2011): 18 GB<br /> <br /> Tarmo virtuaalserverist hetkel backuppi ei tehta.<br /> <br /> ===Monitooring===<br /> <br /> Monitooringuks kasutatakse Zabbix tarkvara, igasse operatsioonisüsteemi on paigaldatud Zabbix agent, mida juhib seadistusfail /etc/zabbix/zabbix_agentd.conf. Zabbix server asub eemal, aadressil 84.50.96.138 ja pöördub monitooritavate poole kahel viisil<br /> <br /> * üle ülikooli OpenVPN võrgu otse kõigi operatsioonisüsteemide poole, et monitoorida süsteemi üldisi omadusi (failisüsteemide täituvus, cpu load jne)<br /> * üle ülikooli OpenVPN võrgu otse mõlema füüsilise arvuti poole üle IPMI liidese, et monitoorida füüsilise riistvara omadusi (nt emaplaadi temperatuur)<br /> * üle avaliku võrgu, et monitoorida http://fw.ims.ut.ee/ veebikoha kättesaadavust<br /> <br /> ===Kasulikud lisamaterjalid===<br /> <br /> * http://www.auul.pri.ee/wiki/NUT_tarkvara_kasutamine_Debian_Squeeze_operatsioonis%C3%BCsteemiga<br /> * http://www.auul.pri.ee/wiki/EMC_Networker_client<br /> * http://www.auul.pri.ee/wiki/Tarkvaralise_mdadm_RAID_kasutamine_operatsioonis%C3%BCsteemiga_Debian_Squeeze</div> Imreoolberg https://ims.ut.ee/index.php?title=Eab_infra&diff=8950 Eab infra 2011-11-02T08:49:24Z <p>Imreoolberg: /* Plokkseadmete haldamine */</p> <hr /> <div>===Sissejuhatus===<br /> <br /> Käesoleva teksti eesmärgiks on kirjeldada EAP projekti juures toimuvat riistvara, võrgu, operatsioonisüsteemi keskkonna ja rakendustarkvara kasutamist.<br /> <br /> ===Riistvara===<br /> <br /> Projektis kasutatakse sellist riistavara<br /> <br /> * Powerware 5115 UPS<br /> * 2 x S3420GP emaplaadiga Ordi arvutid<br /> * mõlemad arvutid sisaldavad 4 x 2 TB kõvakettaid<br /> * generic kohtvõrgu kommutaator<br /> <br /> ===Tarkvara===<br /> <br /> Projekti arvutites kasutatakse järgmist tarkvara<br /> <br /> * Debian Squeeze v. 6 64bit operatsioonisüsteem<br /> * XEN v. 4 virtualiseerimise tarkvara<br /> * Apache veebiserver<br /> * PostgreSQL andmebaas<br /> * Zabbix monitooringutarkvara<br /> * OpenVPN kaugligipääsu tarkvara<br /> * rsnapshot ja EMC Networker varundustarkvara<br /> * plokkseadmete haldamiseks mdadm ja LVM tarkvara<br /> <br /> ===Võrgutopoloogia===<br /> <br /> _____<br /> 195.80.35.1 | | ülikooli võrguseade<br /> ----------------------------------------------|----------------------------------------------| |<br /> | |_____|<br /> | | 172.17.35.1<br /> | 195.80.35.96 |<br /> | 2001:bb8:2002:2300:7231:40ff:fe03:5128 | <br /> _____ __|__ |<br /> | | | | |<br /> | F | | V | | <br /> |_____| at-dom0.ims |_____| fw.ims |<br /> | os: 172.17.35.21 | 172.17.35.18 |<br /> | 2001:bb8:2002:2300:21e:67ff:fe03:c3c0 | 2001:bb8:2002:2300:7221:17ff:fe03:5018 |<br /> | impi: 172.17.35.20 | |<br /> --|-------------------------------|-------------------|-----------------------|-------------------------|------ <br /> | |<br /> __|__ __|__<br /> | | | |<br /> | F | | V |<br /> |_____| |_____|<br /> <br /> varundus.ims eap.ims<br /> os: 172.17.35.19 172.17.35.22<br /> 2001:bb8:2002:2300:21e:67ff:fe03:a0f9 2001:bb8:2002:2300:7221:17ff:fe03:5022<br /> ipmi: 172.17.35.5<br /> <br /> kus<br /> <br /> * at-dom0.ims - füüsiline virtualiseerimise arvuti<br /> * varundus.ims - füüsiline varunduse arvuti<br /> * fw.ims (fw.ims.ut.ee) - virtuaalne arvuti<br /> * eap.ims - virtuaalne arvuti<br /> <br /> Märkused<br /> <br /> * Füüsilistel arvutitel on lisaks operatsioonisüsteemi ip aadressile ka füüsilise riistvara kaughalduse ipmi aadress<br /> * Operatsioonisüsteemid omandavad automaatselt oma mac aadresside abil ipv6 aadressid, neid kasutatakse EMC Networkeriga varundamisel<br /> * 172.17.35 võrgu arvutitest 195.80.35.96 poole pöördudes toimub asümmeetriline ruuting (kuna ülikooli võrguseade ei tee 172.17.35 -&gt; 195.80.35.1 nat teisendust)<br /> <br /> ===Riistvara kaughaldus===<br /> <br /> Riistvaraliste arvutite kaughalduseks kasutatakse IMPI protokolli onboard BMC kontrolliriga suhtlemiseks. Muu hulgas võimaldab see ligipääsu arvuti BIOSile ning virtuaalse järjestikpordi kaudu serial konsoolile (st operatsioonisüsteemile). IPMI kasutamist on kirjeldatud aadressil http://kuutorvaja.eenet.ee/wiki/HP_BladeSystem_c7000_seadmeriiul#IPMI_kasutamine<br /> <br /> ===Plokkseadmete haldamine===<br /> <br /> Plokkseadmete haldamiseks kasutatakse mdadm ja LVM tarkvara. Mõlemas füüsilises arvutis töötavad neli samade parameetritega kõvaketast on ühendatud RAID massiividesse; RAID ressurssi hallatakse edasi LVM abil kasutamiseks failisüsteemide ja saaleala jaoks. mdadm kasutamist on kirjeldatud aadressil http://www.auul.pri.ee/wiki/Tarkvaralise_mdadm_RAID_kasutamine_operatsioonis%C3%BCsteemiga_Debian_Squeeze ja LVM kasutamist aadressil http://kuutorvaja.eenet.ee/wiki/LVM.<br /> <br /> ===Virtualiseerimine===<br /> <br /> Efektiivsemaks ja paindlikumaks riistavaralise ressursi kasutamiseks on teenusserverid eap.ims ja fw.ims juurutatud virtuaalsete arvutitena. Neile saab kasutamiseks anda sobiva hulga protsessori, mälu, plokkseadme ja võrguressurssi. Projektis kasutatakse XEN virtualiseerimise tarkvara, mille kasutamist on kirjeldatud nt aadressidel<br /> <br /> * http://www.auul.pri.ee/wiki/Xen_ja_Debian_Squeeze<br /> * http://kuutorvaja.eenet.ee/wiki/Unix_keskkonna_administreerimine#Virtualiseerimine<br /> <br /> ====XEN host====<br /> <br /> XEN hostile vastav operatsioonisüsteemi eksemplar töötab füüsilisel riistvaral ja selle seest tõimub virtuaalsete arvutite juhtimine. Kui välja arvata XEN hosti alglaaduri seadistused ja mõned virtualiseerimisega seotud protsessid on tegu tavalise Debian Squeeze operatsioonisüsteemiga. <br /> <br /> ====XEN guest====<br /> <br /> XEN guestid on virtuaalsed operatsioonisüsteemid, mis töötavad XEN hosti kontrolli all ja mis kasutavad XEN hostist neile eraldatud ressursse.<br /> <br /> ===at-dom0 host===<br /> <br /> ====mdadm kasutamine====<br /> <br /> Neli füüsilist kõvaketast on partitsioneeritud sarnaselt<br /> <br /> root@at-dom0:~# parted /dev/sda p<br /> Model: ATA WDC WD2003FYYS-0 (scsi)<br /> Disk /dev/sda: 2000GB<br /> Sector size (logical/physical): 512B/512B<br /> Partition Table: msdos<br /> <br /> Number Start End Size Type File system Flags<br /> 1 1049kB 269MB 268MB primary ext3 boot<br /> 2 269MB 69.0GB 68.7GB primary<br /> 3 69.0GB 1169GB 1100GB primary<br /> <br /> mdadm abil on <br /> <br /> * kõigi kõvaketaste esimesed partitsioonid ühendatud /dev/md/boot raid1 lülitusse (at-dom0 operatsioonisüsteemi jaoks)<br /> * kõigi kõvaketaste teised partitsioonid ühendatud /dev/md/system raid5 lülitusse (at-dom0 operatsioonisüsteemi jaoks)<br /> * kõigi kõvaketaste teised partitsioonid ühendatud /dev/md/data raid5 lülitusse (virtuaalsete arvutite jaoks)<br /> <br /> ====LVM kasutamine====<br /> <br /> at-dom0 enda operatsioonisüsteemi jaoks kasutuses sellised plokkseadmed<br /> <br /> * /boot - /dev/md/boot (mdadm ressurss)<br /> * / - /dev/system/root (LVM ressurss)<br /> <br /> at-dom0.ims arvutil töötavad kaks virtuaalset arvutit<br /> <br /> ====Võrgu kasutamine====<br /> <br /> Kaks arvuti võrgukaarti on kasutusel selliselt<br /> <br /> * peth0 - esimene füüsiline võrgukaart<br /> * peth1 - teine füüsiline võrgukaart<br /> * eth0 - esimest füüsilist võrgukaarti sisaldav sild (fiktiivne aadress 10.101.101.21)<br /> * eth1 - teist füüsilist võrgukaarti sisaldav sild (172.17.35.21)<br /> * vaikelüüs 172.17.35.1<br /> <br /> ===eap.ims guest===<br /> <br /> eap.ims kasutab selliseid hosti ressursse<br /> <br /> Plokkseade<br /> <br /> /dev/data/eap_root<br /> /dev/data/eap_home<br /> /dev/data/eap_data_backup<br /> /dev/data/eap_data_postgresql<br /> /dev/data/eap_swap<br /> <br /> Võrk<br /> <br /> guesti seade eth0 (172.17.35.22) on muu võrguga ühenduses hosti eth1 silla kaudu<br /> <br /> Põhiline eap.ims arvutis töötav rakendustarkvara on PostgreSQL v. 9.0 andmebaas.<br /> <br /> * WAL logid salvestatakse iga 30 minuti järel RAID1 (redundantne) kõvaketastele (andmebaasi serveril)<br /> <br /> ===fw.ims guest===<br /> <br /> fw.ims kasutab selliseid hosti ressursse<br /> <br /> Plokkseade<br /> <br /> /dev/data/fw_root<br /> /dev/data/fw_home<br /> /dev/data/fw_data_backup<br /> /dev/data/fw_data_postgresql<br /> /dev/data/fw_swap <br /> <br /> Võrk<br /> <br /> guesti seade eth0 (193.40.35.96) on muu võrguga ühenduses hosti eth0 silla kaudu<br /> guesti seade eth1 (172.17.35.18) on muu võrguga ühenduses hosti eth1 silla kaudu<br /> <br /> Peamised fw.ims arvutis töötavad rakendusprogrammid on<br /> <br /> * PostgreSQL v. 9.0 andmebaas<br /> * Apache veebiserver<br /> * NFS failiserver, mis jagab /home kataloogi eap.ims arvutisse<br /> <br /> ===varundus.ims===<br /> <br /> ====mdadm kasutamine====<br /> <br /> Neli füüsilist kõvaketast on partitsioneeritud sarnaselt<br /> <br /> root@varundus:~# parted /dev/sda p<br /> Model: ATA WDC WD2003FYYS-0 (scsi)<br /> Disk /dev/sda: 2000GB<br /> Sector size (logical/physical): 512B/512B<br /> Partition Table: msdos<br /> <br /> Number Start End Size Type File system Flags<br /> 1 1049kB 269MB 268MB primary ext3 boot<br /> 2 269MB 2000GB 2000GB primary<br /> <br /> mdadm abil on<br /> <br /> * kõigi kõvaketaste esimesed partitsioonid ühendatud /dev/md/boot raid1 lülitusse<br /> * kõigi kõvaketaste teised partitsioonid ühendatud /dev/md/system raid5 lülitusse<br /> <br /> ====LVM kasutamine====<br /> <br /> varundus arvutis kasutuses sellised plokkseadmed<br /> <br /> * /boot - /dev/md/boot (mdadm ressurss)<br /> * / - /dev/system/root (LVM ressurss)<br /> * /srv/backup - /dev/system/backup (LVM ressurss)<br /> <br /> ====Võrgu kasutamine====<br /> <br /> Kaks arvuti võrgukaarti on kasutusel selliselt<br /> <br /> * eth0 - 172.17.35.19<br /> * vaikelüüs 172.17.35.1<br /> <br /> ====rsnapshot kasutamine====<br /> <br /> rsnapshot tarkvara tööd juhib seadistusfail /etc/rsnapshot.conf ja varundatud andmed asuvad kataloogis /srv/backup/rsnapshot avutite nimelistes kataloogides. Üldiselt varundatakse kõiki failisüsteeme välja arvatud mõned kataloogid<br /> <br /> /dev<br /> /proc<br /> /tmp<br /> /sys<br /> /mnt<br /> <br /> Varundatud andmeid roteeritakse selliselt, et säilitatakse seisud<br /> <br /> * viimased 28 päeva<br /> * viimased 12 nädalat<br /> * viimased 24 kuud<br /> <br /> Full backup: kord nädalas nublu.chem.ut.ee 2-le eraldi kõvakettale (mitteredundantsed), säilitatakse 4-5 viimast täiskoopiat.<br /> <br /> Full backupi ligikaudne maht (24.01.2011): 35 GB<br /> <br /> <br /> Iga päeva WAL logid (säilitatakse kahe full backupi vahel tekkinud WAL logid (nädala WAL logide ligikaudne maht (24.01.2011): 18 GB<br /> <br /> Tarmo virtuaalserverist hetkel backuppi ei tehta.<br /> <br /> ===Monitooring===<br /> <br /> Monitooringuks kasutatakse Zabbix tarkvara, igasse operatsioonisüsteemi on paigaldatud Zabbix agent, mida juhib seadistusfail /etc/zabbix/zabbix_agentd.conf. Zabbix server asub eemal, aadressil 84.50.96.138 ja pöördub monitooritavate poole kahel viisil<br /> <br /> * üle ülikooli OpenVPN võrgu otse kõigi operatsioonisüsteemide poole, et monitoorida süsteemi üldisi omadusi (failisüsteemide täituvus, cpu load jne)<br /> * üle ülikooli OpenVPN võrgu otse mõlema füüsilise arvuti poole üle IPMI liidese, et monitoorida füüsilise riistvara omadusi (nt emaplaadi temperatuur)<br /> * üle avaliku võrgu, et monitoorida http://fw.ims.ut.ee/ veebikoha kättesaadavust<br /> <br /> ===Kasulikud lisamaterjalid===<br /> <br /> * http://www.auul.pri.ee/wiki/NUT_tarkvara_kasutamine_Debian_Squeeze_operatsioonis%C3%BCsteemiga<br /> * http://www.auul.pri.ee/wiki/EMC_Networker_client<br /> * http://www.auul.pri.ee/wiki/Tarkvaralise_mdadm_RAID_kasutamine_operatsioonis%C3%BCsteemiga_Debian_Squeeze</div> Imreoolberg https://ims.ut.ee/index.php?title=Eab_infra&diff=8949 Eab infra 2011-11-02T08:48:13Z <p>Imreoolberg: /* Riistvara kaughaldus */</p> <hr /> <div>===Sissejuhatus===<br /> <br /> Käesoleva teksti eesmärgiks on kirjeldada EAP projekti juures toimuvat riistvara, võrgu, operatsioonisüsteemi keskkonna ja rakendustarkvara kasutamist.<br /> <br /> ===Riistvara===<br /> <br /> Projektis kasutatakse sellist riistavara<br /> <br /> * Powerware 5115 UPS<br /> * 2 x S3420GP emaplaadiga Ordi arvutid<br /> * mõlemad arvutid sisaldavad 4 x 2 TB kõvakettaid<br /> * generic kohtvõrgu kommutaator<br /> <br /> ===Tarkvara===<br /> <br /> Projekti arvutites kasutatakse järgmist tarkvara<br /> <br /> * Debian Squeeze v. 6 64bit operatsioonisüsteem<br /> * XEN v. 4 virtualiseerimise tarkvara<br /> * Apache veebiserver<br /> * PostgreSQL andmebaas<br /> * Zabbix monitooringutarkvara<br /> * OpenVPN kaugligipääsu tarkvara<br /> * rsnapshot ja EMC Networker varundustarkvara<br /> * plokkseadmete haldamiseks mdadm ja LVM tarkvara<br /> <br /> ===Võrgutopoloogia===<br /> <br /> _____<br /> 195.80.35.1 | | ülikooli võrguseade<br /> ----------------------------------------------|----------------------------------------------| |<br /> | |_____|<br /> | | 172.17.35.1<br /> | 195.80.35.96 |<br /> | 2001:bb8:2002:2300:7231:40ff:fe03:5128 | <br /> _____ __|__ |<br /> | | | | |<br /> | F | | V | | <br /> |_____| at-dom0.ims |_____| fw.ims |<br /> | os: 172.17.35.21 | 172.17.35.18 |<br /> | 2001:bb8:2002:2300:21e:67ff:fe03:c3c0 | 2001:bb8:2002:2300:7221:17ff:fe03:5018 |<br /> | impi: 172.17.35.20 | |<br /> --|-------------------------------|-------------------|-----------------------|-------------------------|------ <br /> | |<br /> __|__ __|__<br /> | | | |<br /> | F | | V |<br /> |_____| |_____|<br /> <br /> varundus.ims eap.ims<br /> os: 172.17.35.19 172.17.35.22<br /> 2001:bb8:2002:2300:21e:67ff:fe03:a0f9 2001:bb8:2002:2300:7221:17ff:fe03:5022<br /> ipmi: 172.17.35.5<br /> <br /> kus<br /> <br /> * at-dom0.ims - füüsiline virtualiseerimise arvuti<br /> * varundus.ims - füüsiline varunduse arvuti<br /> * fw.ims (fw.ims.ut.ee) - virtuaalne arvuti<br /> * eap.ims - virtuaalne arvuti<br /> <br /> Märkused<br /> <br /> * Füüsilistel arvutitel on lisaks operatsioonisüsteemi ip aadressile ka füüsilise riistvara kaughalduse ipmi aadress<br /> * Operatsioonisüsteemid omandavad automaatselt oma mac aadresside abil ipv6 aadressid, neid kasutatakse EMC Networkeriga varundamisel<br /> * 172.17.35 võrgu arvutitest 195.80.35.96 poole pöördudes toimub asümmeetriline ruuting (kuna ülikooli võrguseade ei tee 172.17.35 -&gt; 195.80.35.1 nat teisendust)<br /> <br /> ===Riistvara kaughaldus===<br /> <br /> Riistvaraliste arvutite kaughalduseks kasutatakse IMPI protokolli onboard BMC kontrolliriga suhtlemiseks. Muu hulgas võimaldab see ligipääsu arvuti BIOSile ning virtuaalse järjestikpordi kaudu serial konsoolile (st operatsioonisüsteemile). IPMI kasutamist on kirjeldatud aadressil http://kuutorvaja.eenet.ee/wiki/HP_BladeSystem_c7000_seadmeriiul#IPMI_kasutamine<br /> <br /> ===Plokkseadmete haldamine===<br /> <br /> Plokkseadmete haldamiseks kasutatakse mdadm ja LVM tarkvara. Mõlemas füüsilises arvutis töötavad neli samade parameetritega kõvaketast on ühendatud RAID massiividesse; RAID ressurssi hallatakse edasi LVM abil kasutamiseks failisüsteemide ja saaleala jaoks.<br /> <br /> ===Virtualiseerimine===<br /> <br /> Efektiivsemaks ja paindlikumaks riistavaralise ressursi kasutamiseks on teenusserverid eap.ims ja fw.ims juurutatud virtuaalsete arvutitena. Neile saab kasutamiseks anda sobiva hulga protsessori, mälu, plokkseadme ja võrguressurssi. Projektis kasutatakse XEN virtualiseerimise tarkvara, mille kasutamist on kirjeldatud nt aadressidel<br /> <br /> * http://www.auul.pri.ee/wiki/Xen_ja_Debian_Squeeze<br /> * http://kuutorvaja.eenet.ee/wiki/Unix_keskkonna_administreerimine#Virtualiseerimine<br /> <br /> ====XEN host====<br /> <br /> XEN hostile vastav operatsioonisüsteemi eksemplar töötab füüsilisel riistvaral ja selle seest tõimub virtuaalsete arvutite juhtimine. Kui välja arvata XEN hosti alglaaduri seadistused ja mõned virtualiseerimisega seotud protsessid on tegu tavalise Debian Squeeze operatsioonisüsteemiga. <br /> <br /> ====XEN guest====<br /> <br /> XEN guestid on virtuaalsed operatsioonisüsteemid, mis töötavad XEN hosti kontrolli all ja mis kasutavad XEN hostist neile eraldatud ressursse.<br /> <br /> ===at-dom0 host===<br /> <br /> ====mdadm kasutamine====<br /> <br /> Neli füüsilist kõvaketast on partitsioneeritud sarnaselt<br /> <br /> root@at-dom0:~# parted /dev/sda p<br /> Model: ATA WDC WD2003FYYS-0 (scsi)<br /> Disk /dev/sda: 2000GB<br /> Sector size (logical/physical): 512B/512B<br /> Partition Table: msdos<br /> <br /> Number Start End Size Type File system Flags<br /> 1 1049kB 269MB 268MB primary ext3 boot<br /> 2 269MB 69.0GB 68.7GB primary<br /> 3 69.0GB 1169GB 1100GB primary<br /> <br /> mdadm abil on <br /> <br /> * kõigi kõvaketaste esimesed partitsioonid ühendatud /dev/md/boot raid1 lülitusse (at-dom0 operatsioonisüsteemi jaoks)<br /> * kõigi kõvaketaste teised partitsioonid ühendatud /dev/md/system raid5 lülitusse (at-dom0 operatsioonisüsteemi jaoks)<br /> * kõigi kõvaketaste teised partitsioonid ühendatud /dev/md/data raid5 lülitusse (virtuaalsete arvutite jaoks)<br /> <br /> ====LVM kasutamine====<br /> <br /> at-dom0 enda operatsioonisüsteemi jaoks kasutuses sellised plokkseadmed<br /> <br /> * /boot - /dev/md/boot (mdadm ressurss)<br /> * / - /dev/system/root (LVM ressurss)<br /> <br /> at-dom0.ims arvutil töötavad kaks virtuaalset arvutit<br /> <br /> ====Võrgu kasutamine====<br /> <br /> Kaks arvuti võrgukaarti on kasutusel selliselt<br /> <br /> * peth0 - esimene füüsiline võrgukaart<br /> * peth1 - teine füüsiline võrgukaart<br /> * eth0 - esimest füüsilist võrgukaarti sisaldav sild (fiktiivne aadress 10.101.101.21)<br /> * eth1 - teist füüsilist võrgukaarti sisaldav sild (172.17.35.21)<br /> * vaikelüüs 172.17.35.1<br /> <br /> ===eap.ims guest===<br /> <br /> eap.ims kasutab selliseid hosti ressursse<br /> <br /> Plokkseade<br /> <br /> /dev/data/eap_root<br /> /dev/data/eap_home<br /> /dev/data/eap_data_backup<br /> /dev/data/eap_data_postgresql<br /> /dev/data/eap_swap<br /> <br /> Võrk<br /> <br /> guesti seade eth0 (172.17.35.22) on muu võrguga ühenduses hosti eth1 silla kaudu<br /> <br /> Põhiline eap.ims arvutis töötav rakendustarkvara on PostgreSQL v. 9.0 andmebaas.<br /> <br /> * WAL logid salvestatakse iga 30 minuti järel RAID1 (redundantne) kõvaketastele (andmebaasi serveril)<br /> <br /> ===fw.ims guest===<br /> <br /> fw.ims kasutab selliseid hosti ressursse<br /> <br /> Plokkseade<br /> <br /> /dev/data/fw_root<br /> /dev/data/fw_home<br /> /dev/data/fw_data_backup<br /> /dev/data/fw_data_postgresql<br /> /dev/data/fw_swap <br /> <br /> Võrk<br /> <br /> guesti seade eth0 (193.40.35.96) on muu võrguga ühenduses hosti eth0 silla kaudu<br /> guesti seade eth1 (172.17.35.18) on muu võrguga ühenduses hosti eth1 silla kaudu<br /> <br /> Peamised fw.ims arvutis töötavad rakendusprogrammid on<br /> <br /> * PostgreSQL v. 9.0 andmebaas<br /> * Apache veebiserver<br /> * NFS failiserver, mis jagab /home kataloogi eap.ims arvutisse<br /> <br /> ===varundus.ims===<br /> <br /> ====mdadm kasutamine====<br /> <br /> Neli füüsilist kõvaketast on partitsioneeritud sarnaselt<br /> <br /> root@varundus:~# parted /dev/sda p<br /> Model: ATA WDC WD2003FYYS-0 (scsi)<br /> Disk /dev/sda: 2000GB<br /> Sector size (logical/physical): 512B/512B<br /> Partition Table: msdos<br /> <br /> Number Start End Size Type File system Flags<br /> 1 1049kB 269MB 268MB primary ext3 boot<br /> 2 269MB 2000GB 2000GB primary<br /> <br /> mdadm abil on<br /> <br /> * kõigi kõvaketaste esimesed partitsioonid ühendatud /dev/md/boot raid1 lülitusse<br /> * kõigi kõvaketaste teised partitsioonid ühendatud /dev/md/system raid5 lülitusse<br /> <br /> ====LVM kasutamine====<br /> <br /> varundus arvutis kasutuses sellised plokkseadmed<br /> <br /> * /boot - /dev/md/boot (mdadm ressurss)<br /> * / - /dev/system/root (LVM ressurss)<br /> * /srv/backup - /dev/system/backup (LVM ressurss)<br /> <br /> ====Võrgu kasutamine====<br /> <br /> Kaks arvuti võrgukaarti on kasutusel selliselt<br /> <br /> * eth0 - 172.17.35.19<br /> * vaikelüüs 172.17.35.1<br /> <br /> ====rsnapshot kasutamine====<br /> <br /> rsnapshot tarkvara tööd juhib seadistusfail /etc/rsnapshot.conf ja varundatud andmed asuvad kataloogis /srv/backup/rsnapshot avutite nimelistes kataloogides. Üldiselt varundatakse kõiki failisüsteeme välja arvatud mõned kataloogid<br /> <br /> /dev<br /> /proc<br /> /tmp<br /> /sys<br /> /mnt<br /> <br /> Varundatud andmeid roteeritakse selliselt, et säilitatakse seisud<br /> <br /> * viimased 28 päeva<br /> * viimased 12 nädalat<br /> * viimased 24 kuud<br /> <br /> Full backup: kord nädalas nublu.chem.ut.ee 2-le eraldi kõvakettale (mitteredundantsed), säilitatakse 4-5 viimast täiskoopiat.<br /> <br /> Full backupi ligikaudne maht (24.01.2011): 35 GB<br /> <br /> <br /> Iga päeva WAL logid (säilitatakse kahe full backupi vahel tekkinud WAL logid (nädala WAL logide ligikaudne maht (24.01.2011): 18 GB<br /> <br /> Tarmo virtuaalserverist hetkel backuppi ei tehta.<br /> <br /> ===Monitooring===<br /> <br /> Monitooringuks kasutatakse Zabbix tarkvara, igasse operatsioonisüsteemi on paigaldatud Zabbix agent, mida juhib seadistusfail /etc/zabbix/zabbix_agentd.conf. Zabbix server asub eemal, aadressil 84.50.96.138 ja pöördub monitooritavate poole kahel viisil<br /> <br /> * üle ülikooli OpenVPN võrgu otse kõigi operatsioonisüsteemide poole, et monitoorida süsteemi üldisi omadusi (failisüsteemide täituvus, cpu load jne)<br /> * üle ülikooli OpenVPN võrgu otse mõlema füüsilise arvuti poole üle IPMI liidese, et monitoorida füüsilise riistvara omadusi (nt emaplaadi temperatuur)<br /> * üle avaliku võrgu, et monitoorida http://fw.ims.ut.ee/ veebikoha kättesaadavust<br /> <br /> ===Kasulikud lisamaterjalid===<br /> <br /> * http://www.auul.pri.ee/wiki/NUT_tarkvara_kasutamine_Debian_Squeeze_operatsioonis%C3%BCsteemiga<br /> * http://www.auul.pri.ee/wiki/EMC_Networker_client<br /> * http://www.auul.pri.ee/wiki/Tarkvaralise_mdadm_RAID_kasutamine_operatsioonis%C3%BCsteemiga_Debian_Squeeze</div> Imreoolberg https://ims.ut.ee/index.php?title=Eab_infra&diff=8948 Eab infra 2011-11-02T08:46:28Z <p>Imreoolberg: </p> <hr /> <div>===Sissejuhatus===<br /> <br /> Käesoleva teksti eesmärgiks on kirjeldada EAP projekti juures toimuvat riistvara, võrgu, operatsioonisüsteemi keskkonna ja rakendustarkvara kasutamist.<br /> <br /> ===Riistvara===<br /> <br /> Projektis kasutatakse sellist riistavara<br /> <br /> * Powerware 5115 UPS<br /> * 2 x S3420GP emaplaadiga Ordi arvutid<br /> * mõlemad arvutid sisaldavad 4 x 2 TB kõvakettaid<br /> * generic kohtvõrgu kommutaator<br /> <br /> ===Tarkvara===<br /> <br /> Projekti arvutites kasutatakse järgmist tarkvara<br /> <br /> * Debian Squeeze v. 6 64bit operatsioonisüsteem<br /> * XEN v. 4 virtualiseerimise tarkvara<br /> * Apache veebiserver<br /> * PostgreSQL andmebaas<br /> * Zabbix monitooringutarkvara<br /> * OpenVPN kaugligipääsu tarkvara<br /> * rsnapshot ja EMC Networker varundustarkvara<br /> * plokkseadmete haldamiseks mdadm ja LVM tarkvara<br /> <br /> ===Võrgutopoloogia===<br /> <br /> _____<br /> 195.80.35.1 | | ülikooli võrguseade<br /> ----------------------------------------------|----------------------------------------------| |<br /> | |_____|<br /> | | 172.17.35.1<br /> | 195.80.35.96 |<br /> | 2001:bb8:2002:2300:7231:40ff:fe03:5128 | <br /> _____ __|__ |<br /> | | | | |<br /> | F | | V | | <br /> |_____| at-dom0.ims |_____| fw.ims |<br /> | os: 172.17.35.21 | 172.17.35.18 |<br /> | 2001:bb8:2002:2300:21e:67ff:fe03:c3c0 | 2001:bb8:2002:2300:7221:17ff:fe03:5018 |<br /> | impi: 172.17.35.20 | |<br /> --|-------------------------------|-------------------|-----------------------|-------------------------|------ <br /> | |<br /> __|__ __|__<br /> | | | |<br /> | F | | V |<br /> |_____| |_____|<br /> <br /> varundus.ims eap.ims<br /> os: 172.17.35.19 172.17.35.22<br /> 2001:bb8:2002:2300:21e:67ff:fe03:a0f9 2001:bb8:2002:2300:7221:17ff:fe03:5022<br /> ipmi: 172.17.35.5<br /> <br /> kus<br /> <br /> * at-dom0.ims - füüsiline virtualiseerimise arvuti<br /> * varundus.ims - füüsiline varunduse arvuti<br /> * fw.ims (fw.ims.ut.ee) - virtuaalne arvuti<br /> * eap.ims - virtuaalne arvuti<br /> <br /> Märkused<br /> <br /> * Füüsilistel arvutitel on lisaks operatsioonisüsteemi ip aadressile ka füüsilise riistvara kaughalduse ipmi aadress<br /> * Operatsioonisüsteemid omandavad automaatselt oma mac aadresside abil ipv6 aadressid, neid kasutatakse EMC Networkeriga varundamisel<br /> * 172.17.35 võrgu arvutitest 195.80.35.96 poole pöördudes toimub asümmeetriline ruuting (kuna ülikooli võrguseade ei tee 172.17.35 -&gt; 195.80.35.1 nat teisendust)<br /> <br /> ===Riistvara kaughaldus===<br /> <br /> Riistvaraliste arvutite kaughalduseks kasutatakse IMPI protokolli onboard BMC kontrolliriga suhtlemiseks. Muu hulgas võimaldab see ligipääsu arvuti BIOSile ning virtuaalse järjestikpordi kaudu serial konsoolile (st operatsioonisüsteemile).<br /> <br /> ===Plokkseadmete haldamine===<br /> <br /> Plokkseadmete haldamiseks kasutatakse mdadm ja LVM tarkvara. Mõlemas füüsilises arvutis töötavad neli samade parameetritega kõvaketast on ühendatud RAID massiividesse; RAID ressurssi hallatakse edasi LVM abil kasutamiseks failisüsteemide ja saaleala jaoks.<br /> <br /> ===Virtualiseerimine===<br /> <br /> Efektiivsemaks ja paindlikumaks riistavaralise ressursi kasutamiseks on teenusserverid eap.ims ja fw.ims juurutatud virtuaalsete arvutitena. Neile saab kasutamiseks anda sobiva hulga protsessori, mälu, plokkseadme ja võrguressurssi. Projektis kasutatakse XEN virtualiseerimise tarkvara, mille kasutamist on kirjeldatud nt aadressidel<br /> <br /> * http://www.auul.pri.ee/wiki/Xen_ja_Debian_Squeeze<br /> * http://kuutorvaja.eenet.ee/wiki/Unix_keskkonna_administreerimine#Virtualiseerimine<br /> <br /> ====XEN host====<br /> <br /> XEN hostile vastav operatsioonisüsteemi eksemplar töötab füüsilisel riistvaral ja selle seest tõimub virtuaalsete arvutite juhtimine. Kui välja arvata XEN hosti alglaaduri seadistused ja mõned virtualiseerimisega seotud protsessid on tegu tavalise Debian Squeeze operatsioonisüsteemiga. <br /> <br /> ====XEN guest====<br /> <br /> XEN guestid on virtuaalsed operatsioonisüsteemid, mis töötavad XEN hosti kontrolli all ja mis kasutavad XEN hostist neile eraldatud ressursse.<br /> <br /> ===at-dom0 host===<br /> <br /> ====mdadm kasutamine====<br /> <br /> Neli füüsilist kõvaketast on partitsioneeritud sarnaselt<br /> <br /> root@at-dom0:~# parted /dev/sda p<br /> Model: ATA WDC WD2003FYYS-0 (scsi)<br /> Disk /dev/sda: 2000GB<br /> Sector size (logical/physical): 512B/512B<br /> Partition Table: msdos<br /> <br /> Number Start End Size Type File system Flags<br /> 1 1049kB 269MB 268MB primary ext3 boot<br /> 2 269MB 69.0GB 68.7GB primary<br /> 3 69.0GB 1169GB 1100GB primary<br /> <br /> mdadm abil on <br /> <br /> * kõigi kõvaketaste esimesed partitsioonid ühendatud /dev/md/boot raid1 lülitusse (at-dom0 operatsioonisüsteemi jaoks)<br /> * kõigi kõvaketaste teised partitsioonid ühendatud /dev/md/system raid5 lülitusse (at-dom0 operatsioonisüsteemi jaoks)<br /> * kõigi kõvaketaste teised partitsioonid ühendatud /dev/md/data raid5 lülitusse (virtuaalsete arvutite jaoks)<br /> <br /> ====LVM kasutamine====<br /> <br /> at-dom0 enda operatsioonisüsteemi jaoks kasutuses sellised plokkseadmed<br /> <br /> * /boot - /dev/md/boot (mdadm ressurss)<br /> * / - /dev/system/root (LVM ressurss)<br /> <br /> at-dom0.ims arvutil töötavad kaks virtuaalset arvutit<br /> <br /> ====Võrgu kasutamine====<br /> <br /> Kaks arvuti võrgukaarti on kasutusel selliselt<br /> <br /> * peth0 - esimene füüsiline võrgukaart<br /> * peth1 - teine füüsiline võrgukaart<br /> * eth0 - esimest füüsilist võrgukaarti sisaldav sild (fiktiivne aadress 10.101.101.21)<br /> * eth1 - teist füüsilist võrgukaarti sisaldav sild (172.17.35.21)<br /> * vaikelüüs 172.17.35.1<br /> <br /> ===eap.ims guest===<br /> <br /> eap.ims kasutab selliseid hosti ressursse<br /> <br /> Plokkseade<br /> <br /> /dev/data/eap_root<br /> /dev/data/eap_home<br /> /dev/data/eap_data_backup<br /> /dev/data/eap_data_postgresql<br /> /dev/data/eap_swap<br /> <br /> Võrk<br /> <br /> guesti seade eth0 (172.17.35.22) on muu võrguga ühenduses hosti eth1 silla kaudu<br /> <br /> Põhiline eap.ims arvutis töötav rakendustarkvara on PostgreSQL v. 9.0 andmebaas.<br /> <br /> * WAL logid salvestatakse iga 30 minuti järel RAID1 (redundantne) kõvaketastele (andmebaasi serveril)<br /> <br /> ===fw.ims guest===<br /> <br /> fw.ims kasutab selliseid hosti ressursse<br /> <br /> Plokkseade<br /> <br /> /dev/data/fw_root<br /> /dev/data/fw_home<br /> /dev/data/fw_data_backup<br /> /dev/data/fw_data_postgresql<br /> /dev/data/fw_swap <br /> <br /> Võrk<br /> <br /> guesti seade eth0 (193.40.35.96) on muu võrguga ühenduses hosti eth0 silla kaudu<br /> guesti seade eth1 (172.17.35.18) on muu võrguga ühenduses hosti eth1 silla kaudu<br /> <br /> Peamised fw.ims arvutis töötavad rakendusprogrammid on<br /> <br /> * PostgreSQL v. 9.0 andmebaas<br /> * Apache veebiserver<br /> * NFS failiserver, mis jagab /home kataloogi eap.ims arvutisse<br /> <br /> ===varundus.ims===<br /> <br /> ====mdadm kasutamine====<br /> <br /> Neli füüsilist kõvaketast on partitsioneeritud sarnaselt<br /> <br /> root@varundus:~# parted /dev/sda p<br /> Model: ATA WDC WD2003FYYS-0 (scsi)<br /> Disk /dev/sda: 2000GB<br /> Sector size (logical/physical): 512B/512B<br /> Partition Table: msdos<br /> <br /> Number Start End Size Type File system Flags<br /> 1 1049kB 269MB 268MB primary ext3 boot<br /> 2 269MB 2000GB 2000GB primary<br /> <br /> mdadm abil on<br /> <br /> * kõigi kõvaketaste esimesed partitsioonid ühendatud /dev/md/boot raid1 lülitusse<br /> * kõigi kõvaketaste teised partitsioonid ühendatud /dev/md/system raid5 lülitusse<br /> <br /> ====LVM kasutamine====<br /> <br /> varundus arvutis kasutuses sellised plokkseadmed<br /> <br /> * /boot - /dev/md/boot (mdadm ressurss)<br /> * / - /dev/system/root (LVM ressurss)<br /> * /srv/backup - /dev/system/backup (LVM ressurss)<br /> <br /> ====Võrgu kasutamine====<br /> <br /> Kaks arvuti võrgukaarti on kasutusel selliselt<br /> <br /> * eth0 - 172.17.35.19<br /> * vaikelüüs 172.17.35.1<br /> <br /> ====rsnapshot kasutamine====<br /> <br /> rsnapshot tarkvara tööd juhib seadistusfail /etc/rsnapshot.conf ja varundatud andmed asuvad kataloogis /srv/backup/rsnapshot avutite nimelistes kataloogides. Üldiselt varundatakse kõiki failisüsteeme välja arvatud mõned kataloogid<br /> <br /> /dev<br /> /proc<br /> /tmp<br /> /sys<br /> /mnt<br /> <br /> Varundatud andmeid roteeritakse selliselt, et säilitatakse seisud<br /> <br /> * viimased 28 päeva<br /> * viimased 12 nädalat<br /> * viimased 24 kuud<br /> <br /> Full backup: kord nädalas nublu.chem.ut.ee 2-le eraldi kõvakettale (mitteredundantsed), säilitatakse 4-5 viimast täiskoopiat.<br /> <br /> Full backupi ligikaudne maht (24.01.2011): 35 GB<br /> <br /> <br /> Iga päeva WAL logid (säilitatakse kahe full backupi vahel tekkinud WAL logid (nädala WAL logide ligikaudne maht (24.01.2011): 18 GB<br /> <br /> Tarmo virtuaalserverist hetkel backuppi ei tehta.<br /> <br /> ===Monitooring===<br /> <br /> Monitooringuks kasutatakse Zabbix tarkvara, igasse operatsioonisüsteemi on paigaldatud Zabbix agent, mida juhib seadistusfail /etc/zabbix/zabbix_agentd.conf. Zabbix server asub eemal, aadressil 84.50.96.138 ja pöördub monitooritavate poole kahel viisil<br /> <br /> * üle ülikooli OpenVPN võrgu otse kõigi operatsioonisüsteemide poole, et monitoorida süsteemi üldisi omadusi (failisüsteemide täituvus, cpu load jne)<br /> * üle ülikooli OpenVPN võrgu otse mõlema füüsilise arvuti poole üle IPMI liidese, et monitoorida füüsilise riistvara omadusi (nt emaplaadi temperatuur)<br /> * üle avaliku võrgu, et monitoorida http://fw.ims.ut.ee/ veebikoha kättesaadavust<br /> <br /> ===Kasulikud lisamaterjalid===<br /> <br /> * http://www.auul.pri.ee/wiki/NUT_tarkvara_kasutamine_Debian_Squeeze_operatsioonis%C3%BCsteemiga<br /> * http://www.auul.pri.ee/wiki/EMC_Networker_client<br /> * http://www.auul.pri.ee/wiki/Tarkvaralise_mdadm_RAID_kasutamine_operatsioonis%C3%BCsteemiga_Debian_Squeeze</div> Imreoolberg https://ims.ut.ee/index.php?title=Eab_infra&diff=8947 Eab infra 2011-11-02T08:45:32Z <p>Imreoolberg: /* Monitooring */</p> <hr /> <div>===Sissejuhatus===<br /> <br /> Käesoleva teksti eesmärgiks on kirjeldada EAP projekti juures toimuvat riistvara, võrgu, operatsioonisüsteemi keskkonna ja rakendustarkvara kasutamist.<br /> <br /> ===Riistvara===<br /> <br /> Projektis kasutatakse sellist riistavara<br /> <br /> * Powerware 5115 UPS<br /> * 2 x S3420GP emaplaadiga Ordi arvutid<br /> * mõlemad arvutid sisaldavad 4 x 2 TB kõvakettaid<br /> * generic kohtvõrgu kommutaator<br /> <br /> ===Tarkvara===<br /> <br /> Projekti arvutites kasutatakse järgmist tarkvara<br /> <br /> * Debian Squeeze v. 6 64bit operatsioonisüsteem<br /> * XEN v. 4 virtualiseerimise tarkvara<br /> * Apache veebiserver<br /> * PostgreSQL andmebaas<br /> * Zabbix monitooringutarkvara<br /> * OpenVPN kaugligipääsu tarkvara<br /> * rsnapshot ja EMC Networker varundustarkvara<br /> * plokkseadmete haldamiseks mdadm ja LVM tarkvara<br /> <br /> ===Riistvara kaughaldus===<br /> <br /> Riistvaraliste arvutite kaughalduseks kasutatakse IMPI protokolli onboard BMC kontrolliriga suhtlemiseks. Muu hulgas võimaldab see ligipääsu arvuti BIOSile ning virtuaalse järjestikpordi kaudu serial konsoolile (st operatsioonisüsteemile).<br /> <br /> ===Võrgutopoloogia===<br /> <br /> _____<br /> 195.80.35.1 | | ülikooli võrguseade<br /> ----------------------------------------------|----------------------------------------------| |<br /> | |_____|<br /> | | 172.17.35.1<br /> | 195.80.35.96 |<br /> | 2001:bb8:2002:2300:7231:40ff:fe03:5128 | <br /> _____ __|__ |<br /> | | | | |<br /> | F | | V | | <br /> |_____| at-dom0.ims |_____| fw.ims |<br /> | os: 172.17.35.21 | 172.17.35.18 |<br /> | 2001:bb8:2002:2300:21e:67ff:fe03:c3c0 | 2001:bb8:2002:2300:7221:17ff:fe03:5018 |<br /> | impi: 172.17.35.20 | |<br /> --|-------------------------------|-------------------|-----------------------|-------------------------|------ <br /> | |<br /> __|__ __|__<br /> | | | |<br /> | F | | V |<br /> |_____| |_____|<br /> <br /> varundus.ims eap.ims<br /> os: 172.17.35.19 172.17.35.22<br /> 2001:bb8:2002:2300:21e:67ff:fe03:a0f9 2001:bb8:2002:2300:7221:17ff:fe03:5022<br /> ipmi: 172.17.35.5<br /> <br /> kus<br /> <br /> * at-dom0.ims - füüsiline virtualiseerimise arvuti<br /> * varundus.ims - füüsiline varunduse arvuti<br /> * fw.ims (fw.ims.ut.ee) - virtuaalne arvuti<br /> * eap.ims - virtuaalne arvuti<br /> <br /> Märkused<br /> <br /> * Füüsilistel arvutitel on lisaks operatsioonisüsteemi ip aadressile ka füüsilise riistvara kaughalduse ipmi aadress<br /> * Operatsioonisüsteemid omandavad automaatselt oma mac aadresside abil ipv6 aadressid, neid kasutatakse EMC Networkeriga varundamisel<br /> * 172.17.35 võrgu arvutitest 195.80.35.96 poole pöördudes toimub asümmeetriline ruuting (kuna ülikooli võrguseade ei tee 172.17.35 -&gt; 195.80.35.1 nat teisendust)<br /> <br /> ===Plokkseadmete haldamine===<br /> <br /> Plokkseadmete haldamiseks kasutatakse mdadm ja LVM tarkvara. Mõlemas füüsilises arvutis töötavad neli samade parameetritega kõvaketast on ühendatud RAID massiividesse; RAID ressurssi hallatakse edasi LVM abil kasutamiseks failisüsteemide ja saaleala jaoks.<br /> <br /> ===Virtualiseerimine===<br /> <br /> Efektiivsemaks ja paindlikumaks riistavaralise ressursi kasutamiseks on teenusserverid eap.ims ja fw.ims juurutatud virtuaalsete arvutitena. Neile saab kasutamiseks anda sobiva hulga protsessori, mälu, plokkseadme ja võrguressurssi. Projektis kasutatakse XEN virtualiseerimise tarkvara, mille kasutamist on kirjeldatud nt aadressidel<br /> <br /> * http://www.auul.pri.ee/wiki/Xen_ja_Debian_Squeeze<br /> * http://kuutorvaja.eenet.ee/wiki/Unix_keskkonna_administreerimine#Virtualiseerimine<br /> <br /> ====XEN host====<br /> <br /> XEN hostile vastav operatsioonisüsteemi eksemplar töötab füüsilisel riistvaral ja selle seest tõimub virtuaalsete arvutite juhtimine. Kui välja arvata XEN hosti alglaaduri seadistused ja mõned virtualiseerimisega seotud protsessid on tegu tavalise Debian Squeeze operatsioonisüsteemiga. <br /> <br /> ====XEN guest====<br /> <br /> XEN guestid on virtuaalsed operatsioonisüsteemid, mis töötavad XEN hosti kontrolli all ja mis kasutavad XEN hostist neile eraldatud ressursse.<br /> <br /> ===at-dom0 host===<br /> <br /> ====mdadm kasutamine====<br /> <br /> Neli füüsilist kõvaketast on partitsioneeritud sarnaselt<br /> <br /> root@at-dom0:~# parted /dev/sda p<br /> Model: ATA WDC WD2003FYYS-0 (scsi)<br /> Disk /dev/sda: 2000GB<br /> Sector size (logical/physical): 512B/512B<br /> Partition Table: msdos<br /> <br /> Number Start End Size Type File system Flags<br /> 1 1049kB 269MB 268MB primary ext3 boot<br /> 2 269MB 69.0GB 68.7GB primary<br /> 3 69.0GB 1169GB 1100GB primary<br /> <br /> mdadm abil on <br /> <br /> * kõigi kõvaketaste esimesed partitsioonid ühendatud /dev/md/boot raid1 lülitusse (at-dom0 operatsioonisüsteemi jaoks)<br /> * kõigi kõvaketaste teised partitsioonid ühendatud /dev/md/system raid5 lülitusse (at-dom0 operatsioonisüsteemi jaoks)<br /> * kõigi kõvaketaste teised partitsioonid ühendatud /dev/md/data raid5 lülitusse (virtuaalsete arvutite jaoks)<br /> <br /> ====LVM kasutamine====<br /> <br /> at-dom0 enda operatsioonisüsteemi jaoks kasutuses sellised plokkseadmed<br /> <br /> * /boot - /dev/md/boot (mdadm ressurss)<br /> * / - /dev/system/root (LVM ressurss)<br /> <br /> at-dom0.ims arvutil töötavad kaks virtuaalset arvutit<br /> <br /> ====Võrgu kasutamine====<br /> <br /> Kaks arvuti võrgukaarti on kasutusel selliselt<br /> <br /> * peth0 - esimene füüsiline võrgukaart<br /> * peth1 - teine füüsiline võrgukaart<br /> * eth0 - esimest füüsilist võrgukaarti sisaldav sild (fiktiivne aadress 10.101.101.21)<br /> * eth1 - teist füüsilist võrgukaarti sisaldav sild (172.17.35.21)<br /> * vaikelüüs 172.17.35.1<br /> <br /> ===eap.ims guest===<br /> <br /> eap.ims kasutab selliseid hosti ressursse<br /> <br /> Plokkseade<br /> <br /> /dev/data/eap_root<br /> /dev/data/eap_home<br /> /dev/data/eap_data_backup<br /> /dev/data/eap_data_postgresql<br /> /dev/data/eap_swap<br /> <br /> Võrk<br /> <br /> guesti seade eth0 (172.17.35.22) on muu võrguga ühenduses hosti eth1 silla kaudu<br /> <br /> Põhiline eap.ims arvutis töötav rakendustarkvara on PostgreSQL v. 9.0 andmebaas.<br /> <br /> * WAL logid salvestatakse iga 30 minuti järel RAID1 (redundantne) kõvaketastele (andmebaasi serveril)<br /> <br /> ===fw.ims guest===<br /> <br /> fw.ims kasutab selliseid hosti ressursse<br /> <br /> Plokkseade<br /> <br /> /dev/data/fw_root<br /> /dev/data/fw_home<br /> /dev/data/fw_data_backup<br /> /dev/data/fw_data_postgresql<br /> /dev/data/fw_swap <br /> <br /> Võrk<br /> <br /> guesti seade eth0 (193.40.35.96) on muu võrguga ühenduses hosti eth0 silla kaudu<br /> guesti seade eth1 (172.17.35.18) on muu võrguga ühenduses hosti eth1 silla kaudu<br /> <br /> Peamised fw.ims arvutis töötavad rakendusprogrammid on<br /> <br /> * PostgreSQL v. 9.0 andmebaas<br /> * Apache veebiserver<br /> * NFS failiserver, mis jagab /home kataloogi eap.ims arvutisse<br /> <br /> ===varundus.ims===<br /> <br /> ====mdadm kasutamine====<br /> <br /> Neli füüsilist kõvaketast on partitsioneeritud sarnaselt<br /> <br /> root@varundus:~# parted /dev/sda p<br /> Model: ATA WDC WD2003FYYS-0 (scsi)<br /> Disk /dev/sda: 2000GB<br /> Sector size (logical/physical): 512B/512B<br /> Partition Table: msdos<br /> <br /> Number Start End Size Type File system Flags<br /> 1 1049kB 269MB 268MB primary ext3 boot<br /> 2 269MB 2000GB 2000GB primary<br /> <br /> mdadm abil on<br /> <br /> * kõigi kõvaketaste esimesed partitsioonid ühendatud /dev/md/boot raid1 lülitusse<br /> * kõigi kõvaketaste teised partitsioonid ühendatud /dev/md/system raid5 lülitusse<br /> <br /> ====LVM kasutamine====<br /> <br /> varundus arvutis kasutuses sellised plokkseadmed<br /> <br /> * /boot - /dev/md/boot (mdadm ressurss)<br /> * / - /dev/system/root (LVM ressurss)<br /> * /srv/backup - /dev/system/backup (LVM ressurss)<br /> <br /> ====Võrgu kasutamine====<br /> <br /> Kaks arvuti võrgukaarti on kasutusel selliselt<br /> <br /> * eth0 - 172.17.35.19<br /> * vaikelüüs 172.17.35.1<br /> <br /> ====rsnapshot kasutamine====<br /> <br /> rsnapshot tarkvara tööd juhib seadistusfail /etc/rsnapshot.conf ja varundatud andmed asuvad kataloogis /srv/backup/rsnapshot avutite nimelistes kataloogides. Üldiselt varundatakse kõiki failisüsteeme välja arvatud mõned kataloogid<br /> <br /> /dev<br /> /proc<br /> /tmp<br /> /sys<br /> /mnt<br /> <br /> Varundatud andmeid roteeritakse selliselt, et säilitatakse seisud<br /> <br /> * viimased 28 päeva<br /> * viimased 12 nädalat<br /> * viimased 24 kuud<br /> <br /> Full backup: kord nädalas nublu.chem.ut.ee 2-le eraldi kõvakettale (mitteredundantsed), säilitatakse 4-5 viimast täiskoopiat.<br /> <br /> Full backupi ligikaudne maht (24.01.2011): 35 GB<br /> <br /> <br /> Iga päeva WAL logid (säilitatakse kahe full backupi vahel tekkinud WAL logid (nädala WAL logide ligikaudne maht (24.01.2011): 18 GB<br /> <br /> Tarmo virtuaalserverist hetkel backuppi ei tehta.<br /> <br /> ===Monitooring===<br /> <br /> Monitooringuks kasutatakse Zabbix tarkvara, igasse operatsioonisüsteemi on paigaldatud Zabbix agent, mida juhib seadistusfail /etc/zabbix/zabbix_agentd.conf. Zabbix server asub eemal, aadressil 84.50.96.138 ja pöördub monitooritavate poole kahel viisil<br /> <br /> * üle ülikooli OpenVPN võrgu otse kõigi operatsioonisüsteemide poole, et monitoorida süsteemi üldisi omadusi (failisüsteemide täituvus, cpu load jne)<br /> * üle ülikooli OpenVPN võrgu otse mõlema füüsilise arvuti poole üle IPMI liidese, et monitoorida füüsilise riistvara omadusi (nt emaplaadi temperatuur)<br /> * üle avaliku võrgu, et monitoorida http://fw.ims.ut.ee/ veebikoha kättesaadavust<br /> <br /> ===Kasulikud lisamaterjalid===<br /> <br /> * http://www.auul.pri.ee/wiki/NUT_tarkvara_kasutamine_Debian_Squeeze_operatsioonis%C3%BCsteemiga<br /> * http://www.auul.pri.ee/wiki/EMC_Networker_client<br /> * http://www.auul.pri.ee/wiki/Tarkvaralise_mdadm_RAID_kasutamine_operatsioonis%C3%BCsteemiga_Debian_Squeeze</div> Imreoolberg https://ims.ut.ee/index.php?title=Eab_infra&diff=8946 Eab infra 2011-11-02T08:40:38Z <p>Imreoolberg: /* varundus.ims */</p> <hr /> <div>===Sissejuhatus===<br /> <br /> Käesoleva teksti eesmärgiks on kirjeldada EAP projekti juures toimuvat riistvara, võrgu, operatsioonisüsteemi keskkonna ja rakendustarkvara kasutamist.<br /> <br /> ===Riistvara===<br /> <br /> Projektis kasutatakse sellist riistavara<br /> <br /> * Powerware 5115 UPS<br /> * 2 x S3420GP emaplaadiga Ordi arvutid<br /> * mõlemad arvutid sisaldavad 4 x 2 TB kõvakettaid<br /> * generic kohtvõrgu kommutaator<br /> <br /> ===Tarkvara===<br /> <br /> Projekti arvutites kasutatakse järgmist tarkvara<br /> <br /> * Debian Squeeze v. 6 64bit operatsioonisüsteem<br /> * XEN v. 4 virtualiseerimise tarkvara<br /> * Apache veebiserver<br /> * PostgreSQL andmebaas<br /> * Zabbix monitooringutarkvara<br /> * OpenVPN kaugligipääsu tarkvara<br /> * rsnapshot ja EMC Networker varundustarkvara<br /> * plokkseadmete haldamiseks mdadm ja LVM tarkvara<br /> <br /> ===Riistvara kaughaldus===<br /> <br /> Riistvaraliste arvutite kaughalduseks kasutatakse IMPI protokolli onboard BMC kontrolliriga suhtlemiseks. Muu hulgas võimaldab see ligipääsu arvuti BIOSile ning virtuaalse järjestikpordi kaudu serial konsoolile (st operatsioonisüsteemile).<br /> <br /> ===Võrgutopoloogia===<br /> <br /> _____<br /> 195.80.35.1 | | ülikooli võrguseade<br /> ----------------------------------------------|----------------------------------------------| |<br /> | |_____|<br /> | | 172.17.35.1<br /> | 195.80.35.96 |<br /> | 2001:bb8:2002:2300:7231:40ff:fe03:5128 | <br /> _____ __|__ |<br /> | | | | |<br /> | F | | V | | <br /> |_____| at-dom0.ims |_____| fw.ims |<br /> | os: 172.17.35.21 | 172.17.35.18 |<br /> | 2001:bb8:2002:2300:21e:67ff:fe03:c3c0 | 2001:bb8:2002:2300:7221:17ff:fe03:5018 |<br /> | impi: 172.17.35.20 | |<br /> --|-------------------------------|-------------------|-----------------------|-------------------------|------ <br /> | |<br /> __|__ __|__<br /> | | | |<br /> | F | | V |<br /> |_____| |_____|<br /> <br /> varundus.ims eap.ims<br /> os: 172.17.35.19 172.17.35.22<br /> 2001:bb8:2002:2300:21e:67ff:fe03:a0f9 2001:bb8:2002:2300:7221:17ff:fe03:5022<br /> ipmi: 172.17.35.5<br /> <br /> kus<br /> <br /> * at-dom0.ims - füüsiline virtualiseerimise arvuti<br /> * varundus.ims - füüsiline varunduse arvuti<br /> * fw.ims (fw.ims.ut.ee) - virtuaalne arvuti<br /> * eap.ims - virtuaalne arvuti<br /> <br /> Märkused<br /> <br /> * Füüsilistel arvutitel on lisaks operatsioonisüsteemi ip aadressile ka füüsilise riistvara kaughalduse ipmi aadress<br /> * Operatsioonisüsteemid omandavad automaatselt oma mac aadresside abil ipv6 aadressid, neid kasutatakse EMC Networkeriga varundamisel<br /> * 172.17.35 võrgu arvutitest 195.80.35.96 poole pöördudes toimub asümmeetriline ruuting (kuna ülikooli võrguseade ei tee 172.17.35 -&gt; 195.80.35.1 nat teisendust)<br /> <br /> ===Plokkseadmete haldamine===<br /> <br /> Plokkseadmete haldamiseks kasutatakse mdadm ja LVM tarkvara. Mõlemas füüsilises arvutis töötavad neli samade parameetritega kõvaketast on ühendatud RAID massiividesse; RAID ressurssi hallatakse edasi LVM abil kasutamiseks failisüsteemide ja saaleala jaoks.<br /> <br /> ===Virtualiseerimine===<br /> <br /> Efektiivsemaks ja paindlikumaks riistavaralise ressursi kasutamiseks on teenusserverid eap.ims ja fw.ims juurutatud virtuaalsete arvutitena. Neile saab kasutamiseks anda sobiva hulga protsessori, mälu, plokkseadme ja võrguressurssi. Projektis kasutatakse XEN virtualiseerimise tarkvara, mille kasutamist on kirjeldatud nt aadressidel<br /> <br /> * http://www.auul.pri.ee/wiki/Xen_ja_Debian_Squeeze<br /> * http://kuutorvaja.eenet.ee/wiki/Unix_keskkonna_administreerimine#Virtualiseerimine<br /> <br /> ====XEN host====<br /> <br /> XEN hostile vastav operatsioonisüsteemi eksemplar töötab füüsilisel riistvaral ja selle seest tõimub virtuaalsete arvutite juhtimine. Kui välja arvata XEN hosti alglaaduri seadistused ja mõned virtualiseerimisega seotud protsessid on tegu tavalise Debian Squeeze operatsioonisüsteemiga. <br /> <br /> ====XEN guest====<br /> <br /> XEN guestid on virtuaalsed operatsioonisüsteemid, mis töötavad XEN hosti kontrolli all ja mis kasutavad XEN hostist neile eraldatud ressursse.<br /> <br /> ===at-dom0 host===<br /> <br /> ====mdadm kasutamine====<br /> <br /> Neli füüsilist kõvaketast on partitsioneeritud sarnaselt<br /> <br /> root@at-dom0:~# parted /dev/sda p<br /> Model: ATA WDC WD2003FYYS-0 (scsi)<br /> Disk /dev/sda: 2000GB<br /> Sector size (logical/physical): 512B/512B<br /> Partition Table: msdos<br /> <br /> Number Start End Size Type File system Flags<br /> 1 1049kB 269MB 268MB primary ext3 boot<br /> 2 269MB 69.0GB 68.7GB primary<br /> 3 69.0GB 1169GB 1100GB primary<br /> <br /> mdadm abil on <br /> <br /> * kõigi kõvaketaste esimesed partitsioonid ühendatud /dev/md/boot raid1 lülitusse (at-dom0 operatsioonisüsteemi jaoks)<br /> * kõigi kõvaketaste teised partitsioonid ühendatud /dev/md/system raid5 lülitusse (at-dom0 operatsioonisüsteemi jaoks)<br /> * kõigi kõvaketaste teised partitsioonid ühendatud /dev/md/data raid5 lülitusse (virtuaalsete arvutite jaoks)<br /> <br /> ====LVM kasutamine====<br /> <br /> at-dom0 enda operatsioonisüsteemi jaoks kasutuses sellised plokkseadmed<br /> <br /> * /boot - /dev/md/boot (mdadm ressurss)<br /> * / - /dev/system/root (LVM ressurss)<br /> <br /> at-dom0.ims arvutil töötavad kaks virtuaalset arvutit<br /> <br /> ====Võrgu kasutamine====<br /> <br /> Kaks arvuti võrgukaarti on kasutusel selliselt<br /> <br /> * peth0 - esimene füüsiline võrgukaart<br /> * peth1 - teine füüsiline võrgukaart<br /> * eth0 - esimest füüsilist võrgukaarti sisaldav sild (fiktiivne aadress 10.101.101.21)<br /> * eth1 - teist füüsilist võrgukaarti sisaldav sild (172.17.35.21)<br /> * vaikelüüs 172.17.35.1<br /> <br /> ===eap.ims guest===<br /> <br /> eap.ims kasutab selliseid hosti ressursse<br /> <br /> Plokkseade<br /> <br /> /dev/data/eap_root<br /> /dev/data/eap_home<br /> /dev/data/eap_data_backup<br /> /dev/data/eap_data_postgresql<br /> /dev/data/eap_swap<br /> <br /> Võrk<br /> <br /> guesti seade eth0 (172.17.35.22) on muu võrguga ühenduses hosti eth1 silla kaudu<br /> <br /> Põhiline eap.ims arvutis töötav rakendustarkvara on PostgreSQL v. 9.0 andmebaas.<br /> <br /> * WAL logid salvestatakse iga 30 minuti järel RAID1 (redundantne) kõvaketastele (andmebaasi serveril)<br /> <br /> ===fw.ims guest===<br /> <br /> fw.ims kasutab selliseid hosti ressursse<br /> <br /> Plokkseade<br /> <br /> /dev/data/fw_root<br /> /dev/data/fw_home<br /> /dev/data/fw_data_backup<br /> /dev/data/fw_data_postgresql<br /> /dev/data/fw_swap <br /> <br /> Võrk<br /> <br /> guesti seade eth0 (193.40.35.96) on muu võrguga ühenduses hosti eth0 silla kaudu<br /> guesti seade eth1 (172.17.35.18) on muu võrguga ühenduses hosti eth1 silla kaudu<br /> <br /> Peamised fw.ims arvutis töötavad rakendusprogrammid on<br /> <br /> * PostgreSQL v. 9.0 andmebaas<br /> * Apache veebiserver<br /> * NFS failiserver, mis jagab /home kataloogi eap.ims arvutisse<br /> <br /> ===varundus.ims===<br /> <br /> ====mdadm kasutamine====<br /> <br /> Neli füüsilist kõvaketast on partitsioneeritud sarnaselt<br /> <br /> root@varundus:~# parted /dev/sda p<br /> Model: ATA WDC WD2003FYYS-0 (scsi)<br /> Disk /dev/sda: 2000GB<br /> Sector size (logical/physical): 512B/512B<br /> Partition Table: msdos<br /> <br /> Number Start End Size Type File system Flags<br /> 1 1049kB 269MB 268MB primary ext3 boot<br /> 2 269MB 2000GB 2000GB primary<br /> <br /> mdadm abil on<br /> <br /> * kõigi kõvaketaste esimesed partitsioonid ühendatud /dev/md/boot raid1 lülitusse<br /> * kõigi kõvaketaste teised partitsioonid ühendatud /dev/md/system raid5 lülitusse<br /> <br /> ====LVM kasutamine====<br /> <br /> varundus arvutis kasutuses sellised plokkseadmed<br /> <br /> * /boot - /dev/md/boot (mdadm ressurss)<br /> * / - /dev/system/root (LVM ressurss)<br /> * /srv/backup - /dev/system/backup (LVM ressurss)<br /> <br /> ====Võrgu kasutamine====<br /> <br /> Kaks arvuti võrgukaarti on kasutusel selliselt<br /> <br /> * eth0 - 172.17.35.19<br /> * vaikelüüs 172.17.35.1<br /> <br /> ====rsnapshot kasutamine====<br /> <br /> rsnapshot tarkvara tööd juhib seadistusfail /etc/rsnapshot.conf ja varundatud andmed asuvad kataloogis /srv/backup/rsnapshot avutite nimelistes kataloogides. Üldiselt varundatakse kõiki failisüsteeme välja arvatud mõned kataloogid<br /> <br /> /dev<br /> /proc<br /> /tmp<br /> /sys<br /> /mnt<br /> <br /> Varundatud andmeid roteeritakse selliselt, et säilitatakse seisud<br /> <br /> * viimased 28 päeva<br /> * viimased 12 nädalat<br /> * viimased 24 kuud<br /> <br /> Full backup: kord nädalas nublu.chem.ut.ee 2-le eraldi kõvakettale (mitteredundantsed), säilitatakse 4-5 viimast täiskoopiat.<br /> <br /> Full backupi ligikaudne maht (24.01.2011): 35 GB<br /> <br /> <br /> Iga päeva WAL logid (säilitatakse kahe full backupi vahel tekkinud WAL logid (nädala WAL logide ligikaudne maht (24.01.2011): 18 GB<br /> <br /> Tarmo virtuaalserverist hetkel backuppi ei tehta.<br /> <br /> ===Monitooring===<br /> <br /> TODO<br /> <br /> ===Kasulikud lisamaterjalid===<br /> <br /> * http://www.auul.pri.ee/wiki/NUT_tarkvara_kasutamine_Debian_Squeeze_operatsioonis%C3%BCsteemiga<br /> * http://www.auul.pri.ee/wiki/EMC_Networker_client<br /> * http://www.auul.pri.ee/wiki/Tarkvaralise_mdadm_RAID_kasutamine_operatsioonis%C3%BCsteemiga_Debian_Squeeze</div> Imreoolberg https://ims.ut.ee/index.php?title=Eab_infra&diff=8945 Eab infra 2011-11-02T08:36:15Z <p>Imreoolberg: /* Võrgutopoloogia */</p> <hr /> <div>===Sissejuhatus===<br /> <br /> Käesoleva teksti eesmärgiks on kirjeldada EAP projekti juures toimuvat riistvara, võrgu, operatsioonisüsteemi keskkonna ja rakendustarkvara kasutamist.<br /> <br /> ===Riistvara===<br /> <br /> Projektis kasutatakse sellist riistavara<br /> <br /> * Powerware 5115 UPS<br /> * 2 x S3420GP emaplaadiga Ordi arvutid<br /> * mõlemad arvutid sisaldavad 4 x 2 TB kõvakettaid<br /> * generic kohtvõrgu kommutaator<br /> <br /> ===Tarkvara===<br /> <br /> Projekti arvutites kasutatakse järgmist tarkvara<br /> <br /> * Debian Squeeze v. 6 64bit operatsioonisüsteem<br /> * XEN v. 4 virtualiseerimise tarkvara<br /> * Apache veebiserver<br /> * PostgreSQL andmebaas<br /> * Zabbix monitooringutarkvara<br /> * OpenVPN kaugligipääsu tarkvara<br /> * rsnapshot ja EMC Networker varundustarkvara<br /> * plokkseadmete haldamiseks mdadm ja LVM tarkvara<br /> <br /> ===Riistvara kaughaldus===<br /> <br /> Riistvaraliste arvutite kaughalduseks kasutatakse IMPI protokolli onboard BMC kontrolliriga suhtlemiseks. Muu hulgas võimaldab see ligipääsu arvuti BIOSile ning virtuaalse järjestikpordi kaudu serial konsoolile (st operatsioonisüsteemile).<br /> <br /> ===Võrgutopoloogia===<br /> <br /> _____<br /> 195.80.35.1 | | ülikooli võrguseade<br /> ----------------------------------------------|----------------------------------------------| |<br /> | |_____|<br /> | | 172.17.35.1<br /> | 195.80.35.96 |<br /> | 2001:bb8:2002:2300:7231:40ff:fe03:5128 | <br /> _____ __|__ |<br /> | | | | |<br /> | F | | V | | <br /> |_____| at-dom0.ims |_____| fw.ims |<br /> | os: 172.17.35.21 | 172.17.35.18 |<br /> | 2001:bb8:2002:2300:21e:67ff:fe03:c3c0 | 2001:bb8:2002:2300:7221:17ff:fe03:5018 |<br /> | impi: 172.17.35.20 | |<br /> --|-------------------------------|-------------------|-----------------------|-------------------------|------ <br /> | |<br /> __|__ __|__<br /> | | | |<br /> | F | | V |<br /> |_____| |_____|<br /> <br /> varundus.ims eap.ims<br /> os: 172.17.35.19 172.17.35.22<br /> 2001:bb8:2002:2300:21e:67ff:fe03:a0f9 2001:bb8:2002:2300:7221:17ff:fe03:5022<br /> ipmi: 172.17.35.5<br /> <br /> kus<br /> <br /> * at-dom0.ims - füüsiline virtualiseerimise arvuti<br /> * varundus.ims - füüsiline varunduse arvuti<br /> * fw.ims (fw.ims.ut.ee) - virtuaalne arvuti<br /> * eap.ims - virtuaalne arvuti<br /> <br /> Märkused<br /> <br /> * Füüsilistel arvutitel on lisaks operatsioonisüsteemi ip aadressile ka füüsilise riistvara kaughalduse ipmi aadress<br /> * Operatsioonisüsteemid omandavad automaatselt oma mac aadresside abil ipv6 aadressid, neid kasutatakse EMC Networkeriga varundamisel<br /> * 172.17.35 võrgu arvutitest 195.80.35.96 poole pöördudes toimub asümmeetriline ruuting (kuna ülikooli võrguseade ei tee 172.17.35 -&gt; 195.80.35.1 nat teisendust)<br /> <br /> ===Plokkseadmete haldamine===<br /> <br /> Plokkseadmete haldamiseks kasutatakse mdadm ja LVM tarkvara. Mõlemas füüsilises arvutis töötavad neli samade parameetritega kõvaketast on ühendatud RAID massiividesse; RAID ressurssi hallatakse edasi LVM abil kasutamiseks failisüsteemide ja saaleala jaoks.<br /> <br /> ===Virtualiseerimine===<br /> <br /> Efektiivsemaks ja paindlikumaks riistavaralise ressursi kasutamiseks on teenusserverid eap.ims ja fw.ims juurutatud virtuaalsete arvutitena. Neile saab kasutamiseks anda sobiva hulga protsessori, mälu, plokkseadme ja võrguressurssi. Projektis kasutatakse XEN virtualiseerimise tarkvara, mille kasutamist on kirjeldatud nt aadressidel<br /> <br /> * http://www.auul.pri.ee/wiki/Xen_ja_Debian_Squeeze<br /> * http://kuutorvaja.eenet.ee/wiki/Unix_keskkonna_administreerimine#Virtualiseerimine<br /> <br /> ====XEN host====<br /> <br /> XEN hostile vastav operatsioonisüsteemi eksemplar töötab füüsilisel riistvaral ja selle seest tõimub virtuaalsete arvutite juhtimine. Kui välja arvata XEN hosti alglaaduri seadistused ja mõned virtualiseerimisega seotud protsessid on tegu tavalise Debian Squeeze operatsioonisüsteemiga. <br /> <br /> ====XEN guest====<br /> <br /> XEN guestid on virtuaalsed operatsioonisüsteemid, mis töötavad XEN hosti kontrolli all ja mis kasutavad XEN hostist neile eraldatud ressursse.<br /> <br /> ===at-dom0 host===<br /> <br /> ====mdadm kasutamine====<br /> <br /> Neli füüsilist kõvaketast on partitsioneeritud sarnaselt<br /> <br /> root@at-dom0:~# parted /dev/sda p<br /> Model: ATA WDC WD2003FYYS-0 (scsi)<br /> Disk /dev/sda: 2000GB<br /> Sector size (logical/physical): 512B/512B<br /> Partition Table: msdos<br /> <br /> Number Start End Size Type File system Flags<br /> 1 1049kB 269MB 268MB primary ext3 boot<br /> 2 269MB 69.0GB 68.7GB primary<br /> 3 69.0GB 1169GB 1100GB primary<br /> <br /> mdadm abil on <br /> <br /> * kõigi kõvaketaste esimesed partitsioonid ühendatud /dev/md/boot raid1 lülitusse (at-dom0 operatsioonisüsteemi jaoks)<br /> * kõigi kõvaketaste teised partitsioonid ühendatud /dev/md/system raid5 lülitusse (at-dom0 operatsioonisüsteemi jaoks)<br /> * kõigi kõvaketaste teised partitsioonid ühendatud /dev/md/data raid5 lülitusse (virtuaalsete arvutite jaoks)<br /> <br /> ====LVM kasutamine====<br /> <br /> at-dom0 enda operatsioonisüsteemi jaoks kasutuses sellised plokkseadmed<br /> <br /> * /boot - /dev/md/boot (mdadm ressurss)<br /> * / - /dev/system/root (LVM ressurss)<br /> <br /> at-dom0.ims arvutil töötavad kaks virtuaalset arvutit<br /> <br /> ====Võrgu kasutamine====<br /> <br /> Kaks arvuti võrgukaarti on kasutusel selliselt<br /> <br /> * peth0 - esimene füüsiline võrgukaart<br /> * peth1 - teine füüsiline võrgukaart<br /> * eth0 - esimest füüsilist võrgukaarti sisaldav sild (fiktiivne aadress 10.101.101.21)<br /> * eth1 - teist füüsilist võrgukaarti sisaldav sild (172.17.35.21)<br /> * vaikelüüs 172.17.35.1<br /> <br /> ===eap.ims guest===<br /> <br /> eap.ims kasutab selliseid hosti ressursse<br /> <br /> Plokkseade<br /> <br /> /dev/data/eap_root<br /> /dev/data/eap_home<br /> /dev/data/eap_data_backup<br /> /dev/data/eap_data_postgresql<br /> /dev/data/eap_swap<br /> <br /> Võrk<br /> <br /> guesti seade eth0 (172.17.35.22) on muu võrguga ühenduses hosti eth1 silla kaudu<br /> <br /> Põhiline eap.ims arvutis töötav rakendustarkvara on PostgreSQL v. 9.0 andmebaas.<br /> <br /> * WAL logid salvestatakse iga 30 minuti järel RAID1 (redundantne) kõvaketastele (andmebaasi serveril)<br /> <br /> ===fw.ims guest===<br /> <br /> fw.ims kasutab selliseid hosti ressursse<br /> <br /> Plokkseade<br /> <br /> /dev/data/fw_root<br /> /dev/data/fw_home<br /> /dev/data/fw_data_backup<br /> /dev/data/fw_data_postgresql<br /> /dev/data/fw_swap <br /> <br /> Võrk<br /> <br /> guesti seade eth0 (193.40.35.96) on muu võrguga ühenduses hosti eth0 silla kaudu<br /> guesti seade eth1 (172.17.35.18) on muu võrguga ühenduses hosti eth1 silla kaudu<br /> <br /> Peamised fw.ims arvutis töötavad rakendusprogrammid on<br /> <br /> * PostgreSQL v. 9.0 andmebaas<br /> * Apache veebiserver<br /> * NFS failiserver, mis jagab /home kataloogi eap.ims arvutisse<br /> <br /> ===varundus.ims===<br /> <br /> ====mdadm kasutamine====<br /> <br /> Neli füüsilist kõvaketast on partitsioneeritud sarnaselt<br /> <br /> root@varundus:~# parted /dev/sda p<br /> Model: ATA WDC WD2003FYYS-0 (scsi)<br /> Disk /dev/sda: 2000GB<br /> Sector size (logical/physical): 512B/512B<br /> Partition Table: msdos<br /> <br /> Number Start End Size Type File system Flags<br /> 1 1049kB 269MB 268MB primary ext3 boot<br /> 2 269MB 2000GB 2000GB primary<br /> <br /> mdadm abil on<br /> <br /> * kõigi kõvaketaste esimesed partitsioonid ühendatud /dev/md/boot raid1 lülitusse<br /> * kõigi kõvaketaste teised partitsioonid ühendatud /dev/md/system raid5 lülitusse<br /> <br /> ====LVM kasutamine====<br /> <br /> varundus arvutis kasutuses sellised plokkseadmed<br /> <br /> * /boot - /dev/md/boot (mdadm ressurss)<br /> * / - /dev/system/root (LVM ressurss)<br /> * /srv/backup - /dev/system/backup (LVM ressurss)<br /> <br /> ====Võrgu kasutamine====<br /> <br /> Kaks arvuti võrgukaarti on kasutusel selliselt<br /> <br /> * eth0 - 172.17.35.19<br /> * vaikelüüs 172.17.35.1<br /> <br /> Full backup: kord nädalas nublu.chem.ut.ee 2-le eraldi kõvakettale (mitteredundantsed), säilitatakse 4-5 viimast täiskoopiat.<br /> <br /> Full backupi ligikaudne maht (24.01.2011): 35 GB<br /> <br /> <br /> Iga päeva WAL logid (säilitatakse kahe full backupi vahel tekkinud WAL logid (nädala WAL logide ligikaudne maht (24.01.2011): 18 GB<br /> <br /> Tarmo virtuaalserverist hetkel backuppi ei tehta.<br /> <br /> ===Monitooring===<br /> <br /> TODO<br /> <br /> ===Kasulikud lisamaterjalid===<br /> <br /> * http://www.auul.pri.ee/wiki/NUT_tarkvara_kasutamine_Debian_Squeeze_operatsioonis%C3%BCsteemiga<br /> * http://www.auul.pri.ee/wiki/EMC_Networker_client<br /> * http://www.auul.pri.ee/wiki/Tarkvaralise_mdadm_RAID_kasutamine_operatsioonis%C3%BCsteemiga_Debian_Squeeze</div> Imreoolberg https://ims.ut.ee/index.php?title=Eab_infra&diff=8943 Eab infra 2011-11-02T07:12:38Z <p>Imreoolberg: /* varundus.ims */</p> <hr /> <div>===Sissejuhatus===<br /> <br /> Käesoleva teksti eesmärgiks on kirjeldada EAP projekti juures toimuvat riistvara, võrgu, operatsioonisüsteemi keskkonna ja rakendustarkvara kasutamist.<br /> <br /> ===Riistvara===<br /> <br /> Projektis kasutatakse sellist riistavara<br /> <br /> * Powerware 5115 UPS<br /> * 2 x S3420GP emaplaadiga Ordi arvutid<br /> * mõlemad arvutid sisaldavad 4 x 2 TB kõvakettaid<br /> * generic kohtvõrgu kommutaator<br /> <br /> ===Tarkvara===<br /> <br /> Projekti arvutites kasutatakse järgmist tarkvara<br /> <br /> * Debian Squeeze v. 6 64bit operatsioonisüsteem<br /> * XEN v. 4 virtualiseerimise tarkvara<br /> * Apache veebiserver<br /> * PostgreSQL andmebaas<br /> * Zabbix monitooringutarkvara<br /> * OpenVPN kaugligipääsu tarkvara<br /> * rsnapshot ja EMC Networker varundustarkvara<br /> * plokkseadmete haldamiseks mdadm ja LVM tarkvara<br /> <br /> ===Riistvara kaughaldus===<br /> <br /> Riistvaraliste arvutite kaughalduseks kasutatakse IMPI protokolli onboard BMC kontrolliriga suhtlemiseks. Muu hulgas võimaldab see ligipääsu arvuti BIOSile ning virtuaalse järjestikpordi kaudu serial konsoolile (st operatsioonisüsteemile).<br /> <br /> ===Võrgutopoloogia===<br /> <br /> _____<br /> 195.80.35.1 | | ülikooli võrguseade<br /> ----------------------------------------------|----------------------------------------------| |<br /> | |_____|<br /> | | 172.17.35.1<br /> | 195.80.35.96 |<br /> | 2001:bb8:2002:2300:7231:40ff:fe03:5128 | <br /> _____ __|__ |<br /> | | | | |<br /> | F | | V | | <br /> |_____| at-dom0.ims |_____| fw.ims |<br /> | os: 172.17.35.21 | 172.17.35.18 |<br /> | 2001:bb8:2002:2300:21e:67ff:fe03:c3c0 | 2001:bb8:2002:2300:7221:17ff:fe03:5018 |<br /> | impi: 172.17.35.20 | |<br /> --|-------------------------------|-------------------|-----------------------|-------------------------|------ <br /> | |<br /> __|__ __|__<br /> | | | |<br /> | F | | V |<br /> |_____| |_____|<br /> <br /> varundus.ims eap.ims<br /> os: 172.17.35.19 172.17.35.22<br /> 2001:bb8:2002:2300:21e:67ff:fe03:a0f9 2001:bb8:2002:2300:7221:17ff:fe03:5022<br /> ipmi: 172.17.35.5<br /> <br /> kus<br /> <br /> * at-dom0.ims - füüsiline virtualiseerimise arvuti<br /> * varundus.ims - füüsiline varunduse arvuti<br /> * fw.ims (fw.ims.ut.ee) - virtuaalne arvuti<br /> * eap.ims - virtuaalne arvuti<br /> <br /> Füüsilistel arvutitel on lisaks operatsioonisüsteemi ip aadressile ka füüsilise riistvara kaughalduse ipmi aadress. Operatsioonisüsteemid omandavad automaatselt oma mac aadresside abil ipv6 aadressid.<br /> <br /> ===Plokkseadmete haldamine===<br /> <br /> Plokkseadmete haldamiseks kasutatakse mdadm ja LVM tarkvara. Mõlemas füüsilises arvutis töötavad neli samade parameetritega kõvaketast on ühendatud RAID massiividesse; RAID ressurssi hallatakse edasi LVM abil kasutamiseks failisüsteemide ja saaleala jaoks.<br /> <br /> ===Virtualiseerimine===<br /> <br /> Efektiivsemaks ja paindlikumaks riistavaralise ressursi kasutamiseks on teenusserverid eap.ims ja fw.ims juurutatud virtuaalsete arvutitena. Neile saab kasutamiseks anda sobiva hulga protsessori, mälu, plokkseadme ja võrguressurssi. Projektis kasutatakse XEN virtualiseerimise tarkvara, mille kasutamist on kirjeldatud nt aadressidel<br /> <br /> * http://www.auul.pri.ee/wiki/Xen_ja_Debian_Squeeze<br /> * http://kuutorvaja.eenet.ee/wiki/Unix_keskkonna_administreerimine#Virtualiseerimine<br /> <br /> ====XEN host====<br /> <br /> XEN hostile vastav operatsioonisüsteemi eksemplar töötab füüsilisel riistvaral ja selle seest tõimub virtuaalsete arvutite juhtimine. Kui välja arvata XEN hosti alglaaduri seadistused ja mõned virtualiseerimisega seotud protsessid on tegu tavalise Debian Squeeze operatsioonisüsteemiga. <br /> <br /> ====XEN guest====<br /> <br /> XEN guestid on virtuaalsed operatsioonisüsteemid, mis töötavad XEN hosti kontrolli all ja mis kasutavad XEN hostist neile eraldatud ressursse.<br /> <br /> ===at-dom0 host===<br /> <br /> ====mdadm kasutamine====<br /> <br /> Neli füüsilist kõvaketast on partitsioneeritud sarnaselt<br /> <br /> root@at-dom0:~# parted /dev/sda p<br /> Model: ATA WDC WD2003FYYS-0 (scsi)<br /> Disk /dev/sda: 2000GB<br /> Sector size (logical/physical): 512B/512B<br /> Partition Table: msdos<br /> <br /> Number Start End Size Type File system Flags<br /> 1 1049kB 269MB 268MB primary ext3 boot<br /> 2 269MB 69.0GB 68.7GB primary<br /> 3 69.0GB 1169GB 1100GB primary<br /> <br /> mdadm abil on <br /> <br /> * kõigi kõvaketaste esimesed partitsioonid ühendatud /dev/md/boot raid1 lülitusse (at-dom0 operatsioonisüsteemi jaoks)<br /> * kõigi kõvaketaste teised partitsioonid ühendatud /dev/md/system raid5 lülitusse (at-dom0 operatsioonisüsteemi jaoks)<br /> * kõigi kõvaketaste teised partitsioonid ühendatud /dev/md/data raid5 lülitusse (virtuaalsete arvutite jaoks)<br /> <br /> ====LVM kasutamine====<br /> <br /> at-dom0 enda operatsioonisüsteemi jaoks kasutuses sellised plokkseadmed<br /> <br /> * /boot - /dev/md/boot (mdadm ressurss)<br /> * / - /dev/system/root (LVM ressurss)<br /> <br /> at-dom0.ims arvutil töötavad kaks virtuaalset arvutit<br /> <br /> ====Võrgu kasutamine====<br /> <br /> Kaks arvuti võrgukaarti on kasutusel selliselt<br /> <br /> * peth0 - esimene füüsiline võrgukaart<br /> * peth1 - teine füüsiline võrgukaart<br /> * eth0 - esimest füüsilist võrgukaarti sisaldav sild (fiktiivne aadress 10.101.101.21)<br /> * eth1 - teist füüsilist võrgukaarti sisaldav sild (172.17.35.21)<br /> * vaikelüüs 172.17.35.1<br /> <br /> ===eap.ims guest===<br /> <br /> eap.ims kasutab selliseid hosti ressursse<br /> <br /> Plokkseade<br /> <br /> /dev/data/eap_root<br /> /dev/data/eap_home<br /> /dev/data/eap_data_backup<br /> /dev/data/eap_data_postgresql<br /> /dev/data/eap_swap<br /> <br /> Võrk<br /> <br /> guesti seade eth0 (172.17.35.22) on muu võrguga ühenduses hosti eth1 silla kaudu<br /> <br /> Põhiline eap.ims arvutis töötav rakendustarkvara on PostgreSQL v. 9.0 andmebaas.<br /> <br /> * WAL logid salvestatakse iga 30 minuti järel RAID1 (redundantne) kõvaketastele (andmebaasi serveril)<br /> <br /> ===fw.ims guest===<br /> <br /> fw.ims kasutab selliseid hosti ressursse<br /> <br /> Plokkseade<br /> <br /> /dev/data/fw_root<br /> /dev/data/fw_home<br /> /dev/data/fw_data_backup<br /> /dev/data/fw_data_postgresql<br /> /dev/data/fw_swap <br /> <br /> Võrk<br /> <br /> guesti seade eth0 (193.40.35.96) on muu võrguga ühenduses hosti eth0 silla kaudu<br /> guesti seade eth1 (172.17.35.18) on muu võrguga ühenduses hosti eth1 silla kaudu<br /> <br /> Peamised fw.ims arvutis töötavad rakendusprogrammid on<br /> <br /> * PostgreSQL v. 9.0 andmebaas<br /> * Apache veebiserver<br /> * NFS failiserver, mis jagab /home kataloogi eap.ims arvutisse<br /> <br /> ===varundus.ims===<br /> <br /> ====mdadm kasutamine====<br /> <br /> Neli füüsilist kõvaketast on partitsioneeritud sarnaselt<br /> <br /> root@varundus:~# parted /dev/sda p<br /> Model: ATA WDC WD2003FYYS-0 (scsi)<br /> Disk /dev/sda: 2000GB<br /> Sector size (logical/physical): 512B/512B<br /> Partition Table: msdos<br /> <br /> Number Start End Size Type File system Flags<br /> 1 1049kB 269MB 268MB primary ext3 boot<br /> 2 269MB 2000GB 2000GB primary<br /> <br /> mdadm abil on<br /> <br /> * kõigi kõvaketaste esimesed partitsioonid ühendatud /dev/md/boot raid1 lülitusse<br /> * kõigi kõvaketaste teised partitsioonid ühendatud /dev/md/system raid5 lülitusse<br /> <br /> ====LVM kasutamine====<br /> <br /> varundus arvutis kasutuses sellised plokkseadmed<br /> <br /> * /boot - /dev/md/boot (mdadm ressurss)<br /> * / - /dev/system/root (LVM ressurss)<br /> * /srv/backup - /dev/system/backup (LVM ressurss)<br /> <br /> ====Võrgu kasutamine====<br /> <br /> Kaks arvuti võrgukaarti on kasutusel selliselt<br /> <br /> * eth0 - 172.17.35.19<br /> * vaikelüüs 172.17.35.1<br /> <br /> Full backup: kord nädalas nublu.chem.ut.ee 2-le eraldi kõvakettale (mitteredundantsed), säilitatakse 4-5 viimast täiskoopiat.<br /> <br /> Full backupi ligikaudne maht (24.01.2011): 35 GB<br /> <br /> <br /> Iga päeva WAL logid (säilitatakse kahe full backupi vahel tekkinud WAL logid (nädala WAL logide ligikaudne maht (24.01.2011): 18 GB<br /> <br /> Tarmo virtuaalserverist hetkel backuppi ei tehta.<br /> <br /> ===Monitooring===<br /> <br /> TODO<br /> <br /> ===Kasulikud lisamaterjalid===<br /> <br /> * http://www.auul.pri.ee/wiki/NUT_tarkvara_kasutamine_Debian_Squeeze_operatsioonis%C3%BCsteemiga<br /> * http://www.auul.pri.ee/wiki/EMC_Networker_client<br /> * http://www.auul.pri.ee/wiki/Tarkvaralise_mdadm_RAID_kasutamine_operatsioonis%C3%BCsteemiga_Debian_Squeeze</div> Imreoolberg https://ims.ut.ee/index.php?title=Eab_infra&diff=8942 Eab infra 2011-11-02T07:11:49Z <p>Imreoolberg: /* Võrgu kasutamine */</p> <hr /> <div>===Sissejuhatus===<br /> <br /> Käesoleva teksti eesmärgiks on kirjeldada EAP projekti juures toimuvat riistvara, võrgu, operatsioonisüsteemi keskkonna ja rakendustarkvara kasutamist.<br /> <br /> ===Riistvara===<br /> <br /> Projektis kasutatakse sellist riistavara<br /> <br /> * Powerware 5115 UPS<br /> * 2 x S3420GP emaplaadiga Ordi arvutid<br /> * mõlemad arvutid sisaldavad 4 x 2 TB kõvakettaid<br /> * generic kohtvõrgu kommutaator<br /> <br /> ===Tarkvara===<br /> <br /> Projekti arvutites kasutatakse järgmist tarkvara<br /> <br /> * Debian Squeeze v. 6 64bit operatsioonisüsteem<br /> * XEN v. 4 virtualiseerimise tarkvara<br /> * Apache veebiserver<br /> * PostgreSQL andmebaas<br /> * Zabbix monitooringutarkvara<br /> * OpenVPN kaugligipääsu tarkvara<br /> * rsnapshot ja EMC Networker varundustarkvara<br /> * plokkseadmete haldamiseks mdadm ja LVM tarkvara<br /> <br /> ===Riistvara kaughaldus===<br /> <br /> Riistvaraliste arvutite kaughalduseks kasutatakse IMPI protokolli onboard BMC kontrolliriga suhtlemiseks. Muu hulgas võimaldab see ligipääsu arvuti BIOSile ning virtuaalse järjestikpordi kaudu serial konsoolile (st operatsioonisüsteemile).<br /> <br /> ===Võrgutopoloogia===<br /> <br /> _____<br /> 195.80.35.1 | | ülikooli võrguseade<br /> ----------------------------------------------|----------------------------------------------| |<br /> | |_____|<br /> | | 172.17.35.1<br /> | 195.80.35.96 |<br /> | 2001:bb8:2002:2300:7231:40ff:fe03:5128 | <br /> _____ __|__ |<br /> | | | | |<br /> | F | | V | | <br /> |_____| at-dom0.ims |_____| fw.ims |<br /> | os: 172.17.35.21 | 172.17.35.18 |<br /> | 2001:bb8:2002:2300:21e:67ff:fe03:c3c0 | 2001:bb8:2002:2300:7221:17ff:fe03:5018 |<br /> | impi: 172.17.35.20 | |<br /> --|-------------------------------|-------------------|-----------------------|-------------------------|------ <br /> | |<br /> __|__ __|__<br /> | | | |<br /> | F | | V |<br /> |_____| |_____|<br /> <br /> varundus.ims eap.ims<br /> os: 172.17.35.19 172.17.35.22<br /> 2001:bb8:2002:2300:21e:67ff:fe03:a0f9 2001:bb8:2002:2300:7221:17ff:fe03:5022<br /> ipmi: 172.17.35.5<br /> <br /> kus<br /> <br /> * at-dom0.ims - füüsiline virtualiseerimise arvuti<br /> * varundus.ims - füüsiline varunduse arvuti<br /> * fw.ims (fw.ims.ut.ee) - virtuaalne arvuti<br /> * eap.ims - virtuaalne arvuti<br /> <br /> Füüsilistel arvutitel on lisaks operatsioonisüsteemi ip aadressile ka füüsilise riistvara kaughalduse ipmi aadress. Operatsioonisüsteemid omandavad automaatselt oma mac aadresside abil ipv6 aadressid.<br /> <br /> ===Plokkseadmete haldamine===<br /> <br /> Plokkseadmete haldamiseks kasutatakse mdadm ja LVM tarkvara. Mõlemas füüsilises arvutis töötavad neli samade parameetritega kõvaketast on ühendatud RAID massiividesse; RAID ressurssi hallatakse edasi LVM abil kasutamiseks failisüsteemide ja saaleala jaoks.<br /> <br /> ===Virtualiseerimine===<br /> <br /> Efektiivsemaks ja paindlikumaks riistavaralise ressursi kasutamiseks on teenusserverid eap.ims ja fw.ims juurutatud virtuaalsete arvutitena. Neile saab kasutamiseks anda sobiva hulga protsessori, mälu, plokkseadme ja võrguressurssi. Projektis kasutatakse XEN virtualiseerimise tarkvara, mille kasutamist on kirjeldatud nt aadressidel<br /> <br /> * http://www.auul.pri.ee/wiki/Xen_ja_Debian_Squeeze<br /> * http://kuutorvaja.eenet.ee/wiki/Unix_keskkonna_administreerimine#Virtualiseerimine<br /> <br /> ====XEN host====<br /> <br /> XEN hostile vastav operatsioonisüsteemi eksemplar töötab füüsilisel riistvaral ja selle seest tõimub virtuaalsete arvutite juhtimine. Kui välja arvata XEN hosti alglaaduri seadistused ja mõned virtualiseerimisega seotud protsessid on tegu tavalise Debian Squeeze operatsioonisüsteemiga. <br /> <br /> ====XEN guest====<br /> <br /> XEN guestid on virtuaalsed operatsioonisüsteemid, mis töötavad XEN hosti kontrolli all ja mis kasutavad XEN hostist neile eraldatud ressursse.<br /> <br /> ===at-dom0 host===<br /> <br /> ====mdadm kasutamine====<br /> <br /> Neli füüsilist kõvaketast on partitsioneeritud sarnaselt<br /> <br /> root@at-dom0:~# parted /dev/sda p<br /> Model: ATA WDC WD2003FYYS-0 (scsi)<br /> Disk /dev/sda: 2000GB<br /> Sector size (logical/physical): 512B/512B<br /> Partition Table: msdos<br /> <br /> Number Start End Size Type File system Flags<br /> 1 1049kB 269MB 268MB primary ext3 boot<br /> 2 269MB 69.0GB 68.7GB primary<br /> 3 69.0GB 1169GB 1100GB primary<br /> <br /> mdadm abil on <br /> <br /> * kõigi kõvaketaste esimesed partitsioonid ühendatud /dev/md/boot raid1 lülitusse (at-dom0 operatsioonisüsteemi jaoks)<br /> * kõigi kõvaketaste teised partitsioonid ühendatud /dev/md/system raid5 lülitusse (at-dom0 operatsioonisüsteemi jaoks)<br /> * kõigi kõvaketaste teised partitsioonid ühendatud /dev/md/data raid5 lülitusse (virtuaalsete arvutite jaoks)<br /> <br /> ====LVM kasutamine====<br /> <br /> at-dom0 enda operatsioonisüsteemi jaoks kasutuses sellised plokkseadmed<br /> <br /> * /boot - /dev/md/boot (mdadm ressurss)<br /> * / - /dev/system/root (LVM ressurss)<br /> <br /> at-dom0.ims arvutil töötavad kaks virtuaalset arvutit<br /> <br /> ====Võrgu kasutamine====<br /> <br /> Kaks arvuti võrgukaarti on kasutusel selliselt<br /> <br /> * peth0 - esimene füüsiline võrgukaart<br /> * peth1 - teine füüsiline võrgukaart<br /> * eth0 - esimest füüsilist võrgukaarti sisaldav sild (fiktiivne aadress 10.101.101.21)<br /> * eth1 - teist füüsilist võrgukaarti sisaldav sild (172.17.35.21)<br /> * vaikelüüs 172.17.35.1<br /> <br /> ===eap.ims guest===<br /> <br /> eap.ims kasutab selliseid hosti ressursse<br /> <br /> Plokkseade<br /> <br /> /dev/data/eap_root<br /> /dev/data/eap_home<br /> /dev/data/eap_data_backup<br /> /dev/data/eap_data_postgresql<br /> /dev/data/eap_swap<br /> <br /> Võrk<br /> <br /> guesti seade eth0 (172.17.35.22) on muu võrguga ühenduses hosti eth1 silla kaudu<br /> <br /> Põhiline eap.ims arvutis töötav rakendustarkvara on PostgreSQL v. 9.0 andmebaas.<br /> <br /> * WAL logid salvestatakse iga 30 minuti järel RAID1 (redundantne) kõvaketastele (andmebaasi serveril)<br /> <br /> ===fw.ims guest===<br /> <br /> fw.ims kasutab selliseid hosti ressursse<br /> <br /> Plokkseade<br /> <br /> /dev/data/fw_root<br /> /dev/data/fw_home<br /> /dev/data/fw_data_backup<br /> /dev/data/fw_data_postgresql<br /> /dev/data/fw_swap <br /> <br /> Võrk<br /> <br /> guesti seade eth0 (193.40.35.96) on muu võrguga ühenduses hosti eth0 silla kaudu<br /> guesti seade eth1 (172.17.35.18) on muu võrguga ühenduses hosti eth1 silla kaudu<br /> <br /> Peamised fw.ims arvutis töötavad rakendusprogrammid on<br /> <br /> * PostgreSQL v. 9.0 andmebaas<br /> * Apache veebiserver<br /> * NFS failiserver, mis jagab /home kataloogi eap.ims arvutisse<br /> <br /> ===varundus.ims===<br /> <br /> ====mdadm kasutamine====<br /> <br /> Neli füüsilist kõvaketast on partitsioneeritud sarnaselt<br /> <br /> root@varundus:~# parted /dev/sda p<br /> Model: ATA WDC WD2003FYYS-0 (scsi)<br /> Disk /dev/sda: 2000GB<br /> Sector size (logical/physical): 512B/512B<br /> Partition Table: msdos<br /> <br /> Number Start End Size Type File system Flags<br /> 1 1049kB 269MB 268MB primary ext3 boot<br /> 2 269MB 2000GB 2000GB primary<br /> <br /> mdadm abil on<br /> <br /> * kõigi kõvaketaste esimesed partitsioonid ühendatud /dev/md/boot raid1 lülitusse<br /> * kõigi kõvaketaste teised partitsioonid ühendatud /dev/md/system raid5 lülitusse<br /> <br /> ====LVM kasutamine====<br /> <br /> varundus arvutis kasutuses sellised plokkseadmed<br /> <br /> * /boot - /dev/md/boot (mdadm ressurss)<br /> * / - /dev/system/root (LVM ressurss)<br /> * /srv/backup - /dev/system/backup (LVM ressurss)<br /> <br /> ====Võrgu kasutamine====<br /> <br /> Kaks arvuti võrgukaarti on kasutusel selliselt<br /> <br /> * eth0 - 172.17.35.19<br /> * vaikelüüs 172.17.35.1<br /> <br /> Full backup: kord nädalas nublu.chem.ut.ee 2-le eraldi kõvakettale (mitteredundantsed), säilitatakse 4-5 viimast täiskoopiat.<br /> <br /> Full backupi ligikaudne maht (24.01.2011): 35 GB<br /> <br /> <br /> Iga päeva WAL logid (säilitatakse kahe full backupi vahel tekkinud WAL logid (nädala WAL logide ligikaudne maht (24.01.2011): 18 GB<br /> <br /> Tarmo virtuaalserverist hetkel backuppi ei tehta.<br /> <br /> ====Nublu====<br /> <br /> ====Raamistik====<br /> <br /> ===Monitooring===<br /> <br /> TODO<br /> <br /> ===Kasulikud lisamaterjalid===<br /> <br /> * http://www.auul.pri.ee/wiki/NUT_tarkvara_kasutamine_Debian_Squeeze_operatsioonis%C3%BCsteemiga<br /> * http://www.auul.pri.ee/wiki/EMC_Networker_client<br /> * http://www.auul.pri.ee/wiki/Tarkvaralise_mdadm_RAID_kasutamine_operatsioonis%C3%BCsteemiga_Debian_Squeeze</div> Imreoolberg https://ims.ut.ee/index.php?title=Eab_infra&diff=8941 Eab infra 2011-11-02T07:11:23Z <p>Imreoolberg: /* LVM kasutamine */</p> <hr /> <div>===Sissejuhatus===<br /> <br /> Käesoleva teksti eesmärgiks on kirjeldada EAP projekti juures toimuvat riistvara, võrgu, operatsioonisüsteemi keskkonna ja rakendustarkvara kasutamist.<br /> <br /> ===Riistvara===<br /> <br /> Projektis kasutatakse sellist riistavara<br /> <br /> * Powerware 5115 UPS<br /> * 2 x S3420GP emaplaadiga Ordi arvutid<br /> * mõlemad arvutid sisaldavad 4 x 2 TB kõvakettaid<br /> * generic kohtvõrgu kommutaator<br /> <br /> ===Tarkvara===<br /> <br /> Projekti arvutites kasutatakse järgmist tarkvara<br /> <br /> * Debian Squeeze v. 6 64bit operatsioonisüsteem<br /> * XEN v. 4 virtualiseerimise tarkvara<br /> * Apache veebiserver<br /> * PostgreSQL andmebaas<br /> * Zabbix monitooringutarkvara<br /> * OpenVPN kaugligipääsu tarkvara<br /> * rsnapshot ja EMC Networker varundustarkvara<br /> * plokkseadmete haldamiseks mdadm ja LVM tarkvara<br /> <br /> ===Riistvara kaughaldus===<br /> <br /> Riistvaraliste arvutite kaughalduseks kasutatakse IMPI protokolli onboard BMC kontrolliriga suhtlemiseks. Muu hulgas võimaldab see ligipääsu arvuti BIOSile ning virtuaalse järjestikpordi kaudu serial konsoolile (st operatsioonisüsteemile).<br /> <br /> ===Võrgutopoloogia===<br /> <br /> _____<br /> 195.80.35.1 | | ülikooli võrguseade<br /> ----------------------------------------------|----------------------------------------------| |<br /> | |_____|<br /> | | 172.17.35.1<br /> | 195.80.35.96 |<br /> | 2001:bb8:2002:2300:7231:40ff:fe03:5128 | <br /> _____ __|__ |<br /> | | | | |<br /> | F | | V | | <br /> |_____| at-dom0.ims |_____| fw.ims |<br /> | os: 172.17.35.21 | 172.17.35.18 |<br /> | 2001:bb8:2002:2300:21e:67ff:fe03:c3c0 | 2001:bb8:2002:2300:7221:17ff:fe03:5018 |<br /> | impi: 172.17.35.20 | |<br /> --|-------------------------------|-------------------|-----------------------|-------------------------|------ <br /> | |<br /> __|__ __|__<br /> | | | |<br /> | F | | V |<br /> |_____| |_____|<br /> <br /> varundus.ims eap.ims<br /> os: 172.17.35.19 172.17.35.22<br /> 2001:bb8:2002:2300:21e:67ff:fe03:a0f9 2001:bb8:2002:2300:7221:17ff:fe03:5022<br /> ipmi: 172.17.35.5<br /> <br /> kus<br /> <br /> * at-dom0.ims - füüsiline virtualiseerimise arvuti<br /> * varundus.ims - füüsiline varunduse arvuti<br /> * fw.ims (fw.ims.ut.ee) - virtuaalne arvuti<br /> * eap.ims - virtuaalne arvuti<br /> <br /> Füüsilistel arvutitel on lisaks operatsioonisüsteemi ip aadressile ka füüsilise riistvara kaughalduse ipmi aadress. Operatsioonisüsteemid omandavad automaatselt oma mac aadresside abil ipv6 aadressid.<br /> <br /> ===Plokkseadmete haldamine===<br /> <br /> Plokkseadmete haldamiseks kasutatakse mdadm ja LVM tarkvara. Mõlemas füüsilises arvutis töötavad neli samade parameetritega kõvaketast on ühendatud RAID massiividesse; RAID ressurssi hallatakse edasi LVM abil kasutamiseks failisüsteemide ja saaleala jaoks.<br /> <br /> ===Virtualiseerimine===<br /> <br /> Efektiivsemaks ja paindlikumaks riistavaralise ressursi kasutamiseks on teenusserverid eap.ims ja fw.ims juurutatud virtuaalsete arvutitena. Neile saab kasutamiseks anda sobiva hulga protsessori, mälu, plokkseadme ja võrguressurssi. Projektis kasutatakse XEN virtualiseerimise tarkvara, mille kasutamist on kirjeldatud nt aadressidel<br /> <br /> * http://www.auul.pri.ee/wiki/Xen_ja_Debian_Squeeze<br /> * http://kuutorvaja.eenet.ee/wiki/Unix_keskkonna_administreerimine#Virtualiseerimine<br /> <br /> ====XEN host====<br /> <br /> XEN hostile vastav operatsioonisüsteemi eksemplar töötab füüsilisel riistvaral ja selle seest tõimub virtuaalsete arvutite juhtimine. Kui välja arvata XEN hosti alglaaduri seadistused ja mõned virtualiseerimisega seotud protsessid on tegu tavalise Debian Squeeze operatsioonisüsteemiga. <br /> <br /> ====XEN guest====<br /> <br /> XEN guestid on virtuaalsed operatsioonisüsteemid, mis töötavad XEN hosti kontrolli all ja mis kasutavad XEN hostist neile eraldatud ressursse.<br /> <br /> ===at-dom0 host===<br /> <br /> ====mdadm kasutamine====<br /> <br /> Neli füüsilist kõvaketast on partitsioneeritud sarnaselt<br /> <br /> root@at-dom0:~# parted /dev/sda p<br /> Model: ATA WDC WD2003FYYS-0 (scsi)<br /> Disk /dev/sda: 2000GB<br /> Sector size (logical/physical): 512B/512B<br /> Partition Table: msdos<br /> <br /> Number Start End Size Type File system Flags<br /> 1 1049kB 269MB 268MB primary ext3 boot<br /> 2 269MB 69.0GB 68.7GB primary<br /> 3 69.0GB 1169GB 1100GB primary<br /> <br /> mdadm abil on <br /> <br /> * kõigi kõvaketaste esimesed partitsioonid ühendatud /dev/md/boot raid1 lülitusse (at-dom0 operatsioonisüsteemi jaoks)<br /> * kõigi kõvaketaste teised partitsioonid ühendatud /dev/md/system raid5 lülitusse (at-dom0 operatsioonisüsteemi jaoks)<br /> * kõigi kõvaketaste teised partitsioonid ühendatud /dev/md/data raid5 lülitusse (virtuaalsete arvutite jaoks)<br /> <br /> ====LVM kasutamine====<br /> <br /> at-dom0 enda operatsioonisüsteemi jaoks kasutuses sellised plokkseadmed<br /> <br /> * /boot - /dev/md/boot (mdadm ressurss)<br /> * / - /dev/system/root (LVM ressurss)<br /> <br /> at-dom0.ims arvutil töötavad kaks virtuaalset arvutit<br /> <br /> ====Võrgu kasutamine====<br /> <br /> Kaks arvuti võrgukaarti on kasutusel selliselt<br /> <br /> * peth0 - esimene füüsiline võrgukaart<br /> * peth1 - teine füüsiline võrgukaart<br /> * eth0 - esimest füüsilist võrgukaarti sisaldav sild (fiktiivne aadress 10.101.101.21)<br /> * eth1 - teist füüsilist võrgukaarti sisaldav sild (172.17.35.21)<br /> * vaikelüüs 172.17.35.1<br /> <br /> * eap.ims - eth0 - 172.17.35.22, 2001:bb8:2002:2300:7221:17ff:fe03:5022/64<br /> * fw.ims -<br /> <br /> ===eap.ims guest===<br /> <br /> eap.ims kasutab selliseid hosti ressursse<br /> <br /> Plokkseade<br /> <br /> /dev/data/eap_root<br /> /dev/data/eap_home<br /> /dev/data/eap_data_backup<br /> /dev/data/eap_data_postgresql<br /> /dev/data/eap_swap<br /> <br /> Võrk<br /> <br /> guesti seade eth0 (172.17.35.22) on muu võrguga ühenduses hosti eth1 silla kaudu<br /> <br /> Põhiline eap.ims arvutis töötav rakendustarkvara on PostgreSQL v. 9.0 andmebaas.<br /> <br /> * WAL logid salvestatakse iga 30 minuti järel RAID1 (redundantne) kõvaketastele (andmebaasi serveril)<br /> <br /> ===fw.ims guest===<br /> <br /> fw.ims kasutab selliseid hosti ressursse<br /> <br /> Plokkseade<br /> <br /> /dev/data/fw_root<br /> /dev/data/fw_home<br /> /dev/data/fw_data_backup<br /> /dev/data/fw_data_postgresql<br /> /dev/data/fw_swap <br /> <br /> Võrk<br /> <br /> guesti seade eth0 (193.40.35.96) on muu võrguga ühenduses hosti eth0 silla kaudu<br /> guesti seade eth1 (172.17.35.18) on muu võrguga ühenduses hosti eth1 silla kaudu<br /> <br /> Peamised fw.ims arvutis töötavad rakendusprogrammid on<br /> <br /> * PostgreSQL v. 9.0 andmebaas<br /> * Apache veebiserver<br /> * NFS failiserver, mis jagab /home kataloogi eap.ims arvutisse<br /> <br /> ===varundus.ims===<br /> <br /> ====mdadm kasutamine====<br /> <br /> Neli füüsilist kõvaketast on partitsioneeritud sarnaselt<br /> <br /> root@varundus:~# parted /dev/sda p<br /> Model: ATA WDC WD2003FYYS-0 (scsi)<br /> Disk /dev/sda: 2000GB<br /> Sector size (logical/physical): 512B/512B<br /> Partition Table: msdos<br /> <br /> Number Start End Size Type File system Flags<br /> 1 1049kB 269MB 268MB primary ext3 boot<br /> 2 269MB 2000GB 2000GB primary<br /> <br /> mdadm abil on<br /> <br /> * kõigi kõvaketaste esimesed partitsioonid ühendatud /dev/md/boot raid1 lülitusse<br /> * kõigi kõvaketaste teised partitsioonid ühendatud /dev/md/system raid5 lülitusse<br /> <br /> ====LVM kasutamine====<br /> <br /> varundus arvutis kasutuses sellised plokkseadmed<br /> <br /> * /boot - /dev/md/boot (mdadm ressurss)<br /> * / - /dev/system/root (LVM ressurss)<br /> * /srv/backup - /dev/system/backup (LVM ressurss)<br /> <br /> ====Võrgu kasutamine====<br /> <br /> Kaks arvuti võrgukaarti on kasutusel selliselt<br /> <br /> * eth0 - 172.17.35.19<br /> * vaikelüüs 172.17.35.1<br /> <br /> Full backup: kord nädalas nublu.chem.ut.ee 2-le eraldi kõvakettale (mitteredundantsed), säilitatakse 4-5 viimast täiskoopiat.<br /> <br /> Full backupi ligikaudne maht (24.01.2011): 35 GB<br /> <br /> <br /> Iga päeva WAL logid (säilitatakse kahe full backupi vahel tekkinud WAL logid (nädala WAL logide ligikaudne maht (24.01.2011): 18 GB<br /> <br /> Tarmo virtuaalserverist hetkel backuppi ei tehta.<br /> <br /> ====Nublu====<br /> <br /> ====Raamistik====<br /> <br /> ===Monitooring===<br /> <br /> TODO<br /> <br /> ===Kasulikud lisamaterjalid===<br /> <br /> * http://www.auul.pri.ee/wiki/NUT_tarkvara_kasutamine_Debian_Squeeze_operatsioonis%C3%BCsteemiga<br /> * http://www.auul.pri.ee/wiki/EMC_Networker_client<br /> * http://www.auul.pri.ee/wiki/Tarkvaralise_mdadm_RAID_kasutamine_operatsioonis%C3%BCsteemiga_Debian_Squeeze</div> Imreoolberg https://ims.ut.ee/index.php?title=Eab_infra&diff=8940 Eab infra 2011-11-02T07:10:15Z <p>Imreoolberg: /* varundus.ims */</p> <hr /> <div>===Sissejuhatus===<br /> <br /> Käesoleva teksti eesmärgiks on kirjeldada EAP projekti juures toimuvat riistvara, võrgu, operatsioonisüsteemi keskkonna ja rakendustarkvara kasutamist.<br /> <br /> ===Riistvara===<br /> <br /> Projektis kasutatakse sellist riistavara<br /> <br /> * Powerware 5115 UPS<br /> * 2 x S3420GP emaplaadiga Ordi arvutid<br /> * mõlemad arvutid sisaldavad 4 x 2 TB kõvakettaid<br /> * generic kohtvõrgu kommutaator<br /> <br /> ===Tarkvara===<br /> <br /> Projekti arvutites kasutatakse järgmist tarkvara<br /> <br /> * Debian Squeeze v. 6 64bit operatsioonisüsteem<br /> * XEN v. 4 virtualiseerimise tarkvara<br /> * Apache veebiserver<br /> * PostgreSQL andmebaas<br /> * Zabbix monitooringutarkvara<br /> * OpenVPN kaugligipääsu tarkvara<br /> * rsnapshot ja EMC Networker varundustarkvara<br /> * plokkseadmete haldamiseks mdadm ja LVM tarkvara<br /> <br /> ===Riistvara kaughaldus===<br /> <br /> Riistvaraliste arvutite kaughalduseks kasutatakse IMPI protokolli onboard BMC kontrolliriga suhtlemiseks. Muu hulgas võimaldab see ligipääsu arvuti BIOSile ning virtuaalse järjestikpordi kaudu serial konsoolile (st operatsioonisüsteemile).<br /> <br /> ===Võrgutopoloogia===<br /> <br /> _____<br /> 195.80.35.1 | | ülikooli võrguseade<br /> ----------------------------------------------|----------------------------------------------| |<br /> | |_____|<br /> | | 172.17.35.1<br /> | 195.80.35.96 |<br /> | 2001:bb8:2002:2300:7231:40ff:fe03:5128 | <br /> _____ __|__ |<br /> | | | | |<br /> | F | | V | | <br /> |_____| at-dom0.ims |_____| fw.ims |<br /> | os: 172.17.35.21 | 172.17.35.18 |<br /> | 2001:bb8:2002:2300:21e:67ff:fe03:c3c0 | 2001:bb8:2002:2300:7221:17ff:fe03:5018 |<br /> | impi: 172.17.35.20 | |<br /> --|-------------------------------|-------------------|-----------------------|-------------------------|------ <br /> | |<br /> __|__ __|__<br /> | | | |<br /> | F | | V |<br /> |_____| |_____|<br /> <br /> varundus.ims eap.ims<br /> os: 172.17.35.19 172.17.35.22<br /> 2001:bb8:2002:2300:21e:67ff:fe03:a0f9 2001:bb8:2002:2300:7221:17ff:fe03:5022<br /> ipmi: 172.17.35.5<br /> <br /> kus<br /> <br /> * at-dom0.ims - füüsiline virtualiseerimise arvuti<br /> * varundus.ims - füüsiline varunduse arvuti<br /> * fw.ims (fw.ims.ut.ee) - virtuaalne arvuti<br /> * eap.ims - virtuaalne arvuti<br /> <br /> Füüsilistel arvutitel on lisaks operatsioonisüsteemi ip aadressile ka füüsilise riistvara kaughalduse ipmi aadress. Operatsioonisüsteemid omandavad automaatselt oma mac aadresside abil ipv6 aadressid.<br /> <br /> ===Plokkseadmete haldamine===<br /> <br /> Plokkseadmete haldamiseks kasutatakse mdadm ja LVM tarkvara. Mõlemas füüsilises arvutis töötavad neli samade parameetritega kõvaketast on ühendatud RAID massiividesse; RAID ressurssi hallatakse edasi LVM abil kasutamiseks failisüsteemide ja saaleala jaoks.<br /> <br /> ===Virtualiseerimine===<br /> <br /> Efektiivsemaks ja paindlikumaks riistavaralise ressursi kasutamiseks on teenusserverid eap.ims ja fw.ims juurutatud virtuaalsete arvutitena. Neile saab kasutamiseks anda sobiva hulga protsessori, mälu, plokkseadme ja võrguressurssi. Projektis kasutatakse XEN virtualiseerimise tarkvara, mille kasutamist on kirjeldatud nt aadressidel<br /> <br /> * http://www.auul.pri.ee/wiki/Xen_ja_Debian_Squeeze<br /> * http://kuutorvaja.eenet.ee/wiki/Unix_keskkonna_administreerimine#Virtualiseerimine<br /> <br /> ====XEN host====<br /> <br /> XEN hostile vastav operatsioonisüsteemi eksemplar töötab füüsilisel riistvaral ja selle seest tõimub virtuaalsete arvutite juhtimine. Kui välja arvata XEN hosti alglaaduri seadistused ja mõned virtualiseerimisega seotud protsessid on tegu tavalise Debian Squeeze operatsioonisüsteemiga. <br /> <br /> ====XEN guest====<br /> <br /> XEN guestid on virtuaalsed operatsioonisüsteemid, mis töötavad XEN hosti kontrolli all ja mis kasutavad XEN hostist neile eraldatud ressursse.<br /> <br /> ===at-dom0 host===<br /> <br /> ====mdadm kasutamine====<br /> <br /> Neli füüsilist kõvaketast on partitsioneeritud sarnaselt<br /> <br /> root@at-dom0:~# parted /dev/sda p<br /> Model: ATA WDC WD2003FYYS-0 (scsi)<br /> Disk /dev/sda: 2000GB<br /> Sector size (logical/physical): 512B/512B<br /> Partition Table: msdos<br /> <br /> Number Start End Size Type File system Flags<br /> 1 1049kB 269MB 268MB primary ext3 boot<br /> 2 269MB 69.0GB 68.7GB primary<br /> 3 69.0GB 1169GB 1100GB primary<br /> <br /> mdadm abil on <br /> <br /> * kõigi kõvaketaste esimesed partitsioonid ühendatud /dev/md/boot raid1 lülitusse (at-dom0 operatsioonisüsteemi jaoks)<br /> * kõigi kõvaketaste teised partitsioonid ühendatud /dev/md/system raid5 lülitusse (at-dom0 operatsioonisüsteemi jaoks)<br /> * kõigi kõvaketaste teised partitsioonid ühendatud /dev/md/data raid5 lülitusse (virtuaalsete arvutite jaoks)<br /> <br /> ====LVM kasutamine====<br /> <br /> at-dom0 enda operatsioonisüsteemi jaoks kasutuses sellised plokkseadmed<br /> <br /> * /boot - /dev/md/boot (mdadm ressurss)<br /> * / - /dev/system/root (LVM ressurss)<br /> <br /> at-dom0.ims arvutil töötavad kaks virtuaalset arvutit<br /> <br /> ====Võrgu kasutamine====<br /> <br /> Kaks arvuti võrgukaarti on kasutusel selliselt<br /> <br /> * peth0 - esimene füüsiline võrgukaart<br /> * peth1 - teine füüsiline võrgukaart<br /> * eth0 - esimest füüsilist võrgukaarti sisaldav sild (fiktiivne aadress 10.101.101.21)<br /> * eth1 - teist füüsilist võrgukaarti sisaldav sild (172.17.35.21)<br /> * vaikelüüs 172.17.35.1<br /> <br /> * eap.ims - eth0 - 172.17.35.22, 2001:bb8:2002:2300:7221:17ff:fe03:5022/64<br /> * fw.ims -<br /> <br /> ===eap.ims guest===<br /> <br /> eap.ims kasutab selliseid hosti ressursse<br /> <br /> Plokkseade<br /> <br /> /dev/data/eap_root<br /> /dev/data/eap_home<br /> /dev/data/eap_data_backup<br /> /dev/data/eap_data_postgresql<br /> /dev/data/eap_swap<br /> <br /> Võrk<br /> <br /> guesti seade eth0 (172.17.35.22) on muu võrguga ühenduses hosti eth1 silla kaudu<br /> <br /> Põhiline eap.ims arvutis töötav rakendustarkvara on PostgreSQL v. 9.0 andmebaas.<br /> <br /> * WAL logid salvestatakse iga 30 minuti järel RAID1 (redundantne) kõvaketastele (andmebaasi serveril)<br /> <br /> ===fw.ims guest===<br /> <br /> fw.ims kasutab selliseid hosti ressursse<br /> <br /> Plokkseade<br /> <br /> /dev/data/fw_root<br /> /dev/data/fw_home<br /> /dev/data/fw_data_backup<br /> /dev/data/fw_data_postgresql<br /> /dev/data/fw_swap <br /> <br /> Võrk<br /> <br /> guesti seade eth0 (193.40.35.96) on muu võrguga ühenduses hosti eth0 silla kaudu<br /> guesti seade eth1 (172.17.35.18) on muu võrguga ühenduses hosti eth1 silla kaudu<br /> <br /> Peamised fw.ims arvutis töötavad rakendusprogrammid on<br /> <br /> * PostgreSQL v. 9.0 andmebaas<br /> * Apache veebiserver<br /> * NFS failiserver, mis jagab /home kataloogi eap.ims arvutisse<br /> <br /> ===varundus.ims===<br /> <br /> ====mdadm kasutamine====<br /> <br /> Neli füüsilist kõvaketast on partitsioneeritud sarnaselt<br /> <br /> root@varundus:~# parted /dev/sda p<br /> Model: ATA WDC WD2003FYYS-0 (scsi)<br /> Disk /dev/sda: 2000GB<br /> Sector size (logical/physical): 512B/512B<br /> Partition Table: msdos<br /> <br /> Number Start End Size Type File system Flags<br /> 1 1049kB 269MB 268MB primary ext3 boot<br /> 2 269MB 2000GB 2000GB primary<br /> <br /> mdadm abil on<br /> <br /> * kõigi kõvaketaste esimesed partitsioonid ühendatud /dev/md/boot raid1 lülitusse<br /> * kõigi kõvaketaste teised partitsioonid ühendatud /dev/md/system raid5 lülitusse<br /> <br /> ====LVM kasutamine====<br /> <br /> varundus arvutis kasutuses sellised plokkseadmed<br /> <br /> * /boot - /dev/md/boot (mdadm ressurss)<br /> * / - /dev/system/root (LVM ressurss)<br /> * /srv/backup - /dev/system/backup (LVM ressurss)<br /> <br /> Full backup: kord nädalas nublu.chem.ut.ee 2-le eraldi kõvakettale (mitteredundantsed), säilitatakse 4-5 viimast täiskoopiat.<br /> <br /> Full backupi ligikaudne maht (24.01.2011): 35 GB<br /> <br /> <br /> Iga päeva WAL logid (säilitatakse kahe full backupi vahel tekkinud WAL logid (nädala WAL logide ligikaudne maht (24.01.2011): 18 GB<br /> <br /> Tarmo virtuaalserverist hetkel backuppi ei tehta.<br /> <br /> ====Nublu====<br /> <br /> ====Raamistik====<br /> <br /> ===Monitooring===<br /> <br /> TODO<br /> <br /> ===Kasulikud lisamaterjalid===<br /> <br /> * http://www.auul.pri.ee/wiki/NUT_tarkvara_kasutamine_Debian_Squeeze_operatsioonis%C3%BCsteemiga<br /> * http://www.auul.pri.ee/wiki/EMC_Networker_client<br /> * http://www.auul.pri.ee/wiki/Tarkvaralise_mdadm_RAID_kasutamine_operatsioonis%C3%BCsteemiga_Debian_Squeeze</div> Imreoolberg https://ims.ut.ee/index.php?title=Eab_infra&diff=8938 Eab infra 2011-11-02T07:00:19Z <p>Imreoolberg: /* varundus.ims */</p> <hr /> <div>===Sissejuhatus===<br /> <br /> Käesoleva teksti eesmärgiks on kirjeldada EAP projekti juures toimuvat riistvara, võrgu, operatsioonisüsteemi keskkonna ja rakendustarkvara kasutamist.<br /> <br /> ===Riistvara===<br /> <br /> Projektis kasutatakse sellist riistavara<br /> <br /> * Powerware 5115 UPS<br /> * 2 x S3420GP emaplaadiga Ordi arvutid<br /> * mõlemad arvutid sisaldavad 4 x 2 TB kõvakettaid<br /> * generic kohtvõrgu kommutaator<br /> <br /> ===Tarkvara===<br /> <br /> Projekti arvutites kasutatakse järgmist tarkvara<br /> <br /> * Debian Squeeze v. 6 64bit operatsioonisüsteem<br /> * XEN v. 4 virtualiseerimise tarkvara<br /> * Apache veebiserver<br /> * PostgreSQL andmebaas<br /> * Zabbix monitooringutarkvara<br /> * OpenVPN kaugligipääsu tarkvara<br /> * rsnapshot ja EMC Networker varundustarkvara<br /> * plokkseadmete haldamiseks mdadm ja LVM tarkvara<br /> <br /> ===Riistvara kaughaldus===<br /> <br /> Riistvaraliste arvutite kaughalduseks kasutatakse IMPI protokolli onboard BMC kontrolliriga suhtlemiseks. Muu hulgas võimaldab see ligipääsu arvuti BIOSile ning virtuaalse järjestikpordi kaudu serial konsoolile (st operatsioonisüsteemile).<br /> <br /> ===Võrgutopoloogia===<br /> <br /> _____<br /> 195.80.35.1 | | ülikooli võrguseade<br /> ----------------------------------------------|----------------------------------------------| |<br /> | |_____|<br /> | | 172.17.35.1<br /> | 195.80.35.96 |<br /> | 2001:bb8:2002:2300:7231:40ff:fe03:5128 | <br /> _____ __|__ |<br /> | | | | |<br /> | F | | V | | <br /> |_____| at-dom0.ims |_____| fw.ims |<br /> | os: 172.17.35.21 | 172.17.35.18 |<br /> | 2001:bb8:2002:2300:21e:67ff:fe03:c3c0 | 2001:bb8:2002:2300:7221:17ff:fe03:5018 |<br /> | impi: 172.17.35.20 | |<br /> --|-------------------------------|-------------------|-----------------------|-------------------------|------ <br /> | |<br /> __|__ __|__<br /> | | | |<br /> | F | | V |<br /> |_____| |_____|<br /> <br /> varundus.ims eap.ims<br /> os: 172.17.35.19 172.17.35.22<br /> 2001:bb8:2002:2300:21e:67ff:fe03:a0f9 2001:bb8:2002:2300:7221:17ff:fe03:5022<br /> ipmi: 172.17.35.5<br /> <br /> kus<br /> <br /> * at-dom0.ims - füüsiline virtualiseerimise arvuti<br /> * varundus.ims - füüsiline varunduse arvuti<br /> * fw.ims (fw.ims.ut.ee) - virtuaalne arvuti<br /> * eap.ims - virtuaalne arvuti<br /> <br /> Füüsilistel arvutitel on lisaks operatsioonisüsteemi ip aadressile ka füüsilise riistvara kaughalduse ipmi aadress. Operatsioonisüsteemid omandavad automaatselt oma mac aadresside abil ipv6 aadressid.<br /> <br /> ===Plokkseadmete haldamine===<br /> <br /> Plokkseadmete haldamiseks kasutatakse mdadm ja LVM tarkvara. Mõlemas füüsilises arvutis töötavad neli samade parameetritega kõvaketast on ühendatud RAID massiividesse; RAID ressurssi hallatakse edasi LVM abil kasutamiseks failisüsteemide ja saaleala jaoks.<br /> <br /> ===Virtualiseerimine===<br /> <br /> Efektiivsemaks ja paindlikumaks riistavaralise ressursi kasutamiseks on teenusserverid eap.ims ja fw.ims juurutatud virtuaalsete arvutitena. Neile saab kasutamiseks anda sobiva hulga protsessori, mälu, plokkseadme ja võrguressurssi. Projektis kasutatakse XEN virtualiseerimise tarkvara, mille kasutamist on kirjeldatud nt aadressidel<br /> <br /> * http://www.auul.pri.ee/wiki/Xen_ja_Debian_Squeeze<br /> * http://kuutorvaja.eenet.ee/wiki/Unix_keskkonna_administreerimine#Virtualiseerimine<br /> <br /> ====XEN host====<br /> <br /> XEN hostile vastav operatsioonisüsteemi eksemplar töötab füüsilisel riistvaral ja selle seest tõimub virtuaalsete arvutite juhtimine. Kui välja arvata XEN hosti alglaaduri seadistused ja mõned virtualiseerimisega seotud protsessid on tegu tavalise Debian Squeeze operatsioonisüsteemiga. <br /> <br /> ====XEN guest====<br /> <br /> XEN guestid on virtuaalsed operatsioonisüsteemid, mis töötavad XEN hosti kontrolli all ja mis kasutavad XEN hostist neile eraldatud ressursse.<br /> <br /> ===at-dom0 host===<br /> <br /> ====mdadm kasutamine====<br /> <br /> Neli füüsilist kõvaketast on partitsioneeritud sarnaselt<br /> <br /> root@at-dom0:~# parted /dev/sda p<br /> Model: ATA WDC WD2003FYYS-0 (scsi)<br /> Disk /dev/sda: 2000GB<br /> Sector size (logical/physical): 512B/512B<br /> Partition Table: msdos<br /> <br /> Number Start End Size Type File system Flags<br /> 1 1049kB 269MB 268MB primary ext3 boot<br /> 2 269MB 69.0GB 68.7GB primary<br /> 3 69.0GB 1169GB 1100GB primary<br /> <br /> mdadm abil on <br /> <br /> * kõigi kõvaketaste esimesed partitsioonid ühendatud /dev/md/boot raid1 lülitusse (at-dom0 operatsioonisüsteemi jaoks)<br /> * kõigi kõvaketaste teised partitsioonid ühendatud /dev/md/system raid5 lülitusse (at-dom0 operatsioonisüsteemi jaoks)<br /> * kõigi kõvaketaste teised partitsioonid ühendatud /dev/md/data raid5 lülitusse (virtuaalsete arvutite jaoks)<br /> <br /> ====LVM kasutamine====<br /> <br /> at-dom0 enda operatsioonisüsteemi jaoks kasutuses sellised plokkseadmed<br /> <br /> * /boot - /dev/md/boot (mdadm ressurss)<br /> * / - /dev/system/root (LVM ressurss)<br /> <br /> at-dom0.ims arvutil töötavad kaks virtuaalset arvutit<br /> <br /> ====Võrgu kasutamine====<br /> <br /> Kaks arvuti võrgukaarti on kasutusel selliselt<br /> <br /> * peth0 - esimene füüsiline võrgukaart<br /> * peth1 - teine füüsiline võrgukaart<br /> * eth0 - esimest füüsilist võrgukaarti sisaldav sild (fiktiivne aadress 10.101.101.21)<br /> * eth1 - teist füüsilist võrgukaarti sisaldav sild (172.17.35.21)<br /> * vaikelüüs 172.17.35.1<br /> <br /> * eap.ims - eth0 - 172.17.35.22, 2001:bb8:2002:2300:7221:17ff:fe03:5022/64<br /> * fw.ims -<br /> <br /> ===eap.ims guest===<br /> <br /> eap.ims kasutab selliseid hosti ressursse<br /> <br /> Plokkseade<br /> <br /> /dev/data/eap_root<br /> /dev/data/eap_home<br /> /dev/data/eap_data_backup<br /> /dev/data/eap_data_postgresql<br /> /dev/data/eap_swap<br /> <br /> Võrk<br /> <br /> guesti seade eth0 (172.17.35.22) on muu võrguga ühenduses hosti eth1 silla kaudu<br /> <br /> Põhiline eap.ims arvutis töötav rakendustarkvara on PostgreSQL v. 9.0 andmebaas.<br /> <br /> * WAL logid salvestatakse iga 30 minuti järel RAID1 (redundantne) kõvaketastele (andmebaasi serveril)<br /> <br /> ===fw.ims guest===<br /> <br /> fw.ims kasutab selliseid hosti ressursse<br /> <br /> Plokkseade<br /> <br /> /dev/data/fw_root<br /> /dev/data/fw_home<br /> /dev/data/fw_data_backup<br /> /dev/data/fw_data_postgresql<br /> /dev/data/fw_swap <br /> <br /> Võrk<br /> <br /> guesti seade eth0 (193.40.35.96) on muu võrguga ühenduses hosti eth0 silla kaudu<br /> guesti seade eth1 (172.17.35.18) on muu võrguga ühenduses hosti eth1 silla kaudu<br /> <br /> Peamised fw.ims arvutis töötavad rakendusprogrammid on<br /> <br /> * PostgreSQL v. 9.0 andmebaas<br /> * Apache veebiserver<br /> * NFS failiserver, mis jagab /home kataloogi eap.ims arvutisse<br /> <br /> ===varundus.ims===<br /> <br /> ====mdadm kasutamine====<br /> <br /> Neli füüsilist kõvaketast on partitsioneeritud sarnaselt<br /> <br /> root@varundus:~# parted /dev/sda p<br /> Model: ATA WDC WD2003FYYS-0 (scsi)<br /> Disk /dev/sda: 2000GB<br /> Sector size (logical/physical): 512B/512B<br /> Partition Table: msdos<br /> <br /> Number Start End Size Type File system Flags<br /> 1 1049kB 269MB 268MB primary ext3 boot<br /> 2 269MB 2000GB 2000GB primary<br /> <br /> mdadm abil on<br /> <br /> * kõigi kõvaketaste esimesed partitsioonid ühendatud /dev/md/boot raid1 lülitusse<br /> * kõigi kõvaketaste teised partitsioonid ühendatud /dev/md/system raid5 lülitusse<br /> <br /> Full backup: kord nädalas nublu.chem.ut.ee 2-le eraldi kõvakettale (mitteredundantsed), säilitatakse 4-5 viimast täiskoopiat.<br /> <br /> Full backupi ligikaudne maht (24.01.2011): 35 GB<br /> <br /> <br /> Iga päeva WAL logid (säilitatakse kahe full backupi vahel tekkinud WAL logid (nädala WAL logide ligikaudne maht (24.01.2011): 18 GB<br /> <br /> Tarmo virtuaalserverist hetkel backuppi ei tehta.<br /> <br /> ====Nublu====<br /> <br /> ====Raamistik====<br /> <br /> ===Monitooring===<br /> <br /> TODO<br /> <br /> ===Kasulikud lisamaterjalid===<br /> <br /> * http://www.auul.pri.ee/wiki/NUT_tarkvara_kasutamine_Debian_Squeeze_operatsioonis%C3%BCsteemiga<br /> * http://www.auul.pri.ee/wiki/EMC_Networker_client<br /> * http://www.auul.pri.ee/wiki/Tarkvaralise_mdadm_RAID_kasutamine_operatsioonis%C3%BCsteemiga_Debian_Squeeze</div> Imreoolberg https://ims.ut.ee/index.php?title=Eab_infra&diff=8937 Eab infra 2011-11-02T06:56:44Z <p>Imreoolberg: /* eap.ims guest */</p> <hr /> <div>===Sissejuhatus===<br /> <br /> Käesoleva teksti eesmärgiks on kirjeldada EAP projekti juures toimuvat riistvara, võrgu, operatsioonisüsteemi keskkonna ja rakendustarkvara kasutamist.<br /> <br /> ===Riistvara===<br /> <br /> Projektis kasutatakse sellist riistavara<br /> <br /> * Powerware 5115 UPS<br /> * 2 x S3420GP emaplaadiga Ordi arvutid<br /> * mõlemad arvutid sisaldavad 4 x 2 TB kõvakettaid<br /> * generic kohtvõrgu kommutaator<br /> <br /> ===Tarkvara===<br /> <br /> Projekti arvutites kasutatakse järgmist tarkvara<br /> <br /> * Debian Squeeze v. 6 64bit operatsioonisüsteem<br /> * XEN v. 4 virtualiseerimise tarkvara<br /> * Apache veebiserver<br /> * PostgreSQL andmebaas<br /> * Zabbix monitooringutarkvara<br /> * OpenVPN kaugligipääsu tarkvara<br /> * rsnapshot ja EMC Networker varundustarkvara<br /> * plokkseadmete haldamiseks mdadm ja LVM tarkvara<br /> <br /> ===Riistvara kaughaldus===<br /> <br /> Riistvaraliste arvutite kaughalduseks kasutatakse IMPI protokolli onboard BMC kontrolliriga suhtlemiseks. Muu hulgas võimaldab see ligipääsu arvuti BIOSile ning virtuaalse järjestikpordi kaudu serial konsoolile (st operatsioonisüsteemile).<br /> <br /> ===Võrgutopoloogia===<br /> <br /> _____<br /> 195.80.35.1 | | ülikooli võrguseade<br /> ----------------------------------------------|----------------------------------------------| |<br /> | |_____|<br /> | | 172.17.35.1<br /> | 195.80.35.96 |<br /> | 2001:bb8:2002:2300:7231:40ff:fe03:5128 | <br /> _____ __|__ |<br /> | | | | |<br /> | F | | V | | <br /> |_____| at-dom0.ims |_____| fw.ims |<br /> | os: 172.17.35.21 | 172.17.35.18 |<br /> | 2001:bb8:2002:2300:21e:67ff:fe03:c3c0 | 2001:bb8:2002:2300:7221:17ff:fe03:5018 |<br /> | impi: 172.17.35.20 | |<br /> --|-------------------------------|-------------------|-----------------------|-------------------------|------ <br /> | |<br /> __|__ __|__<br /> | | | |<br /> | F | | V |<br /> |_____| |_____|<br /> <br /> varundus.ims eap.ims<br /> os: 172.17.35.19 172.17.35.22<br /> 2001:bb8:2002:2300:21e:67ff:fe03:a0f9 2001:bb8:2002:2300:7221:17ff:fe03:5022<br /> ipmi: 172.17.35.5<br /> <br /> kus<br /> <br /> * at-dom0.ims - füüsiline virtualiseerimise arvuti<br /> * varundus.ims - füüsiline varunduse arvuti<br /> * fw.ims (fw.ims.ut.ee) - virtuaalne arvuti<br /> * eap.ims - virtuaalne arvuti<br /> <br /> Füüsilistel arvutitel on lisaks operatsioonisüsteemi ip aadressile ka füüsilise riistvara kaughalduse ipmi aadress. Operatsioonisüsteemid omandavad automaatselt oma mac aadresside abil ipv6 aadressid.<br /> <br /> ===Plokkseadmete haldamine===<br /> <br /> Plokkseadmete haldamiseks kasutatakse mdadm ja LVM tarkvara. Mõlemas füüsilises arvutis töötavad neli samade parameetritega kõvaketast on ühendatud RAID massiividesse; RAID ressurssi hallatakse edasi LVM abil kasutamiseks failisüsteemide ja saaleala jaoks.<br /> <br /> ===Virtualiseerimine===<br /> <br /> Efektiivsemaks ja paindlikumaks riistavaralise ressursi kasutamiseks on teenusserverid eap.ims ja fw.ims juurutatud virtuaalsete arvutitena. Neile saab kasutamiseks anda sobiva hulga protsessori, mälu, plokkseadme ja võrguressurssi. Projektis kasutatakse XEN virtualiseerimise tarkvara, mille kasutamist on kirjeldatud nt aadressidel<br /> <br /> * http://www.auul.pri.ee/wiki/Xen_ja_Debian_Squeeze<br /> * http://kuutorvaja.eenet.ee/wiki/Unix_keskkonna_administreerimine#Virtualiseerimine<br /> <br /> ====XEN host====<br /> <br /> XEN hostile vastav operatsioonisüsteemi eksemplar töötab füüsilisel riistvaral ja selle seest tõimub virtuaalsete arvutite juhtimine. Kui välja arvata XEN hosti alglaaduri seadistused ja mõned virtualiseerimisega seotud protsessid on tegu tavalise Debian Squeeze operatsioonisüsteemiga. <br /> <br /> ====XEN guest====<br /> <br /> XEN guestid on virtuaalsed operatsioonisüsteemid, mis töötavad XEN hosti kontrolli all ja mis kasutavad XEN hostist neile eraldatud ressursse.<br /> <br /> ===at-dom0 host===<br /> <br /> ====mdadm kasutamine====<br /> <br /> Neli füüsilist kõvaketast on partitsioneeritud sarnaselt<br /> <br /> root@at-dom0:~# parted /dev/sda p<br /> Model: ATA WDC WD2003FYYS-0 (scsi)<br /> Disk /dev/sda: 2000GB<br /> Sector size (logical/physical): 512B/512B<br /> Partition Table: msdos<br /> <br /> Number Start End Size Type File system Flags<br /> 1 1049kB 269MB 268MB primary ext3 boot<br /> 2 269MB 69.0GB 68.7GB primary<br /> 3 69.0GB 1169GB 1100GB primary<br /> <br /> mdadm abil on <br /> <br /> * kõigi kõvaketaste esimesed partitsioonid ühendatud /dev/md/boot raid1 lülitusse (at-dom0 operatsioonisüsteemi jaoks)<br /> * kõigi kõvaketaste teised partitsioonid ühendatud /dev/md/system raid5 lülitusse (at-dom0 operatsioonisüsteemi jaoks)<br /> * kõigi kõvaketaste teised partitsioonid ühendatud /dev/md/data raid5 lülitusse (virtuaalsete arvutite jaoks)<br /> <br /> ====LVM kasutamine====<br /> <br /> at-dom0 enda operatsioonisüsteemi jaoks kasutuses sellised plokkseadmed<br /> <br /> * /boot - /dev/md/boot (mdadm ressurss)<br /> * / - /dev/system/root (LVM ressurss)<br /> <br /> at-dom0.ims arvutil töötavad kaks virtuaalset arvutit<br /> <br /> ====Võrgu kasutamine====<br /> <br /> Kaks arvuti võrgukaarti on kasutusel selliselt<br /> <br /> * peth0 - esimene füüsiline võrgukaart<br /> * peth1 - teine füüsiline võrgukaart<br /> * eth0 - esimest füüsilist võrgukaarti sisaldav sild (fiktiivne aadress 10.101.101.21)<br /> * eth1 - teist füüsilist võrgukaarti sisaldav sild (172.17.35.21)<br /> * vaikelüüs 172.17.35.1<br /> <br /> * eap.ims - eth0 - 172.17.35.22, 2001:bb8:2002:2300:7221:17ff:fe03:5022/64<br /> * fw.ims -<br /> <br /> ===eap.ims guest===<br /> <br /> eap.ims kasutab selliseid hosti ressursse<br /> <br /> Plokkseade<br /> <br /> /dev/data/eap_root<br /> /dev/data/eap_home<br /> /dev/data/eap_data_backup<br /> /dev/data/eap_data_postgresql<br /> /dev/data/eap_swap<br /> <br /> Võrk<br /> <br /> guesti seade eth0 (172.17.35.22) on muu võrguga ühenduses hosti eth1 silla kaudu<br /> <br /> Põhiline eap.ims arvutis töötav rakendustarkvara on PostgreSQL v. 9.0 andmebaas.<br /> <br /> * WAL logid salvestatakse iga 30 minuti järel RAID1 (redundantne) kõvaketastele (andmebaasi serveril)<br /> <br /> ===fw.ims guest===<br /> <br /> fw.ims kasutab selliseid hosti ressursse<br /> <br /> Plokkseade<br /> <br /> /dev/data/fw_root<br /> /dev/data/fw_home<br /> /dev/data/fw_data_backup<br /> /dev/data/fw_data_postgresql<br /> /dev/data/fw_swap <br /> <br /> Võrk<br /> <br /> guesti seade eth0 (193.40.35.96) on muu võrguga ühenduses hosti eth0 silla kaudu<br /> guesti seade eth1 (172.17.35.18) on muu võrguga ühenduses hosti eth1 silla kaudu<br /> <br /> Peamised fw.ims arvutis töötavad rakendusprogrammid on<br /> <br /> * PostgreSQL v. 9.0 andmebaas<br /> * Apache veebiserver<br /> * NFS failiserver, mis jagab /home kataloogi eap.ims arvutisse<br /> <br /> ===varundus.ims===<br /> <br /> Full backup: kord nädalas nublu.chem.ut.ee 2-le eraldi kõvakettale (mitteredundantsed), säilitatakse 4-5 viimast täiskoopiat.<br /> <br /> Full backupi ligikaudne maht (24.01.2011): 35 GB<br /> <br /> <br /> Iga päeva WAL logid (säilitatakse kahe full backupi vahel tekkinud WAL logid (nädala WAL logide ligikaudne maht (24.01.2011): 18 GB<br /> <br /> Tarmo virtuaalserverist hetkel backuppi ei tehta.<br /> <br /> ====Nublu====<br /> <br /> ====Raamistik====<br /> <br /> ===Monitooring===<br /> <br /> TODO<br /> <br /> ===Kasulikud lisamaterjalid===<br /> <br /> * http://www.auul.pri.ee/wiki/NUT_tarkvara_kasutamine_Debian_Squeeze_operatsioonis%C3%BCsteemiga<br /> * http://www.auul.pri.ee/wiki/EMC_Networker_client<br /> * http://www.auul.pri.ee/wiki/Tarkvaralise_mdadm_RAID_kasutamine_operatsioonis%C3%BCsteemiga_Debian_Squeeze</div> Imreoolberg https://ims.ut.ee/index.php?title=Eab_infra&diff=8936 Eab infra 2011-11-02T06:54:22Z <p>Imreoolberg: /* fw.ims guest */</p> <hr /> <div>===Sissejuhatus===<br /> <br /> Käesoleva teksti eesmärgiks on kirjeldada EAP projekti juures toimuvat riistvara, võrgu, operatsioonisüsteemi keskkonna ja rakendustarkvara kasutamist.<br /> <br /> ===Riistvara===<br /> <br /> Projektis kasutatakse sellist riistavara<br /> <br /> * Powerware 5115 UPS<br /> * 2 x S3420GP emaplaadiga Ordi arvutid<br /> * mõlemad arvutid sisaldavad 4 x 2 TB kõvakettaid<br /> * generic kohtvõrgu kommutaator<br /> <br /> ===Tarkvara===<br /> <br /> Projekti arvutites kasutatakse järgmist tarkvara<br /> <br /> * Debian Squeeze v. 6 64bit operatsioonisüsteem<br /> * XEN v. 4 virtualiseerimise tarkvara<br /> * Apache veebiserver<br /> * PostgreSQL andmebaas<br /> * Zabbix monitooringutarkvara<br /> * OpenVPN kaugligipääsu tarkvara<br /> * rsnapshot ja EMC Networker varundustarkvara<br /> * plokkseadmete haldamiseks mdadm ja LVM tarkvara<br /> <br /> ===Riistvara kaughaldus===<br /> <br /> Riistvaraliste arvutite kaughalduseks kasutatakse IMPI protokolli onboard BMC kontrolliriga suhtlemiseks. Muu hulgas võimaldab see ligipääsu arvuti BIOSile ning virtuaalse järjestikpordi kaudu serial konsoolile (st operatsioonisüsteemile).<br /> <br /> ===Võrgutopoloogia===<br /> <br /> _____<br /> 195.80.35.1 | | ülikooli võrguseade<br /> ----------------------------------------------|----------------------------------------------| |<br /> | |_____|<br /> | | 172.17.35.1<br /> | 195.80.35.96 |<br /> | 2001:bb8:2002:2300:7231:40ff:fe03:5128 | <br /> _____ __|__ |<br /> | | | | |<br /> | F | | V | | <br /> |_____| at-dom0.ims |_____| fw.ims |<br /> | os: 172.17.35.21 | 172.17.35.18 |<br /> | 2001:bb8:2002:2300:21e:67ff:fe03:c3c0 | 2001:bb8:2002:2300:7221:17ff:fe03:5018 |<br /> | impi: 172.17.35.20 | |<br /> --|-------------------------------|-------------------|-----------------------|-------------------------|------ <br /> | |<br /> __|__ __|__<br /> | | | |<br /> | F | | V |<br /> |_____| |_____|<br /> <br /> varundus.ims eap.ims<br /> os: 172.17.35.19 172.17.35.22<br /> 2001:bb8:2002:2300:21e:67ff:fe03:a0f9 2001:bb8:2002:2300:7221:17ff:fe03:5022<br /> ipmi: 172.17.35.5<br /> <br /> kus<br /> <br /> * at-dom0.ims - füüsiline virtualiseerimise arvuti<br /> * varundus.ims - füüsiline varunduse arvuti<br /> * fw.ims (fw.ims.ut.ee) - virtuaalne arvuti<br /> * eap.ims - virtuaalne arvuti<br /> <br /> Füüsilistel arvutitel on lisaks operatsioonisüsteemi ip aadressile ka füüsilise riistvara kaughalduse ipmi aadress. Operatsioonisüsteemid omandavad automaatselt oma mac aadresside abil ipv6 aadressid.<br /> <br /> ===Plokkseadmete haldamine===<br /> <br /> Plokkseadmete haldamiseks kasutatakse mdadm ja LVM tarkvara. Mõlemas füüsilises arvutis töötavad neli samade parameetritega kõvaketast on ühendatud RAID massiividesse; RAID ressurssi hallatakse edasi LVM abil kasutamiseks failisüsteemide ja saaleala jaoks.<br /> <br /> ===Virtualiseerimine===<br /> <br /> Efektiivsemaks ja paindlikumaks riistavaralise ressursi kasutamiseks on teenusserverid eap.ims ja fw.ims juurutatud virtuaalsete arvutitena. Neile saab kasutamiseks anda sobiva hulga protsessori, mälu, plokkseadme ja võrguressurssi. Projektis kasutatakse XEN virtualiseerimise tarkvara, mille kasutamist on kirjeldatud nt aadressidel<br /> <br /> * http://www.auul.pri.ee/wiki/Xen_ja_Debian_Squeeze<br /> * http://kuutorvaja.eenet.ee/wiki/Unix_keskkonna_administreerimine#Virtualiseerimine<br /> <br /> ====XEN host====<br /> <br /> XEN hostile vastav operatsioonisüsteemi eksemplar töötab füüsilisel riistvaral ja selle seest tõimub virtuaalsete arvutite juhtimine. Kui välja arvata XEN hosti alglaaduri seadistused ja mõned virtualiseerimisega seotud protsessid on tegu tavalise Debian Squeeze operatsioonisüsteemiga. <br /> <br /> ====XEN guest====<br /> <br /> XEN guestid on virtuaalsed operatsioonisüsteemid, mis töötavad XEN hosti kontrolli all ja mis kasutavad XEN hostist neile eraldatud ressursse.<br /> <br /> ===at-dom0 host===<br /> <br /> ====mdadm kasutamine====<br /> <br /> Neli füüsilist kõvaketast on partitsioneeritud sarnaselt<br /> <br /> root@at-dom0:~# parted /dev/sda p<br /> Model: ATA WDC WD2003FYYS-0 (scsi)<br /> Disk /dev/sda: 2000GB<br /> Sector size (logical/physical): 512B/512B<br /> Partition Table: msdos<br /> <br /> Number Start End Size Type File system Flags<br /> 1 1049kB 269MB 268MB primary ext3 boot<br /> 2 269MB 69.0GB 68.7GB primary<br /> 3 69.0GB 1169GB 1100GB primary<br /> <br /> mdadm abil on <br /> <br /> * kõigi kõvaketaste esimesed partitsioonid ühendatud /dev/md/boot raid1 lülitusse (at-dom0 operatsioonisüsteemi jaoks)<br /> * kõigi kõvaketaste teised partitsioonid ühendatud /dev/md/system raid5 lülitusse (at-dom0 operatsioonisüsteemi jaoks)<br /> * kõigi kõvaketaste teised partitsioonid ühendatud /dev/md/data raid5 lülitusse (virtuaalsete arvutite jaoks)<br /> <br /> ====LVM kasutamine====<br /> <br /> at-dom0 enda operatsioonisüsteemi jaoks kasutuses sellised plokkseadmed<br /> <br /> * /boot - /dev/md/boot (mdadm ressurss)<br /> * / - /dev/system/root (LVM ressurss)<br /> <br /> at-dom0.ims arvutil töötavad kaks virtuaalset arvutit<br /> <br /> ====Võrgu kasutamine====<br /> <br /> Kaks arvuti võrgukaarti on kasutusel selliselt<br /> <br /> * peth0 - esimene füüsiline võrgukaart<br /> * peth1 - teine füüsiline võrgukaart<br /> * eth0 - esimest füüsilist võrgukaarti sisaldav sild (fiktiivne aadress 10.101.101.21)<br /> * eth1 - teist füüsilist võrgukaarti sisaldav sild (172.17.35.21)<br /> * vaikelüüs 172.17.35.1<br /> <br /> * eap.ims - eth0 - 172.17.35.22, 2001:bb8:2002:2300:7221:17ff:fe03:5022/64<br /> * fw.ims -<br /> <br /> ===eap.ims guest===<br /> <br /> eap.ims kasutab selliseid hosti ressursse<br /> <br /> Plokkseade<br /> <br /> * /dev/data/eap_root<br /> * /dev/mapper/data-eap_home<br /> * /dev/mapper/data-eap_data_backup<br /> * /dev/mapper/data-eap_data_postgresql<br /> * /dev/mapper/data-eap_swap<br /> <br /> Võrk<br /> <br /> * guesti seade eth0 (172.17.35.22) on muu võrguga ühenduses hosti eth1 silla kaudu<br /> <br /> Põhiline eap.ims arvutis töötav rakendustarkvara on PostgreSQL v. 9.0 andmebaas.<br /> <br /> * WAL logid salvestatakse iga 30 minuti järel RAID1 (redundantne) kõvaketastele (andmebaasi serveril)<br /> <br /> ===fw.ims guest===<br /> <br /> fw.ims kasutab selliseid hosti ressursse<br /> <br /> Plokkseade<br /> <br /> /dev/data/fw_root<br /> /dev/data/fw_home<br /> /dev/data/fw_data_backup<br /> /dev/data/fw_data_postgresql<br /> /dev/data/fw_swap <br /> <br /> Võrk<br /> <br /> guesti seade eth0 (193.40.35.96) on muu võrguga ühenduses hosti eth0 silla kaudu<br /> guesti seade eth1 (172.17.35.18) on muu võrguga ühenduses hosti eth1 silla kaudu<br /> <br /> Peamised fw.ims arvutis töötavad rakendusprogrammid on<br /> <br /> * PostgreSQL v. 9.0 andmebaas<br /> * Apache veebiserver<br /> * NFS failiserver, mis jagab /home kataloogi eap.ims arvutisse<br /> <br /> ===varundus.ims===<br /> <br /> Full backup: kord nädalas nublu.chem.ut.ee 2-le eraldi kõvakettale (mitteredundantsed), säilitatakse 4-5 viimast täiskoopiat.<br /> <br /> Full backupi ligikaudne maht (24.01.2011): 35 GB<br /> <br /> <br /> Iga päeva WAL logid (säilitatakse kahe full backupi vahel tekkinud WAL logid (nädala WAL logide ligikaudne maht (24.01.2011): 18 GB<br /> <br /> Tarmo virtuaalserverist hetkel backuppi ei tehta.<br /> <br /> ====Nublu====<br /> <br /> ====Raamistik====<br /> <br /> ===Monitooring===<br /> <br /> TODO<br /> <br /> ===Kasulikud lisamaterjalid===<br /> <br /> * http://www.auul.pri.ee/wiki/NUT_tarkvara_kasutamine_Debian_Squeeze_operatsioonis%C3%BCsteemiga<br /> * http://www.auul.pri.ee/wiki/EMC_Networker_client<br /> * http://www.auul.pri.ee/wiki/Tarkvaralise_mdadm_RAID_kasutamine_operatsioonis%C3%BCsteemiga_Debian_Squeeze</div> Imreoolberg https://ims.ut.ee/index.php?title=Eab_infra&diff=8935 Eab infra 2011-11-01T22:03:52Z <p>Imreoolberg: /* eap.ims guest */</p> <hr /> <div>===Sissejuhatus===<br /> <br /> Käesoleva teksti eesmärgiks on kirjeldada EAP projekti juures toimuvat riistvara, võrgu, operatsioonisüsteemi keskkonna ja rakendustarkvara kasutamist.<br /> <br /> ===Riistvara===<br /> <br /> Projektis kasutatakse sellist riistavara<br /> <br /> * Powerware 5115 UPS<br /> * 2 x S3420GP emaplaadiga Ordi arvutid<br /> * mõlemad arvutid sisaldavad 4 x 2 TB kõvakettaid<br /> * generic kohtvõrgu kommutaator<br /> <br /> ===Tarkvara===<br /> <br /> Projekti arvutites kasutatakse järgmist tarkvara<br /> <br /> * Debian Squeeze v. 6 64bit operatsioonisüsteem<br /> * XEN v. 4 virtualiseerimise tarkvara<br /> * Apache veebiserver<br /> * PostgreSQL andmebaas<br /> * Zabbix monitooringutarkvara<br /> * OpenVPN kaugligipääsu tarkvara<br /> * rsnapshot ja EMC Networker varundustarkvara<br /> * plokkseadmete haldamiseks mdadm ja LVM tarkvara<br /> <br /> ===Riistvara kaughaldus===<br /> <br /> Riistvaraliste arvutite kaughalduseks kasutatakse IMPI protokolli onboard BMC kontrolliriga suhtlemiseks. Muu hulgas võimaldab see ligipääsu arvuti BIOSile ning virtuaalse järjestikpordi kaudu serial konsoolile (st operatsioonisüsteemile).<br /> <br /> ===Võrgutopoloogia===<br /> <br /> _____<br /> 195.80.35.1 | | ülikooli võrguseade<br /> ----------------------------------------------|----------------------------------------------| |<br /> | |_____|<br /> | | 172.17.35.1<br /> | 195.80.35.96 |<br /> | 2001:bb8:2002:2300:7231:40ff:fe03:5128 | <br /> _____ __|__ |<br /> | | | | |<br /> | F | | V | | <br /> |_____| at-dom0.ims |_____| fw.ims |<br /> | os: 172.17.35.21 | 172.17.35.18 |<br /> | 2001:bb8:2002:2300:21e:67ff:fe03:c3c0 | 2001:bb8:2002:2300:7221:17ff:fe03:5018 |<br /> | impi: 172.17.35.20 | |<br /> --|-------------------------------|-------------------|-----------------------|-------------------------|------ <br /> | |<br /> __|__ __|__<br /> | | | |<br /> | F | | V |<br /> |_____| |_____|<br /> <br /> varundus.ims eap.ims<br /> os: 172.17.35.19 172.17.35.22<br /> 2001:bb8:2002:2300:21e:67ff:fe03:a0f9 2001:bb8:2002:2300:7221:17ff:fe03:5022<br /> ipmi: 172.17.35.5<br /> <br /> kus<br /> <br /> * at-dom0.ims - füüsiline virtualiseerimise arvuti<br /> * varundus.ims - füüsiline varunduse arvuti<br /> * fw.ims (fw.ims.ut.ee) - virtuaalne arvuti<br /> * eap.ims - virtuaalne arvuti<br /> <br /> Füüsilistel arvutitel on lisaks operatsioonisüsteemi ip aadressile ka füüsilise riistvara kaughalduse ipmi aadress. Operatsioonisüsteemid omandavad automaatselt oma mac aadresside abil ipv6 aadressid.<br /> <br /> ===Plokkseadmete haldamine===<br /> <br /> Plokkseadmete haldamiseks kasutatakse mdadm ja LVM tarkvara. Mõlemas füüsilises arvutis töötavad neli samade parameetritega kõvaketast on ühendatud RAID massiividesse; RAID ressurssi hallatakse edasi LVM abil kasutamiseks failisüsteemide ja saaleala jaoks.<br /> <br /> ===Virtualiseerimine===<br /> <br /> Efektiivsemaks ja paindlikumaks riistavaralise ressursi kasutamiseks on teenusserverid eap.ims ja fw.ims juurutatud virtuaalsete arvutitena. Neile saab kasutamiseks anda sobiva hulga protsessori, mälu, plokkseadme ja võrguressurssi. Projektis kasutatakse XEN virtualiseerimise tarkvara, mille kasutamist on kirjeldatud nt aadressidel<br /> <br /> * http://www.auul.pri.ee/wiki/Xen_ja_Debian_Squeeze<br /> * http://kuutorvaja.eenet.ee/wiki/Unix_keskkonna_administreerimine#Virtualiseerimine<br /> <br /> ====XEN host====<br /> <br /> XEN hostile vastav operatsioonisüsteemi eksemplar töötab füüsilisel riistvaral ja selle seest tõimub virtuaalsete arvutite juhtimine. Kui välja arvata XEN hosti alglaaduri seadistused ja mõned virtualiseerimisega seotud protsessid on tegu tavalise Debian Squeeze operatsioonisüsteemiga. <br /> <br /> ====XEN guest====<br /> <br /> XEN guestid on virtuaalsed operatsioonisüsteemid, mis töötavad XEN hosti kontrolli all ja mis kasutavad XEN hostist neile eraldatud ressursse.<br /> <br /> ===at-dom0 host===<br /> <br /> ====mdadm kasutamine====<br /> <br /> Neli füüsilist kõvaketast on partitsioneeritud sarnaselt<br /> <br /> root@at-dom0:~# parted /dev/sda p<br /> Model: ATA WDC WD2003FYYS-0 (scsi)<br /> Disk /dev/sda: 2000GB<br /> Sector size (logical/physical): 512B/512B<br /> Partition Table: msdos<br /> <br /> Number Start End Size Type File system Flags<br /> 1 1049kB 269MB 268MB primary ext3 boot<br /> 2 269MB 69.0GB 68.7GB primary<br /> 3 69.0GB 1169GB 1100GB primary<br /> <br /> mdadm abil on <br /> <br /> * kõigi kõvaketaste esimesed partitsioonid ühendatud /dev/md/boot raid1 lülitusse (at-dom0 operatsioonisüsteemi jaoks)<br /> * kõigi kõvaketaste teised partitsioonid ühendatud /dev/md/system raid5 lülitusse (at-dom0 operatsioonisüsteemi jaoks)<br /> * kõigi kõvaketaste teised partitsioonid ühendatud /dev/md/data raid5 lülitusse (virtuaalsete arvutite jaoks)<br /> <br /> ====LVM kasutamine====<br /> <br /> at-dom0 enda operatsioonisüsteemi jaoks kasutuses sellised plokkseadmed<br /> <br /> * /boot - /dev/md/boot (mdadm ressurss)<br /> * / - /dev/system/root (LVM ressurss)<br /> <br /> at-dom0.ims arvutil töötavad kaks virtuaalset arvutit<br /> <br /> ====Võrgu kasutamine====<br /> <br /> Kaks arvuti võrgukaarti on kasutusel selliselt<br /> <br /> * peth0 - esimene füüsiline võrgukaart<br /> * peth1 - teine füüsiline võrgukaart<br /> * eth0 - esimest füüsilist võrgukaarti sisaldav sild (fiktiivne aadress 10.101.101.21)<br /> * eth1 - teist füüsilist võrgukaarti sisaldav sild (172.17.35.21)<br /> * vaikelüüs 172.17.35.1<br /> <br /> * eap.ims - eth0 - 172.17.35.22, 2001:bb8:2002:2300:7221:17ff:fe03:5022/64<br /> * fw.ims -<br /> <br /> ===eap.ims guest===<br /> <br /> eap.ims kasutab selliseid hosti ressursse<br /> <br /> Plokkseade<br /> <br /> * /dev/data/eap_root<br /> * /dev/mapper/data-eap_home<br /> * /dev/mapper/data-eap_data_backup<br /> * /dev/mapper/data-eap_data_postgresql<br /> * /dev/mapper/data-eap_swap<br /> <br /> Võrk<br /> <br /> * guesti seade eth0 (172.17.35.22) on muu võrguga ühenduses hosti eth1 silla kaudu<br /> <br /> Põhiline eap.ims arvutis töötav rakendustarkvara on PostgreSQL v. 9.0 andmebaas.<br /> <br /> * WAL logid salvestatakse iga 30 minuti järel RAID1 (redundantne) kõvaketastele (andmebaasi serveril)<br /> <br /> ===fw.ims guest===<br /> <br /> Peamised fw.ims arvutis töötavad rakendusprogrammid on<br /> <br /> * PostgreSQL v. 9.0 andmebaas<br /> * Apache veebiserver<br /> * NFS failiserver, mis jagab /home kataloogi eap.ims arvutisse<br /> <br /> ===varundus.ims===<br /> <br /> Full backup: kord nädalas nublu.chem.ut.ee 2-le eraldi kõvakettale (mitteredundantsed), säilitatakse 4-5 viimast täiskoopiat.<br /> <br /> Full backupi ligikaudne maht (24.01.2011): 35 GB<br /> <br /> <br /> Iga päeva WAL logid (säilitatakse kahe full backupi vahel tekkinud WAL logid (nädala WAL logide ligikaudne maht (24.01.2011): 18 GB<br /> <br /> Tarmo virtuaalserverist hetkel backuppi ei tehta.<br /> <br /> ====Nublu====<br /> <br /> ====Raamistik====<br /> <br /> ===Monitooring===<br /> <br /> TODO<br /> <br /> ===Kasulikud lisamaterjalid===<br /> <br /> * http://www.auul.pri.ee/wiki/NUT_tarkvara_kasutamine_Debian_Squeeze_operatsioonis%C3%BCsteemiga<br /> * http://www.auul.pri.ee/wiki/EMC_Networker_client<br /> * http://www.auul.pri.ee/wiki/Tarkvaralise_mdadm_RAID_kasutamine_operatsioonis%C3%BCsteemiga_Debian_Squeeze</div> Imreoolberg https://ims.ut.ee/index.php?title=Eab_infra&diff=8934 Eab infra 2011-11-01T22:03:25Z <p>Imreoolberg: /* eap.ims guest */</p> <hr /> <div>===Sissejuhatus===<br /> <br /> Käesoleva teksti eesmärgiks on kirjeldada EAP projekti juures toimuvat riistvara, võrgu, operatsioonisüsteemi keskkonna ja rakendustarkvara kasutamist.<br /> <br /> ===Riistvara===<br /> <br /> Projektis kasutatakse sellist riistavara<br /> <br /> * Powerware 5115 UPS<br /> * 2 x S3420GP emaplaadiga Ordi arvutid<br /> * mõlemad arvutid sisaldavad 4 x 2 TB kõvakettaid<br /> * generic kohtvõrgu kommutaator<br /> <br /> ===Tarkvara===<br /> <br /> Projekti arvutites kasutatakse järgmist tarkvara<br /> <br /> * Debian Squeeze v. 6 64bit operatsioonisüsteem<br /> * XEN v. 4 virtualiseerimise tarkvara<br /> * Apache veebiserver<br /> * PostgreSQL andmebaas<br /> * Zabbix monitooringutarkvara<br /> * OpenVPN kaugligipääsu tarkvara<br /> * rsnapshot ja EMC Networker varundustarkvara<br /> * plokkseadmete haldamiseks mdadm ja LVM tarkvara<br /> <br /> ===Riistvara kaughaldus===<br /> <br /> Riistvaraliste arvutite kaughalduseks kasutatakse IMPI protokolli onboard BMC kontrolliriga suhtlemiseks. Muu hulgas võimaldab see ligipääsu arvuti BIOSile ning virtuaalse järjestikpordi kaudu serial konsoolile (st operatsioonisüsteemile).<br /> <br /> ===Võrgutopoloogia===<br /> <br /> _____<br /> 195.80.35.1 | | ülikooli võrguseade<br /> ----------------------------------------------|----------------------------------------------| |<br /> | |_____|<br /> | | 172.17.35.1<br /> | 195.80.35.96 |<br /> | 2001:bb8:2002:2300:7231:40ff:fe03:5128 | <br /> _____ __|__ |<br /> | | | | |<br /> | F | | V | | <br /> |_____| at-dom0.ims |_____| fw.ims |<br /> | os: 172.17.35.21 | 172.17.35.18 |<br /> | 2001:bb8:2002:2300:21e:67ff:fe03:c3c0 | 2001:bb8:2002:2300:7221:17ff:fe03:5018 |<br /> | impi: 172.17.35.20 | |<br /> --|-------------------------------|-------------------|-----------------------|-------------------------|------ <br /> | |<br /> __|__ __|__<br /> | | | |<br /> | F | | V |<br /> |_____| |_____|<br /> <br /> varundus.ims eap.ims<br /> os: 172.17.35.19 172.17.35.22<br /> 2001:bb8:2002:2300:21e:67ff:fe03:a0f9 2001:bb8:2002:2300:7221:17ff:fe03:5022<br /> ipmi: 172.17.35.5<br /> <br /> kus<br /> <br /> * at-dom0.ims - füüsiline virtualiseerimise arvuti<br /> * varundus.ims - füüsiline varunduse arvuti<br /> * fw.ims (fw.ims.ut.ee) - virtuaalne arvuti<br /> * eap.ims - virtuaalne arvuti<br /> <br /> Füüsilistel arvutitel on lisaks operatsioonisüsteemi ip aadressile ka füüsilise riistvara kaughalduse ipmi aadress. Operatsioonisüsteemid omandavad automaatselt oma mac aadresside abil ipv6 aadressid.<br /> <br /> ===Plokkseadmete haldamine===<br /> <br /> Plokkseadmete haldamiseks kasutatakse mdadm ja LVM tarkvara. Mõlemas füüsilises arvutis töötavad neli samade parameetritega kõvaketast on ühendatud RAID massiividesse; RAID ressurssi hallatakse edasi LVM abil kasutamiseks failisüsteemide ja saaleala jaoks.<br /> <br /> ===Virtualiseerimine===<br /> <br /> Efektiivsemaks ja paindlikumaks riistavaralise ressursi kasutamiseks on teenusserverid eap.ims ja fw.ims juurutatud virtuaalsete arvutitena. Neile saab kasutamiseks anda sobiva hulga protsessori, mälu, plokkseadme ja võrguressurssi. Projektis kasutatakse XEN virtualiseerimise tarkvara, mille kasutamist on kirjeldatud nt aadressidel<br /> <br /> * http://www.auul.pri.ee/wiki/Xen_ja_Debian_Squeeze<br /> * http://kuutorvaja.eenet.ee/wiki/Unix_keskkonna_administreerimine#Virtualiseerimine<br /> <br /> ====XEN host====<br /> <br /> XEN hostile vastav operatsioonisüsteemi eksemplar töötab füüsilisel riistvaral ja selle seest tõimub virtuaalsete arvutite juhtimine. Kui välja arvata XEN hosti alglaaduri seadistused ja mõned virtualiseerimisega seotud protsessid on tegu tavalise Debian Squeeze operatsioonisüsteemiga. <br /> <br /> ====XEN guest====<br /> <br /> XEN guestid on virtuaalsed operatsioonisüsteemid, mis töötavad XEN hosti kontrolli all ja mis kasutavad XEN hostist neile eraldatud ressursse.<br /> <br /> ===at-dom0 host===<br /> <br /> ====mdadm kasutamine====<br /> <br /> Neli füüsilist kõvaketast on partitsioneeritud sarnaselt<br /> <br /> root@at-dom0:~# parted /dev/sda p<br /> Model: ATA WDC WD2003FYYS-0 (scsi)<br /> Disk /dev/sda: 2000GB<br /> Sector size (logical/physical): 512B/512B<br /> Partition Table: msdos<br /> <br /> Number Start End Size Type File system Flags<br /> 1 1049kB 269MB 268MB primary ext3 boot<br /> 2 269MB 69.0GB 68.7GB primary<br /> 3 69.0GB 1169GB 1100GB primary<br /> <br /> mdadm abil on <br /> <br /> * kõigi kõvaketaste esimesed partitsioonid ühendatud /dev/md/boot raid1 lülitusse (at-dom0 operatsioonisüsteemi jaoks)<br /> * kõigi kõvaketaste teised partitsioonid ühendatud /dev/md/system raid5 lülitusse (at-dom0 operatsioonisüsteemi jaoks)<br /> * kõigi kõvaketaste teised partitsioonid ühendatud /dev/md/data raid5 lülitusse (virtuaalsete arvutite jaoks)<br /> <br /> ====LVM kasutamine====<br /> <br /> at-dom0 enda operatsioonisüsteemi jaoks kasutuses sellised plokkseadmed<br /> <br /> * /boot - /dev/md/boot (mdadm ressurss)<br /> * / - /dev/system/root (LVM ressurss)<br /> <br /> at-dom0.ims arvutil töötavad kaks virtuaalset arvutit<br /> <br /> ====Võrgu kasutamine====<br /> <br /> Kaks arvuti võrgukaarti on kasutusel selliselt<br /> <br /> * peth0 - esimene füüsiline võrgukaart<br /> * peth1 - teine füüsiline võrgukaart<br /> * eth0 - esimest füüsilist võrgukaarti sisaldav sild (fiktiivne aadress 10.101.101.21)<br /> * eth1 - teist füüsilist võrgukaarti sisaldav sild (172.17.35.21)<br /> * vaikelüüs 172.17.35.1<br /> <br /> * eap.ims - eth0 - 172.17.35.22, 2001:bb8:2002:2300:7221:17ff:fe03:5022/64<br /> * fw.ims -<br /> <br /> ===eap.ims guest===<br /> <br /> eap.ims kasutab selliseid hosti ressursse<br /> <br /> Plokkseade<br /> <br /> * /dev/data/eap_root<br /> * /dev/mapper/data-eap_home<br /> * /dev/mapper/data-eap_data_backup<br /> * /dev/mapper/data-eap_data_postgresql<br /> * /dev/mapper/data-eap_swap<br /> <br /> Võrk<br /> <br /> * hosti eth1 silla kaudu, guesti seade eth0 (172.17.35.22)<br /> <br /> Põhiline eap.ims arvutis töötav rakendustarkvara on PostgreSQL v. 9.0 andmebaas.<br /> <br /> * WAL logid salvestatakse iga 30 minuti järel RAID1 (redundantne) kõvaketastele (andmebaasi serveril)<br /> <br /> ===fw.ims guest===<br /> <br /> Peamised fw.ims arvutis töötavad rakendusprogrammid on<br /> <br /> * PostgreSQL v. 9.0 andmebaas<br /> * Apache veebiserver<br /> * NFS failiserver, mis jagab /home kataloogi eap.ims arvutisse<br /> <br /> ===varundus.ims===<br /> <br /> Full backup: kord nädalas nublu.chem.ut.ee 2-le eraldi kõvakettale (mitteredundantsed), säilitatakse 4-5 viimast täiskoopiat.<br /> <br /> Full backupi ligikaudne maht (24.01.2011): 35 GB<br /> <br /> <br /> Iga päeva WAL logid (säilitatakse kahe full backupi vahel tekkinud WAL logid (nädala WAL logide ligikaudne maht (24.01.2011): 18 GB<br /> <br /> Tarmo virtuaalserverist hetkel backuppi ei tehta.<br /> <br /> ====Nublu====<br /> <br /> ====Raamistik====<br /> <br /> ===Monitooring===<br /> <br /> TODO<br /> <br /> ===Kasulikud lisamaterjalid===<br /> <br /> * http://www.auul.pri.ee/wiki/NUT_tarkvara_kasutamine_Debian_Squeeze_operatsioonis%C3%BCsteemiga<br /> * http://www.auul.pri.ee/wiki/EMC_Networker_client<br /> * http://www.auul.pri.ee/wiki/Tarkvaralise_mdadm_RAID_kasutamine_operatsioonis%C3%BCsteemiga_Debian_Squeeze</div> Imreoolberg https://ims.ut.ee/index.php?title=Eab_infra&diff=8933 Eab infra 2011-11-01T22:03:14Z <p>Imreoolberg: /* eap.ims guest */</p> <hr /> <div>===Sissejuhatus===<br /> <br /> Käesoleva teksti eesmärgiks on kirjeldada EAP projekti juures toimuvat riistvara, võrgu, operatsioonisüsteemi keskkonna ja rakendustarkvara kasutamist.<br /> <br /> ===Riistvara===<br /> <br /> Projektis kasutatakse sellist riistavara<br /> <br /> * Powerware 5115 UPS<br /> * 2 x S3420GP emaplaadiga Ordi arvutid<br /> * mõlemad arvutid sisaldavad 4 x 2 TB kõvakettaid<br /> * generic kohtvõrgu kommutaator<br /> <br /> ===Tarkvara===<br /> <br /> Projekti arvutites kasutatakse järgmist tarkvara<br /> <br /> * Debian Squeeze v. 6 64bit operatsioonisüsteem<br /> * XEN v. 4 virtualiseerimise tarkvara<br /> * Apache veebiserver<br /> * PostgreSQL andmebaas<br /> * Zabbix monitooringutarkvara<br /> * OpenVPN kaugligipääsu tarkvara<br /> * rsnapshot ja EMC Networker varundustarkvara<br /> * plokkseadmete haldamiseks mdadm ja LVM tarkvara<br /> <br /> ===Riistvara kaughaldus===<br /> <br /> Riistvaraliste arvutite kaughalduseks kasutatakse IMPI protokolli onboard BMC kontrolliriga suhtlemiseks. Muu hulgas võimaldab see ligipääsu arvuti BIOSile ning virtuaalse järjestikpordi kaudu serial konsoolile (st operatsioonisüsteemile).<br /> <br /> ===Võrgutopoloogia===<br /> <br /> _____<br /> 195.80.35.1 | | ülikooli võrguseade<br /> ----------------------------------------------|----------------------------------------------| |<br /> | |_____|<br /> | | 172.17.35.1<br /> | 195.80.35.96 |<br /> | 2001:bb8:2002:2300:7231:40ff:fe03:5128 | <br /> _____ __|__ |<br /> | | | | |<br /> | F | | V | | <br /> |_____| at-dom0.ims |_____| fw.ims |<br /> | os: 172.17.35.21 | 172.17.35.18 |<br /> | 2001:bb8:2002:2300:21e:67ff:fe03:c3c0 | 2001:bb8:2002:2300:7221:17ff:fe03:5018 |<br /> | impi: 172.17.35.20 | |<br /> --|-------------------------------|-------------------|-----------------------|-------------------------|------ <br /> | |<br /> __|__ __|__<br /> | | | |<br /> | F | | V |<br /> |_____| |_____|<br /> <br /> varundus.ims eap.ims<br /> os: 172.17.35.19 172.17.35.22<br /> 2001:bb8:2002:2300:21e:67ff:fe03:a0f9 2001:bb8:2002:2300:7221:17ff:fe03:5022<br /> ipmi: 172.17.35.5<br /> <br /> kus<br /> <br /> * at-dom0.ims - füüsiline virtualiseerimise arvuti<br /> * varundus.ims - füüsiline varunduse arvuti<br /> * fw.ims (fw.ims.ut.ee) - virtuaalne arvuti<br /> * eap.ims - virtuaalne arvuti<br /> <br /> Füüsilistel arvutitel on lisaks operatsioonisüsteemi ip aadressile ka füüsilise riistvara kaughalduse ipmi aadress. Operatsioonisüsteemid omandavad automaatselt oma mac aadresside abil ipv6 aadressid.<br /> <br /> ===Plokkseadmete haldamine===<br /> <br /> Plokkseadmete haldamiseks kasutatakse mdadm ja LVM tarkvara. Mõlemas füüsilises arvutis töötavad neli samade parameetritega kõvaketast on ühendatud RAID massiividesse; RAID ressurssi hallatakse edasi LVM abil kasutamiseks failisüsteemide ja saaleala jaoks.<br /> <br /> ===Virtualiseerimine===<br /> <br /> Efektiivsemaks ja paindlikumaks riistavaralise ressursi kasutamiseks on teenusserverid eap.ims ja fw.ims juurutatud virtuaalsete arvutitena. Neile saab kasutamiseks anda sobiva hulga protsessori, mälu, plokkseadme ja võrguressurssi. Projektis kasutatakse XEN virtualiseerimise tarkvara, mille kasutamist on kirjeldatud nt aadressidel<br /> <br /> * http://www.auul.pri.ee/wiki/Xen_ja_Debian_Squeeze<br /> * http://kuutorvaja.eenet.ee/wiki/Unix_keskkonna_administreerimine#Virtualiseerimine<br /> <br /> ====XEN host====<br /> <br /> XEN hostile vastav operatsioonisüsteemi eksemplar töötab füüsilisel riistvaral ja selle seest tõimub virtuaalsete arvutite juhtimine. Kui välja arvata XEN hosti alglaaduri seadistused ja mõned virtualiseerimisega seotud protsessid on tegu tavalise Debian Squeeze operatsioonisüsteemiga. <br /> <br /> ====XEN guest====<br /> <br /> XEN guestid on virtuaalsed operatsioonisüsteemid, mis töötavad XEN hosti kontrolli all ja mis kasutavad XEN hostist neile eraldatud ressursse.<br /> <br /> ===at-dom0 host===<br /> <br /> ====mdadm kasutamine====<br /> <br /> Neli füüsilist kõvaketast on partitsioneeritud sarnaselt<br /> <br /> root@at-dom0:~# parted /dev/sda p<br /> Model: ATA WDC WD2003FYYS-0 (scsi)<br /> Disk /dev/sda: 2000GB<br /> Sector size (logical/physical): 512B/512B<br /> Partition Table: msdos<br /> <br /> Number Start End Size Type File system Flags<br /> 1 1049kB 269MB 268MB primary ext3 boot<br /> 2 269MB 69.0GB 68.7GB primary<br /> 3 69.0GB 1169GB 1100GB primary<br /> <br /> mdadm abil on <br /> <br /> * kõigi kõvaketaste esimesed partitsioonid ühendatud /dev/md/boot raid1 lülitusse (at-dom0 operatsioonisüsteemi jaoks)<br /> * kõigi kõvaketaste teised partitsioonid ühendatud /dev/md/system raid5 lülitusse (at-dom0 operatsioonisüsteemi jaoks)<br /> * kõigi kõvaketaste teised partitsioonid ühendatud /dev/md/data raid5 lülitusse (virtuaalsete arvutite jaoks)<br /> <br /> ====LVM kasutamine====<br /> <br /> at-dom0 enda operatsioonisüsteemi jaoks kasutuses sellised plokkseadmed<br /> <br /> * /boot - /dev/md/boot (mdadm ressurss)<br /> * / - /dev/system/root (LVM ressurss)<br /> <br /> at-dom0.ims arvutil töötavad kaks virtuaalset arvutit<br /> <br /> ====Võrgu kasutamine====<br /> <br /> Kaks arvuti võrgukaarti on kasutusel selliselt<br /> <br /> * peth0 - esimene füüsiline võrgukaart<br /> * peth1 - teine füüsiline võrgukaart<br /> * eth0 - esimest füüsilist võrgukaarti sisaldav sild (fiktiivne aadress 10.101.101.21)<br /> * eth1 - teist füüsilist võrgukaarti sisaldav sild (172.17.35.21)<br /> * vaikelüüs 172.17.35.1<br /> <br /> * eap.ims - eth0 - 172.17.35.22, 2001:bb8:2002:2300:7221:17ff:fe03:5022/64<br /> * fw.ims -<br /> <br /> ===eap.ims guest===<br /> <br /> eap.ims kasutab selliseid hosti ressursse<br /> <br /> Plokkseade<br /> <br /> * /dev/data/eap_root<br /> * /dev/mapper/data-eap_home<br /> * /dev/mapper/data-eap_data_backup<br /> * /dev/mapper/data-eap_data_postgresql<br /> * /dev/mapper/data-eap_swap<br /> <br /> Võrk<br /> <br /> * eth1 silla kaudu, guesti seade eth0 (172.17.35.22)<br /> <br /> Põhiline eap.ims arvutis töötav rakendustarkvara on PostgreSQL v. 9.0 andmebaas.<br /> <br /> * WAL logid salvestatakse iga 30 minuti järel RAID1 (redundantne) kõvaketastele (andmebaasi serveril)<br /> <br /> ===fw.ims guest===<br /> <br /> Peamised fw.ims arvutis töötavad rakendusprogrammid on<br /> <br /> * PostgreSQL v. 9.0 andmebaas<br /> * Apache veebiserver<br /> * NFS failiserver, mis jagab /home kataloogi eap.ims arvutisse<br /> <br /> ===varundus.ims===<br /> <br /> Full backup: kord nädalas nublu.chem.ut.ee 2-le eraldi kõvakettale (mitteredundantsed), säilitatakse 4-5 viimast täiskoopiat.<br /> <br /> Full backupi ligikaudne maht (24.01.2011): 35 GB<br /> <br /> <br /> Iga päeva WAL logid (säilitatakse kahe full backupi vahel tekkinud WAL logid (nädala WAL logide ligikaudne maht (24.01.2011): 18 GB<br /> <br /> Tarmo virtuaalserverist hetkel backuppi ei tehta.<br /> <br /> ====Nublu====<br /> <br /> ====Raamistik====<br /> <br /> ===Monitooring===<br /> <br /> TODO<br /> <br /> ===Kasulikud lisamaterjalid===<br /> <br /> * http://www.auul.pri.ee/wiki/NUT_tarkvara_kasutamine_Debian_Squeeze_operatsioonis%C3%BCsteemiga<br /> * http://www.auul.pri.ee/wiki/EMC_Networker_client<br /> * http://www.auul.pri.ee/wiki/Tarkvaralise_mdadm_RAID_kasutamine_operatsioonis%C3%BCsteemiga_Debian_Squeeze</div> Imreoolberg https://ims.ut.ee/index.php?title=Eab_infra&diff=8932 Eab infra 2011-11-01T22:00:27Z <p>Imreoolberg: /* LVM kasutamine */</p> <hr /> <div>===Sissejuhatus===<br /> <br /> Käesoleva teksti eesmärgiks on kirjeldada EAP projekti juures toimuvat riistvara, võrgu, operatsioonisüsteemi keskkonna ja rakendustarkvara kasutamist.<br /> <br /> ===Riistvara===<br /> <br /> Projektis kasutatakse sellist riistavara<br /> <br /> * Powerware 5115 UPS<br /> * 2 x S3420GP emaplaadiga Ordi arvutid<br /> * mõlemad arvutid sisaldavad 4 x 2 TB kõvakettaid<br /> * generic kohtvõrgu kommutaator<br /> <br /> ===Tarkvara===<br /> <br /> Projekti arvutites kasutatakse järgmist tarkvara<br /> <br /> * Debian Squeeze v. 6 64bit operatsioonisüsteem<br /> * XEN v. 4 virtualiseerimise tarkvara<br /> * Apache veebiserver<br /> * PostgreSQL andmebaas<br /> * Zabbix monitooringutarkvara<br /> * OpenVPN kaugligipääsu tarkvara<br /> * rsnapshot ja EMC Networker varundustarkvara<br /> * plokkseadmete haldamiseks mdadm ja LVM tarkvara<br /> <br /> ===Riistvara kaughaldus===<br /> <br /> Riistvaraliste arvutite kaughalduseks kasutatakse IMPI protokolli onboard BMC kontrolliriga suhtlemiseks. Muu hulgas võimaldab see ligipääsu arvuti BIOSile ning virtuaalse järjestikpordi kaudu serial konsoolile (st operatsioonisüsteemile).<br /> <br /> ===Võrgutopoloogia===<br /> <br /> _____<br /> 195.80.35.1 | | ülikooli võrguseade<br /> ----------------------------------------------|----------------------------------------------| |<br /> | |_____|<br /> | | 172.17.35.1<br /> | 195.80.35.96 |<br /> | 2001:bb8:2002:2300:7231:40ff:fe03:5128 | <br /> _____ __|__ |<br /> | | | | |<br /> | F | | V | | <br /> |_____| at-dom0.ims |_____| fw.ims |<br /> | os: 172.17.35.21 | 172.17.35.18 |<br /> | 2001:bb8:2002:2300:21e:67ff:fe03:c3c0 | 2001:bb8:2002:2300:7221:17ff:fe03:5018 |<br /> | impi: 172.17.35.20 | |<br /> --|-------------------------------|-------------------|-----------------------|-------------------------|------ <br /> | |<br /> __|__ __|__<br /> | | | |<br /> | F | | V |<br /> |_____| |_____|<br /> <br /> varundus.ims eap.ims<br /> os: 172.17.35.19 172.17.35.22<br /> 2001:bb8:2002:2300:21e:67ff:fe03:a0f9 2001:bb8:2002:2300:7221:17ff:fe03:5022<br /> ipmi: 172.17.35.5<br /> <br /> kus<br /> <br /> * at-dom0.ims - füüsiline virtualiseerimise arvuti<br /> * varundus.ims - füüsiline varunduse arvuti<br /> * fw.ims (fw.ims.ut.ee) - virtuaalne arvuti<br /> * eap.ims - virtuaalne arvuti<br /> <br /> Füüsilistel arvutitel on lisaks operatsioonisüsteemi ip aadressile ka füüsilise riistvara kaughalduse ipmi aadress. Operatsioonisüsteemid omandavad automaatselt oma mac aadresside abil ipv6 aadressid.<br /> <br /> ===Plokkseadmete haldamine===<br /> <br /> Plokkseadmete haldamiseks kasutatakse mdadm ja LVM tarkvara. Mõlemas füüsilises arvutis töötavad neli samade parameetritega kõvaketast on ühendatud RAID massiividesse; RAID ressurssi hallatakse edasi LVM abil kasutamiseks failisüsteemide ja saaleala jaoks.<br /> <br /> ===Virtualiseerimine===<br /> <br /> Efektiivsemaks ja paindlikumaks riistavaralise ressursi kasutamiseks on teenusserverid eap.ims ja fw.ims juurutatud virtuaalsete arvutitena. Neile saab kasutamiseks anda sobiva hulga protsessori, mälu, plokkseadme ja võrguressurssi. Projektis kasutatakse XEN virtualiseerimise tarkvara, mille kasutamist on kirjeldatud nt aadressidel<br /> <br /> * http://www.auul.pri.ee/wiki/Xen_ja_Debian_Squeeze<br /> * http://kuutorvaja.eenet.ee/wiki/Unix_keskkonna_administreerimine#Virtualiseerimine<br /> <br /> ====XEN host====<br /> <br /> XEN hostile vastav operatsioonisüsteemi eksemplar töötab füüsilisel riistvaral ja selle seest tõimub virtuaalsete arvutite juhtimine. Kui välja arvata XEN hosti alglaaduri seadistused ja mõned virtualiseerimisega seotud protsessid on tegu tavalise Debian Squeeze operatsioonisüsteemiga. <br /> <br /> ====XEN guest====<br /> <br /> XEN guestid on virtuaalsed operatsioonisüsteemid, mis töötavad XEN hosti kontrolli all ja mis kasutavad XEN hostist neile eraldatud ressursse.<br /> <br /> ===at-dom0 host===<br /> <br /> ====mdadm kasutamine====<br /> <br /> Neli füüsilist kõvaketast on partitsioneeritud sarnaselt<br /> <br /> root@at-dom0:~# parted /dev/sda p<br /> Model: ATA WDC WD2003FYYS-0 (scsi)<br /> Disk /dev/sda: 2000GB<br /> Sector size (logical/physical): 512B/512B<br /> Partition Table: msdos<br /> <br /> Number Start End Size Type File system Flags<br /> 1 1049kB 269MB 268MB primary ext3 boot<br /> 2 269MB 69.0GB 68.7GB primary<br /> 3 69.0GB 1169GB 1100GB primary<br /> <br /> mdadm abil on <br /> <br /> * kõigi kõvaketaste esimesed partitsioonid ühendatud /dev/md/boot raid1 lülitusse (at-dom0 operatsioonisüsteemi jaoks)<br /> * kõigi kõvaketaste teised partitsioonid ühendatud /dev/md/system raid5 lülitusse (at-dom0 operatsioonisüsteemi jaoks)<br /> * kõigi kõvaketaste teised partitsioonid ühendatud /dev/md/data raid5 lülitusse (virtuaalsete arvutite jaoks)<br /> <br /> ====LVM kasutamine====<br /> <br /> at-dom0 enda operatsioonisüsteemi jaoks kasutuses sellised plokkseadmed<br /> <br /> * /boot - /dev/md/boot (mdadm ressurss)<br /> * / - /dev/system/root (LVM ressurss)<br /> <br /> at-dom0.ims arvutil töötavad kaks virtuaalset arvutit<br /> <br /> ====Võrgu kasutamine====<br /> <br /> Kaks arvuti võrgukaarti on kasutusel selliselt<br /> <br /> * peth0 - esimene füüsiline võrgukaart<br /> * peth1 - teine füüsiline võrgukaart<br /> * eth0 - esimest füüsilist võrgukaarti sisaldav sild (fiktiivne aadress 10.101.101.21)<br /> * eth1 - teist füüsilist võrgukaarti sisaldav sild (172.17.35.21)<br /> * vaikelüüs 172.17.35.1<br /> <br /> * eap.ims - eth0 - 172.17.35.22, 2001:bb8:2002:2300:7221:17ff:fe03:5022/64<br /> * fw.ims -<br /> <br /> ===eap.ims guest===<br /> <br /> Põhiline eap.ims arvutis töötav rakendustarkvara on PostgreSQL v. 9.0 andmebaas.<br /> <br /> * WAL logid salvestatakse iga 30 minuti järel RAID1 (redundantne) kõvaketastele (andmebaasi serveril)<br /> <br /> ===fw.ims guest===<br /> <br /> Peamised fw.ims arvutis töötavad rakendusprogrammid on<br /> <br /> * PostgreSQL v. 9.0 andmebaas<br /> * Apache veebiserver<br /> * NFS failiserver, mis jagab /home kataloogi eap.ims arvutisse<br /> <br /> ===varundus.ims===<br /> <br /> Full backup: kord nädalas nublu.chem.ut.ee 2-le eraldi kõvakettale (mitteredundantsed), säilitatakse 4-5 viimast täiskoopiat.<br /> <br /> Full backupi ligikaudne maht (24.01.2011): 35 GB<br /> <br /> <br /> Iga päeva WAL logid (säilitatakse kahe full backupi vahel tekkinud WAL logid (nädala WAL logide ligikaudne maht (24.01.2011): 18 GB<br /> <br /> Tarmo virtuaalserverist hetkel backuppi ei tehta.<br /> <br /> ====Nublu====<br /> <br /> ====Raamistik====<br /> <br /> ===Monitooring===<br /> <br /> TODO<br /> <br /> ===Kasulikud lisamaterjalid===<br /> <br /> * http://www.auul.pri.ee/wiki/NUT_tarkvara_kasutamine_Debian_Squeeze_operatsioonis%C3%BCsteemiga<br /> * http://www.auul.pri.ee/wiki/EMC_Networker_client<br /> * http://www.auul.pri.ee/wiki/Tarkvaralise_mdadm_RAID_kasutamine_operatsioonis%C3%BCsteemiga_Debian_Squeeze</div> Imreoolberg https://ims.ut.ee/index.php?title=Eab_infra&diff=8931 Eab infra 2011-11-01T21:56:57Z <p>Imreoolberg: /* at-dom0 host */</p> <hr /> <div>===Sissejuhatus===<br /> <br /> Käesoleva teksti eesmärgiks on kirjeldada EAP projekti juures toimuvat riistvara, võrgu, operatsioonisüsteemi keskkonna ja rakendustarkvara kasutamist.<br /> <br /> ===Riistvara===<br /> <br /> Projektis kasutatakse sellist riistavara<br /> <br /> * Powerware 5115 UPS<br /> * 2 x S3420GP emaplaadiga Ordi arvutid<br /> * mõlemad arvutid sisaldavad 4 x 2 TB kõvakettaid<br /> * generic kohtvõrgu kommutaator<br /> <br /> ===Tarkvara===<br /> <br /> Projekti arvutites kasutatakse järgmist tarkvara<br /> <br /> * Debian Squeeze v. 6 64bit operatsioonisüsteem<br /> * XEN v. 4 virtualiseerimise tarkvara<br /> * Apache veebiserver<br /> * PostgreSQL andmebaas<br /> * Zabbix monitooringutarkvara<br /> * OpenVPN kaugligipääsu tarkvara<br /> * rsnapshot ja EMC Networker varundustarkvara<br /> * plokkseadmete haldamiseks mdadm ja LVM tarkvara<br /> <br /> ===Riistvara kaughaldus===<br /> <br /> Riistvaraliste arvutite kaughalduseks kasutatakse IMPI protokolli onboard BMC kontrolliriga suhtlemiseks. Muu hulgas võimaldab see ligipääsu arvuti BIOSile ning virtuaalse järjestikpordi kaudu serial konsoolile (st operatsioonisüsteemile).<br /> <br /> ===Võrgutopoloogia===<br /> <br /> _____<br /> 195.80.35.1 | | ülikooli võrguseade<br /> ----------------------------------------------|----------------------------------------------| |<br /> | |_____|<br /> | | 172.17.35.1<br /> | 195.80.35.96 |<br /> | 2001:bb8:2002:2300:7231:40ff:fe03:5128 | <br /> _____ __|__ |<br /> | | | | |<br /> | F | | V | | <br /> |_____| at-dom0.ims |_____| fw.ims |<br /> | os: 172.17.35.21 | 172.17.35.18 |<br /> | 2001:bb8:2002:2300:21e:67ff:fe03:c3c0 | 2001:bb8:2002:2300:7221:17ff:fe03:5018 |<br /> | impi: 172.17.35.20 | |<br /> --|-------------------------------|-------------------|-----------------------|-------------------------|------ <br /> | |<br /> __|__ __|__<br /> | | | |<br /> | F | | V |<br /> |_____| |_____|<br /> <br /> varundus.ims eap.ims<br /> os: 172.17.35.19 172.17.35.22<br /> 2001:bb8:2002:2300:21e:67ff:fe03:a0f9 2001:bb8:2002:2300:7221:17ff:fe03:5022<br /> ipmi: 172.17.35.5<br /> <br /> kus<br /> <br /> * at-dom0.ims - füüsiline virtualiseerimise arvuti<br /> * varundus.ims - füüsiline varunduse arvuti<br /> * fw.ims (fw.ims.ut.ee) - virtuaalne arvuti<br /> * eap.ims - virtuaalne arvuti<br /> <br /> Füüsilistel arvutitel on lisaks operatsioonisüsteemi ip aadressile ka füüsilise riistvara kaughalduse ipmi aadress. Operatsioonisüsteemid omandavad automaatselt oma mac aadresside abil ipv6 aadressid.<br /> <br /> ===Plokkseadmete haldamine===<br /> <br /> Plokkseadmete haldamiseks kasutatakse mdadm ja LVM tarkvara. Mõlemas füüsilises arvutis töötavad neli samade parameetritega kõvaketast on ühendatud RAID massiividesse; RAID ressurssi hallatakse edasi LVM abil kasutamiseks failisüsteemide ja saaleala jaoks.<br /> <br /> ===Virtualiseerimine===<br /> <br /> Efektiivsemaks ja paindlikumaks riistavaralise ressursi kasutamiseks on teenusserverid eap.ims ja fw.ims juurutatud virtuaalsete arvutitena. Neile saab kasutamiseks anda sobiva hulga protsessori, mälu, plokkseadme ja võrguressurssi. Projektis kasutatakse XEN virtualiseerimise tarkvara, mille kasutamist on kirjeldatud nt aadressidel<br /> <br /> * http://www.auul.pri.ee/wiki/Xen_ja_Debian_Squeeze<br /> * http://kuutorvaja.eenet.ee/wiki/Unix_keskkonna_administreerimine#Virtualiseerimine<br /> <br /> ====XEN host====<br /> <br /> XEN hostile vastav operatsioonisüsteemi eksemplar töötab füüsilisel riistvaral ja selle seest tõimub virtuaalsete arvutite juhtimine. Kui välja arvata XEN hosti alglaaduri seadistused ja mõned virtualiseerimisega seotud protsessid on tegu tavalise Debian Squeeze operatsioonisüsteemiga. <br /> <br /> ====XEN guest====<br /> <br /> XEN guestid on virtuaalsed operatsioonisüsteemid, mis töötavad XEN hosti kontrolli all ja mis kasutavad XEN hostist neile eraldatud ressursse.<br /> <br /> ===at-dom0 host===<br /> <br /> ====mdadm kasutamine====<br /> <br /> Neli füüsilist kõvaketast on partitsioneeritud sarnaselt<br /> <br /> root@at-dom0:~# parted /dev/sda p<br /> Model: ATA WDC WD2003FYYS-0 (scsi)<br /> Disk /dev/sda: 2000GB<br /> Sector size (logical/physical): 512B/512B<br /> Partition Table: msdos<br /> <br /> Number Start End Size Type File system Flags<br /> 1 1049kB 269MB 268MB primary ext3 boot<br /> 2 269MB 69.0GB 68.7GB primary<br /> 3 69.0GB 1169GB 1100GB primary<br /> <br /> mdadm abil on <br /> <br /> * kõigi kõvaketaste esimesed partitsioonid ühendatud /dev/md/boot raid1 lülitusse (at-dom0 operatsioonisüsteemi jaoks)<br /> * kõigi kõvaketaste teised partitsioonid ühendatud /dev/md/system raid5 lülitusse (at-dom0 operatsioonisüsteemi jaoks)<br /> * kõigi kõvaketaste teised partitsioonid ühendatud /dev/md/data raid5 lülitusse (virtuaalsete arvutite jaoks)<br /> <br /> ====LVM kasutamine====<br /> <br /> at-dom0 enda operatsioonisüsteemi jaoks kasutuses sellised plokkseadmed<br /> <br /> * /boot - /dev/md/boot (mdadm ressurss)<br /> * / - /dev/system/root (LVM ressurss)<br /> <br /> at-dom0.ims arvutil töötavad kaks virtuaalset arvutit<br /> <br /> * eap.ims - eth0 - 172.17.35.22, 2001:bb8:2002:2300:7221:17ff:fe03:5022/64<br /> * fw.ims -<br /> <br /> ===eap.ims guest===<br /> <br /> Põhiline eap.ims arvutis töötav rakendustarkvara on PostgreSQL v. 9.0 andmebaas.<br /> <br /> * WAL logid salvestatakse iga 30 minuti järel RAID1 (redundantne) kõvaketastele (andmebaasi serveril)<br /> <br /> ===fw.ims guest===<br /> <br /> Peamised fw.ims arvutis töötavad rakendusprogrammid on<br /> <br /> * PostgreSQL v. 9.0 andmebaas<br /> * Apache veebiserver<br /> * NFS failiserver, mis jagab /home kataloogi eap.ims arvutisse<br /> <br /> ===varundus.ims===<br /> <br /> Full backup: kord nädalas nublu.chem.ut.ee 2-le eraldi kõvakettale (mitteredundantsed), säilitatakse 4-5 viimast täiskoopiat.<br /> <br /> Full backupi ligikaudne maht (24.01.2011): 35 GB<br /> <br /> <br /> Iga päeva WAL logid (säilitatakse kahe full backupi vahel tekkinud WAL logid (nädala WAL logide ligikaudne maht (24.01.2011): 18 GB<br /> <br /> Tarmo virtuaalserverist hetkel backuppi ei tehta.<br /> <br /> ====Nublu====<br /> <br /> ====Raamistik====<br /> <br /> ===Monitooring===<br /> <br /> TODO<br /> <br /> ===Kasulikud lisamaterjalid===<br /> <br /> * http://www.auul.pri.ee/wiki/NUT_tarkvara_kasutamine_Debian_Squeeze_operatsioonis%C3%BCsteemiga<br /> * http://www.auul.pri.ee/wiki/EMC_Networker_client<br /> * http://www.auul.pri.ee/wiki/Tarkvaralise_mdadm_RAID_kasutamine_operatsioonis%C3%BCsteemiga_Debian_Squeeze</div> Imreoolberg https://ims.ut.ee/index.php?title=Eab_infra&diff=8930 Eab infra 2011-11-01T21:54:12Z <p>Imreoolberg: /* at-dom0 host */</p> <hr /> <div>===Sissejuhatus===<br /> <br /> Käesoleva teksti eesmärgiks on kirjeldada EAP projekti juures toimuvat riistvara, võrgu, operatsioonisüsteemi keskkonna ja rakendustarkvara kasutamist.<br /> <br /> ===Riistvara===<br /> <br /> Projektis kasutatakse sellist riistavara<br /> <br /> * Powerware 5115 UPS<br /> * 2 x S3420GP emaplaadiga Ordi arvutid<br /> * mõlemad arvutid sisaldavad 4 x 2 TB kõvakettaid<br /> * generic kohtvõrgu kommutaator<br /> <br /> ===Tarkvara===<br /> <br /> Projekti arvutites kasutatakse järgmist tarkvara<br /> <br /> * Debian Squeeze v. 6 64bit operatsioonisüsteem<br /> * XEN v. 4 virtualiseerimise tarkvara<br /> * Apache veebiserver<br /> * PostgreSQL andmebaas<br /> * Zabbix monitooringutarkvara<br /> * OpenVPN kaugligipääsu tarkvara<br /> * rsnapshot ja EMC Networker varundustarkvara<br /> * plokkseadmete haldamiseks mdadm ja LVM tarkvara<br /> <br /> ===Riistvara kaughaldus===<br /> <br /> Riistvaraliste arvutite kaughalduseks kasutatakse IMPI protokolli onboard BMC kontrolliriga suhtlemiseks. Muu hulgas võimaldab see ligipääsu arvuti BIOSile ning virtuaalse järjestikpordi kaudu serial konsoolile (st operatsioonisüsteemile).<br /> <br /> ===Võrgutopoloogia===<br /> <br /> _____<br /> 195.80.35.1 | | ülikooli võrguseade<br /> ----------------------------------------------|----------------------------------------------| |<br /> | |_____|<br /> | | 172.17.35.1<br /> | 195.80.35.96 |<br /> | 2001:bb8:2002:2300:7231:40ff:fe03:5128 | <br /> _____ __|__ |<br /> | | | | |<br /> | F | | V | | <br /> |_____| at-dom0.ims |_____| fw.ims |<br /> | os: 172.17.35.21 | 172.17.35.18 |<br /> | 2001:bb8:2002:2300:21e:67ff:fe03:c3c0 | 2001:bb8:2002:2300:7221:17ff:fe03:5018 |<br /> | impi: 172.17.35.20 | |<br /> --|-------------------------------|-------------------|-----------------------|-------------------------|------ <br /> | |<br /> __|__ __|__<br /> | | | |<br /> | F | | V |<br /> |_____| |_____|<br /> <br /> varundus.ims eap.ims<br /> os: 172.17.35.19 172.17.35.22<br /> 2001:bb8:2002:2300:21e:67ff:fe03:a0f9 2001:bb8:2002:2300:7221:17ff:fe03:5022<br /> ipmi: 172.17.35.5<br /> <br /> kus<br /> <br /> * at-dom0.ims - füüsiline virtualiseerimise arvuti<br /> * varundus.ims - füüsiline varunduse arvuti<br /> * fw.ims (fw.ims.ut.ee) - virtuaalne arvuti<br /> * eap.ims - virtuaalne arvuti<br /> <br /> Füüsilistel arvutitel on lisaks operatsioonisüsteemi ip aadressile ka füüsilise riistvara kaughalduse ipmi aadress. Operatsioonisüsteemid omandavad automaatselt oma mac aadresside abil ipv6 aadressid.<br /> <br /> ===Plokkseadmete haldamine===<br /> <br /> Plokkseadmete haldamiseks kasutatakse mdadm ja LVM tarkvara. Mõlemas füüsilises arvutis töötavad neli samade parameetritega kõvaketast on ühendatud RAID massiividesse; RAID ressurssi hallatakse edasi LVM abil kasutamiseks failisüsteemide ja saaleala jaoks.<br /> <br /> ===Virtualiseerimine===<br /> <br /> Efektiivsemaks ja paindlikumaks riistavaralise ressursi kasutamiseks on teenusserverid eap.ims ja fw.ims juurutatud virtuaalsete arvutitena. Neile saab kasutamiseks anda sobiva hulga protsessori, mälu, plokkseadme ja võrguressurssi. Projektis kasutatakse XEN virtualiseerimise tarkvara, mille kasutamist on kirjeldatud nt aadressidel<br /> <br /> * http://www.auul.pri.ee/wiki/Xen_ja_Debian_Squeeze<br /> * http://kuutorvaja.eenet.ee/wiki/Unix_keskkonna_administreerimine#Virtualiseerimine<br /> <br /> ====XEN host====<br /> <br /> XEN hostile vastav operatsioonisüsteemi eksemplar töötab füüsilisel riistvaral ja selle seest tõimub virtuaalsete arvutite juhtimine. Kui välja arvata XEN hosti alglaaduri seadistused ja mõned virtualiseerimisega seotud protsessid on tegu tavalise Debian Squeeze operatsioonisüsteemiga. <br /> <br /> ====XEN guest====<br /> <br /> XEN guestid on virtuaalsed operatsioonisüsteemid, mis töötavad XEN hosti kontrolli all ja mis kasutavad XEN hostist neile eraldatud ressursse.<br /> <br /> ===at-dom0 host===<br /> <br /> ====Plokkseadmete kasutamine====<br /> <br /> Neli füüsilist kõvaketast on partitsioneeritud sarnaselt<br /> <br /> root@at-dom0:~# parted /dev/sda p<br /> Model: ATA WDC WD2003FYYS-0 (scsi)<br /> Disk /dev/sda: 2000GB<br /> Sector size (logical/physical): 512B/512B<br /> Partition Table: msdos<br /> <br /> Number Start End Size Type File system Flags<br /> 1 1049kB 269MB 268MB primary ext3 boot<br /> 2 269MB 69.0GB 68.7GB primary<br /> 3 69.0GB 1169GB 1100GB primary<br /> <br /> mdadm abil on <br /> <br /> * kõigi kõvaketaste esimesed partitsioonid ühendatud /dev/md/boot raid1 lülitusse<br /> * kõigi kõvaketaste teised partitsioonid ühendatud /dev/md/system raid5 lülitusse<br /> * kõigi kõvaketaste teised partitsioonid ühendatud /dev/md/data raid5 lülitusse<br /> <br /> at-dom0.ims arvutil töötavad kaks virtuaalset arvutit<br /> <br /> * eap.ims - eth0 - 172.17.35.22, 2001:bb8:2002:2300:7221:17ff:fe03:5022/64<br /> * fw.ims -<br /> <br /> ===eap.ims guest===<br /> <br /> Põhiline eap.ims arvutis töötav rakendustarkvara on PostgreSQL v. 9.0 andmebaas.<br /> <br /> * WAL logid salvestatakse iga 30 minuti järel RAID1 (redundantne) kõvaketastele (andmebaasi serveril)<br /> <br /> ===fw.ims guest===<br /> <br /> Peamised fw.ims arvutis töötavad rakendusprogrammid on<br /> <br /> * PostgreSQL v. 9.0 andmebaas<br /> * Apache veebiserver<br /> * NFS failiserver, mis jagab /home kataloogi eap.ims arvutisse<br /> <br /> ===varundus.ims===<br /> <br /> Full backup: kord nädalas nublu.chem.ut.ee 2-le eraldi kõvakettale (mitteredundantsed), säilitatakse 4-5 viimast täiskoopiat.<br /> <br /> Full backupi ligikaudne maht (24.01.2011): 35 GB<br /> <br /> <br /> Iga päeva WAL logid (säilitatakse kahe full backupi vahel tekkinud WAL logid (nädala WAL logide ligikaudne maht (24.01.2011): 18 GB<br /> <br /> Tarmo virtuaalserverist hetkel backuppi ei tehta.<br /> <br /> ====Nublu====<br /> <br /> ====Raamistik====<br /> <br /> ===Monitooring===<br /> <br /> TODO<br /> <br /> ===Kasulikud lisamaterjalid===<br /> <br /> * http://www.auul.pri.ee/wiki/NUT_tarkvara_kasutamine_Debian_Squeeze_operatsioonis%C3%BCsteemiga<br /> * http://www.auul.pri.ee/wiki/EMC_Networker_client<br /> * http://www.auul.pri.ee/wiki/Tarkvaralise_mdadm_RAID_kasutamine_operatsioonis%C3%BCsteemiga_Debian_Squeeze</div> Imreoolberg https://ims.ut.ee/index.php?title=Eab_infra&diff=8929 Eab infra 2011-11-01T21:49:59Z <p>Imreoolberg: /* varundus.ims - varundusserver */</p> <hr /> <div>===Sissejuhatus===<br /> <br /> Käesoleva teksti eesmärgiks on kirjeldada EAP projekti juures toimuvat riistvara, võrgu, operatsioonisüsteemi keskkonna ja rakendustarkvara kasutamist.<br /> <br /> ===Riistvara===<br /> <br /> Projektis kasutatakse sellist riistavara<br /> <br /> * Powerware 5115 UPS<br /> * 2 x S3420GP emaplaadiga Ordi arvutid<br /> * mõlemad arvutid sisaldavad 4 x 2 TB kõvakettaid<br /> * generic kohtvõrgu kommutaator<br /> <br /> ===Tarkvara===<br /> <br /> Projekti arvutites kasutatakse järgmist tarkvara<br /> <br /> * Debian Squeeze v. 6 64bit operatsioonisüsteem<br /> * XEN v. 4 virtualiseerimise tarkvara<br /> * Apache veebiserver<br /> * PostgreSQL andmebaas<br /> * Zabbix monitooringutarkvara<br /> * OpenVPN kaugligipääsu tarkvara<br /> * rsnapshot ja EMC Networker varundustarkvara<br /> * plokkseadmete haldamiseks mdadm ja LVM tarkvara<br /> <br /> ===Riistvara kaughaldus===<br /> <br /> Riistvaraliste arvutite kaughalduseks kasutatakse IMPI protokolli onboard BMC kontrolliriga suhtlemiseks. Muu hulgas võimaldab see ligipääsu arvuti BIOSile ning virtuaalse järjestikpordi kaudu serial konsoolile (st operatsioonisüsteemile).<br /> <br /> ===Võrgutopoloogia===<br /> <br /> _____<br /> 195.80.35.1 | | ülikooli võrguseade<br /> ----------------------------------------------|----------------------------------------------| |<br /> | |_____|<br /> | | 172.17.35.1<br /> | 195.80.35.96 |<br /> | 2001:bb8:2002:2300:7231:40ff:fe03:5128 | <br /> _____ __|__ |<br /> | | | | |<br /> | F | | V | | <br /> |_____| at-dom0.ims |_____| fw.ims |<br /> | os: 172.17.35.21 | 172.17.35.18 |<br /> | 2001:bb8:2002:2300:21e:67ff:fe03:c3c0 | 2001:bb8:2002:2300:7221:17ff:fe03:5018 |<br /> | impi: 172.17.35.20 | |<br /> --|-------------------------------|-------------------|-----------------------|-------------------------|------ <br /> | |<br /> __|__ __|__<br /> | | | |<br /> | F | | V |<br /> |_____| |_____|<br /> <br /> varundus.ims eap.ims<br /> os: 172.17.35.19 172.17.35.22<br /> 2001:bb8:2002:2300:21e:67ff:fe03:a0f9 2001:bb8:2002:2300:7221:17ff:fe03:5022<br /> ipmi: 172.17.35.5<br /> <br /> kus<br /> <br /> * at-dom0.ims - füüsiline virtualiseerimise arvuti<br /> * varundus.ims - füüsiline varunduse arvuti<br /> * fw.ims (fw.ims.ut.ee) - virtuaalne arvuti<br /> * eap.ims - virtuaalne arvuti<br /> <br /> Füüsilistel arvutitel on lisaks operatsioonisüsteemi ip aadressile ka füüsilise riistvara kaughalduse ipmi aadress. Operatsioonisüsteemid omandavad automaatselt oma mac aadresside abil ipv6 aadressid.<br /> <br /> ===Plokkseadmete haldamine===<br /> <br /> Plokkseadmete haldamiseks kasutatakse mdadm ja LVM tarkvara. Mõlemas füüsilises arvutis töötavad neli samade parameetritega kõvaketast on ühendatud RAID massiividesse; RAID ressurssi hallatakse edasi LVM abil kasutamiseks failisüsteemide ja saaleala jaoks.<br /> <br /> ===Virtualiseerimine===<br /> <br /> Efektiivsemaks ja paindlikumaks riistavaralise ressursi kasutamiseks on teenusserverid eap.ims ja fw.ims juurutatud virtuaalsete arvutitena. Neile saab kasutamiseks anda sobiva hulga protsessori, mälu, plokkseadme ja võrguressurssi. Projektis kasutatakse XEN virtualiseerimise tarkvara, mille kasutamist on kirjeldatud nt aadressidel<br /> <br /> * http://www.auul.pri.ee/wiki/Xen_ja_Debian_Squeeze<br /> * http://kuutorvaja.eenet.ee/wiki/Unix_keskkonna_administreerimine#Virtualiseerimine<br /> <br /> ====XEN host====<br /> <br /> XEN hostile vastav operatsioonisüsteemi eksemplar töötab füüsilisel riistvaral ja selle seest tõimub virtuaalsete arvutite juhtimine. Kui välja arvata XEN hosti alglaaduri seadistused ja mõned virtualiseerimisega seotud protsessid on tegu tavalise Debian Squeeze operatsioonisüsteemiga. <br /> <br /> ====XEN guest====<br /> <br /> XEN guestid on virtuaalsed operatsioonisüsteemid, mis töötavad XEN hosti kontrolli all ja mis kasutavad XEN hostist neile eraldatud ressursse.<br /> <br /> ===at-dom0 host===<br /> <br /> at-dom0.ims arvutil töötavad kaks virtuaalset arvutit<br /> <br /> * eap.ims - eth0 - 172.17.35.22, 2001:bb8:2002:2300:7221:17ff:fe03:5022/64<br /> * fw.ims -<br /> <br /> ===eap.ims guest===<br /> <br /> Põhiline eap.ims arvutis töötav rakendustarkvara on PostgreSQL v. 9.0 andmebaas.<br /> <br /> * WAL logid salvestatakse iga 30 minuti järel RAID1 (redundantne) kõvaketastele (andmebaasi serveril)<br /> <br /> ===fw.ims guest===<br /> <br /> Peamised fw.ims arvutis töötavad rakendusprogrammid on<br /> <br /> * PostgreSQL v. 9.0 andmebaas<br /> * Apache veebiserver<br /> * NFS failiserver, mis jagab /home kataloogi eap.ims arvutisse<br /> <br /> ===varundus.ims===<br /> <br /> Full backup: kord nädalas nublu.chem.ut.ee 2-le eraldi kõvakettale (mitteredundantsed), säilitatakse 4-5 viimast täiskoopiat.<br /> <br /> Full backupi ligikaudne maht (24.01.2011): 35 GB<br /> <br /> <br /> Iga päeva WAL logid (säilitatakse kahe full backupi vahel tekkinud WAL logid (nädala WAL logide ligikaudne maht (24.01.2011): 18 GB<br /> <br /> Tarmo virtuaalserverist hetkel backuppi ei tehta.<br /> <br /> ====Nublu====<br /> <br /> ====Raamistik====<br /> <br /> ===Monitooring===<br /> <br /> TODO<br /> <br /> ===Kasulikud lisamaterjalid===<br /> <br /> * http://www.auul.pri.ee/wiki/NUT_tarkvara_kasutamine_Debian_Squeeze_operatsioonis%C3%BCsteemiga<br /> * http://www.auul.pri.ee/wiki/EMC_Networker_client<br /> * http://www.auul.pri.ee/wiki/Tarkvaralise_mdadm_RAID_kasutamine_operatsioonis%C3%BCsteemiga_Debian_Squeeze</div> Imreoolberg https://ims.ut.ee/index.php?title=Eab_infra&diff=8928 Eab infra 2011-11-01T21:49:43Z <p>Imreoolberg: /* fw.ims */</p> <hr /> <div>===Sissejuhatus===<br /> <br /> Käesoleva teksti eesmärgiks on kirjeldada EAP projekti juures toimuvat riistvara, võrgu, operatsioonisüsteemi keskkonna ja rakendustarkvara kasutamist.<br /> <br /> ===Riistvara===<br /> <br /> Projektis kasutatakse sellist riistavara<br /> <br /> * Powerware 5115 UPS<br /> * 2 x S3420GP emaplaadiga Ordi arvutid<br /> * mõlemad arvutid sisaldavad 4 x 2 TB kõvakettaid<br /> * generic kohtvõrgu kommutaator<br /> <br /> ===Tarkvara===<br /> <br /> Projekti arvutites kasutatakse järgmist tarkvara<br /> <br /> * Debian Squeeze v. 6 64bit operatsioonisüsteem<br /> * XEN v. 4 virtualiseerimise tarkvara<br /> * Apache veebiserver<br /> * PostgreSQL andmebaas<br /> * Zabbix monitooringutarkvara<br /> * OpenVPN kaugligipääsu tarkvara<br /> * rsnapshot ja EMC Networker varundustarkvara<br /> * plokkseadmete haldamiseks mdadm ja LVM tarkvara<br /> <br /> ===Riistvara kaughaldus===<br /> <br /> Riistvaraliste arvutite kaughalduseks kasutatakse IMPI protokolli onboard BMC kontrolliriga suhtlemiseks. Muu hulgas võimaldab see ligipääsu arvuti BIOSile ning virtuaalse järjestikpordi kaudu serial konsoolile (st operatsioonisüsteemile).<br /> <br /> ===Võrgutopoloogia===<br /> <br /> _____<br /> 195.80.35.1 | | ülikooli võrguseade<br /> ----------------------------------------------|----------------------------------------------| |<br /> | |_____|<br /> | | 172.17.35.1<br /> | 195.80.35.96 |<br /> | 2001:bb8:2002:2300:7231:40ff:fe03:5128 | <br /> _____ __|__ |<br /> | | | | |<br /> | F | | V | | <br /> |_____| at-dom0.ims |_____| fw.ims |<br /> | os: 172.17.35.21 | 172.17.35.18 |<br /> | 2001:bb8:2002:2300:21e:67ff:fe03:c3c0 | 2001:bb8:2002:2300:7221:17ff:fe03:5018 |<br /> | impi: 172.17.35.20 | |<br /> --|-------------------------------|-------------------|-----------------------|-------------------------|------ <br /> | |<br /> __|__ __|__<br /> | | | |<br /> | F | | V |<br /> |_____| |_____|<br /> <br /> varundus.ims eap.ims<br /> os: 172.17.35.19 172.17.35.22<br /> 2001:bb8:2002:2300:21e:67ff:fe03:a0f9 2001:bb8:2002:2300:7221:17ff:fe03:5022<br /> ipmi: 172.17.35.5<br /> <br /> kus<br /> <br /> * at-dom0.ims - füüsiline virtualiseerimise arvuti<br /> * varundus.ims - füüsiline varunduse arvuti<br /> * fw.ims (fw.ims.ut.ee) - virtuaalne arvuti<br /> * eap.ims - virtuaalne arvuti<br /> <br /> Füüsilistel arvutitel on lisaks operatsioonisüsteemi ip aadressile ka füüsilise riistvara kaughalduse ipmi aadress. Operatsioonisüsteemid omandavad automaatselt oma mac aadresside abil ipv6 aadressid.<br /> <br /> ===Plokkseadmete haldamine===<br /> <br /> Plokkseadmete haldamiseks kasutatakse mdadm ja LVM tarkvara. Mõlemas füüsilises arvutis töötavad neli samade parameetritega kõvaketast on ühendatud RAID massiividesse; RAID ressurssi hallatakse edasi LVM abil kasutamiseks failisüsteemide ja saaleala jaoks.<br /> <br /> ===Virtualiseerimine===<br /> <br /> Efektiivsemaks ja paindlikumaks riistavaralise ressursi kasutamiseks on teenusserverid eap.ims ja fw.ims juurutatud virtuaalsete arvutitena. Neile saab kasutamiseks anda sobiva hulga protsessori, mälu, plokkseadme ja võrguressurssi. Projektis kasutatakse XEN virtualiseerimise tarkvara, mille kasutamist on kirjeldatud nt aadressidel<br /> <br /> * http://www.auul.pri.ee/wiki/Xen_ja_Debian_Squeeze<br /> * http://kuutorvaja.eenet.ee/wiki/Unix_keskkonna_administreerimine#Virtualiseerimine<br /> <br /> ====XEN host====<br /> <br /> XEN hostile vastav operatsioonisüsteemi eksemplar töötab füüsilisel riistvaral ja selle seest tõimub virtuaalsete arvutite juhtimine. Kui välja arvata XEN hosti alglaaduri seadistused ja mõned virtualiseerimisega seotud protsessid on tegu tavalise Debian Squeeze operatsioonisüsteemiga. <br /> <br /> ====XEN guest====<br /> <br /> XEN guestid on virtuaalsed operatsioonisüsteemid, mis töötavad XEN hosti kontrolli all ja mis kasutavad XEN hostist neile eraldatud ressursse.<br /> <br /> ===at-dom0 host===<br /> <br /> at-dom0.ims arvutil töötavad kaks virtuaalset arvutit<br /> <br /> * eap.ims - eth0 - 172.17.35.22, 2001:bb8:2002:2300:7221:17ff:fe03:5022/64<br /> * fw.ims -<br /> <br /> ===eap.ims guest===<br /> <br /> Põhiline eap.ims arvutis töötav rakendustarkvara on PostgreSQL v. 9.0 andmebaas.<br /> <br /> * WAL logid salvestatakse iga 30 minuti järel RAID1 (redundantne) kõvaketastele (andmebaasi serveril)<br /> <br /> ===fw.ims guest===<br /> <br /> Peamised fw.ims arvutis töötavad rakendusprogrammid on<br /> <br /> * PostgreSQL v. 9.0 andmebaas<br /> * Apache veebiserver<br /> * NFS failiserver, mis jagab /home kataloogi eap.ims arvutisse<br /> <br /> ===varundus.ims - varundusserver===<br /> <br /> Full backup: kord nädalas nublu.chem.ut.ee 2-le eraldi kõvakettale (mitteredundantsed), säilitatakse 4-5 viimast täiskoopiat.<br /> <br /> Full backupi ligikaudne maht (24.01.2011): 35 GB<br /> <br /> <br /> Iga päeva WAL logid (säilitatakse kahe full backupi vahel tekkinud WAL logid (nädala WAL logide ligikaudne maht (24.01.2011): 18 GB<br /> <br /> Tarmo virtuaalserverist hetkel backuppi ei tehta.<br /> <br /> ====Nublu====<br /> <br /> ====Raamistik====<br /> <br /> ===Monitooring===<br /> <br /> TODO<br /> <br /> ===Kasulikud lisamaterjalid===<br /> <br /> * http://www.auul.pri.ee/wiki/NUT_tarkvara_kasutamine_Debian_Squeeze_operatsioonis%C3%BCsteemiga<br /> * http://www.auul.pri.ee/wiki/EMC_Networker_client<br /> * http://www.auul.pri.ee/wiki/Tarkvaralise_mdadm_RAID_kasutamine_operatsioonis%C3%BCsteemiga_Debian_Squeeze</div> Imreoolberg https://ims.ut.ee/index.php?title=Eab_infra&diff=8927 Eab infra 2011-11-01T21:49:35Z <p>Imreoolberg: /* eap.ims */</p> <hr /> <div>===Sissejuhatus===<br /> <br /> Käesoleva teksti eesmärgiks on kirjeldada EAP projekti juures toimuvat riistvara, võrgu, operatsioonisüsteemi keskkonna ja rakendustarkvara kasutamist.<br /> <br /> ===Riistvara===<br /> <br /> Projektis kasutatakse sellist riistavara<br /> <br /> * Powerware 5115 UPS<br /> * 2 x S3420GP emaplaadiga Ordi arvutid<br /> * mõlemad arvutid sisaldavad 4 x 2 TB kõvakettaid<br /> * generic kohtvõrgu kommutaator<br /> <br /> ===Tarkvara===<br /> <br /> Projekti arvutites kasutatakse järgmist tarkvara<br /> <br /> * Debian Squeeze v. 6 64bit operatsioonisüsteem<br /> * XEN v. 4 virtualiseerimise tarkvara<br /> * Apache veebiserver<br /> * PostgreSQL andmebaas<br /> * Zabbix monitooringutarkvara<br /> * OpenVPN kaugligipääsu tarkvara<br /> * rsnapshot ja EMC Networker varundustarkvara<br /> * plokkseadmete haldamiseks mdadm ja LVM tarkvara<br /> <br /> ===Riistvara kaughaldus===<br /> <br /> Riistvaraliste arvutite kaughalduseks kasutatakse IMPI protokolli onboard BMC kontrolliriga suhtlemiseks. Muu hulgas võimaldab see ligipääsu arvuti BIOSile ning virtuaalse järjestikpordi kaudu serial konsoolile (st operatsioonisüsteemile).<br /> <br /> ===Võrgutopoloogia===<br /> <br /> _____<br /> 195.80.35.1 | | ülikooli võrguseade<br /> ----------------------------------------------|----------------------------------------------| |<br /> | |_____|<br /> | | 172.17.35.1<br /> | 195.80.35.96 |<br /> | 2001:bb8:2002:2300:7231:40ff:fe03:5128 | <br /> _____ __|__ |<br /> | | | | |<br /> | F | | V | | <br /> |_____| at-dom0.ims |_____| fw.ims |<br /> | os: 172.17.35.21 | 172.17.35.18 |<br /> | 2001:bb8:2002:2300:21e:67ff:fe03:c3c0 | 2001:bb8:2002:2300:7221:17ff:fe03:5018 |<br /> | impi: 172.17.35.20 | |<br /> --|-------------------------------|-------------------|-----------------------|-------------------------|------ <br /> | |<br /> __|__ __|__<br /> | | | |<br /> | F | | V |<br /> |_____| |_____|<br /> <br /> varundus.ims eap.ims<br /> os: 172.17.35.19 172.17.35.22<br /> 2001:bb8:2002:2300:21e:67ff:fe03:a0f9 2001:bb8:2002:2300:7221:17ff:fe03:5022<br /> ipmi: 172.17.35.5<br /> <br /> kus<br /> <br /> * at-dom0.ims - füüsiline virtualiseerimise arvuti<br /> * varundus.ims - füüsiline varunduse arvuti<br /> * fw.ims (fw.ims.ut.ee) - virtuaalne arvuti<br /> * eap.ims - virtuaalne arvuti<br /> <br /> Füüsilistel arvutitel on lisaks operatsioonisüsteemi ip aadressile ka füüsilise riistvara kaughalduse ipmi aadress. Operatsioonisüsteemid omandavad automaatselt oma mac aadresside abil ipv6 aadressid.<br /> <br /> ===Plokkseadmete haldamine===<br /> <br /> Plokkseadmete haldamiseks kasutatakse mdadm ja LVM tarkvara. Mõlemas füüsilises arvutis töötavad neli samade parameetritega kõvaketast on ühendatud RAID massiividesse; RAID ressurssi hallatakse edasi LVM abil kasutamiseks failisüsteemide ja saaleala jaoks.<br /> <br /> ===Virtualiseerimine===<br /> <br /> Efektiivsemaks ja paindlikumaks riistavaralise ressursi kasutamiseks on teenusserverid eap.ims ja fw.ims juurutatud virtuaalsete arvutitena. Neile saab kasutamiseks anda sobiva hulga protsessori, mälu, plokkseadme ja võrguressurssi. Projektis kasutatakse XEN virtualiseerimise tarkvara, mille kasutamist on kirjeldatud nt aadressidel<br /> <br /> * http://www.auul.pri.ee/wiki/Xen_ja_Debian_Squeeze<br /> * http://kuutorvaja.eenet.ee/wiki/Unix_keskkonna_administreerimine#Virtualiseerimine<br /> <br /> ====XEN host====<br /> <br /> XEN hostile vastav operatsioonisüsteemi eksemplar töötab füüsilisel riistvaral ja selle seest tõimub virtuaalsete arvutite juhtimine. Kui välja arvata XEN hosti alglaaduri seadistused ja mõned virtualiseerimisega seotud protsessid on tegu tavalise Debian Squeeze operatsioonisüsteemiga. <br /> <br /> ====XEN guest====<br /> <br /> XEN guestid on virtuaalsed operatsioonisüsteemid, mis töötavad XEN hosti kontrolli all ja mis kasutavad XEN hostist neile eraldatud ressursse.<br /> <br /> ===at-dom0 host===<br /> <br /> at-dom0.ims arvutil töötavad kaks virtuaalset arvutit<br /> <br /> * eap.ims - eth0 - 172.17.35.22, 2001:bb8:2002:2300:7221:17ff:fe03:5022/64<br /> * fw.ims -<br /> <br /> ===eap.ims guest===<br /> <br /> Põhiline eap.ims arvutis töötav rakendustarkvara on PostgreSQL v. 9.0 andmebaas.<br /> <br /> * WAL logid salvestatakse iga 30 minuti järel RAID1 (redundantne) kõvaketastele (andmebaasi serveril)<br /> <br /> ===fw.ims===<br /> <br /> Peamised fw.ims arvutis töötavad rakendusprogrammid on<br /> <br /> * PostgreSQL v. 9.0 andmebaas<br /> * Apache veebiserver<br /> * NFS failiserver, mis jagab /home kataloogi eap.ims arvutisse<br /> <br /> ===varundus.ims - varundusserver===<br /> <br /> Full backup: kord nädalas nublu.chem.ut.ee 2-le eraldi kõvakettale (mitteredundantsed), säilitatakse 4-5 viimast täiskoopiat.<br /> <br /> Full backupi ligikaudne maht (24.01.2011): 35 GB<br /> <br /> <br /> Iga päeva WAL logid (säilitatakse kahe full backupi vahel tekkinud WAL logid (nädala WAL logide ligikaudne maht (24.01.2011): 18 GB<br /> <br /> Tarmo virtuaalserverist hetkel backuppi ei tehta.<br /> <br /> ====Nublu====<br /> <br /> ====Raamistik====<br /> <br /> ===Monitooring===<br /> <br /> TODO<br /> <br /> ===Kasulikud lisamaterjalid===<br /> <br /> * http://www.auul.pri.ee/wiki/NUT_tarkvara_kasutamine_Debian_Squeeze_operatsioonis%C3%BCsteemiga<br /> * http://www.auul.pri.ee/wiki/EMC_Networker_client<br /> * http://www.auul.pri.ee/wiki/Tarkvaralise_mdadm_RAID_kasutamine_operatsioonis%C3%BCsteemiga_Debian_Squeeze</div> Imreoolberg https://ims.ut.ee/index.php?title=Eab_infra&diff=8926 Eab infra 2011-11-01T21:49:23Z <p>Imreoolberg: /* Virtuaalserverid */</p> <hr /> <div>===Sissejuhatus===<br /> <br /> Käesoleva teksti eesmärgiks on kirjeldada EAP projekti juures toimuvat riistvara, võrgu, operatsioonisüsteemi keskkonna ja rakendustarkvara kasutamist.<br /> <br /> ===Riistvara===<br /> <br /> Projektis kasutatakse sellist riistavara<br /> <br /> * Powerware 5115 UPS<br /> * 2 x S3420GP emaplaadiga Ordi arvutid<br /> * mõlemad arvutid sisaldavad 4 x 2 TB kõvakettaid<br /> * generic kohtvõrgu kommutaator<br /> <br /> ===Tarkvara===<br /> <br /> Projekti arvutites kasutatakse järgmist tarkvara<br /> <br /> * Debian Squeeze v. 6 64bit operatsioonisüsteem<br /> * XEN v. 4 virtualiseerimise tarkvara<br /> * Apache veebiserver<br /> * PostgreSQL andmebaas<br /> * Zabbix monitooringutarkvara<br /> * OpenVPN kaugligipääsu tarkvara<br /> * rsnapshot ja EMC Networker varundustarkvara<br /> * plokkseadmete haldamiseks mdadm ja LVM tarkvara<br /> <br /> ===Riistvara kaughaldus===<br /> <br /> Riistvaraliste arvutite kaughalduseks kasutatakse IMPI protokolli onboard BMC kontrolliriga suhtlemiseks. Muu hulgas võimaldab see ligipääsu arvuti BIOSile ning virtuaalse järjestikpordi kaudu serial konsoolile (st operatsioonisüsteemile).<br /> <br /> ===Võrgutopoloogia===<br /> <br /> _____<br /> 195.80.35.1 | | ülikooli võrguseade<br /> ----------------------------------------------|----------------------------------------------| |<br /> | |_____|<br /> | | 172.17.35.1<br /> | 195.80.35.96 |<br /> | 2001:bb8:2002:2300:7231:40ff:fe03:5128 | <br /> _____ __|__ |<br /> | | | | |<br /> | F | | V | | <br /> |_____| at-dom0.ims |_____| fw.ims |<br /> | os: 172.17.35.21 | 172.17.35.18 |<br /> | 2001:bb8:2002:2300:21e:67ff:fe03:c3c0 | 2001:bb8:2002:2300:7221:17ff:fe03:5018 |<br /> | impi: 172.17.35.20 | |<br /> --|-------------------------------|-------------------|-----------------------|-------------------------|------ <br /> | |<br /> __|__ __|__<br /> | | | |<br /> | F | | V |<br /> |_____| |_____|<br /> <br /> varundus.ims eap.ims<br /> os: 172.17.35.19 172.17.35.22<br /> 2001:bb8:2002:2300:21e:67ff:fe03:a0f9 2001:bb8:2002:2300:7221:17ff:fe03:5022<br /> ipmi: 172.17.35.5<br /> <br /> kus<br /> <br /> * at-dom0.ims - füüsiline virtualiseerimise arvuti<br /> * varundus.ims - füüsiline varunduse arvuti<br /> * fw.ims (fw.ims.ut.ee) - virtuaalne arvuti<br /> * eap.ims - virtuaalne arvuti<br /> <br /> Füüsilistel arvutitel on lisaks operatsioonisüsteemi ip aadressile ka füüsilise riistvara kaughalduse ipmi aadress. Operatsioonisüsteemid omandavad automaatselt oma mac aadresside abil ipv6 aadressid.<br /> <br /> ===Plokkseadmete haldamine===<br /> <br /> Plokkseadmete haldamiseks kasutatakse mdadm ja LVM tarkvara. Mõlemas füüsilises arvutis töötavad neli samade parameetritega kõvaketast on ühendatud RAID massiividesse; RAID ressurssi hallatakse edasi LVM abil kasutamiseks failisüsteemide ja saaleala jaoks.<br /> <br /> ===Virtualiseerimine===<br /> <br /> Efektiivsemaks ja paindlikumaks riistavaralise ressursi kasutamiseks on teenusserverid eap.ims ja fw.ims juurutatud virtuaalsete arvutitena. Neile saab kasutamiseks anda sobiva hulga protsessori, mälu, plokkseadme ja võrguressurssi. Projektis kasutatakse XEN virtualiseerimise tarkvara, mille kasutamist on kirjeldatud nt aadressidel<br /> <br /> * http://www.auul.pri.ee/wiki/Xen_ja_Debian_Squeeze<br /> * http://kuutorvaja.eenet.ee/wiki/Unix_keskkonna_administreerimine#Virtualiseerimine<br /> <br /> ====XEN host====<br /> <br /> XEN hostile vastav operatsioonisüsteemi eksemplar töötab füüsilisel riistvaral ja selle seest tõimub virtuaalsete arvutite juhtimine. Kui välja arvata XEN hosti alglaaduri seadistused ja mõned virtualiseerimisega seotud protsessid on tegu tavalise Debian Squeeze operatsioonisüsteemiga. <br /> <br /> ====XEN guest====<br /> <br /> XEN guestid on virtuaalsed operatsioonisüsteemid, mis töötavad XEN hosti kontrolli all ja mis kasutavad XEN hostist neile eraldatud ressursse.<br /> <br /> ===at-dom0 host===<br /> <br /> at-dom0.ims arvutil töötavad kaks virtuaalset arvutit<br /> <br /> * eap.ims - eth0 - 172.17.35.22, 2001:bb8:2002:2300:7221:17ff:fe03:5022/64<br /> * fw.ims -<br /> <br /> ===eap.ims===<br /> <br /> Põhiline eap.ims arvutis töötav rakendustarkvara on PostgreSQL v. 9.0 andmebaas.<br /> <br /> * WAL logid salvestatakse iga 30 minuti järel RAID1 (redundantne) kõvaketastele (andmebaasi serveril)<br /> <br /> ===fw.ims===<br /> <br /> Peamised fw.ims arvutis töötavad rakendusprogrammid on<br /> <br /> * PostgreSQL v. 9.0 andmebaas<br /> * Apache veebiserver<br /> * NFS failiserver, mis jagab /home kataloogi eap.ims arvutisse<br /> <br /> ===varundus.ims - varundusserver===<br /> <br /> Full backup: kord nädalas nublu.chem.ut.ee 2-le eraldi kõvakettale (mitteredundantsed), säilitatakse 4-5 viimast täiskoopiat.<br /> <br /> Full backupi ligikaudne maht (24.01.2011): 35 GB<br /> <br /> <br /> Iga päeva WAL logid (säilitatakse kahe full backupi vahel tekkinud WAL logid (nädala WAL logide ligikaudne maht (24.01.2011): 18 GB<br /> <br /> Tarmo virtuaalserverist hetkel backuppi ei tehta.<br /> <br /> ====Nublu====<br /> <br /> ====Raamistik====<br /> <br /> ===Monitooring===<br /> <br /> TODO<br /> <br /> ===Kasulikud lisamaterjalid===<br /> <br /> * http://www.auul.pri.ee/wiki/NUT_tarkvara_kasutamine_Debian_Squeeze_operatsioonis%C3%BCsteemiga<br /> * http://www.auul.pri.ee/wiki/EMC_Networker_client<br /> * http://www.auul.pri.ee/wiki/Tarkvaralise_mdadm_RAID_kasutamine_operatsioonis%C3%BCsteemiga_Debian_Squeeze</div> Imreoolberg https://ims.ut.ee/index.php?title=Eab_infra&diff=8925 Eab infra 2011-11-01T21:48:41Z <p>Imreoolberg: /* fw.ims */</p> <hr /> <div>===Sissejuhatus===<br /> <br /> Käesoleva teksti eesmärgiks on kirjeldada EAP projekti juures toimuvat riistvara, võrgu, operatsioonisüsteemi keskkonna ja rakendustarkvara kasutamist.<br /> <br /> ===Riistvara===<br /> <br /> Projektis kasutatakse sellist riistavara<br /> <br /> * Powerware 5115 UPS<br /> * 2 x S3420GP emaplaadiga Ordi arvutid<br /> * mõlemad arvutid sisaldavad 4 x 2 TB kõvakettaid<br /> * generic kohtvõrgu kommutaator<br /> <br /> ===Tarkvara===<br /> <br /> Projekti arvutites kasutatakse järgmist tarkvara<br /> <br /> * Debian Squeeze v. 6 64bit operatsioonisüsteem<br /> * XEN v. 4 virtualiseerimise tarkvara<br /> * Apache veebiserver<br /> * PostgreSQL andmebaas<br /> * Zabbix monitooringutarkvara<br /> * OpenVPN kaugligipääsu tarkvara<br /> * rsnapshot ja EMC Networker varundustarkvara<br /> * plokkseadmete haldamiseks mdadm ja LVM tarkvara<br /> <br /> ===Riistvara kaughaldus===<br /> <br /> Riistvaraliste arvutite kaughalduseks kasutatakse IMPI protokolli onboard BMC kontrolliriga suhtlemiseks. Muu hulgas võimaldab see ligipääsu arvuti BIOSile ning virtuaalse järjestikpordi kaudu serial konsoolile (st operatsioonisüsteemile).<br /> <br /> ===Võrgutopoloogia===<br /> <br /> _____<br /> 195.80.35.1 | | ülikooli võrguseade<br /> ----------------------------------------------|----------------------------------------------| |<br /> | |_____|<br /> | | 172.17.35.1<br /> | 195.80.35.96 |<br /> | 2001:bb8:2002:2300:7231:40ff:fe03:5128 | <br /> _____ __|__ |<br /> | | | | |<br /> | F | | V | | <br /> |_____| at-dom0.ims |_____| fw.ims |<br /> | os: 172.17.35.21 | 172.17.35.18 |<br /> | 2001:bb8:2002:2300:21e:67ff:fe03:c3c0 | 2001:bb8:2002:2300:7221:17ff:fe03:5018 |<br /> | impi: 172.17.35.20 | |<br /> --|-------------------------------|-------------------|-----------------------|-------------------------|------ <br /> | |<br /> __|__ __|__<br /> | | | |<br /> | F | | V |<br /> |_____| |_____|<br /> <br /> varundus.ims eap.ims<br /> os: 172.17.35.19 172.17.35.22<br /> 2001:bb8:2002:2300:21e:67ff:fe03:a0f9 2001:bb8:2002:2300:7221:17ff:fe03:5022<br /> ipmi: 172.17.35.5<br /> <br /> kus<br /> <br /> * at-dom0.ims - füüsiline virtualiseerimise arvuti<br /> * varundus.ims - füüsiline varunduse arvuti<br /> * fw.ims (fw.ims.ut.ee) - virtuaalne arvuti<br /> * eap.ims - virtuaalne arvuti<br /> <br /> Füüsilistel arvutitel on lisaks operatsioonisüsteemi ip aadressile ka füüsilise riistvara kaughalduse ipmi aadress. Operatsioonisüsteemid omandavad automaatselt oma mac aadresside abil ipv6 aadressid.<br /> <br /> ===Plokkseadmete haldamine===<br /> <br /> Plokkseadmete haldamiseks kasutatakse mdadm ja LVM tarkvara. Mõlemas füüsilises arvutis töötavad neli samade parameetritega kõvaketast on ühendatud RAID massiividesse; RAID ressurssi hallatakse edasi LVM abil kasutamiseks failisüsteemide ja saaleala jaoks.<br /> <br /> ===Virtualiseerimine===<br /> <br /> Efektiivsemaks ja paindlikumaks riistavaralise ressursi kasutamiseks on teenusserverid eap.ims ja fw.ims juurutatud virtuaalsete arvutitena. Neile saab kasutamiseks anda sobiva hulga protsessori, mälu, plokkseadme ja võrguressurssi. Projektis kasutatakse XEN virtualiseerimise tarkvara, mille kasutamist on kirjeldatud nt aadressidel<br /> <br /> * http://www.auul.pri.ee/wiki/Xen_ja_Debian_Squeeze<br /> * http://kuutorvaja.eenet.ee/wiki/Unix_keskkonna_administreerimine#Virtualiseerimine<br /> <br /> ====XEN host====<br /> <br /> XEN hostile vastav operatsioonisüsteemi eksemplar töötab füüsilisel riistvaral ja selle seest tõimub virtuaalsete arvutite juhtimine. Kui välja arvata XEN hosti alglaaduri seadistused ja mõned virtualiseerimisega seotud protsessid on tegu tavalise Debian Squeeze operatsioonisüsteemiga. <br /> <br /> ====XEN guest====<br /> <br /> XEN guestid on virtuaalsed operatsioonisüsteemid, mis töötavad XEN hosti kontrolli all ja mis kasutavad XEN hostist neile eraldatud ressursse.<br /> <br /> ====Virtuaalserverid====<br /> <br /> at-dom0.ims arvutil töötavad kaks virtuaalset arvutit<br /> <br /> * eap.ims - eth0 - 172.17.35.22, 2001:bb8:2002:2300:7221:17ff:fe03:5022/64<br /> * fw.ims -<br /> <br /> ===eap.ims===<br /> <br /> Põhiline eap.ims arvutis töötav rakendustarkvara on PostgreSQL v. 9.0 andmebaas.<br /> <br /> * WAL logid salvestatakse iga 30 minuti järel RAID1 (redundantne) kõvaketastele (andmebaasi serveril)<br /> <br /> ===fw.ims===<br /> <br /> Peamised fw.ims arvutis töötavad rakendusprogrammid on<br /> <br /> * PostgreSQL v. 9.0 andmebaas<br /> * Apache veebiserver<br /> * NFS failiserver, mis jagab /home kataloogi eap.ims arvutisse<br /> <br /> ===varundus.ims - varundusserver===<br /> <br /> Full backup: kord nädalas nublu.chem.ut.ee 2-le eraldi kõvakettale (mitteredundantsed), säilitatakse 4-5 viimast täiskoopiat.<br /> <br /> Full backupi ligikaudne maht (24.01.2011): 35 GB<br /> <br /> <br /> Iga päeva WAL logid (säilitatakse kahe full backupi vahel tekkinud WAL logid (nädala WAL logide ligikaudne maht (24.01.2011): 18 GB<br /> <br /> Tarmo virtuaalserverist hetkel backuppi ei tehta.<br /> <br /> ====Nublu====<br /> <br /> ====Raamistik====<br /> <br /> ===Monitooring===<br /> <br /> TODO<br /> <br /> ===Kasulikud lisamaterjalid===<br /> <br /> * http://www.auul.pri.ee/wiki/NUT_tarkvara_kasutamine_Debian_Squeeze_operatsioonis%C3%BCsteemiga<br /> * http://www.auul.pri.ee/wiki/EMC_Networker_client<br /> * http://www.auul.pri.ee/wiki/Tarkvaralise_mdadm_RAID_kasutamine_operatsioonis%C3%BCsteemiga_Debian_Squeeze</div> Imreoolberg https://ims.ut.ee/index.php?title=Eab_infra&diff=8924 Eab infra 2011-11-01T21:47:11Z <p>Imreoolberg: /* eap.ims */</p> <hr /> <div>===Sissejuhatus===<br /> <br /> Käesoleva teksti eesmärgiks on kirjeldada EAP projekti juures toimuvat riistvara, võrgu, operatsioonisüsteemi keskkonna ja rakendustarkvara kasutamist.<br /> <br /> ===Riistvara===<br /> <br /> Projektis kasutatakse sellist riistavara<br /> <br /> * Powerware 5115 UPS<br /> * 2 x S3420GP emaplaadiga Ordi arvutid<br /> * mõlemad arvutid sisaldavad 4 x 2 TB kõvakettaid<br /> * generic kohtvõrgu kommutaator<br /> <br /> ===Tarkvara===<br /> <br /> Projekti arvutites kasutatakse järgmist tarkvara<br /> <br /> * Debian Squeeze v. 6 64bit operatsioonisüsteem<br /> * XEN v. 4 virtualiseerimise tarkvara<br /> * Apache veebiserver<br /> * PostgreSQL andmebaas<br /> * Zabbix monitooringutarkvara<br /> * OpenVPN kaugligipääsu tarkvara<br /> * rsnapshot ja EMC Networker varundustarkvara<br /> * plokkseadmete haldamiseks mdadm ja LVM tarkvara<br /> <br /> ===Riistvara kaughaldus===<br /> <br /> Riistvaraliste arvutite kaughalduseks kasutatakse IMPI protokolli onboard BMC kontrolliriga suhtlemiseks. Muu hulgas võimaldab see ligipääsu arvuti BIOSile ning virtuaalse järjestikpordi kaudu serial konsoolile (st operatsioonisüsteemile).<br /> <br /> ===Võrgutopoloogia===<br /> <br /> _____<br /> 195.80.35.1 | | ülikooli võrguseade<br /> ----------------------------------------------|----------------------------------------------| |<br /> | |_____|<br /> | | 172.17.35.1<br /> | 195.80.35.96 |<br /> | 2001:bb8:2002:2300:7231:40ff:fe03:5128 | <br /> _____ __|__ |<br /> | | | | |<br /> | F | | V | | <br /> |_____| at-dom0.ims |_____| fw.ims |<br /> | os: 172.17.35.21 | 172.17.35.18 |<br /> | 2001:bb8:2002:2300:21e:67ff:fe03:c3c0 | 2001:bb8:2002:2300:7221:17ff:fe03:5018 |<br /> | impi: 172.17.35.20 | |<br /> --|-------------------------------|-------------------|-----------------------|-------------------------|------ <br /> | |<br /> __|__ __|__<br /> | | | |<br /> | F | | V |<br /> |_____| |_____|<br /> <br /> varundus.ims eap.ims<br /> os: 172.17.35.19 172.17.35.22<br /> 2001:bb8:2002:2300:21e:67ff:fe03:a0f9 2001:bb8:2002:2300:7221:17ff:fe03:5022<br /> ipmi: 172.17.35.5<br /> <br /> kus<br /> <br /> * at-dom0.ims - füüsiline virtualiseerimise arvuti<br /> * varundus.ims - füüsiline varunduse arvuti<br /> * fw.ims (fw.ims.ut.ee) - virtuaalne arvuti<br /> * eap.ims - virtuaalne arvuti<br /> <br /> Füüsilistel arvutitel on lisaks operatsioonisüsteemi ip aadressile ka füüsilise riistvara kaughalduse ipmi aadress. Operatsioonisüsteemid omandavad automaatselt oma mac aadresside abil ipv6 aadressid.<br /> <br /> ===Plokkseadmete haldamine===<br /> <br /> Plokkseadmete haldamiseks kasutatakse mdadm ja LVM tarkvara. Mõlemas füüsilises arvutis töötavad neli samade parameetritega kõvaketast on ühendatud RAID massiividesse; RAID ressurssi hallatakse edasi LVM abil kasutamiseks failisüsteemide ja saaleala jaoks.<br /> <br /> ===Virtualiseerimine===<br /> <br /> Efektiivsemaks ja paindlikumaks riistavaralise ressursi kasutamiseks on teenusserverid eap.ims ja fw.ims juurutatud virtuaalsete arvutitena. Neile saab kasutamiseks anda sobiva hulga protsessori, mälu, plokkseadme ja võrguressurssi. Projektis kasutatakse XEN virtualiseerimise tarkvara, mille kasutamist on kirjeldatud nt aadressidel<br /> <br /> * http://www.auul.pri.ee/wiki/Xen_ja_Debian_Squeeze<br /> * http://kuutorvaja.eenet.ee/wiki/Unix_keskkonna_administreerimine#Virtualiseerimine<br /> <br /> ====XEN host====<br /> <br /> XEN hostile vastav operatsioonisüsteemi eksemplar töötab füüsilisel riistvaral ja selle seest tõimub virtuaalsete arvutite juhtimine. Kui välja arvata XEN hosti alglaaduri seadistused ja mõned virtualiseerimisega seotud protsessid on tegu tavalise Debian Squeeze operatsioonisüsteemiga. <br /> <br /> ====XEN guest====<br /> <br /> XEN guestid on virtuaalsed operatsioonisüsteemid, mis töötavad XEN hosti kontrolli all ja mis kasutavad XEN hostist neile eraldatud ressursse.<br /> <br /> ====Virtuaalserverid====<br /> <br /> at-dom0.ims arvutil töötavad kaks virtuaalset arvutit<br /> <br /> * eap.ims - eth0 - 172.17.35.22, 2001:bb8:2002:2300:7221:17ff:fe03:5022/64<br /> * fw.ims -<br /> <br /> ===eap.ims===<br /> <br /> Põhiline eap.ims arvutis töötav rakendustarkvara on PostgreSQL v. 9.0 andmebaas.<br /> <br /> * WAL logid salvestatakse iga 30 minuti järel RAID1 (redundantne) kõvaketastele (andmebaasi serveril)<br /> <br /> ===fw.ims===<br /> <br /> * PostgreSQL andmebaas<br /> * Veebiserver<br /> <br /> ===varundus.ims - varundusserver===<br /> <br /> Full backup: kord nädalas nublu.chem.ut.ee 2-le eraldi kõvakettale (mitteredundantsed), säilitatakse 4-5 viimast täiskoopiat.<br /> <br /> Full backupi ligikaudne maht (24.01.2011): 35 GB<br /> <br /> <br /> Iga päeva WAL logid (säilitatakse kahe full backupi vahel tekkinud WAL logid (nädala WAL logide ligikaudne maht (24.01.2011): 18 GB<br /> <br /> Tarmo virtuaalserverist hetkel backuppi ei tehta.<br /> <br /> ====Nublu====<br /> <br /> ====Raamistik====<br /> <br /> ===Monitooring===<br /> <br /> TODO<br /> <br /> ===Kasulikud lisamaterjalid===<br /> <br /> * http://www.auul.pri.ee/wiki/NUT_tarkvara_kasutamine_Debian_Squeeze_operatsioonis%C3%BCsteemiga<br /> * http://www.auul.pri.ee/wiki/EMC_Networker_client<br /> * http://www.auul.pri.ee/wiki/Tarkvaralise_mdadm_RAID_kasutamine_operatsioonis%C3%BCsteemiga_Debian_Squeeze</div> Imreoolberg https://ims.ut.ee/index.php?title=Eab_infra&diff=8923 Eab infra 2011-11-01T21:45:58Z <p>Imreoolberg: /* Võrgutopoloogia */</p> <hr /> <div>===Sissejuhatus===<br /> <br /> Käesoleva teksti eesmärgiks on kirjeldada EAP projekti juures toimuvat riistvara, võrgu, operatsioonisüsteemi keskkonna ja rakendustarkvara kasutamist.<br /> <br /> ===Riistvara===<br /> <br /> Projektis kasutatakse sellist riistavara<br /> <br /> * Powerware 5115 UPS<br /> * 2 x S3420GP emaplaadiga Ordi arvutid<br /> * mõlemad arvutid sisaldavad 4 x 2 TB kõvakettaid<br /> * generic kohtvõrgu kommutaator<br /> <br /> ===Tarkvara===<br /> <br /> Projekti arvutites kasutatakse järgmist tarkvara<br /> <br /> * Debian Squeeze v. 6 64bit operatsioonisüsteem<br /> * XEN v. 4 virtualiseerimise tarkvara<br /> * Apache veebiserver<br /> * PostgreSQL andmebaas<br /> * Zabbix monitooringutarkvara<br /> * OpenVPN kaugligipääsu tarkvara<br /> * rsnapshot ja EMC Networker varundustarkvara<br /> * plokkseadmete haldamiseks mdadm ja LVM tarkvara<br /> <br /> ===Riistvara kaughaldus===<br /> <br /> Riistvaraliste arvutite kaughalduseks kasutatakse IMPI protokolli onboard BMC kontrolliriga suhtlemiseks. Muu hulgas võimaldab see ligipääsu arvuti BIOSile ning virtuaalse järjestikpordi kaudu serial konsoolile (st operatsioonisüsteemile).<br /> <br /> ===Võrgutopoloogia===<br /> <br /> _____<br /> 195.80.35.1 | | ülikooli võrguseade<br /> ----------------------------------------------|----------------------------------------------| |<br /> | |_____|<br /> | | 172.17.35.1<br /> | 195.80.35.96 |<br /> | 2001:bb8:2002:2300:7231:40ff:fe03:5128 | <br /> _____ __|__ |<br /> | | | | |<br /> | F | | V | | <br /> |_____| at-dom0.ims |_____| fw.ims |<br /> | os: 172.17.35.21 | 172.17.35.18 |<br /> | 2001:bb8:2002:2300:21e:67ff:fe03:c3c0 | 2001:bb8:2002:2300:7221:17ff:fe03:5018 |<br /> | impi: 172.17.35.20 | |<br /> --|-------------------------------|-------------------|-----------------------|-------------------------|------ <br /> | |<br /> __|__ __|__<br /> | | | |<br /> | F | | V |<br /> |_____| |_____|<br /> <br /> varundus.ims eap.ims<br /> os: 172.17.35.19 172.17.35.22<br /> 2001:bb8:2002:2300:21e:67ff:fe03:a0f9 2001:bb8:2002:2300:7221:17ff:fe03:5022<br /> ipmi: 172.17.35.5<br /> <br /> kus<br /> <br /> * at-dom0.ims - füüsiline virtualiseerimise arvuti<br /> * varundus.ims - füüsiline varunduse arvuti<br /> * fw.ims (fw.ims.ut.ee) - virtuaalne arvuti<br /> * eap.ims - virtuaalne arvuti<br /> <br /> Füüsilistel arvutitel on lisaks operatsioonisüsteemi ip aadressile ka füüsilise riistvara kaughalduse ipmi aadress. Operatsioonisüsteemid omandavad automaatselt oma mac aadresside abil ipv6 aadressid.<br /> <br /> ===Plokkseadmete haldamine===<br /> <br /> Plokkseadmete haldamiseks kasutatakse mdadm ja LVM tarkvara. Mõlemas füüsilises arvutis töötavad neli samade parameetritega kõvaketast on ühendatud RAID massiividesse; RAID ressurssi hallatakse edasi LVM abil kasutamiseks failisüsteemide ja saaleala jaoks.<br /> <br /> ===Virtualiseerimine===<br /> <br /> Efektiivsemaks ja paindlikumaks riistavaralise ressursi kasutamiseks on teenusserverid eap.ims ja fw.ims juurutatud virtuaalsete arvutitena. Neile saab kasutamiseks anda sobiva hulga protsessori, mälu, plokkseadme ja võrguressurssi. Projektis kasutatakse XEN virtualiseerimise tarkvara, mille kasutamist on kirjeldatud nt aadressidel<br /> <br /> * http://www.auul.pri.ee/wiki/Xen_ja_Debian_Squeeze<br /> * http://kuutorvaja.eenet.ee/wiki/Unix_keskkonna_administreerimine#Virtualiseerimine<br /> <br /> ====XEN host====<br /> <br /> XEN hostile vastav operatsioonisüsteemi eksemplar töötab füüsilisel riistvaral ja selle seest tõimub virtuaalsete arvutite juhtimine. Kui välja arvata XEN hosti alglaaduri seadistused ja mõned virtualiseerimisega seotud protsessid on tegu tavalise Debian Squeeze operatsioonisüsteemiga. <br /> <br /> ====XEN guest====<br /> <br /> XEN guestid on virtuaalsed operatsioonisüsteemid, mis töötavad XEN hosti kontrolli all ja mis kasutavad XEN hostist neile eraldatud ressursse.<br /> <br /> ====Virtuaalserverid====<br /> <br /> at-dom0.ims arvutil töötavad kaks virtuaalset arvutit<br /> <br /> * eap.ims - eth0 - 172.17.35.22, 2001:bb8:2002:2300:7221:17ff:fe03:5022/64<br /> * fw.ims -<br /> <br /> ===eap.ims===<br /> <br /> * PostgreSQL andmebaas<br /> <br /> WAL logid salvestatakse iga 30 minuti järel RAID1 (redundantne) kõvaketastele (andmebaasi serveril)<br /> <br /> ===fw.ims===<br /> <br /> * PostgreSQL andmebaas<br /> * Veebiserver<br /> <br /> ===varundus.ims - varundusserver===<br /> <br /> Full backup: kord nädalas nublu.chem.ut.ee 2-le eraldi kõvakettale (mitteredundantsed), säilitatakse 4-5 viimast täiskoopiat.<br /> <br /> Full backupi ligikaudne maht (24.01.2011): 35 GB<br /> <br /> <br /> Iga päeva WAL logid (säilitatakse kahe full backupi vahel tekkinud WAL logid (nädala WAL logide ligikaudne maht (24.01.2011): 18 GB<br /> <br /> Tarmo virtuaalserverist hetkel backuppi ei tehta.<br /> <br /> ====Nublu====<br /> <br /> ====Raamistik====<br /> <br /> ===Monitooring===<br /> <br /> TODO<br /> <br /> ===Kasulikud lisamaterjalid===<br /> <br /> * http://www.auul.pri.ee/wiki/NUT_tarkvara_kasutamine_Debian_Squeeze_operatsioonis%C3%BCsteemiga<br /> * http://www.auul.pri.ee/wiki/EMC_Networker_client<br /> * http://www.auul.pri.ee/wiki/Tarkvaralise_mdadm_RAID_kasutamine_operatsioonis%C3%BCsteemiga_Debian_Squeeze</div> Imreoolberg https://ims.ut.ee/index.php?title=Eab_infra&diff=8922 Eab infra 2011-11-01T21:45:37Z <p>Imreoolberg: /* Võrgutopoloogia */</p> <hr /> <div>===Sissejuhatus===<br /> <br /> Käesoleva teksti eesmärgiks on kirjeldada EAP projekti juures toimuvat riistvara, võrgu, operatsioonisüsteemi keskkonna ja rakendustarkvara kasutamist.<br /> <br /> ===Riistvara===<br /> <br /> Projektis kasutatakse sellist riistavara<br /> <br /> * Powerware 5115 UPS<br /> * 2 x S3420GP emaplaadiga Ordi arvutid<br /> * mõlemad arvutid sisaldavad 4 x 2 TB kõvakettaid<br /> * generic kohtvõrgu kommutaator<br /> <br /> ===Tarkvara===<br /> <br /> Projekti arvutites kasutatakse järgmist tarkvara<br /> <br /> * Debian Squeeze v. 6 64bit operatsioonisüsteem<br /> * XEN v. 4 virtualiseerimise tarkvara<br /> * Apache veebiserver<br /> * PostgreSQL andmebaas<br /> * Zabbix monitooringutarkvara<br /> * OpenVPN kaugligipääsu tarkvara<br /> * rsnapshot ja EMC Networker varundustarkvara<br /> * plokkseadmete haldamiseks mdadm ja LVM tarkvara<br /> <br /> ===Riistvara kaughaldus===<br /> <br /> Riistvaraliste arvutite kaughalduseks kasutatakse IMPI protokolli onboard BMC kontrolliriga suhtlemiseks. Muu hulgas võimaldab see ligipääsu arvuti BIOSile ning virtuaalse järjestikpordi kaudu serial konsoolile (st operatsioonisüsteemile).<br /> <br /> ===Võrgutopoloogia===<br /> <br /> _____<br /> 195.80.35.1 | | ülikooli võrguseade<br /> ----------------------------------------------|----------------------------------------------| |<br /> | |_____|<br /> | | 172.17.35.1<br /> | 195.80.35.96 |<br /> | 2001:bb8:2002:2300:7231:40ff:fe03:5128 | <br /> _____ __|__ |<br /> | | | | |<br /> | F | | V | | <br /> |_____| at-dom0.ims |_____| fw.ims |<br /> | os: 172.17.35.21 | 172.17.35.18 |<br /> | 2001:bb8:2002:2300:21e:67ff:fe03:c3c0 | 2001:bb8:2002:2300:7221:17ff:fe03:5018 |<br /> | impi: 172.17.35.20 | |<br /> --|-------------------------------|-------------------|-----------------------|-------------------------|------ <br /> __|__ __|__<br /> | | | |<br /> | F | | V |<br /> |_____| |_____|<br /> <br /> varundus.ims eap.ims<br /> os: 172.17.35.19 172.17.35.22<br /> 2001:bb8:2002:2300:21e:67ff:fe03:a0f9 2001:bb8:2002:2300:7221:17ff:fe03:5022<br /> ipmi: 172.17.35.5<br /> <br /> kus<br /> <br /> * at-dom0.ims - füüsiline virtualiseerimise arvuti<br /> * varundus.ims - füüsiline varunduse arvuti<br /> * fw.ims (fw.ims.ut.ee) - virtuaalne arvuti<br /> * eap.ims - virtuaalne arvuti<br /> <br /> Füüsilistel arvutitel on lisaks operatsioonisüsteemi ip aadressile ka füüsilise riistvara kaughalduse ipmi aadress. Operatsioonisüsteemid omandavad automaatselt oma mac aadresside abil ipv6 aadressid.<br /> <br /> ===Plokkseadmete haldamine===<br /> <br /> Plokkseadmete haldamiseks kasutatakse mdadm ja LVM tarkvara. Mõlemas füüsilises arvutis töötavad neli samade parameetritega kõvaketast on ühendatud RAID massiividesse; RAID ressurssi hallatakse edasi LVM abil kasutamiseks failisüsteemide ja saaleala jaoks.<br /> <br /> ===Virtualiseerimine===<br /> <br /> Efektiivsemaks ja paindlikumaks riistavaralise ressursi kasutamiseks on teenusserverid eap.ims ja fw.ims juurutatud virtuaalsete arvutitena. Neile saab kasutamiseks anda sobiva hulga protsessori, mälu, plokkseadme ja võrguressurssi. Projektis kasutatakse XEN virtualiseerimise tarkvara, mille kasutamist on kirjeldatud nt aadressidel<br /> <br /> * http://www.auul.pri.ee/wiki/Xen_ja_Debian_Squeeze<br /> * http://kuutorvaja.eenet.ee/wiki/Unix_keskkonna_administreerimine#Virtualiseerimine<br /> <br /> ====XEN host====<br /> <br /> XEN hostile vastav operatsioonisüsteemi eksemplar töötab füüsilisel riistvaral ja selle seest tõimub virtuaalsete arvutite juhtimine. Kui välja arvata XEN hosti alglaaduri seadistused ja mõned virtualiseerimisega seotud protsessid on tegu tavalise Debian Squeeze operatsioonisüsteemiga. <br /> <br /> ====XEN guest====<br /> <br /> XEN guestid on virtuaalsed operatsioonisüsteemid, mis töötavad XEN hosti kontrolli all ja mis kasutavad XEN hostist neile eraldatud ressursse.<br /> <br /> ====Virtuaalserverid====<br /> <br /> at-dom0.ims arvutil töötavad kaks virtuaalset arvutit<br /> <br /> * eap.ims - eth0 - 172.17.35.22, 2001:bb8:2002:2300:7221:17ff:fe03:5022/64<br /> * fw.ims -<br /> <br /> ===eap.ims===<br /> <br /> * PostgreSQL andmebaas<br /> <br /> WAL logid salvestatakse iga 30 minuti järel RAID1 (redundantne) kõvaketastele (andmebaasi serveril)<br /> <br /> ===fw.ims===<br /> <br /> * PostgreSQL andmebaas<br /> * Veebiserver<br /> <br /> ===varundus.ims - varundusserver===<br /> <br /> Full backup: kord nädalas nublu.chem.ut.ee 2-le eraldi kõvakettale (mitteredundantsed), säilitatakse 4-5 viimast täiskoopiat.<br /> <br /> Full backupi ligikaudne maht (24.01.2011): 35 GB<br /> <br /> <br /> Iga päeva WAL logid (säilitatakse kahe full backupi vahel tekkinud WAL logid (nädala WAL logide ligikaudne maht (24.01.2011): 18 GB<br /> <br /> Tarmo virtuaalserverist hetkel backuppi ei tehta.<br /> <br /> ====Nublu====<br /> <br /> ====Raamistik====<br /> <br /> ===Monitooring===<br /> <br /> TODO<br /> <br /> ===Kasulikud lisamaterjalid===<br /> <br /> * http://www.auul.pri.ee/wiki/NUT_tarkvara_kasutamine_Debian_Squeeze_operatsioonis%C3%BCsteemiga<br /> * http://www.auul.pri.ee/wiki/EMC_Networker_client<br /> * http://www.auul.pri.ee/wiki/Tarkvaralise_mdadm_RAID_kasutamine_operatsioonis%C3%BCsteemiga_Debian_Squeeze</div> Imreoolberg https://ims.ut.ee/index.php?title=Eab_infra&diff=8921 Eab infra 2011-11-01T21:44:48Z <p>Imreoolberg: /* Võrgutopoloogia */</p> <hr /> <div>===Sissejuhatus===<br /> <br /> Käesoleva teksti eesmärgiks on kirjeldada EAP projekti juures toimuvat riistvara, võrgu, operatsioonisüsteemi keskkonna ja rakendustarkvara kasutamist.<br /> <br /> ===Riistvara===<br /> <br /> Projektis kasutatakse sellist riistavara<br /> <br /> * Powerware 5115 UPS<br /> * 2 x S3420GP emaplaadiga Ordi arvutid<br /> * mõlemad arvutid sisaldavad 4 x 2 TB kõvakettaid<br /> * generic kohtvõrgu kommutaator<br /> <br /> ===Tarkvara===<br /> <br /> Projekti arvutites kasutatakse järgmist tarkvara<br /> <br /> * Debian Squeeze v. 6 64bit operatsioonisüsteem<br /> * XEN v. 4 virtualiseerimise tarkvara<br /> * Apache veebiserver<br /> * PostgreSQL andmebaas<br /> * Zabbix monitooringutarkvara<br /> * OpenVPN kaugligipääsu tarkvara<br /> * rsnapshot ja EMC Networker varundustarkvara<br /> * plokkseadmete haldamiseks mdadm ja LVM tarkvara<br /> <br /> ===Riistvara kaughaldus===<br /> <br /> Riistvaraliste arvutite kaughalduseks kasutatakse IMPI protokolli onboard BMC kontrolliriga suhtlemiseks. Muu hulgas võimaldab see ligipääsu arvuti BIOSile ning virtuaalse järjestikpordi kaudu serial konsoolile (st operatsioonisüsteemile).<br /> <br /> ===Võrgutopoloogia===<br /> <br /> _____<br /> 195.80.35.1 | | ülikooli võrguseade<br /> ----------------------------------------------|----------------------------------------------| |<br /> | |_____|<br /> | | 172.17.35.1<br /> | 195.80.35.96 |<br /> | 2001:bb8:2002:2300:7231:40ff:fe03:5128 | <br /> _____ __|__ |<br /> | | | | |<br /> | F | | V | | <br /> |_____| at-dom0.ims |_____| fw.ims |<br /> | os: 172.17.35.21 | 172.17.35.18 |<br /> | 2001:bb8:2002:2300:21e:67ff:fe03:c3c0 | 2001:bb8:2002:2300:7221:17ff:fe03:5018 |<br /> | impi: 172.17.35.20 | |<br /> --|-------------------------------|-------------------|-----------------------|-------------------------|------ <br /> __|__ __|__<br /> | F | | V |<br /> |_____| |_____|<br /> <br /> varundus.ims eap.ims<br /> os: 172.17.35.19 172.17.35.22<br /> 2001:bb8:2002:2300:21e:67ff:fe03:a0f9 2001:bb8:2002:2300:7221:17ff:fe03:5022<br /> ipmi: 172.17.35.5<br /> <br /> kus<br /> <br /> * at-dom0.ims - füüsiline virtualiseerimise arvuti<br /> * varundus.ims - füüsiline varunduse arvuti<br /> * fw.ims (fw.ims.ut.ee) - virtuaalne arvuti<br /> * eap.ims - virtuaalne arvuti<br /> <br /> Füüsilistel arvutitel on lisaks operatsioonisüsteemi ip aadressile ka füüsilise riistvara kaughalduse ipmi aadress. Operatsioonisüsteemid omandavad automaatselt oma mac aadresside abil ipv6 aadressid.<br /> <br /> ===Plokkseadmete haldamine===<br /> <br /> Plokkseadmete haldamiseks kasutatakse mdadm ja LVM tarkvara. Mõlemas füüsilises arvutis töötavad neli samade parameetritega kõvaketast on ühendatud RAID massiividesse; RAID ressurssi hallatakse edasi LVM abil kasutamiseks failisüsteemide ja saaleala jaoks.<br /> <br /> ===Virtualiseerimine===<br /> <br /> Efektiivsemaks ja paindlikumaks riistavaralise ressursi kasutamiseks on teenusserverid eap.ims ja fw.ims juurutatud virtuaalsete arvutitena. Neile saab kasutamiseks anda sobiva hulga protsessori, mälu, plokkseadme ja võrguressurssi. Projektis kasutatakse XEN virtualiseerimise tarkvara, mille kasutamist on kirjeldatud nt aadressidel<br /> <br /> * http://www.auul.pri.ee/wiki/Xen_ja_Debian_Squeeze<br /> * http://kuutorvaja.eenet.ee/wiki/Unix_keskkonna_administreerimine#Virtualiseerimine<br /> <br /> ====XEN host====<br /> <br /> XEN hostile vastav operatsioonisüsteemi eksemplar töötab füüsilisel riistvaral ja selle seest tõimub virtuaalsete arvutite juhtimine. Kui välja arvata XEN hosti alglaaduri seadistused ja mõned virtualiseerimisega seotud protsessid on tegu tavalise Debian Squeeze operatsioonisüsteemiga. <br /> <br /> ====XEN guest====<br /> <br /> XEN guestid on virtuaalsed operatsioonisüsteemid, mis töötavad XEN hosti kontrolli all ja mis kasutavad XEN hostist neile eraldatud ressursse.<br /> <br /> ====Virtuaalserverid====<br /> <br /> at-dom0.ims arvutil töötavad kaks virtuaalset arvutit<br /> <br /> * eap.ims - eth0 - 172.17.35.22, 2001:bb8:2002:2300:7221:17ff:fe03:5022/64<br /> * fw.ims -<br /> <br /> ===eap.ims===<br /> <br /> * PostgreSQL andmebaas<br /> <br /> WAL logid salvestatakse iga 30 minuti järel RAID1 (redundantne) kõvaketastele (andmebaasi serveril)<br /> <br /> ===fw.ims===<br /> <br /> * PostgreSQL andmebaas<br /> * Veebiserver<br /> <br /> ===varundus.ims - varundusserver===<br /> <br /> Full backup: kord nädalas nublu.chem.ut.ee 2-le eraldi kõvakettale (mitteredundantsed), säilitatakse 4-5 viimast täiskoopiat.<br /> <br /> Full backupi ligikaudne maht (24.01.2011): 35 GB<br /> <br /> <br /> Iga päeva WAL logid (säilitatakse kahe full backupi vahel tekkinud WAL logid (nädala WAL logide ligikaudne maht (24.01.2011): 18 GB<br /> <br /> Tarmo virtuaalserverist hetkel backuppi ei tehta.<br /> <br /> ====Nublu====<br /> <br /> ====Raamistik====<br /> <br /> ===Monitooring===<br /> <br /> TODO<br /> <br /> ===Kasulikud lisamaterjalid===<br /> <br /> * http://www.auul.pri.ee/wiki/NUT_tarkvara_kasutamine_Debian_Squeeze_operatsioonis%C3%BCsteemiga<br /> * http://www.auul.pri.ee/wiki/EMC_Networker_client<br /> * http://www.auul.pri.ee/wiki/Tarkvaralise_mdadm_RAID_kasutamine_operatsioonis%C3%BCsteemiga_Debian_Squeeze</div> Imreoolberg https://ims.ut.ee/index.php?title=Eab_infra&diff=8920 Eab infra 2011-11-01T21:43:53Z <p>Imreoolberg: </p> <hr /> <div>===Sissejuhatus===<br /> <br /> Käesoleva teksti eesmärgiks on kirjeldada EAP projekti juures toimuvat riistvara, võrgu, operatsioonisüsteemi keskkonna ja rakendustarkvara kasutamist.<br /> <br /> ===Riistvara===<br /> <br /> Projektis kasutatakse sellist riistavara<br /> <br /> * Powerware 5115 UPS<br /> * 2 x S3420GP emaplaadiga Ordi arvutid<br /> * mõlemad arvutid sisaldavad 4 x 2 TB kõvakettaid<br /> * generic kohtvõrgu kommutaator<br /> <br /> ===Tarkvara===<br /> <br /> Projekti arvutites kasutatakse järgmist tarkvara<br /> <br /> * Debian Squeeze v. 6 64bit operatsioonisüsteem<br /> * XEN v. 4 virtualiseerimise tarkvara<br /> * Apache veebiserver<br /> * PostgreSQL andmebaas<br /> * Zabbix monitooringutarkvara<br /> * OpenVPN kaugligipääsu tarkvara<br /> * rsnapshot ja EMC Networker varundustarkvara<br /> * plokkseadmete haldamiseks mdadm ja LVM tarkvara<br /> <br /> ===Riistvara kaughaldus===<br /> <br /> Riistvaraliste arvutite kaughalduseks kasutatakse IMPI protokolli onboard BMC kontrolliriga suhtlemiseks. Muu hulgas võimaldab see ligipääsu arvuti BIOSile ning virtuaalse järjestikpordi kaudu serial konsoolile (st operatsioonisüsteemile).<br /> <br /> ===Võrgutopoloogia===<br /> <br /> _____<br /> 195.80.35.1 | | ülikooli võrguseade<br /> ----------------------------------------------|----------------------------------------------| |<br /> | |_____|<br /> | | 172.17.35.1<br /> | 195.80.35.96 |<br /> | 2001:bb8:2002:2300:7231:40ff:fe03:5128 | <br /> _____ __|__ |<br /> | | | | |<br /> | F | | V | | <br /> |_____| at-dom0.ims |_____| fw.ims |<br /> | os: 172.17.35.21 | 172.17.35.18 |<br /> | 2001:bb8:2002:2300:21e:67ff:fe03:c3c0 | 2001:bb8:2002:2300:7221:17ff:fe03:5018 |<br /> | impi: 172.17.35.20 | |<br /> --|-------------------------------|-------------------|-----------------------|-------------------------|------ <br /> __|__ __|__<br /> | F | | V |<br /> |_____| |_____|<br /> <br /> varundus.ims eap.ims<br /> os: 172.17.35.19 172.17.35.22<br /> 2001:bb8:2002:2300:21e:67ff:fe03:a0f9 2001:bb8:2002:2300:7221:17ff:fe03:5022<br /> ipmi: 172.17.35.5<br /> <br /> kus<br /> <br /> * at-dom0.ims - füüsiline virtualiseerimise arvuti<br /> * varundus.ims - füüsiline varunduse arvuti<br /> * fw.ims (fw.ims.ut.ee) - virtuaalne arvuti<br /> * eap.ims - virtuaalne arvuti<br /> <br /> Füüsilistel arvutitel on lisaks operatsioonisüsteemi ip aadressile ka füüsilise riistvara kaughalduse ipmi aadress.<br /> <br /> ===Plokkseadmete haldamine===<br /> <br /> Plokkseadmete haldamiseks kasutatakse mdadm ja LVM tarkvara. Mõlemas füüsilises arvutis töötavad neli samade parameetritega kõvaketast on ühendatud RAID massiividesse; RAID ressurssi hallatakse edasi LVM abil kasutamiseks failisüsteemide ja saaleala jaoks.<br /> <br /> ===Virtualiseerimine===<br /> <br /> Efektiivsemaks ja paindlikumaks riistavaralise ressursi kasutamiseks on teenusserverid eap.ims ja fw.ims juurutatud virtuaalsete arvutitena. Neile saab kasutamiseks anda sobiva hulga protsessori, mälu, plokkseadme ja võrguressurssi. Projektis kasutatakse XEN virtualiseerimise tarkvara, mille kasutamist on kirjeldatud nt aadressidel<br /> <br /> * http://www.auul.pri.ee/wiki/Xen_ja_Debian_Squeeze<br /> * http://kuutorvaja.eenet.ee/wiki/Unix_keskkonna_administreerimine#Virtualiseerimine<br /> <br /> ====XEN host====<br /> <br /> XEN hostile vastav operatsioonisüsteemi eksemplar töötab füüsilisel riistvaral ja selle seest tõimub virtuaalsete arvutite juhtimine. Kui välja arvata XEN hosti alglaaduri seadistused ja mõned virtualiseerimisega seotud protsessid on tegu tavalise Debian Squeeze operatsioonisüsteemiga. <br /> <br /> ====XEN guest====<br /> <br /> XEN guestid on virtuaalsed operatsioonisüsteemid, mis töötavad XEN hosti kontrolli all ja mis kasutavad XEN hostist neile eraldatud ressursse.<br /> <br /> ====Virtuaalserverid====<br /> <br /> at-dom0.ims arvutil töötavad kaks virtuaalset arvutit<br /> <br /> * eap.ims - eth0 - 172.17.35.22, 2001:bb8:2002:2300:7221:17ff:fe03:5022/64<br /> * fw.ims -<br /> <br /> ===eap.ims===<br /> <br /> * PostgreSQL andmebaas<br /> <br /> WAL logid salvestatakse iga 30 minuti järel RAID1 (redundantne) kõvaketastele (andmebaasi serveril)<br /> <br /> ===fw.ims===<br /> <br /> * PostgreSQL andmebaas<br /> * Veebiserver<br /> <br /> ===varundus.ims - varundusserver===<br /> <br /> Full backup: kord nädalas nublu.chem.ut.ee 2-le eraldi kõvakettale (mitteredundantsed), säilitatakse 4-5 viimast täiskoopiat.<br /> <br /> Full backupi ligikaudne maht (24.01.2011): 35 GB<br /> <br /> <br /> Iga päeva WAL logid (säilitatakse kahe full backupi vahel tekkinud WAL logid (nädala WAL logide ligikaudne maht (24.01.2011): 18 GB<br /> <br /> Tarmo virtuaalserverist hetkel backuppi ei tehta.<br /> <br /> ====Nublu====<br /> <br /> ====Raamistik====<br /> <br /> ===Monitooring===<br /> <br /> TODO<br /> <br /> ===Kasulikud lisamaterjalid===<br /> <br /> * http://www.auul.pri.ee/wiki/NUT_tarkvara_kasutamine_Debian_Squeeze_operatsioonis%C3%BCsteemiga<br /> * http://www.auul.pri.ee/wiki/EMC_Networker_client<br /> * http://www.auul.pri.ee/wiki/Tarkvaralise_mdadm_RAID_kasutamine_operatsioonis%C3%BCsteemiga_Debian_Squeeze</div> Imreoolberg https://ims.ut.ee/index.php?title=Eab_infra&diff=8919 Eab infra 2011-11-01T21:35:06Z <p>Imreoolberg: </p> <hr /> <div>===Sissejuhatus===<br /> <br /> Käesoleva teksti eesmärgiks on kirjeldada EAP projekti juures toimuvat riistvara, võrgu, operatsioonisüsteemi keskkonna ja rakendustarkvara kasutamist.<br /> <br /> ===Riistvara===<br /> <br /> Projektis kasutatakse sellist riistavara<br /> <br /> * Powerware 5115 UPS<br /> * 2 x S3420GP emaplaadiga Ordi arvutid<br /> * mõlemad arvutid sisaldavad 4 x 2 TB kõvakettaid<br /> * generic kohtvõrgu kommutaator<br /> <br /> ===Tarkvara===<br /> <br /> Projekti arvutites kasutatakse järgmist tarkvara<br /> <br /> * Debian Squeeze v. 6 64bit operatsioonisüsteem<br /> * XEN v. 4 virtualiseerimise tarkvara<br /> * Apache veebiserver<br /> * PostgreSQL andmebaas<br /> * Zabbix monitooringutarkvara<br /> * OpenVPN kaugligipääsu tarkvara<br /> * rsnapshot ja EMC Networker varundustarkvara<br /> * plokkseadmete haldamiseks mdadm ja LVM tarkvara<br /> <br /> ===Riistvara kaughaldus===<br /> <br /> Riistvaraliste arvutite kaughalduseks kasutatakse IMPI protokolli onboard BMC kontrolliriga suhtlemiseks. Muu hulgas võimaldab see ligipääsu arvuti BIOSile ning virtuaalse järjestikpordi kaudu serial konsoolile (st operatsioonisüsteemile).<br /> <br /> ===Võrgutopoloogia===<br /> <br /> _____<br /> 195.80.35.1 | | ülikooli võrguseade<br /> ----------------------|----------------------------------------------| |<br /> | |_____|<br /> | | 172.17.35.1<br /> _____ __|__ 195.80.35.96 |<br /> | F | | V | | <br /> |_____| at-dom0.ims |_____| fw.ims |<br /> | os: 172.17.35.21 | 172.17.35.18 |<br /> | impi: 172.17.35.20 | |<br /> --|---------------------------|----------------------|------------------|-------|------<br /> __|__ __|__<br /> | F | | V |<br /> |_____| |_____|<br /> <br /> varundus.ims eap.ims<br /> os: 172.17.35.19 172.17.35.22<br /> ipmi: 172.17.35.5<br /> <br /> kus<br /> <br /> * at-dom0.ims - füüsiline virtualiseerimise arvuti<br /> * varundus.ims - füüsiline varunduse arvuti<br /> * fw.ims (fw.ims.ut.ee) - virtuaalne arvuti<br /> * eap.ims - virtuaalne arvuti<br /> <br /> Füüsilistel arvutitel on lisaks operatsioonisüsteemi ip aadressile ka füüsilise riistvara kaughalduse ipmi aadress.<br /> <br /> ===Plokkseadmete haldamine===<br /> <br /> Plokkseadmete haldamiseks kasutatakse mdadm ja LVM tarkvara. Mõlemas füüsilises arvutis töötavad neli samade parameetritega kõvaketast on ühendatud RAID massiividesse; RAID ressurssi hallatakse edasi LVM abil kasutamiseks failisüsteemide ja saaleala jaoks.<br /> <br /> ===Virtualiseerimine===<br /> <br /> Efektiivsemaks ja paindlikumaks riistavaralise ressursi kasutamiseks on teenusserverid eap.ims ja fw.ims juurutatud virtuaalsete arvutitena. Neile saab kasutamiseks anda sobiva hulga protsessori, mälu, plokkseadme ja võrguressurssi. Projektis kasutatakse XEN virtualiseerimise tarkvara, mille kasutamist on kirjeldatud nt aadressidel<br /> <br /> * http://www.auul.pri.ee/wiki/Xen_ja_Debian_Squeeze<br /> * http://kuutorvaja.eenet.ee/wiki/Unix_keskkonna_administreerimine#Virtualiseerimine<br /> <br /> ====XEN host====<br /> <br /> XEN hostile vastav operatsioonisüsteemi eksemplar töötab füüsilisel riistvaral ja selle seest tõimub virtuaalsete arvutite juhtimine. Kui välja arvata XEN hosti alglaaduri seadistused ja mõned virtualiseerimisega seotud protsessid on tegu tavalise Debian Squeeze operatsioonisüsteemiga. <br /> <br /> ====XEN guest====<br /> <br /> XEN guestid on virtuaalsed operatsioonisüsteemid, mis töötavad XEN hosti kontrolli all ja mis kasutavad XEN hostist neile eraldatud ressursse.<br /> <br /> ====Virtuaalserverid====<br /> <br /> at-dom0.ims arvutil töötavad kaks virtuaalset arvutit<br /> <br /> * eap.ims - eth0 - 172.17.35.22, 2001:bb8:2002:2300:7221:17ff:fe03:5022/64<br /> * fw.ims -<br /> <br /> ===eap.ims===<br /> <br /> * PostgreSQL andmebaas<br /> <br /> WAL logid salvestatakse iga 30 minuti järel RAID1 (redundantne) kõvaketastele (andmebaasi serveril)<br /> <br /> ===fw.ims===<br /> <br /> * PostgreSQL andmebaas<br /> * Veebiserver<br /> <br /> ===varundus.ims - varundusserver===<br /> <br /> Full backup: kord nädalas nublu.chem.ut.ee 2-le eraldi kõvakettale (mitteredundantsed), säilitatakse 4-5 viimast täiskoopiat.<br /> <br /> Full backupi ligikaudne maht (24.01.2011): 35 GB<br /> <br /> <br /> Iga päeva WAL logid (säilitatakse kahe full backupi vahel tekkinud WAL logid (nädala WAL logide ligikaudne maht (24.01.2011): 18 GB<br /> <br /> Tarmo virtuaalserverist hetkel backuppi ei tehta.<br /> <br /> ====Nublu====<br /> <br /> ====Raamistik====<br /> <br /> ===Monitooring===<br /> <br /> TODO<br /> <br /> ===Kasulikud lisamaterjalid===<br /> <br /> * http://www.auul.pri.ee/wiki/NUT_tarkvara_kasutamine_Debian_Squeeze_operatsioonis%C3%BCsteemiga<br /> * http://www.auul.pri.ee/wiki/EMC_Networker_client<br /> * http://www.auul.pri.ee/wiki/Tarkvaralise_mdadm_RAID_kasutamine_operatsioonis%C3%BCsteemiga_Debian_Squeeze</div> Imreoolberg https://ims.ut.ee/index.php?title=Eab_infra&diff=8918 Eab infra 2011-11-01T21:34:05Z <p>Imreoolberg: /* Võrgutopoloogia */</p> <hr /> <div>===Sissejuhatus===<br /> <br /> Käesoleva teksti eesmärgiks on kirjeldada EAP projekti juures toimuvat riistvara, võrgu, operatsioonisüsteemi keskkonna ja rakendustarkvara kasutamist.<br /> <br /> ===Riistvara===<br /> <br /> Projektis kasutatakse sellist riistavara<br /> <br /> * Powerware 5115 UPS<br /> * 2 x S3420GP emaplaadiga Ordi arvutid<br /> * mõlemad arvutid sisaldavad 4 x 2 TB kõvakettaid<br /> * generic kohtvõrgu kommutaator<br /> <br /> ===Tarkvara===<br /> <br /> Projekti arvutites kasutatakse järgmist tarkvara<br /> <br /> * Debian Squeeze v. 6 64bit operatsioonisüsteem<br /> * XEN v. 4 virtualiseerimise tarkvara<br /> * Apache veebiserver<br /> * PostgreSQL andmebaas<br /> * Zabbix monitooringutarkvara<br /> * OpenVPN kaugligipääsu tarkvara<br /> * rsnapshot ja EMC Networker varundustarkvara<br /> * plokkseadmete haldamiseks mdadm ja LVM tarkvara<br /> <br /> ===Riistvara kaughaldus===<br /> <br /> Riistvaraliste arvutite kaughalduseks kasutatakse IMPI protokolli onboard BMC kontrolliriga suhtlemiseks. Muu hulgas võimaldab see ligipääsu arvuti BIOSile ning virtuaalse järjestikpordi kaudu serial konsoolile (st operatsioonisüsteemile).<br /> <br /> ===Võrgutopoloogia===<br /> <br /> _____<br /> 195.80.35.1 | | ülikooli võrguseade<br /> ----------------------|----------------------------------------------| |<br /> | |_____|<br /> | | 172.17.35.1<br /> _____ __|__ 195.80.35.96 |<br /> | F | | V | | <br /> |_____| at-dom0.ims |_____| fw.ims |<br /> | os: 172.17.35.21 | 172.17.35.18 |<br /> | impi: 172.17.35.20 | |<br /> --|---------------------------|----------------------|------------------|-------|------<br /> __|__ __|__<br /> | F | | V |<br /> |_____| |_____|<br /> <br /> varundus.ims eap.ims<br /> os: 172.17.35.19 172.17.35.22<br /> ipmi: 172.17.35.5<br /> <br /> kus<br /> <br /> * at-dom0.ims - füüsiline virtualiseerimise arvuti<br /> * varundus.ims - füüsiline varunduse arvuti<br /> * fw.ims (fw.ims.ut.ee) - virtuaalne arvuti<br /> * eap.ims - virtuaalne arvuti<br /> <br /> Füüsilistel arvutitel on lisaks operatsioonisüsteemi ip aadressile ka füüsilise riistvara kaughalduse ipmi aadress.<br /> <br /> ===Plokkseadmete haldamine===<br /> <br /> Plokkseadmete haldamiseks kasutatakse mdadm ja LVM tarkvara. Mõlemas füüsilises arvutis töötavad neli samade parameetritega kõvaketast on ühendatud RAID massiividesse; RAID ressurssi hallatakse edasi LVM abil kasutamiseks failisüsteemide ja saaleala jaoks.<br /> <br /> ===Virtualiseerimine===<br /> <br /> Efektiivsemaks ja paindlikumaks riistavaralise ressursi kasutamiseks on teenusserverid eap.ims ja fw.ims juurutatud virtuaalsete arvutitena. Neile saab kasutamiseks anda sobiva hulga protsessori, mälu, plokkseadme ja võrguressurssi. Projektis kasutatakse XEN virtualiseerimise tarkvara, mille kasutamist on kirjeldatud nt aadressidel<br /> <br /> * http://www.auul.pri.ee/wiki/Xen_ja_Debian_Squeeze<br /> * http://kuutorvaja.eenet.ee/wiki/Unix_keskkonna_administreerimine#Virtualiseerimine<br /> <br /> ====XEN host====<br /> <br /> XEN hostile vastav operatsioonisüsteemi eksemplar töötab füüsilisel riistvaral ja selle seest tõimub virtuaalsete arvutite juhtimine. Kui välja arvata XEN hosti alglaaduri seadistused ja mõned virtualiseerimisega seotud protsessid on tegu tavalise Debian Squeeze operatsioonisüsteemiga. <br /> <br /> ====XEN guest====<br /> <br /> XEN guestid on virtuaalsed operatsioonisüsteemid, mis töötavad XEN hosti kontrolli all ja mis kasutavad XEN hostist neile eraldatud ressursse.<br /> <br /> ====Virtuaalserverid====<br /> <br /> at-dom0.ims arvutil töötavad kaks virtuaalset arvutit<br /> <br /> * eap.ims - eth0 - 172.17.35.22, 2001:bb8:2002:2300:7221:17ff:fe03:5022/64<br /> * fw.ims -<br /> <br /> ===Teenusserverid===<br /> <br /> ====eap.ims====<br /> <br /> * PostgreSQL andmebaas<br /> <br /> ====fw.ims====<br /> <br /> * PostgreSQL andmebaas<br /> * Veebiserver<br /> <br /> ===Varundamine===<br /> <br /> Full backup: kord nädalas nublu.chem.ut.ee 2-le eraldi kõvakettale (mitteredundantsed), säilitatakse 4-5 viimast täiskoopiat.<br /> <br /> Full backupi ligikaudne maht (24.01.2011): 35 GB<br /> <br /> <br /> Iga päeva WAL logid (säilitatakse kahe full backupi vahel tekkinud WAL logid (nädala WAL logide ligikaudne maht (24.01.2011): 18 GB<br /> <br /> Tarmo virtuaalserverist hetkel backuppi ei tehta.<br /> <br /> ====Nublu====<br /> <br /> ====Raamistik====<br /> <br /> ===Monitooring===<br /> <br /> TODO<br /> <br /> ===Kasulikud lisamaterjalid===<br /> <br /> * http://www.auul.pri.ee/wiki/NUT_tarkvara_kasutamine_Debian_Squeeze_operatsioonis%C3%BCsteemiga<br /> * http://www.auul.pri.ee/wiki/EMC_Networker_client<br /> * http://www.auul.pri.ee/wiki/Tarkvaralise_mdadm_RAID_kasutamine_operatsioonis%C3%BCsteemiga_Debian_Squeeze</div> Imreoolberg https://ims.ut.ee/index.php?title=Eab_infra&diff=8917 Eab infra 2011-11-01T21:30:06Z <p>Imreoolberg: /* Plokkseadmete haldamine */</p> <hr /> <div>===Sissejuhatus===<br /> <br /> Käesoleva teksti eesmärgiks on kirjeldada EAP projekti juures toimuvat riistvara, võrgu, operatsioonisüsteemi keskkonna ja rakendustarkvara kasutamist.<br /> <br /> ===Riistvara===<br /> <br /> Projektis kasutatakse sellist riistavara<br /> <br /> * Powerware 5115 UPS<br /> * 2 x S3420GP emaplaadiga Ordi arvutid<br /> * mõlemad arvutid sisaldavad 4 x 2 TB kõvakettaid<br /> * generic kohtvõrgu kommutaator<br /> <br /> ===Tarkvara===<br /> <br /> Projekti arvutites kasutatakse järgmist tarkvara<br /> <br /> * Debian Squeeze v. 6 64bit operatsioonisüsteem<br /> * XEN v. 4 virtualiseerimise tarkvara<br /> * Apache veebiserver<br /> * PostgreSQL andmebaas<br /> * Zabbix monitooringutarkvara<br /> * OpenVPN kaugligipääsu tarkvara<br /> * rsnapshot ja EMC Networker varundustarkvara<br /> * plokkseadmete haldamiseks mdadm ja LVM tarkvara<br /> <br /> ===Riistvara kaughaldus===<br /> <br /> Riistvaraliste arvutite kaughalduseks kasutatakse IMPI protokolli onboard BMC kontrolliriga suhtlemiseks. Muu hulgas võimaldab see ligipääsu arvuti BIOSile ning virtuaalse järjestikpordi kaudu serial konsoolile (st operatsioonisüsteemile).<br /> <br /> ===Võrgutopoloogia===<br /> <br /> _____<br /> 195.80.35.1 | | ülikooli võrguseade<br /> ------------------|----------------------------------------------| |<br /> | |_____|<br /> | | 172.17.35.1<br /> _____ __|__ 195.80.35.96 |<br /> | F | | V | | <br /> |_____| at-dom0.ims |_____| fw.ims |<br /> | 172.17.35.21 | 172.17.35.18 |<br /> | | |<br /> --|-----------------------|----------------------|------------------|-------|------<br /> __|__ __|__<br /> | F | | V |<br /> |_____| |_____|<br /> <br /> varundus.ims eap.ims<br /> 172.17.35.19 172.17.35.22<br /> <br /> kus<br /> <br /> * at-dom0.ims - füüsiline virtualiseerimise arvuti<br /> * varundus.ims - füüsiline varunduse arvuti<br /> * fw.ims (fw.ims.ut.ee) - virtuaalne arvuti<br /> * eap.ims - virtuaalne arvuti<br /> <br /> WAL logid salvestatakse iga 30 minuti järel RAID1 (redundantne) kõvaketastele (andmebaasi serveril)<br /> <br /> ===Plokkseadmete haldamine===<br /> <br /> Plokkseadmete haldamiseks kasutatakse mdadm ja LVM tarkvara. Mõlemas füüsilises arvutis töötavad neli samade parameetritega kõvaketast on ühendatud RAID massiividesse; RAID ressurssi hallatakse edasi LVM abil kasutamiseks failisüsteemide ja saaleala jaoks.<br /> <br /> ===Virtualiseerimine===<br /> <br /> Efektiivsemaks ja paindlikumaks riistavaralise ressursi kasutamiseks on teenusserverid eap.ims ja fw.ims juurutatud virtuaalsete arvutitena. Neile saab kasutamiseks anda sobiva hulga protsessori, mälu, plokkseadme ja võrguressurssi. Projektis kasutatakse XEN virtualiseerimise tarkvara, mille kasutamist on kirjeldatud nt aadressidel<br /> <br /> * http://www.auul.pri.ee/wiki/Xen_ja_Debian_Squeeze<br /> * http://kuutorvaja.eenet.ee/wiki/Unix_keskkonna_administreerimine#Virtualiseerimine<br /> <br /> ====XEN host====<br /> <br /> XEN hostile vastav operatsioonisüsteemi eksemplar töötab füüsilisel riistvaral ja selle seest tõimub virtuaalsete arvutite juhtimine. Kui välja arvata XEN hosti alglaaduri seadistused ja mõned virtualiseerimisega seotud protsessid on tegu tavalise Debian Squeeze operatsioonisüsteemiga. <br /> <br /> ====XEN guest====<br /> <br /> XEN guestid on virtuaalsed operatsioonisüsteemid, mis töötavad XEN hosti kontrolli all ja mis kasutavad XEN hostist neile eraldatud ressursse.<br /> <br /> ====Virtuaalserverid====<br /> <br /> at-dom0.ims arvutil töötavad kaks virtuaalset arvutit<br /> <br /> * eap.ims - eth0 - 172.17.35.22, 2001:bb8:2002:2300:7221:17ff:fe03:5022/64<br /> * fw.ims -<br /> <br /> ===Teenusserverid===<br /> <br /> ====eap.ims====<br /> <br /> * PostgreSQL andmebaas<br /> <br /> ====fw.ims====<br /> <br /> * PostgreSQL andmebaas<br /> * Veebiserver<br /> <br /> ===Varundamine===<br /> <br /> Full backup: kord nädalas nublu.chem.ut.ee 2-le eraldi kõvakettale (mitteredundantsed), säilitatakse 4-5 viimast täiskoopiat.<br /> <br /> Full backupi ligikaudne maht (24.01.2011): 35 GB<br /> <br /> <br /> Iga päeva WAL logid (säilitatakse kahe full backupi vahel tekkinud WAL logid (nädala WAL logide ligikaudne maht (24.01.2011): 18 GB<br /> <br /> Tarmo virtuaalserverist hetkel backuppi ei tehta.<br /> <br /> ====Nublu====<br /> <br /> ====Raamistik====<br /> <br /> ===Monitooring===<br /> <br /> TODO<br /> <br /> ===Kasulikud lisamaterjalid===<br /> <br /> * http://www.auul.pri.ee/wiki/NUT_tarkvara_kasutamine_Debian_Squeeze_operatsioonis%C3%BCsteemiga<br /> * http://www.auul.pri.ee/wiki/EMC_Networker_client<br /> * http://www.auul.pri.ee/wiki/Tarkvaralise_mdadm_RAID_kasutamine_operatsioonis%C3%BCsteemiga_Debian_Squeeze</div> Imreoolberg https://ims.ut.ee/index.php?title=Eab_infra&diff=8916 Eab infra 2011-11-01T21:27:15Z <p>Imreoolberg: /* Võrgutopoloogia */</p> <hr /> <div>===Sissejuhatus===<br /> <br /> Käesoleva teksti eesmärgiks on kirjeldada EAP projekti juures toimuvat riistvara, võrgu, operatsioonisüsteemi keskkonna ja rakendustarkvara kasutamist.<br /> <br /> ===Riistvara===<br /> <br /> Projektis kasutatakse sellist riistavara<br /> <br /> * Powerware 5115 UPS<br /> * 2 x S3420GP emaplaadiga Ordi arvutid<br /> * mõlemad arvutid sisaldavad 4 x 2 TB kõvakettaid<br /> * generic kohtvõrgu kommutaator<br /> <br /> ===Tarkvara===<br /> <br /> Projekti arvutites kasutatakse järgmist tarkvara<br /> <br /> * Debian Squeeze v. 6 64bit operatsioonisüsteem<br /> * XEN v. 4 virtualiseerimise tarkvara<br /> * Apache veebiserver<br /> * PostgreSQL andmebaas<br /> * Zabbix monitooringutarkvara<br /> * OpenVPN kaugligipääsu tarkvara<br /> * rsnapshot ja EMC Networker varundustarkvara<br /> * plokkseadmete haldamiseks mdadm ja LVM tarkvara<br /> <br /> ===Riistvara kaughaldus===<br /> <br /> Riistvaraliste arvutite kaughalduseks kasutatakse IMPI protokolli onboard BMC kontrolliriga suhtlemiseks. Muu hulgas võimaldab see ligipääsu arvuti BIOSile ning virtuaalse järjestikpordi kaudu serial konsoolile (st operatsioonisüsteemile).<br /> <br /> ===Võrgutopoloogia===<br /> <br /> _____<br /> 195.80.35.1 | | ülikooli võrguseade<br /> ------------------|----------------------------------------------| |<br /> | |_____|<br /> | | 172.17.35.1<br /> _____ __|__ 195.80.35.96 |<br /> | F | | V | | <br /> |_____| at-dom0.ims |_____| fw.ims |<br /> | 172.17.35.21 | 172.17.35.18 |<br /> | | |<br /> --|-----------------------|----------------------|------------------|-------|------<br /> __|__ __|__<br /> | F | | V |<br /> |_____| |_____|<br /> <br /> varundus.ims eap.ims<br /> 172.17.35.19 172.17.35.22<br /> <br /> kus<br /> <br /> * at-dom0.ims - füüsiline virtualiseerimise arvuti<br /> * varundus.ims - füüsiline varunduse arvuti<br /> * fw.ims (fw.ims.ut.ee) - virtuaalne arvuti<br /> * eap.ims - virtuaalne arvuti<br /> <br /> WAL logid salvestatakse iga 30 minuti järel RAID1 (redundantne) kõvaketastele (andmebaasi serveril)<br /> <br /> ===Plokkseadmete haldamine===<br /> <br /> Plokkseadmete haldamiseks kasutatakse mdadm ja LVM tarkvara. Arvutites töötavad neli samade parameetritega kõvaketast on ühendatud selliselt RAID massiividesse ...<br /> <br /> ===Virtualiseerimine===<br /> <br /> Efektiivsemaks ja paindlikumaks riistavaralise ressursi kasutamiseks on teenusserverid eap.ims ja fw.ims juurutatud virtuaalsete arvutitena. Neile saab kasutamiseks anda sobiva hulga protsessori, mälu, plokkseadme ja võrguressurssi. Projektis kasutatakse XEN virtualiseerimise tarkvara, mille kasutamist on kirjeldatud nt aadressidel<br /> <br /> * http://www.auul.pri.ee/wiki/Xen_ja_Debian_Squeeze<br /> * http://kuutorvaja.eenet.ee/wiki/Unix_keskkonna_administreerimine#Virtualiseerimine<br /> <br /> ====XEN host====<br /> <br /> XEN hostile vastav operatsioonisüsteemi eksemplar töötab füüsilisel riistvaral ja selle seest tõimub virtuaalsete arvutite juhtimine. Kui välja arvata XEN hosti alglaaduri seadistused ja mõned virtualiseerimisega seotud protsessid on tegu tavalise Debian Squeeze operatsioonisüsteemiga. <br /> <br /> ====XEN guest====<br /> <br /> XEN guestid on virtuaalsed operatsioonisüsteemid, mis töötavad XEN hosti kontrolli all ja mis kasutavad XEN hostist neile eraldatud ressursse.<br /> <br /> ====Virtuaalserverid====<br /> <br /> at-dom0.ims arvutil töötavad kaks virtuaalset arvutit<br /> <br /> * eap.ims - eth0 - 172.17.35.22, 2001:bb8:2002:2300:7221:17ff:fe03:5022/64<br /> * fw.ims -<br /> <br /> ===Teenusserverid===<br /> <br /> ====eap.ims====<br /> <br /> * PostgreSQL andmebaas<br /> <br /> ====fw.ims====<br /> <br /> * PostgreSQL andmebaas<br /> * Veebiserver<br /> <br /> ===Varundamine===<br /> <br /> Full backup: kord nädalas nublu.chem.ut.ee 2-le eraldi kõvakettale (mitteredundantsed), säilitatakse 4-5 viimast täiskoopiat.<br /> <br /> Full backupi ligikaudne maht (24.01.2011): 35 GB<br /> <br /> <br /> Iga päeva WAL logid (säilitatakse kahe full backupi vahel tekkinud WAL logid (nädala WAL logide ligikaudne maht (24.01.2011): 18 GB<br /> <br /> Tarmo virtuaalserverist hetkel backuppi ei tehta.<br /> <br /> ====Nublu====<br /> <br /> ====Raamistik====<br /> <br /> ===Monitooring===<br /> <br /> TODO<br /> <br /> ===Kasulikud lisamaterjalid===<br /> <br /> * http://www.auul.pri.ee/wiki/NUT_tarkvara_kasutamine_Debian_Squeeze_operatsioonis%C3%BCsteemiga<br /> * http://www.auul.pri.ee/wiki/EMC_Networker_client<br /> * http://www.auul.pri.ee/wiki/Tarkvaralise_mdadm_RAID_kasutamine_operatsioonis%C3%BCsteemiga_Debian_Squeeze</div> Imreoolberg https://ims.ut.ee/index.php?title=Eab_infra&diff=8915 Eab infra 2011-11-01T21:26:25Z <p>Imreoolberg: /* Võrgutopoloogia */</p> <hr /> <div>===Sissejuhatus===<br /> <br /> Käesoleva teksti eesmärgiks on kirjeldada EAP projekti juures toimuvat riistvara, võrgu, operatsioonisüsteemi keskkonna ja rakendustarkvara kasutamist.<br /> <br /> ===Riistvara===<br /> <br /> Projektis kasutatakse sellist riistavara<br /> <br /> * Powerware 5115 UPS<br /> * 2 x S3420GP emaplaadiga Ordi arvutid<br /> * mõlemad arvutid sisaldavad 4 x 2 TB kõvakettaid<br /> * generic kohtvõrgu kommutaator<br /> <br /> ===Tarkvara===<br /> <br /> Projekti arvutites kasutatakse järgmist tarkvara<br /> <br /> * Debian Squeeze v. 6 64bit operatsioonisüsteem<br /> * XEN v. 4 virtualiseerimise tarkvara<br /> * Apache veebiserver<br /> * PostgreSQL andmebaas<br /> * Zabbix monitooringutarkvara<br /> * OpenVPN kaugligipääsu tarkvara<br /> * rsnapshot ja EMC Networker varundustarkvara<br /> * plokkseadmete haldamiseks mdadm ja LVM tarkvara<br /> <br /> ===Riistvara kaughaldus===<br /> <br /> Riistvaraliste arvutite kaughalduseks kasutatakse IMPI protokolli onboard BMC kontrolliriga suhtlemiseks. Muu hulgas võimaldab see ligipääsu arvuti BIOSile ning virtuaalse järjestikpordi kaudu serial konsoolile (st operatsioonisüsteemile).<br /> <br /> ===Võrgutopoloogia===<br /> <br /> _____<br /> 195.80.35.1 | |<br /> ------------------|----------------------------------------------| |<br /> | |_____|<br /> | | 172.17.35.1<br /> _____ __|__ 195.80.35.96 |<br /> | | | | | <br /> |_____| at-dom0.ims |_____| fw.ims |<br /> | 172.17.35.21 | 172.17.35.18 |<br /> | | |<br /> --|-----------------------|----------------------|------------------|-------|------<br /> __|__ __|__<br /> | | | |<br /> |_____| |_____|<br /> <br /> varundus.ims eap.ims<br /> 172.17.35.19 172.17.35.22<br /> <br /> kus<br /> <br /> * at-dom0.ims - füüsiline virtualiseerimise arvuti<br /> * varundus.ims - füüsiline varunduse arvuti<br /> * fw.ims (fw.ims.ut.ee) - virtuaalne arvuti<br /> * eap.ims - virtuaalne arvuti<br /> <br /> WAL logid salvestatakse iga 30 minuti järel RAID1 (redundantne) kõvaketastele (andmebaasi serveril)<br /> <br /> ===Plokkseadmete haldamine===<br /> <br /> Plokkseadmete haldamiseks kasutatakse mdadm ja LVM tarkvara. Arvutites töötavad neli samade parameetritega kõvaketast on ühendatud selliselt RAID massiividesse ...<br /> <br /> ===Virtualiseerimine===<br /> <br /> Efektiivsemaks ja paindlikumaks riistavaralise ressursi kasutamiseks on teenusserverid eap.ims ja fw.ims juurutatud virtuaalsete arvutitena. Neile saab kasutamiseks anda sobiva hulga protsessori, mälu, plokkseadme ja võrguressurssi. Projektis kasutatakse XEN virtualiseerimise tarkvara, mille kasutamist on kirjeldatud nt aadressidel<br /> <br /> * http://www.auul.pri.ee/wiki/Xen_ja_Debian_Squeeze<br /> * http://kuutorvaja.eenet.ee/wiki/Unix_keskkonna_administreerimine#Virtualiseerimine<br /> <br /> ====XEN host====<br /> <br /> XEN hostile vastav operatsioonisüsteemi eksemplar töötab füüsilisel riistvaral ja selle seest tõimub virtuaalsete arvutite juhtimine. Kui välja arvata XEN hosti alglaaduri seadistused ja mõned virtualiseerimisega seotud protsessid on tegu tavalise Debian Squeeze operatsioonisüsteemiga. <br /> <br /> ====XEN guest====<br /> <br /> XEN guestid on virtuaalsed operatsioonisüsteemid, mis töötavad XEN hosti kontrolli all ja mis kasutavad XEN hostist neile eraldatud ressursse.<br /> <br /> ====Virtuaalserverid====<br /> <br /> at-dom0.ims arvutil töötavad kaks virtuaalset arvutit<br /> <br /> * eap.ims - eth0 - 172.17.35.22, 2001:bb8:2002:2300:7221:17ff:fe03:5022/64<br /> * fw.ims -<br /> <br /> ===Teenusserverid===<br /> <br /> ====eap.ims====<br /> <br /> * PostgreSQL andmebaas<br /> <br /> ====fw.ims====<br /> <br /> * PostgreSQL andmebaas<br /> * Veebiserver<br /> <br /> ===Varundamine===<br /> <br /> Full backup: kord nädalas nublu.chem.ut.ee 2-le eraldi kõvakettale (mitteredundantsed), säilitatakse 4-5 viimast täiskoopiat.<br /> <br /> Full backupi ligikaudne maht (24.01.2011): 35 GB<br /> <br /> <br /> Iga päeva WAL logid (säilitatakse kahe full backupi vahel tekkinud WAL logid (nädala WAL logide ligikaudne maht (24.01.2011): 18 GB<br /> <br /> Tarmo virtuaalserverist hetkel backuppi ei tehta.<br /> <br /> ====Nublu====<br /> <br /> ====Raamistik====<br /> <br /> ===Monitooring===<br /> <br /> TODO<br /> <br /> ===Kasulikud lisamaterjalid===<br /> <br /> * http://www.auul.pri.ee/wiki/NUT_tarkvara_kasutamine_Debian_Squeeze_operatsioonis%C3%BCsteemiga<br /> * http://www.auul.pri.ee/wiki/EMC_Networker_client<br /> * http://www.auul.pri.ee/wiki/Tarkvaralise_mdadm_RAID_kasutamine_operatsioonis%C3%BCsteemiga_Debian_Squeeze</div> Imreoolberg https://ims.ut.ee/index.php?title=Eab_infra&diff=8914 Eab infra 2011-11-01T21:20:11Z <p>Imreoolberg: /* Plokkseadmete kasutamine */</p> <hr /> <div>===Sissejuhatus===<br /> <br /> Käesoleva teksti eesmärgiks on kirjeldada EAP projekti juures toimuvat riistvara, võrgu, operatsioonisüsteemi keskkonna ja rakendustarkvara kasutamist.<br /> <br /> ===Riistvara===<br /> <br /> Projektis kasutatakse sellist riistavara<br /> <br /> * Powerware 5115 UPS<br /> * 2 x S3420GP emaplaadiga Ordi arvutid<br /> * mõlemad arvutid sisaldavad 4 x 2 TB kõvakettaid<br /> * generic kohtvõrgu kommutaator<br /> <br /> ===Tarkvara===<br /> <br /> Projekti arvutites kasutatakse järgmist tarkvara<br /> <br /> * Debian Squeeze v. 6 64bit operatsioonisüsteem<br /> * XEN v. 4 virtualiseerimise tarkvara<br /> * Apache veebiserver<br /> * PostgreSQL andmebaas<br /> * Zabbix monitooringutarkvara<br /> * OpenVPN kaugligipääsu tarkvara<br /> * rsnapshot ja EMC Networker varundustarkvara<br /> * plokkseadmete haldamiseks mdadm ja LVM tarkvara<br /> <br /> ===Riistvara kaughaldus===<br /> <br /> Riistvaraliste arvutite kaughalduseks kasutatakse IMPI protokolli onboard BMC kontrolliriga suhtlemiseks. Muu hulgas võimaldab see ligipääsu arvuti BIOSile ning virtuaalse järjestikpordi kaudu serial konsoolile (st operatsioonisüsteemile).<br /> <br /> ===Võrgutopoloogia===<br /> <br /> _____<br /> 195.80.35.1 | |<br /> -------------|----------------------------------------------| |<br /> | |_____|<br /> | | 172.17.35.1<br /> __|__ 195.80.35.96 |<br /> | | fw.ims.ut.ee | <br /> |_____| |<br /> | 172.17.35.18 |<br /> | |<br /> ---------|----------------------|------------------|-------|------<br /> __|__ __|__<br /> | | | |<br /> |_____| |_____|<br /> <br /> .35.19 varundus .35.22 eap.ims<br /> <br /> WAL logid salvestatakse iga 30 minuti järel RAID1 (redundantne) kõvaketastele (andmebaasi serveril)<br /> <br /> ===Plokkseadmete haldamine===<br /> <br /> Plokkseadmete haldamiseks kasutatakse mdadm ja LVM tarkvara. Arvutites töötavad neli samade parameetritega kõvaketast on ühendatud selliselt RAID massiividesse ...<br /> <br /> ===Virtualiseerimine===<br /> <br /> Efektiivsemaks ja paindlikumaks riistavaralise ressursi kasutamiseks on teenusserverid eap.ims ja fw.ims juurutatud virtuaalsete arvutitena. Neile saab kasutamiseks anda sobiva hulga protsessori, mälu, plokkseadme ja võrguressurssi. Projektis kasutatakse XEN virtualiseerimise tarkvara, mille kasutamist on kirjeldatud nt aadressidel<br /> <br /> * http://www.auul.pri.ee/wiki/Xen_ja_Debian_Squeeze<br /> * http://kuutorvaja.eenet.ee/wiki/Unix_keskkonna_administreerimine#Virtualiseerimine<br /> <br /> ====XEN host====<br /> <br /> XEN hostile vastav operatsioonisüsteemi eksemplar töötab füüsilisel riistvaral ja selle seest tõimub virtuaalsete arvutite juhtimine. Kui välja arvata XEN hosti alglaaduri seadistused ja mõned virtualiseerimisega seotud protsessid on tegu tavalise Debian Squeeze operatsioonisüsteemiga. <br /> <br /> ====XEN guest====<br /> <br /> XEN guestid on virtuaalsed operatsioonisüsteemid, mis töötavad XEN hosti kontrolli all ja mis kasutavad XEN hostist neile eraldatud ressursse.<br /> <br /> ====Virtuaalserverid====<br /> <br /> at-dom0.ims arvutil töötavad kaks virtuaalset arvutit<br /> <br /> * eap.ims - eth0 - 172.17.35.22, 2001:bb8:2002:2300:7221:17ff:fe03:5022/64<br /> * fw.ims -<br /> <br /> ===Teenusserverid===<br /> <br /> ====eap.ims====<br /> <br /> * PostgreSQL andmebaas<br /> <br /> ====fw.ims====<br /> <br /> * PostgreSQL andmebaas<br /> * Veebiserver<br /> <br /> ===Varundamine===<br /> <br /> Full backup: kord nädalas nublu.chem.ut.ee 2-le eraldi kõvakettale (mitteredundantsed), säilitatakse 4-5 viimast täiskoopiat.<br /> <br /> Full backupi ligikaudne maht (24.01.2011): 35 GB<br /> <br /> <br /> Iga päeva WAL logid (säilitatakse kahe full backupi vahel tekkinud WAL logid (nädala WAL logide ligikaudne maht (24.01.2011): 18 GB<br /> <br /> Tarmo virtuaalserverist hetkel backuppi ei tehta.<br /> <br /> ====Nublu====<br /> <br /> ====Raamistik====<br /> <br /> ===Monitooring===<br /> <br /> TODO<br /> <br /> ===Kasulikud lisamaterjalid===<br /> <br /> * http://www.auul.pri.ee/wiki/NUT_tarkvara_kasutamine_Debian_Squeeze_operatsioonis%C3%BCsteemiga<br /> * http://www.auul.pri.ee/wiki/EMC_Networker_client<br /> * http://www.auul.pri.ee/wiki/Tarkvaralise_mdadm_RAID_kasutamine_operatsioonis%C3%BCsteemiga_Debian_Squeeze</div> Imreoolberg https://ims.ut.ee/index.php?title=Eab_infra&diff=8913 Eab infra 2011-11-01T21:19:46Z <p>Imreoolberg: /* Virtualiseerimine */</p> <hr /> <div>===Sissejuhatus===<br /> <br /> Käesoleva teksti eesmärgiks on kirjeldada EAP projekti juures toimuvat riistvara, võrgu, operatsioonisüsteemi keskkonna ja rakendustarkvara kasutamist.<br /> <br /> ===Riistvara===<br /> <br /> Projektis kasutatakse sellist riistavara<br /> <br /> * Powerware 5115 UPS<br /> * 2 x S3420GP emaplaadiga Ordi arvutid<br /> * mõlemad arvutid sisaldavad 4 x 2 TB kõvakettaid<br /> * generic kohtvõrgu kommutaator<br /> <br /> ===Tarkvara===<br /> <br /> Projekti arvutites kasutatakse järgmist tarkvara<br /> <br /> * Debian Squeeze v. 6 64bit operatsioonisüsteem<br /> * XEN v. 4 virtualiseerimise tarkvara<br /> * Apache veebiserver<br /> * PostgreSQL andmebaas<br /> * Zabbix monitooringutarkvara<br /> * OpenVPN kaugligipääsu tarkvara<br /> * rsnapshot ja EMC Networker varundustarkvara<br /> * plokkseadmete haldamiseks mdadm ja LVM tarkvara<br /> <br /> ===Riistvara kaughaldus===<br /> <br /> Riistvaraliste arvutite kaughalduseks kasutatakse IMPI protokolli onboard BMC kontrolliriga suhtlemiseks. Muu hulgas võimaldab see ligipääsu arvuti BIOSile ning virtuaalse järjestikpordi kaudu serial konsoolile (st operatsioonisüsteemile).<br /> <br /> ===Võrgutopoloogia===<br /> <br /> _____<br /> 195.80.35.1 | |<br /> -------------|----------------------------------------------| |<br /> | |_____|<br /> | | 172.17.35.1<br /> __|__ 195.80.35.96 |<br /> | | fw.ims.ut.ee | <br /> |_____| |<br /> | 172.17.35.18 |<br /> | |<br /> ---------|----------------------|------------------|-------|------<br /> __|__ __|__<br /> | | | |<br /> |_____| |_____|<br /> <br /> .35.19 varundus .35.22 eap.ims<br /> <br /> WAL logid salvestatakse iga 30 minuti järel RAID1 (redundantne) kõvaketastele (andmebaasi serveril)<br /> <br /> ===Plokkseadmete haldamine===<br /> <br /> Plokkseadmete haldamiseks kasutatakse mdadm ja LVM tarkvara. Arvutites töötavad neli samade parameetritega kõvaketast on ühendatud selliselt RAID massiividesse ...<br /> <br /> ===Virtualiseerimine===<br /> <br /> Efektiivsemaks ja paindlikumaks riistavaralise ressursi kasutamiseks on teenusserverid eap.ims ja fw.ims juurutatud virtuaalsete arvutitena. Neile saab kasutamiseks anda sobiva hulga protsessori, mälu, plokkseadme ja võrguressurssi. Projektis kasutatakse XEN virtualiseerimise tarkvara, mille kasutamist on kirjeldatud nt aadressidel<br /> <br /> * http://www.auul.pri.ee/wiki/Xen_ja_Debian_Squeeze<br /> * http://kuutorvaja.eenet.ee/wiki/Unix_keskkonna_administreerimine#Virtualiseerimine<br /> <br /> ====XEN host====<br /> <br /> XEN hostile vastav operatsioonisüsteemi eksemplar töötab füüsilisel riistvaral ja selle seest tõimub virtuaalsete arvutite juhtimine. Kui välja arvata XEN hosti alglaaduri seadistused ja mõned virtualiseerimisega seotud protsessid on tegu tavalise Debian Squeeze operatsioonisüsteemiga. <br /> <br /> ====XEN guest====<br /> <br /> XEN guestid on virtuaalsed operatsioonisüsteemid, mis töötavad XEN hosti kontrolli all ja mis kasutavad XEN hostist neile eraldatud ressursse.<br /> <br /> ====Plokkseadmete kasutamine====<br /> <br /> Arvutite lokaalseid kõvakettaid kasutatakse RAID lülitustes.<br /> <br /> ====Virtuaalserverid====<br /> <br /> at-dom0.ims arvutil töötavad kaks virtuaalset arvutit<br /> <br /> * eap.ims - eth0 - 172.17.35.22, 2001:bb8:2002:2300:7221:17ff:fe03:5022/64<br /> * fw.ims -<br /> <br /> ===Teenusserverid===<br /> <br /> ====eap.ims====<br /> <br /> * PostgreSQL andmebaas<br /> <br /> ====fw.ims====<br /> <br /> * PostgreSQL andmebaas<br /> * Veebiserver<br /> <br /> ===Varundamine===<br /> <br /> Full backup: kord nädalas nublu.chem.ut.ee 2-le eraldi kõvakettale (mitteredundantsed), säilitatakse 4-5 viimast täiskoopiat.<br /> <br /> Full backupi ligikaudne maht (24.01.2011): 35 GB<br /> <br /> <br /> Iga päeva WAL logid (säilitatakse kahe full backupi vahel tekkinud WAL logid (nädala WAL logide ligikaudne maht (24.01.2011): 18 GB<br /> <br /> Tarmo virtuaalserverist hetkel backuppi ei tehta.<br /> <br /> ====Nublu====<br /> <br /> ====Raamistik====<br /> <br /> ===Monitooring===<br /> <br /> TODO<br /> <br /> ===Kasulikud lisamaterjalid===<br /> <br /> * http://www.auul.pri.ee/wiki/NUT_tarkvara_kasutamine_Debian_Squeeze_operatsioonis%C3%BCsteemiga<br /> * http://www.auul.pri.ee/wiki/EMC_Networker_client<br /> * http://www.auul.pri.ee/wiki/Tarkvaralise_mdadm_RAID_kasutamine_operatsioonis%C3%BCsteemiga_Debian_Squeeze</div> Imreoolberg