Administrace komentářů

Ahoj, mé zkušenosti jsou malé. Měl jsem virtuály nasazeny v kvm a samotné vm byly v lvm. Takto jsem to provozoval delší dobu, ale jen pár strojů, protože to byl workaround na oracle licence. Provozoval jsem v tom aplikační server a testovací databázi.

Celkově mi nevyhovovalo používání LVM a snapshotů. Přišlo mi to nepřehledné a spíš to byl voser. Ze začátku jsem používal web virt manager, který podporoval snapshoty a další věci jen s qcow, na což jsem přišel až později. Když se dívám na současný stav, je to podobné, nikdo lvm moc nepodporuje (z mgmt hlediska).

Aktuálně provozuji na qcow2 dva Oracle RAC servery. Mám starý Oracle 11, který umí běžet jen na OEL5, maximálně nepodporovaně na OEL6. HW je podporován od OEL6, nebo 7, takže mám na dvou serverech OEL7, pod ním kvm s OEL5 a qcow2. Až otestuji upgrade na Oracle12, tak VM zruším a z těch hypervisorů udělám primární db. Databázi a transakční logy mám ale na nfs (společném ssd netapp storage, vše připojeno přes 2x10Gbit a v linuxu používám team, né bond).
Dělal jsem nějaké výkonnostní testy ohledně náhodných i sekvenčních zápisů, ale né lokálně, ale na nfs disky. Dělal jsem testy rychlosti sítě z těch kvm pomocí iperf a ok. Poté jsem dělal testy zápisů na nfs, jak z fyzického stroje, tak z kvm. to jsem dělal pomocí fio.
Pro mgm jsem použil libvirt, vytvořil jsem tedy vm takto :

virt-install --name rac1-2 --ram 16384 \
--os-type=linux \
--os-variant=ol5.11 \
--disk path=/vm/rac1-2_01.qcow2,format=qcow2,bus=virtio,size=60 \
-c /mnt/iso/Oracle/OEL/OEL-5U11-V47133-01.iso \
--network bridge=br0-lan,model=virtio,mac=RANDOM \
--network bridge=br1-ha,model=virtio,mac=RANDOM \
--graphics vnc,password=heslo,listen=0.0.0.0,port=5900 --noautoconsole \
-v --vcpus=12 \
--boot cdrom,hd

# NFS3 (host OEL7) :

192.168.0.3:/vol_ssd_rac on /mnt/ssd type nfs (rw,relatime,vers=3,rsize=65536,wsize=65536,namlen=255,hard,proto=tcp,timeo=600,retrans=2,sec=sys,mountaddr=192.168.0.3,mountvers=3,mountport=635,mountproto=udp,local_lock=none,addr=192.168.0.3)

[root@hv-rac1 ssd]# fio --randrepeat=1 --ioengine=libaio --direct=1 --gtod_reduce=1 --name=test --filename=test --bs=4k --iodepth=64 --size=4G --readwrite=randrw --rwmixread=75
test: (g=0): rw=randrw, bs=4K-4K/4K-4K/4K-4K, ioengine=libaio, iodepth=64
fio-2.2.8
Starting 1 process
test: Laying out IO file(s) (1 file(s) / 4096MB)
Jobs: 1 (f=1): [m(1)] [100.0% done] [22596KB/7440KB/0KB /s] [5649/1860/0 iops] [eta 00m:00s] 
test: (groupid=0, jobs=1): err= 0: pid=3681: Fri Sep 22 01:01:27 2017
  read : io=3071.7MB, bw=23706KB/s, iops=5926, runt=132681msec
  write: io=1024.4MB, bw=7905.6KB/s, iops=1976, runt=132681msec
  cpu          : usr=1.31%, sys=3.78%, ctx=414454, majf=0, minf=26
  IO depths    : 1=0.1%, 2=0.1%, 4=0.1%, 8=0.1%, 16=0.1%, 32=0.1%, >=64=100.0%
     submit    : 0=0.0%, 4=100.0%, 8=0.0%, 16=0.0%, 32=0.0%, 64=0.0%, >=64=0.0%
     complete  : 0=0.0%, 4=100.0%, 8=0.0%, 16=0.0%, 32=0.0%, 64=0.1%, >=64=0.0%
     issued    : total=r=786347/w=262229/d=0, short=r=0/w=0/d=0, drop=r=0/w=0/d=0
     latency   : target=0, window=0, percentile=100.00%, depth=64

Run status group 0 (all jobs):
   READ: io=3071.7MB, aggrb=23706KB/s, minb=23706KB/s, maxb=23706KB/s, mint=132681msec, maxt=132681msec
  WRITE: io=1024.4MB, aggrb=7905KB/s, minb=7905KB/s, maxb=7905KB/s, mint=132681msec, maxt=132681msec

NFS3 (guest OEL5)

192.168.0.3:/vol_ssd_rac on /mnt/ssd_rac type nfs (rw,nfsvers=3,addr=192.168.0.3)

[root@back-rac1 ssd_rac]# fio --randrepeat=1 --ioengine=libaio --direct=1 --gtod_reduce=1 --name=test --filename=test --bs=4k --iodepth=64 --size=4G --readwrite=randrw --rwmixread=75
test: (g=0): rw=randrw, bs=4K-4K/4K-4K, ioengine=libaio, iodepth=64
fio 1.57
Starting 1 process
test: Laying out IO file(s) (1 file(s) / 4096MB)
Jobs: 1 (f=1): [m] [100.0% done] [38436K/13025K /s] [9384 /3180  iops] [eta 00m:00s]
test: (groupid=0, jobs=1): err= 0: pid=3540
  read : io=3072.9MB, bw=32867KB/s, iops=8216 , runt= 95736msec
  write: io=1023.2MB, bw=10944KB/s, iops=2735 , runt= 95736msec
  cpu          : usr=1.04%, sys=4.54%, ctx=1503280, majf=0, minf=20
  IO depths    : 1=0.1%, 2=0.1%, 4=0.1%, 8=0.1%, 16=0.1%, 32=0.1%, >=64=100.0%
     submit    : 0=0.0%, 4=100.0%, 8=0.0%, 16=0.0%, 32=0.0%, 64=0.0%, >=64=0.0%
     complete  : 0=0.0%, 4=100.0%, 8=0.0%, 16=0.0%, 32=0.0%, 64=0.1%, >=64=0.0%
     issued r/w/d: total=786645/261931/0, short=0/0/0



Run status group 0 (all jobs):
   READ: io=3072.9MB, aggrb=32867KB/s, minb=33656KB/s, maxb=33656KB/s, mint=95736msec, maxt=95736msec
  WRITE: io=1023.2MB, aggrb=10943KB/s, minb=11206KB/s, maxb=11206KB/s, mint=95736msec, maxt=95736msec

Takže nejedná se o test výkonu těch qcow2, to nemám. Navíc test výkonu toho nfs je přes agregovanou linku, resp. NetApp QoSí na 2,5Gbit.
Ale budu dělat komplexnější testy, větší soubory, jak 4GiB, testy lokálu atd. Takže pak to kdyžtak zveřejním.
Zdar Max