Praktické testovanie vybraných virtualizačných softvérov - História úprav

Dvojsovic na 14:46, 8. august 2010

2010-08-08T14:46:58Z

Juraj na 10:52, 6. august 2010

2010-08-06T10:52:23Z

Dvojsovic na 10:32, 6. august 2010

2010-08-06T10:32:40Z

Dvojsovic na 10:30, 6. august 2010

2010-08-06T10:30:07Z

Dvojsovic na 10:07, 6. august 2010

2010-08-06T10:07:08Z

Dvojsovic na 09:52, 6. august 2010

2010-08-06T09:52:42Z

Dvojsovic na 12:11, 31. júl 2010

2010-07-31T12:11:11Z

Dvojsovic na 12:09, 31. júl 2010

2010-07-31T12:09:51Z

Dvojsovic na 11:42, 31. júl 2010

2010-07-31T11:42:56Z

Dvojsovic na 18:36, 30. júl 2010

2010-07-30T18:36:40Z

@@ Riadok 61: / Riadok 61: @@
 Sandra požaduje pre vykonanie testu zápisom dát úplne prázdne zariadenie, čo znamená aj zrušenie viacerých partícií fyzického disku . Je zaujímavé že Sandra nainštalovaná vo virtuálnych strojoch pravdepodobne považuje virtuálne disky za fyzicky neoddelené (čo síce sú, ale nemala by to spoznať), pretože ani po úplnom naformátovaní jednotlivých diskov sa nepodarilo test zápisom spustiť .
 Z toho dôvodu sme pre testovanie diskov zvolili alternatívu, jednoúčelový a prehľadný nástroj na testovanie rýchlosti diskov CrystalDiskMark 3. Program poskytuje viacero spôsobov merania výkonu, použitý bol sekvenčný test čítania a zápisu 50 MB dát 9 krát opakovaný (maximálny počet, bolo by však vhodné aspoň 10).
-V tabuľke Tab.3.3 uvádzame výsledky testov kvôli prehľadnosti upravené na 4 číslice a zaokrúhlené (pre presné výsledky pozri Príloha A). Za účelom vylúčenia chyby merania sa testy vykonávali viacnásobne a následne boli vybrané merania, ktorých hodnoty sa vyskytovali najčastejšie .
+V tabuľke Tab.3.3 uvádzame výsledky testov kvôli prehľadnosti upravené na 4 číslice a zaokrúhlené. Za účelom vylúčenia chyby merania sa testy vykonávali viacnásobne a následne boli vybrané merania, ktorých hodnoty sa vyskytovali najčastejšie .
 Ako prvú sme testovali rýchlosť virtuálneho procesora pri aritmetických výpočtoch uvedenú v miliónoch operácií za sekundu (GOPS). Nasledoval test priepustnosti pamäte RAM. Oba sú graficky spolu spracované v Obr.3.1 Procesor a pamäť.

@@ Riadok 462: / Riadok 462: @@
 Ďalšia veličina ktorá môže vyjadrovať spoľahlivosť alebo stabilitu strojov pri testovaní je rozptyl vyrátaný podľa vzorca a vyjadrený v percentách.
-[[Súbor:Rozptyl.PNG|center|framed]]
 Samotrný rozptyl sa síce uvádza ako štatistická veličina, ale v praxi je dosť ťažko predstavitelný, nakoľko je vyjadrený druhou mocninou. Slovne vyjadrený je stredná kvadratická odchýlka (priemer odchýlok na druhú). Preto sa prepočítava na percentá ktoré už umožňujú lepšiu orientáciu vo výsledkoch.
@@ Riadok 471: / Riadok 472: @@
 Pre presné vyjadrenie odchýlok merania môžeme použiť inú štatistickú veličinu, smerodajná odchýlka .
-[[Súbor:Sm.odchylka.PNG|center|framed]]
 Táto je druhou odmocninou rozptylu, čo reálnejšie vyjadruje že sa viac ako polovica nameraných hodnôt neodchyľuje od priemeru v oboch smeroch o viac ako je uvedená hodnota. Je vyjadrená v základných jednotkách meraní, čím tiež prispieva k lepšej prehľadnosti výsledkov.

← Staršia verzia		Verzia zo dňa a času 10:32, 6. august 2010
Riadok 530:		Riadok 530:
	Pri čítaní sme dosiahli lepší výkon len od Virtual PC bez doplnkov, ktorý mal najslabšie výsledky. Vyrovnaný bol s výkonom diskov VirtualBoxu a VMware Player dosiahol o 10 sekúnd nižšie časy oproti reálnemu pevnému disku.		Pri čítaní sme dosiahli lepší výkon len od Virtual PC bez doplnkov, ktorý mal najslabšie výsledky. Vyrovnaný bol s výkonom diskov VirtualBoxu a VMware Player dosiahol o 10 sekúnd nižšie časy oproti reálnemu pevnému disku.
	Pri zápise sú ale výsledky úplne rozdielne. Vyrovnaný výkon dosiahol VMware Player a ostatné dva produkty boli v porovnaní s reálnym diskom výrazne pomalšie.		Pri zápise sú ale výsledky úplne rozdielne. Vyrovnaný výkon dosiahol VMware Player a ostatné dva produkty boli v porovnaní s reálnym diskom výrazne pomalšie.
		+
		+	==Celkové vyhodnotenie výsledkov testov ==
		+	Aj preto že testy nepriniesli jednoznačné výsledky, prevedieme celkové vyhodnotenie pre každý produkt jednotlivo.
		+
		+	===Virtual PC 2007===
		+	Výsledky tohto produktu jednoznačne potvrdili že je síce postavený na nevýkonnom strohom jadre, ale s využitím o to výkonnejšie prepracovaných užívateľských doplnkov. V reálnom využití je predpoklad že produkt bude vždy použitý s nainštalovanými doplnkami a tak je aj vyvinutý, pretože bez doplnkov má veľmi slabé výsledky. Naproti tomu po nainštalovaní doplnkov jeho výkon enormne vzrastie a obzvlášť v oblasti výkonu procesora a pamäte, kde sa pri syntetických testoch dosiahli dokonca lepšie výsledky ako v reálnom počítači. V oblasti syntetických diskových testov mal porovnateľné výsledky s reálnym počítačom, čo ale boli najslabšie výsledky spomedzi VM. Vo vlastných aplikáciách testujúcich disky s doplnkami bol lepší ako VirtualBox, ale výrazne slabší ako reálne PC.
		+	Jeho vyhodnotenie v teoretickej časti práce ako najslabší produkt (hlavne kvôli dlhej histórii) nebolo úplne na mieste, pretože už tri roky drží krok s konkurenciou. Potvrdzuje síce klasický problém virtualizácie (pomalé I/O operácie) ale jeho pamäť a procesor umožňujú využitie vo výpočtovo zameranej oblasti. Preto ho môžeme vyhodnotiť za stále spoľahlivý, priemerne výkonný nástroj použiteľný na nenáročnú prácu vo väčšine oblastí, aj keď pri dnešných softvéroch pôsobí archaicky .
		+	===VirtualBox 3 ===
		+	Univerzálne pôsobiaci produkt s ktorým sa narába subjektívne veľmi dobre a prakticky, no jeho časté aktualizácie nasvedčujú o tom že je neustále vo vývoji . V syntetických testoch diskov prekvapil bezkonkurenčným výkonom, až dvojnásobne lepšími výsledkami ako u reálneho počítača. Inštalácia doplnkov spôsobila skôr zhoršenie aj keď pre bežné potreby zanedbateľné, a vo všetkých ostatných testoch dosiahol najslabšie výsledky spomedzi VM .
		+	Z vyššie uvedeného vyplýva že v tomto produkte je pred výkonom uprednostnená univerzálna prenositeľnosť softvéru a vyššia variabilita nastavení.
		+	===VMware Player 3===
		+	Produkt s mierne odlišným prístupom k riešeniu vizualizácie od predchádzajúcich. V syntetických testoch ho síce predstihol Virtual PC s doplnkami, no v testoch vlastnými aplikáciami jednoznačne vedie výkonom všetkých svojich komponentov. Doplnky boli prínosom len v syntetických testoch pre procesor, disky spomalili a vo vlastných aplikáciách tiež spôsobili nepatrný pokles výkonu. Nie je tak výkonný a stabilný ako reálnym PC, ale dosiahol lepšie výsledky v syntetických testoch diskov. Taktiež pri čítaní dát vlastnými aplikáciami a pri zápise boli výsledky porovnateľné s fyzickým počítačom.
		+	Výsledky testov v zásade potvrdili predpoklad, že posledný produkt je najvýkonnejším nástrojom virtualizácie s pomedzi porovnávaných a ak sa k tomu pridá fakt, že má najvyspelejšie schopnosti aj v grafickej oblasti, jeho využitie je bezkonkurenčné. VMware Player je aplikáciou najnovších vedomostí v danej oblasti v najmladšej verzia produktu, pravdepodobne najsofistikovanejšej spoločnosti na poli virtualizácie.
		+
		+	Z porovnávaných produktov je možné si vybrať podľa toho, na čo je potrebné využitie virtualizácie. VMware Player predstavuje výkon s aktuálnymi novinkami v tejto oblasti. VirtualBox je poznačený nižším výkonom, ale poskytuje variabilitu riešenia aj pre užívateľov iných platforiem ako Windows. Virtual PC by pre praktickú jednoduchosť a spoľahlivosť v OS materskej firmy, mohol byť pojatý ako výučbový softvér pre širokú verejnosť, aj keď stále poskytuje prijateľný výkon.
		+	Toto testovanie môže síce poskytnúť určité informácie ohľadom výkonu VM, no v praxi je zásadným faktorom pre rozhodovanie skutočnosť, čo všetko sme schopní na tom ktorom virtuálnom stroji sprevádzkovať. Tu sa znova dostáva do popredia VMware Player hlavne kvôli grafickým možnostiam , čo umožňuje maximálne využitie naozaj pre všetky skupiny užívateľov.

← Staršia verzia		Verzia zo dňa a času 10:30, 6. august 2010
Riadok 478:		Riadok 478:

	V poslednom grafe (pozri Obr.3.5) by sa nejako dramaticky nemali výsledky zmeniť pretože vychádza z predchádzajúceho, je použitý pre prehľadné a presné vyjadrenie odchýlok (od priemerov meraní). Jedine Virtual PC (bez doplnkov pri zápise) markantne prekročil hranicu jednej sekundy, dve merania sú tesne pri hranici sekundy a dve tretiny meraní sa nedostali nad pol sekundy.		V poslednom grafe (pozri Obr.3.5) by sa nejako dramaticky nemali výsledky zmeniť pretože vychádza z predchádzajúceho, je použitý pre prehľadné a presné vyjadrenie odchýlok (od priemerov meraní). Jedine Virtual PC (bez doplnkov pri zápise) markantne prekročil hranicu jednej sekundy, dve merania sú tesne pri hranici sekundy a dve tretiny meraní sa nedostali nad pol sekundy.
		+
		+	===Porovnanie reálneho výkonu pri testoch vlastnými aplikáciami===
		+	Pre úplnosť boli vykonané na reálnom PC aj kontrolné testy pomocou vlastných aplikácií. Výsledky sa prejavili podobne ako u syntetických testov, kde vôbec nie je jednoznačné, že reálny počítač dokáže pracovať rýchlejšie (pozri Tab.3.8).
		+
		+	{\| class="wikitable"
		+	\|+ Tabuľka 3.8 Reálne PC
		+	\|-
		+	!colspan="2"\|
		+	!colspan="4"\|Reálne PC
		+	\|-
		+	!colspan="2"\|veličina ->
		+	!rowspan="2"\|priemer časov
		+	[s]
		+	!colspan="2"\|rozptyl
		+	!rowspan="2"\|smerodajná
		+	odchýlka
		+	[s]
		+	\|-
		+	!colspan="2"\|druh testu
		+	![s]
		+	![%]
		+	\|-
		+	!colspan="2"\|BBLS
		+	\|align=center\|87,75
		+	\|align=center\|0,081
		+	\|align=center\|0,097
		+	\|align=center\|0,285
		+	\|-
		+	!colspan="2"\|inkrementácia
		+	\|align=center\|86,65
		+	\|align=center\|0,016
		+	\|align=center\|0,018
		+	\|align=center\|0,126
		+	\|-
		+	!rowspan="2"\|pevný disk
		+	!čítanie
		+	\|align=center\|57,00
		+	\|align=center\|0,342
		+	\|align=center\|0,600
		+	\|align=center\|0,585
		+	\|-
		+	!zápis
		+	\|align=center\|43,46
		+	\|align=center\|0,145
		+	\|align=center\|0,333
		+	\|align=center\|0,380
		+	\|}
		+
		+	Testy zamerané na procesor a pamäť sa prejavili v porovnaní s VM podľa očakávaní vyšším výkonom. Výsledné časy testov klesli zaokrúhlene o 8 až 18 sekúnd. Rozptyl a smerodajná odchýlka poukazujú znížením hodnôt na stabilnejší priebeh testov.
		+	V testoch rýchlosti diskov už výsledky strácajú jednoznačnosť. Prejavila sa podobná vlastnosť ako u virtuálnych diskoch vo VMware Player, kde zápis dosiahol lepšie výsledky ako čítanie (opačne ako by sa očakávalo), čo sa týka časov aj stability testov.
		+	Pri čítaní sme dosiahli lepší výkon len od Virtual PC bez doplnkov, ktorý mal najslabšie výsledky. Vyrovnaný bol s výkonom diskov VirtualBoxu a VMware Player dosiahol o 10 sekúnd nižšie časy oproti reálnemu pevnému disku.
		+	Pri zápise sú ale výsledky úplne rozdielne. Vyrovnaný výkon dosiahol VMware Player a ostatné dva produkty boli v porovnaní s reálnym diskom výrazne pomalšie.

← Staršia verzia		Verzia zo dňa a času 10:07, 6. august 2010
Riadok 470:		Riadok 470:
	Z grafického spracovania (pozri Obr.3.4) rozptylu jasne vidíme že Virtual PC bez doplnkov pri zápise nebol len pomalý ale mal aj veľké rozdiely jednotlivých časov merania. Mierne vyššie rozdiely mali aj produkty konkurencie, oba bez doplnkov pri zápise na pevný disk. Všetky ostatné výsledky testov sa „rozptýlili“ do jedného percenta.		Z grafického spracovania (pozri Obr.3.4) rozptylu jasne vidíme že Virtual PC bez doplnkov pri zápise nebol len pomalý ale mal aj veľké rozdiely jednotlivých časov merania. Mierne vyššie rozdiely mali aj produkty konkurencie, oba bez doplnkov pri zápise na pevný disk. Všetky ostatné výsledky testov sa „rozptýlili“ do jedného percenta.
	Pre presné vyjadrenie odchýlok merania môžeme použiť inú štatistickú veličinu, smerodajná odchýlka .		Pre presné vyjadrenie odchýlok merania môžeme použiť inú štatistickú veličinu, smerodajná odchýlka .
		+
		+	[[Súbor:Sm.odchylka.PNG\|center\|framed]]
		+
		+	Táto je druhou odmocninou rozptylu, čo reálnejšie vyjadruje že sa viac ako polovica nameraných hodnôt neodchyľuje od priemeru v oboch smeroch o viac ako je uvedená hodnota. Je vyjadrená v základných jednotkách meraní, čím tiež prispieva k lepšej prehľadnosti výsledkov.
		+
		+	[[Súbor:Odchylka.graf.jpg\|center\|framed]]
		+
		+	V poslednom grafe (pozri Obr.3.5) by sa nejako dramaticky nemali výsledky zmeniť pretože vychádza z predchádzajúceho, je použitý pre prehľadné a presné vyjadrenie odchýlok (od priemerov meraní). Jedine Virtual PC (bez doplnkov pri zápise) markantne prekročil hranicu jednej sekundy, dve merania sú tesne pri hranici sekundy a dve tretiny meraní sa nedostali nad pol sekundy.

← Staršia verzia		Verzia zo dňa a času 09:52, 6. august 2010
Riadok 454:		Riadok 454:

	Pre lepšiu orientáciu boli výsledky spracované aj graficky do troch grafov (po veličinách). Pri testovaní vlastnými aplikáciami budeme sledovať nižšie hodnoty, čo prezentuje vyšší výkon (opačne ako v časti 3.1). V prvom grafe (pozri Obr.3.3) porovnávame priemery meracích časov testov .		Pre lepšiu orientáciu boli výsledky spracované aj graficky do troch grafov (po veličinách). Pri testovaní vlastnými aplikáciami budeme sledovať nižšie hodnoty, čo prezentuje vyšší výkon (opačne ako v časti 3.1). V prvom grafe (pozri Obr.3.3) porovnávame priemery meracích časov testov .
		+
		+	[[Súbor:Priemer.č.JPG\|center\|framed]]
		+
		+	Z testov zameraných na procesor a pamäť sa potvrdilo že pre Virtual PC doplnky predstavujú akcelerátor, aj keď nepotvrdili markantné obmedzenie pamäťou bez doplnkov (zaznamenané v časti 3.1). VirtualBoxu doplnky spôsobili jemný pokles výkonu a prejavil sa najhoršími výsledkami, čo zodpovedá výsledkom z časti 3.1. Nepatrný pokles výkonu spôsobili doplnky aj VMware Playeru, ale aj napriek tomu dosiahol najlepšie výsledky. V porovnaní s BBLS sa pri inkrementácii všetky stroje prejavili malým zvýšením priemerných časov meraní.
		+	Čítanie a zápis dát vniesli do výsledkov zaujímavé nejednoznačnosti. Doplnky tento krát spôsobili problémy hlavne VirtualBoxu, aj keď časy sa líšia len málo a sú celkom vyrovnané. Tvrdenie že flexibilné disky sú pomalšie sa vlastne nepotvrdilo, pretože to vykázala iba presná polovica výsledkov.
		+	Jednoznačne najlepšie výsledky dosiahol VMware Player a doplnky mu ešte pomohli, čím ale spôsobili opačný efekt ako v syntetických testoch. Na ďalšie poradie majú zásadný vplyv doplnky. Pre Virtual PC sa opäť potvrdilo že bez doplnkov je to výkonovo najslabší stroj, hlavne pri zápise dát. Naopak s doplnkami sa výsledkami zaradil prekvapivo pred VirtualBox.
		+	Ďalšia veličina ktorá môže vyjadrovať spoľahlivosť alebo stabilitu strojov pri testovaní je rozptyl vyrátaný podľa vzorca a vyjadrený v percentách.
		+
		+	[[Súbor:Rozptyl.PNG\|center\|framed]]
		+
		+	Samotrný rozptyl sa síce uvádza ako štatistická veličina, ale v praxi je dosť ťažko predstavitelný, nakoľko je vyjadrený druhou mocninou. Slovne vyjadrený je stredná kvadratická odchýlka (priemer odchýlok na druhú). Preto sa prepočítava na percentá ktoré už umožňujú lepšiu orientáciu vo výsledkoch.
		+
		+	[[Súbor:Rozptyl.graf.jpg\|center\|framed]]
		+
		+	Z grafického spracovania (pozri Obr.3.4) rozptylu jasne vidíme že Virtual PC bez doplnkov pri zápise nebol len pomalý ale mal aj veľké rozdiely jednotlivých časov merania. Mierne vyššie rozdiely mali aj produkty konkurencie, oba bez doplnkov pri zápise na pevný disk. Všetky ostatné výsledky testov sa „rozptýlili“ do jedného percenta.
		+	Pre presné vyjadrenie odchýlok merania môžeme použiť inú štatistickú veličinu, smerodajná odchýlka .

← Staršia verzia		Verzia zo dňa a času 12:11, 31. júl 2010
Riadok 452:		Riadok 452:
	\|align=center\|0,506		\|align=center\|0,506
	\|}		\|}
		+
		+	Pre lepšiu orientáciu boli výsledky spracované aj graficky do troch grafov (po veličinách). Pri testovaní vlastnými aplikáciami budeme sledovať nižšie hodnoty, čo prezentuje vyšší výkon (opačne ako v časti 3.1). V prvom grafe (pozri Obr.3.3) porovnávame priemery meracích časov testov .

@@ Riadok 274: / Riadok 274: @@
 |-
 !colspan="3"|
 !colspan="4"|bez doplnkov
 !colspan="4"|s doplnkami
@@ Riadok 360: / Riadok 359: @@
 |align=center|0,450
 |align=center|0,578
 |}

@@ Riadok 37: / Riadok 37: @@
 |-
 !Jadrá prcerora
-|1
+|align=center|1
 |-
 !Pamäť RAM
-|512 MB
+|align=center|512 MB
 |-
 !Video pamäť
-|8 MB
+|align=center|8 MB
 |-
 !OS
-|MS Windows XP professional
+|align=center|MS Windows XP professional
 |-
 !Virtuálne HDD
-|flefibilný/pevný
+|align=center|flefibilný/pevný
 |-
 !Zobrazovací režim
-|800×600×32
+|align=center|800×600×32
 |}
@@ Riadok 268: / Riadok 268: @@
 |align=center|0,309
 |align=center|0,421
 |}

@@ Riadok 186: / Riadok 186: @@
 !colspan="4"|s doplnkami
 |-
-!colspan="3"|druh testu/veličina
+!colspan="3"|veličina ->
 !rowspan="2"|priemer časov
 [s]
@@ Riadok 200: / Riadok 200: @@
 [s]
 |-
-!colspan="3"|
+!colspan="3"|druh testu
 ![s]
 ![%]
@@ Riadok 229: / Riadok 229: @@
 !rowspan="2"|flexi
 !čítanie
 |-
 !zápis
 |-
 !rowspan="2"|pevny
 !čítanie
 |-
 !zápis
+|align=center|263,2
+|align=center|23,62
+|align=center|8,974
+|align=center|4,860
+|align=center|57,44
+|align=center|0,177
 |}