Menu

SvětAndroida doporučuje: Programy pro měření výkonu (“benchmarky”)

sa_doporucuje_benchmarky

Jedním z důležitých faktorů, podle kterých si vybíráme telefon či tablet, je poměr cena/výkon. Porovnat cenu je triviální záležitost, ale jak posoudit výkonnost telefonu? I zařízení, jež dle specifikace výrobce působí jako “našlapaná mašina,” může v reálném provozu “drhnout,” zamrzat, nebo jiným způsobem zklamat očekávání novopečeného majitele.

Právě proto jsou tu aplikace, zaměřující se na měření výkonu, označované též jako “benchmarky.” Hned zpočátku si ale řekněme, že ani ty nemusí podávat zcela vypovídající výsledky – telefon, který v benchmarku orientovaném na hrubý či grafický výkon exceluje, může při běžném používání srazit na kolena grafická nadstavba, špatně odladěné ovladače, nebo pomalá práce s pamětí. Aplikace pro měření výkonu jsou tedy čistě orientační a poslouží spíše pro vzájemné srovnání dvou či více telefonů, ale rozhodně nemůžeme říci, že by výsledné číslo směrodatně určovalo rychlost zařízení při běžném používání. To se ostatně několikrát ukázalo i v našich recenzích.

Jistě ale nejen nás, redaktory technického serveru, zajímalo, jaké aplikace pro měření výkonu aktuálně “letí,” takže jsme se v rámci tradičního cyklu SvětAndroida doporučuje rozhodli tentokrát věnovat tomuto segmentu. Zadání pro redaktory tedy znělo: “Nominujte programy, které nějakým způsobem měří, prezentují, vyhodnocují a případně srovnávají jakýkoli výkonnostní parametr telefonu/tabletu.”

Nakonec jsme sestavili seznam osmi aplikací, jež jsou ve článku seřazeny podle následujícího klíče:

  1. Podle počtu redaktorů, kteří aplikaci nominovali,
  2. v případě shody dále podle hodnocení v Google Play (od nejvyšší známky),
  3. v případě shody dále podle celkového počtu hodnocení v Google Play (více hodnocení = lépe),
  4. v případě shody dále podle počtu pětihvězdičkových hodnocení (více hodnocení = lépe).

Jak funguje cyklus SvětAndroida doporučuje/Čtenáři doporučují?

  • první týden sbíráme doporučení od redaktorů,
  • za týden vychází článek “SvětAndroida doporučuje …” (to je právě nyní :) ),
  • následující týden sbíráme doporučení od čtenářů (formulář pro vaše nominace najdete na konci článku),
  • za další týden vychází článek „Čtenáři doporučují …“ na stejné téma.

Pojďme se tedy podívat na to, jaké aplikace doporučili redaktoři našeho serveru.

AnTuTu Benchmark

AnTuTu Benchmark se stal pomyslným vítězem tohoto kola – doporučili ho tři redaktoři ze čtyř. Kolega Tomáš Očadlý je sice k benchmarkům poněkud skeptický, nicméně jako svou jedinou nominovanou aplikaci tohoto typu zvolil právě tu od AnTuTu. “Osobně benchmarky moc neuznávam, protože jejich výsledky jsou kolikrát při každém měření rozdílné, což trochu vypovídá o jejich důvěryhodnosti. Některé dokonce ani nepodporují více jader,” hodnotí kriticky, a dodává: “Samozřejmě výsledek vám ani nepoví jak je telefon svižný, což je, podle mého, důležitější faktor než skóre. Když už se ale opravdu potřebujete přesvědčit o tom, že vaše zařízení běží na takové a takové frekvenci a že má opravdu tak velkou operační paměť, tak použijte Antutu.”

Petr Mišák je o něco optimističtější: “Podle doporučení, která se ke mně dostala, se jedná o jeden z prvních benchmarků, který dokáže adekvátně otestovat Android zařízení s více jádry, a není optimalizováný pro určitou čipovou sadu. Čili se dá říci, že výsledky by měly být nejobjektivnější.”

Karel Kilián pak dodává: “Výhodou AnTuTu je univerzálnost, neboť netestuje jen jednu komponentu, ale postupně “proklepne” telefon jako celek. Výsledné skóre je sice jen orientační, neboť stejné hodnoty mohou dosáhnout dva telefony, z nichž jeden bude excelovat například v grafice, zatímco druhý nažene body rychlostí práce s paměťovou kartou. Jestliže ale budete porovnávat jednotlivé naměřené hodnoty, můžete si udělat poměrně přesnou představu o tom, v čem je které zařízení dobré, a kde naopak zaostává za konkurencí. Co se týká rozdílů naměřených hodnot, který zmiňoval Tomáš: samozřejmě se to může stát, například pokud v průběhu testu přijde e-mail, nebo telefon zatíží nějaká služba běžící na pozadí. U telefonů, které recenzuji a testuji, to řeším tak, že všechny benchmarky spouštím desetkrát, přičemž nejlepší a nejhorší naměřené hodnoty škrtám, teprve ze zbytku pak počítám průměrný výsledek.”

AnTuTu Benchmark provádí následující testy:

  • rychlost operační paměti,
  • výkon procesoru při práci s celými čísly,
  • výkon procesoru při výpočtech s plovoucí desetinnou čárkou,
  • výkon ve 2D grafice,
  • výkon ve 3D grafice,
  • rychlost práce vstupně-výstupních operací s databází,
  • rychlost čtení z paměťové karty,
  • rychlost zápisu na paměťovou kartu,

Od AnTuTu při testech telefonů používáme a můžeme doporučit také AnTuTu Tester, který sice není benchmarkem, ale nabízí testy displeje (hodí se při zjišťování rovnoměrnosti podsvětlení a podání barev pod různými pozorovacími úhly), “multitouch test” (aneb “kolik prstů najednou je zařízení schopné registrovat”) a především test výdrže baterie (byť jeho výsledky jsou poněkud polemické, neboť se testuje výdrž při 100% zatížení procesoru, takže telefony s rychlými a vícejádrovými CPU jsou trochu v nevýhodě).

AnTuTu BenchmarkAnTuTu Benchmark

AnTuTu Benchmark
AnTuTu
Verze2.7.3 (28. 3. 2012)
Velikost2,2 MB
1.6+


Zdarma

Quadrant Standard Edition

Quadrant je na poli měření výkonu telefonů s Androidem osvědčenou klasikou, což odráží nejen jeho druhé místo v našem přehledu, ale též vysoké hodnocení 4,6 body v Google Play. Dalším vypovídajícím číslem je počet stažení, který překročil milion.

Na počet uživatelů také odkazuje Petr Mišák, který část úspěchu Quadrantu vidí v tom, že “díky přehledným grafům na konci testu je možné porovnat výkon svého zařízení s výsledky jiných.”

Karel Kilián k tomu dodává: “Vynechat během testování telefonů tento nástroj by bylo neomluvitelné. Program testuje jak výkon procesoru, tak grafiky a I/O operací. Následné grafické srovnání může vést k radosti i zklamání, v každém případě dává celkem dobrou představu, jak na tom telefon je.”

Zbývá podotknout, že k dispozici je pouze varianta, za kterou sice nemusíte platit, ale zobrazuje reklamy a vyžaduje fungující připojení k Internetu.

Výsledky můžete zhlédnout a porovnat na webu SmartphoneBenchmarks.com.

Quadrant Standard EditionQuadrant Standard Edition

Quadrant Standard Edition
Aurora Softworks
Verze2.0 (13. 2. 2012)
Velikost1,4 MB
1.5+


Zdarma

NenaMark2

NenaMark2 je třetím a současně posledním benchmarkem, na kterém se shodli alespoň dva redaktoři – všechny následující pak stojí na doporučení jen jednoho z nás.

Adam Kováč poměrně přesně charakterizuje podstatu tohoto programu: “zaměřuje se především na grafickou část testovaného zařízení počítáním graficky náročných operací. Své skóre můžete porovnat s ostatními zařízeními v přehledné tabulce.” Karel Kilián NenaMark2 chválí: “Jeho výhodou je, že není vázán na žádného výrobce hardware, jako například Neocore na Qualcomm. Není výjimkou, že telefon se Snapdragonem, který v Neocore předvede solidní výsledek, se v NenaMarku výrazně zadýchá.”

NenaMark2 navazuje na NenaMark1 a, stejně jako starší verze, se zaměřuje na testování výkonu v OpenGL ES 2.0. Proti svému předchůdci testuje pokročilejší grafické efekty ve vyšším rozlišení. Na rozdíl od mnoha jiných benchmarků NenaMark měří výkon s použitím realistické scény, na jakou můžete narazit v typické mobilní hře. Výsledek prezentuje ve snímcích za sekundu, z čehož se dá docela intuitivně odhadnout a představit skutečný herní výkon.

Výsledky testů z nejrůznějších zařízení jsou k dispozici na stránkách NenaMarku.

NenaMark2
NenaMark2

NenaMark2
Nena Innovation AB
Verze2.2 (17. 1. 2012)
Velikost9,8 MB
2.0+


Zdarma

NenaMark1

NenaMark1 doporučil Karel Kilián, protože: “se hodí nejen k testování nejnovějších telefonů, ale i těch starších. Navíc díky relativně dlouhé historii poskytuje solidní základnu pro srovnání současných zařízení s těmi staršími.”

NenaMark, stejně jako aktuální verze, testuje OpenGL ES 2.0 s pomocí programovatelných shaderů pro grafické efekty, jako jsou odlesky, dynamické stíny, parametrické plochy, částice a různé modely. Vývojářské studio Nena Inovace AB slibuje, že NenaMark dostane grafický procesor mobilu či tabletu na hranici jeho možností. Autoři také upozorňují, že v případě současných high-endových zařízeních je lepší použít NenaMark2, který podá relevantnější výsledky.

Výsledky NenaMark1 najdete na oficiálním webu.

NenaMark1
NenaMark1

NenaMark1
Nena Innovation AB
Verze1.8 (16. 6. 2011)
Velikost1,1 MB
2.0+


Zdarma

Neocore

Neocore je nepsaným standardem v poměřování grafického výkonu, nicméně, jak již bylo řečeno výše, stojí za ním Adreno Graphics alias Qualcomm, takže se dá tušit, pro který grafický čip nejspíš bude tento benchmark nejlépe optimalizovaný. Karel Kilián, který Neocore nominoval, k tomu říká: “Podle mne je to dobrý test grafiky, nicméně opakovaně jsem zaznamenal, že zatímco v ostatních benchmarcích si vedou například Adrena 205 spíše průměrně, v tomto testu obvykle konkurenci lehce překonají. Nechci tu spekulovat o tom, zda se jedná jen o lepší optimalizaci, nebo ještě něco jiného, jen doporučuji brát výsledky tohoto testu a zejména srovnání napříč procesorovými platformami trochu s rezervou.”

Neocore se zaměřuje na testování grafického výkonu v OpenGL ES 1.1.

NeocoreNeocore

Neocore
Adreno Graphics
Verze1.9.35 (17. 1. 2012)
Velikost5,8 MB
1.6+


Zdarma

Smartbench 2012

Smartbench si získal přízeň komunity kolem Androidu především tím, že jako jeden z prvních podporoval a směrodatně testoval vícejádrové procesory. Zastáncem letošní verze je Adam Kováč, který oceňuje širokou databází výsledků, test prakticky celého telefonu, složitou 3D grafikou počínaje, přes rychlost procesoru, a I/O operacemi konče.

SmartBench poskytuje ve finále dvě čísla – jedno vyjadřuje výkon v produktivitě (tedy reprezentuje výkon telefonu v běžných operacích), druhé herní výkonnost. Test tak odpoví na otázku, jaký si vybrat telefon, nejen hráčům, vyžadujícím co možná nejlepší výkon ve vykreslování 3D scén, ale také těm, kdož hledají zařízení k práci.

Mezi hlavní změny proti loňské verzi patří například vyšší zátěž jednotlivých testů, nový 3D test (se žralokem), větší počet polygonů objektů v některých testech, a lepší práce s displeji s vysokým rozlišením. SmartBench 2012 také láká slibem, že je připraven i na testování čtyřjádrových procesorů, což bohužel také znamená, že je pomalejší na starších zařízeních.

Pokud si koupíte Smartbench Donate, zbavíte se reklamních proužků a získáte přístup k historii naměřených výsledků.

Porovnat výsledky s ostatními je možné na webu SmartphoneBenchmarks.com.

SmartBench 2012Smartbench 2012

Smartbench 2012
123 SmartMobile
Verze1.0.0 (28. 1. 2012)
Velikost2,2 MB
2.2+


Zdarma


41,76 Kč

Smartbench 2011

Starší verzi Smartbench doporučil Karel Kilián. “Díky práci pro Svět Androida mi za přibližně rok a půl prošly rukama zhruba dvě desítky zařízení. Všechny jsem testoval Smartbenchem 2011, takže výsledky jsou pro mne vzájemně srovnatelné. Smartbench 2012 jsem poprvé použil při testování Huawei Honor. Vím, že na Internetu mohu najít naměřené hodnoty od ostatních uživatelů, leč mám poměrně propracovanou a precizní metodiku testování, založenou na deseti měřeních, a to asi jiní (a normální :) ) uživatelé nedělají. Smartbench v mém pohledu vítězí především co do komplexnosti, neboť testuje prakticky vše, co se na telefonu či tabletu dá otestovat.”

Stejně, jako u aktuální verze, jsou výsledkem testu dvě hodnoty: jedna pro produktivní, druhá pro herní výkon. Je ale vhodné podotknout, že výsledky z verze 2012 nejsou srovnatelné s výsledky Smartbench 2011, neboť jsou sestaveny na základě odlišných testovacích metodik.

Smartbench 2011Smartbench 2011

Smartbench 2011
123 SmartMobile
Verze1.2.4 (28. 1. 2012)
Velikost1,3 MB
1.5+


Zdarma


41,76 Kč

GLBenchmark 2.1.2

Na chvostu dnešního dílu SvětAndroida doporučuje nacházíme nepříliš známý GLBenchmark. Na tuto pozici ho srazilo hodnocení 2,8 z 5 možných, nicméně Adam Kováč je přesvědčen o kvalitách tohoto testovacího nástroje. Podle něj jde o: “Velmi náročný benchmark ve všech ohledech, se širokou škálou testů a perfektní tabulkou výsledků na www.glbenchmark.com.”

Vývojářské studio Kishonti Ltd., jež za GLBenchmarkem stojí, představuje svůj produkt jako nástroj pro testování výpočetního a grafického výkonu v OpenGL ES 2.x. Výsledné číslo přitom vzniká na základě 33 různých testů, takže by mělo mít poměrně vysokou vypovídající hodnotu. Ostatně vyzkoušejte GLBenchmark sami a posuďte, zda si nezaslouží lepší hodnocení. Předem ale upozorňujeme, že test vyžaduje registraci.

GLBenchmarkGLBenchmark

GLBenchmark 2.1.2
Kishonti Ltd.
Verze2.1.2 (7. 3. 2012)
Velikost11 MB
2.2+


Zdarma

Jaké benchmarky doporučíte vy?

Jak se stalo již zvykem, na závěr dnešní epizody dáme slovo vám – našim čtenářům. Nenašli jste v dnešním přehledu aplikaci, kterou používáte, a u níž jste přesvědčení o jejích kvalitách? Nic není ztraceno – nominujte ji přes formulář umístěný níže! Čas máte do čtvrtka 12. dubna do 6:00, kdy nominace uzavřeme. Poté vybereme pět nejlepších aplikací, a vydáme je ve čtvrtek 19. března jako doporučení čtenářů.

Nominace byly ukončeny. Nebyla nominována ani jedna aplikace.

Komentáře

ic

ic

5.4.2012 11:26

Není na android taky nějaký benchmark, co by počítal π (pí) jako je na PC? Samozřejmě je nejlepší testovat v reálných situacích a počítání π na nelidský počet desetiných míst není zrovna ta činnost, co by uživatel na mobilu dělal časot, ale je to jednoduchý způsob testování procesoru a na desktopu už je to docela klasika. Tak by se daly dobře porovnat výkony ARM a x86 procesorů.

x14

x14

5.4.2012 14:43

Když už je řeč o výkonu – nehrál si tu náhodou někdo s Chainfire3D? Jde o jakýsi OpenGL “meziovladač”, který umožňuje změnit parametry textur atd… Já s tím nezměnil výkon na ZTE Blade ani o trochu :-(

Plague

Plague

5.4.2012 19:32

K čemu jsou uživateli, který není recenzent nebo nepracuje v obchodě se smartphony takový benchamrk? Syndrom porovnávání penisu?

lukas

lukas

5.4.2012 20:29

Ja som mal Chainfire 3D aj Swapper 2 aj som pretaktoval ale vsetky tie procesy iba spomalovali fone a rychlejsie vybijali bateriu cize lepsie kupit new mobile :D

Mach4

Petr MišákAdministrátor 2

6.4.2012 9:38

ic:
myslím, že některé Android benchmarky toto využívají, ale v kombinaci s ostatními algoritmy

Plague:
stejně by se dalo odpovědět, k čemu se u aut udávají koňské síly (kW), když to nic nevypoví o komfortu, nebo spolehlivosti auta. :)

lukas

lukas

6.4.2012 22:05

ja mam na mojej Xperia X8 necelych 2000 ale aj tak celkom dobre

peter

peter

8.4.2012 18:45

Chainfire 3d nieje na zvysenie vykonu alebo grafickeho vykonu ale hlavne na softwarove prepinanie grafickych modulov.Tym si mozes zahrat na qualcome hry urcene pre Tegru.

RSS (komentáře k článku)