AnTuTu最近被推到了風口浪尖,這其實可以看做是一直以來隱藏在那些跑分數字背后的問題終于遭到了凸顯。跑分規則不夠公開,每一版本的更新說明不夠詳細,AnTuTu對于我們來說,能夠帶給我們的僅僅是一個數字,但我們卻無法得知這個數字究竟是如何得來的。或許有人已經發現,我們的評測文章中在綜合測試方面除了AnTuTu之外,也加入了Basemark OS以及Quadrant Advanced兩款軟件,而我們一直以來也是希望用戶能夠關注AnTuTu之外的更多評測軟件,更加全面、公平的來衡量每一款產品的性能表現。今天我們選擇了Intel Z2580、驍龍APQ8064、驍龍600以及驍龍800、Exynos 5 Octa這幾個平臺的產品,通過不同版本的AnTuTu來進行測試,看每一次的迭代更新,AnTuTu的跑分究竟有多大差異,而造成這些差異的原因又是否在軟件更新說明中有所體現。
分數跳躍大難成標準 AnTuTu四版本實測
首先我們還是來介紹一下AnTuTu這款軟件,相較于3DMark這樣針對圖形處理進行測試的軟件,AnTuTu則是一款對手機、平板進行綜合性能評測、跑分的軟件。一鍵即可完成“內存性能”、“CPU整數性能”,“CPU浮點性能”、“2D、3D繪圖性能”、“數據庫IO”、“SD卡讀、寫速度”這8項性能測試,對硬件整體性能進行評分。
AnTuTu真的足夠專業嗎?
眾所周知的是AnTuTu從V2版本升級到V3版本,跑分的數值有了非常大的差異,高端產品在這一次的升級中,總分都有了近一萬分左右的提升。但為什么會有這么高的分數差異,AnTuTu增加了全新的2D圖形評測、OpenGL ES 2.0 3D評測之后,綜合成績的分數計算公式又有什么變化,這些都是我們這些用戶無從得知的。而我們由此可以得出的唯一一個結論也讓人完全高興不起來:V2版本測試過的所有產品的數據,就此廢掉了,今后不再具備任何的可比性。在此之后,AnTuTu又在最近爆出了高估Intel平臺性能的問題,而AnTuTu在發現這一問題之后,首先做出的回應不是對外發布聲明,而是悄無聲息的在隨后發布的常規版本升級中降低了Intel平臺的跑分結果。從用戶的角度來看,這是一次莫名其妙的分數驟降,而從我們的角度來看,這也讓我們再一次質疑,AnTuTu這一忽高忽低的跑分結果是否足以作為手機性能的評判標準。
本次的測試我們選擇了2.9.3、3.0.1、3.3.1以及3.3.2這四個版本的AnTuTu,不僅要看從V2版本到V3版本,哪個處理器分數提升的最多,提升在哪里,還要看從3.3.1到3.3.2的升級之后,AnTuTu又是從哪里削減了Intel平臺的跑分分數。
我們這一次選擇了幾個不同的平臺,主要是為了對比在每一次的版本升級中,搭載不同平臺處理器的Android產品在跑分上各自變化的幅度是否相同。對比所用的幾款產品全部是1080p屏幕分辨率,也保證了本次AnTuTu跑分對比中不會出現屏幕分辨率低因此分數占優勢的情況。
處理器 | 主頻 | RAM/ROM | GPU | 屏幕分辨率 |
Intel Z2580 | 2GHz | 2GB/16GB | PowerVR SGX544 MP2 | 1920×1080 |
驍龍APQ864 | 1.5GHz | 2GB/16GB | Adreno320 | 1920×1080 |
驍龍600 | 1.7GHz | 2GB/16GB | Adreno320 | 1920×1080 |
驍龍800 |
2.2GHz |
2GB/16GB | Adreno330 | 1920×1080 |
Exynos 5 Octa | 1.6GHz | 2GB/16GB | PowerVR SGX544 MP3 | 1920×1080 |
首先我們也來對比一下幾款產品的配置。從上面的表格中就可以看出,幾款產品除了處理器方面的差異之外,在屏幕分辨率、RAM、ROM等方面基本上保持了一致,將其他因素干擾最終測試成績的可能性降到了最低。那么下面我們就可以開始測試了。首先還是先來看看,從AnTuTu 2.9.3到AnTuTu 3.0.1之間,不同平臺的跑分結果究竟發生了多劇烈的變化。
AnTuTu V2/V3版本跑分對比
從柱狀圖中我們可以很明顯的看出,Intel平臺在這一次的版本升級后,跑分成績有了最明顯的飛躍,分數前后相比之下增長了148%,而其他幾款產品的幅度除了APQ8064增長幅度較小之外,都集中在50-60%之間。Intel平臺在AnTuTu升級后,于跑分中的這一突出表現也造成了最近的質疑——AnTuTu對Intel X86以及ARM架構所使用的測試規則不同導致Intel平臺性能被高估。
AnTuTu V2/V3版本下,Z2580跑分細項對比
那么Intel平臺在這次升級中,分值增長最大的部分究竟在哪里?我們針對AnTuTu進行測試打分的8個細項同樣做出了對比,可以看到在從V2版本升級到V3版本之后,用于測試的Intel平臺產品在2D、3D、RAM這三方面都有著非常明顯的增長,漲幅分別達到了418%、478%以及290%。
只有Intel平臺在升級到V3版本AnTuTu后,RAM成績大幅度增長
2D、3D繪圖方面的增長在我們看來還算可以理解,畢竟AnTuTu從一開始便已經寫明,這一次的版本升級帶阿里了全新的2D、3D圖形評測,因此不僅僅是Intel平臺,我們進行測試的其他幾個平臺在2D、3D這兩個得分項上,也都有非常明顯、甚至比Intel平臺還要更大一些的分數成長。但就RAM方面,其他幾個平臺V2、V3版本的測試中,分數僅僅提升了1000分左右,只有Intel平臺在這以細項中分數增長達到了290%,造成RAM分值如此巨大的差異的原因并沒有體現在AnTuTu的更新說明中,或者說從AnTuTu的更新說明來看,RAM的分值完全不應該發生這么大的變化。于是我們不得不對其產生質疑,AnTuTu的跑分,真的靠譜么?
相信關注了本次AnTuTu跑分爭議的朋友都在最近看到了AnTuTu的官方聲明,聲明表示AnTuTu早在網絡爆發對其質疑之前,就已經通過AnTuTu 3.3.2版本的發布,解決了此前高估Intel平臺性能的問題,并且主動降低了Intel平臺的跑分分數。AnTuTu官方表示,“此次事件源自我們對V3標準的極限追求,而使用了Intel編譯器”,“在8月13日,我們將公布一個全新的V4測試標準”。現在距離8月13日尚有一段時間,我們倒不如先來看看,從AnTuTu 3.3.1到AnTuTu 3.3.2,這兩個版本之間不同平臺的跑分又相差了多少。
AnTuTu v3.3.1/v3.3.2版本跑分對比
從版本號來看,3.3.1與3.3.2之間的變化絕對不會是一次重大的版本升級,因此我們可以看到APQ8064、驍龍600、800以及Exynos 5 Octa這幾個平臺的前后兩次的跑分分值基本持平,最大的分值差也僅僅只有1400分,在我們的評測中,仍可算做是合理的差值區間之內。不過再來看Intel平臺,升級前后的跑分分值有了近8000分的猛降,這算是AnTuTu“亡羊補牢猶未晚矣”么?老實說,這話咱們還真不能這么說。
AnTuTu官網的更新說明
我們從官網中找到了AnTuTu對于本次3.3.2版本的更新說明,“①增加Android SDK版本號信息,可以顯示真實Android版本;②增強在某些機器上的得分穩定性;③ 修正一些BUG”,這其中沒有任何一條能夠對Intel平臺本次跑分成績的驟降進行說明。從字面來講,一般用戶都會將其理解為,升級到3.3.2版本之后,AnTuTu可以顯示每一款手機真實的Android版本,部分手機運行中閃退的現象得以修正,增強了運行時的穩定性。
換句話說,如果沒有爆發出關于AnTuTu跑分可靠性、準確性的質疑,那么Intel平臺的用戶只能某一天突然發現跑分忽然降低了,為什么降低,哪里降低,沒有任何人會知道。而用戶在平時閱讀評測文章時,也同樣會質疑文章的準確性,“為什么上一次跑分還接近三萬,這一次就變成兩萬出頭了?”
說到這里我們又要再來看一下,本次驟降近8000分,Intel平臺的AnTuTu成績又是在哪里下降了。下面的圖表中可以很清楚的看到分數下降比較明顯的幾個跑分細項。但不管怎樣,還是如同我們前面所說的,這一從版本更新說明中完全尋不到任何跡象的大幅度分數下降,無疑讓我們對AnTuTu的可靠性、準確性、公平性都產生了質疑。
Intel Z2580 v3.3.1/v3.3.2跑分細項對比
同樣是AnTuTu綜合測試中的8個打分細項,這一次我們可以看到,在上一次V2升級到V3的過程中,分數增長了290%的RAM分值,這一次迎來了52%的分數驟降。同時CPU整數、浮點性能、3D繪圖性能也都有小幅度下降,最終造成了分數驟降8000余分的局面。
雖然我們也很像與大家一同探討RAM分值為什么下降的如此劇烈,但就像文章一開始所說,AnTuTu作為一款跑分軟件,從來沒有讓我們了解它的每一個測試環節都是在測試手機的哪一項性能表現、最終的分值中每一個小的打分項所占的比重又為什么是如同現在這樣安排。
只有Intel平臺(紅色)在幾次版本升級中迎來了分數的大起大落
在3DMark登陸移動平臺的時候,我們曾經推出了一篇文章來解讀3DMark的分數計算規則,包括其中的3個場景都各自測試哪些項目、最終的綜合成績通過怎樣的計算公式得出、以及普通的IceStorm測試與IceStorm Extreme測試在場景的復雜程度上又有怎樣的差異。想這些復雜的分數計算規則、測試標準等都是可以在3DMark的官方網站中找到的。相比之下,AnTuTu能夠給我們的僅僅是一個不知道是否準確的分數,以及一個不知道是否真實的“更新說明”。
最后還是再來總結一下吧,我們本次的評測并不是要在目前比較高端的幾個移動處理器平臺中找出一個性能王者,而是希望通過不同平臺在版本升級時分數的變化,來凸顯AnTuTu這款目前在國內非常流行的跑分軟件所存在的問題。首先,重要版本更新時,跑分結果變化巨大,使以往的跑分數據不再具備任何參考價值;其次,每一次的常規更新中,更新說明并不能真實反映版本升級后的變化,無法解釋分數大幅度變動的原因;最后,官方自稱在網友大面積質疑之前便已經發現跑分結果高估Intel平臺性能,卻直到網友進行質疑后才發表官方聲明,在此期間不準確的跑分結果已經對用戶造成了一定程度的誤導。
跑分并不是不可取,通過同一款軟件對不同產品的跑分,我們可以看出不同產品之間的性能差異。但這一切都需要簡歷在跑分數據足夠準確,足以作為衡量性能的標準的基礎上。AnTuTu在國內確實風靡已久,但最近我們也已經看到了AnTuTu存在的很多問題。在8月即將發布的V4版本中,很難說我們會不會再一次面對V3版本跑分數據全部作廢的局面,如果AnTuTu仍舊只是通過簡單的幾個句子就想要解釋分值上的巨大差異,那么我們只能說,這分數還是看看就好,改用其他更靠譜的跑分軟件才是上策。
4月14日,在青島萬達艾瑪酒店,沉寂了一年時間的劉耀平重新回歸...
家電中國網:老板電器作為中國廚電行業的第一品牌,售后服務是如...
Copyright © 2013 Power By Eforces All Rights Reserved 遼ICP備2025046929號 網站建設:易勢科技
家電中國網 版權所有