„Huawei“ pagavo manipuliuoti etalonais, paskelbė pareiškimus, kaltinančius Kinijos rinką

„Huawei“ etalonas leidžia atlikti privačius ir viešus bandymus naudojant manipuliuojamą SoC galią.

Prieš kelias savaites mes apėmėme „Huawei“ naudojant profesionalų veidrodinį fotoaparatą reklamoje apie savo asmenukių galimybes ir panašu, kad jie tiesiog negali nustoti ieškoti būdų, kaip išmėginti vartotojus - šį kartą - jo etalonus, kuriais jie manipuliuoja.

Lyginamieji indeksai yra populiarūs ir ( iki dabar?) teisėtas būdas parodyti įrenginio našumą - ar jo procesoriaus, GPU ar sistemos našumo etalonai. Pagrindinis kriterijų tikslas yra suteikti vartotojams tikslų rezultatą, kaip prietaisai veikia esant įtampai.

Deja, atrodo, kad „Huawei“ į kai kuriuos naujausius savo įrenginius įtraukė „etalono aptikimo mechanizmą“. Šis mechanizmas iš esmės daro tai, kad SoC pasiekia daug didesnę galios ribą ir šiluminę laisvą erdvę, kai nustato, kad tam tikrose programose jis yra lyginamasis. Taigi, rezultatas bus daug didesnis nei vartotojai paprastai naudojasi kasdien. Tai ne tik nesąžininga, jos pavojinga per visą „SoC“ gyvavimo laiką ir gali labai greitai perkaisti įrenginį ir sutrumpinti jo baterijos veikimo laiką.

„Huawei“ šios praktikos gynimą galima apibendrinti taip: tai daro ir visi kiti! “ - ir, deja, jie iš tikrųjų teisūs. „Benchmark“ sukčiavimas nėra visiškai naujiena - prieš dešimtmetį jis buvo siaučiantis asmeninių kompiuterių scenoje, o kurį laiką buvo ir mobiliojo ryšio scenoje.

Įvairūs įrenginiai buvo pašalinti iš „3DMark“, kad būtų galima manipuliuoti etalonu.

„Exynos“ „Samsung Galaxy S4“ variantas buvo užfiksuotas atliekant panašias etalonines apgaulės praktikas, o mobiliųjų apžvalgų svetainės redaktoriai „AnandTech“ atrado daugybę kitų išmaniųjų telefonų pardavėjų, kurie taip pat manipuliavo etaloniniais duomenimis. Tai paskatino daugybę įrenginių, tokių kaip „Galaxy S4“, „Galaxy Note 3“, „HTC One“ ir daugelį kitų išbraukta iš „3DMark“ duomenų bazės.

Nors dauguma gamintojų nustojo elgtis po to, kai buvo iškviesti, keli tęsėsi - pavyzdžiui, „OnePlus“ ir toliau apgaudinėjo tokius populiarius etalonus kaip „GeekBench“, nors, matyt, sustabdė praktiką nuo „OnePlus 5T“, kuris iš tikrųjų yra puikus įrenginys ir yra labai populiarus modingo ir kūrėjų bendruomenė, todėl galbūt „OnePlus“ manė, kad to nepadarė reikia manipuliuoti etaloniniais duomenimis.

Deja, atrodo, kad „Huawei“ pasirenka ten, kur kiti įrenginių pardavėjai liko, nes yra patikrintų pranešimų apie „Huawei“ manipuliavimą etalonais su tokiais įrenginiais, kaip „Huawei P20“, „Huawei P20 Pro“ ir „Honor Play“. Iš esmės „Huawei P20“ našumas buvo sumažėjęs, palyginti su „Huawei Mate 10 Pro“ - ir tuo metu „Huawei“ teigė, kad tai buvo „ programinės aparatinės įrangos problema “- visiškai drąsus melas, nes tai iš tikrųjų buvo dėl minėto etalono aptikimo mechanizmo, kuris sukelia žymiai aukštesnę SoC galios ribą.

Tai kenkia ne tik pačiam SoC, nes tai padarius sumažėja bendras SoC efektyvumas, nes SoC yra stumiamas gerai lauke įprasto veikimo lango ( įsivaizduokite, kad įsijungsite savo procesorių tiek, kiek jis gali būti be terminio tepalo) . Tačiau tai taip pat yra blogai turgus pats.

Pirma, dėl to SoC atrodo blogai, tarsi jis būtų poreikiai manipuliuoti etaloniniais duomenimis, kad juos būtų verta parduoti. Antra, tai kelia abejonių Kinijos išmaniųjų telefonų rinkoje, kurioje jau gausu imitacijų, klonų ir šešėlinių praktikų. Be to, „Huawei“ lyginamasis elgesys, ko gero, kol kas yra pats baisiausias, nes yra tikrai masinis efektyvumo rezultatų skirtumas, kai įjungtas etalono aptikimo mechanizmas, palyginti su tada, kai jis išjungtas. Tiek to „AnandTech“ pažymėjo, kad viešai prieinamų lyginamųjų rezultatų ir jų pačių vidaus testų skirtumai buvo „ visiškai stebina “.

„Huawei“ atsakė į tai, kad sužinojo, ir kaip jau minėjome anksčiau, jų atsakymas iš esmės buvo „ tai daro ir visi kiti “. Ką jie pažodžiui pasakė ( citata iš „Wang Chenglu“, „Huawei“ vartotojų verslo grupės programinės įrangos pirmininko) buvo „ kiti daro tą patį, gauna aukštus balus, o „Huawei“ negali tylėti. „Huawei“ nori susitikti su kitais Kinijos atstovais, kad surastų geriausią vartotojo patirties tikrinimo etaloną “.

Daktaras Wangas taip pat atkreipė dėmesį į kitus gamintojus su klaidinančiais etalonų skaičiais ir įvardijo neįvardytą populiarų išmaniųjų telefonų gamintoją Kinijoje kaip didžiausią kaltininką. Pasak dr. Wango, etaloninis sukčiavimas tapo „įprasta praktika Kinijoje“, ir nors „Huawei“ nori „atsiverti“ vartotojams, jiems kyla problemų, kai konkurentai „nuolat skelbia nerealius balus“. „Huawei“ bando atremti savo pagrindines Kinijos varžybas - užduotį, atrodo, apsunkina, kai kiti įrenginių gamintojai pateikia nerealius balų skaičius.

Apibendrinant, „Huawei“

1. Pripažįsta, kad jie manipuliuoja etaloniniais skaičiais
2. Pripažįsta, kad visi kiti Kinijos telefonų rinkoje tai daro
3. Neketina sustoti dėl Nr. 2.

Kaip kas gali pasitikėjimas Kinijos telefonų rinkoje po tokio pobūdžio daiktų? Bet kokiu atveju „Huawei“ padarė pareiškimą, kad bendrovė „ užtikrinti, kad būsimi etaloniniai duomenys būtų nepriklausomai tikrinami trečiųjų šalių “.

„Huawei“ išsiuntė išsamų atsakymą į XDA:

„„ Huawei “visada teikia pirmenybę vartotojo patirčiai, o ne siekia aukštų etalonų - ypač todėl, kad nėra tiesioginio ryšio tarp išmaniųjų telefonų etalonų ir vartotojo patirties. „Huawei“ išmanieji telefonai naudoja pažangias technologijas, tokias kaip AI, kad optimizuotų aparatinės įrangos, įskaitant procesorių, GPU ir NPU, našumą.

Kai kas nors paleidžia fotografavimo programą arba žaidžia daug grafikos reikalaujantį žaidimą, intelektualioji „Huawei“ programinė įranga sukuria sklandų ir stabilų vartotojo patirtį, pritaikydama visas aparatinės įrangos galimybes, kartu valdydama įrenginio temperatūrą ir energijos vartojimo efektyvumą. Programoms, kurios nėra tokios energijos reikalaujančios, kaip naršymas internete, ji skirs tik reikiamus išteklius, kad užtikrintų reikiamą našumą.

Įprastais palyginimo scenarijais, kai „Huawei“ programinė įranga atpažįsta lyginamosios analizės programą, ji protingai prisitaiko prie „Performance Mode“ ir užtikrina optimalų našumą. „Huawei“ planuoja suteikti vartotojams prieigą prie „Performance Mode“, kad jie galėtų išnaudoti maksimalią savo prietaiso galią, kai to reikia.

„Huawei“ - kaip pramonės lyderė - nori bendradarbiauti su partneriais, kad surastų geriausius etalonų standartus, kurie galėtų tiksliai įvertinti vartotojo patirtį “.

Bet kuriuo atveju, tiesa bėgo etalonai „AnandTech“ išbandė „Huawei P20“, „P20 Pro“ ir „Honor Play“ - ir visi įrenginiai veikė panašiai, nes visi turi tą patį „HiSilicon Kirin 970 SoC“, tačiau tikrąjį kiekvieno įrenginio našumą riboja šiluminės ribos, nes kiekviename įrenginyje yra skirtinga važiuoklės ir aušinimo konstrukcija. „Huawei P20 Pro“ turi geriausius terminius elementus, todėl jis veikia geriau tikros būsenos sąlygomis.

Redaktorius „AnandTech“ , Andrejus Frumusanu, pasakė:

„Praeityje matėme, kad pardavėjai iš tikrųjų padidina SoC dažnius arba užrakina juos maksimalioje būsenoje, padidindami našumą, viršijantį įprastą bendrųjų programų galimybes. Tai, ką vietoj to daro „Huawei“, didina etalonų rodiklius iš kitos pusės - lyginamosios analizės programos yra vieninteliai naudojimo atvejai, kai SoC iš tikrųjų veikia savo reklamuojamu greičiu. Tuo tarpu kiekviena kita realaus pasaulio programa yra žymiai žemesnė už šią būseną dėl aparatūros šiluminių apribojimų. Tai, ką mes galų gale matome nesutramdžius, galbūt yra „tikroji“ nevaržomo SoC forma, nors tai yra visiškai akademinė, palyginti su tuo, ką vartotojai iš tikrųjų patiria “.

Jų grafikai rodo, kad naujausi „Huawei“ telefonai jau pasiekia 3,5–4,4 W savo tikrąją veikimo būseną, o 3,5 W TDP yra maksimali suma, kurią galima išlaikyti. Kita vertus, atliekant viešai prieinamus etalonus, telefonas per daug sparčiau veikia su TDP, o galios rodikliai viršija 6 W ir pasiekia 8,5 W. Kaip pažymėjo „AnandTech“, šie skaičiai greitai sukelia prietaiso perkaitimo pranešimą, reiškiantį šilumos ribų neatitikimą programinės įrangos lūkesčiams.

Iš šios situacijos galima tikėtis, kad tikrieji našumo rodikliai nėra stabilūs, nes jie priklauso nuo telefono temperatūros. „Huawei“ netrukdo GPU pasiekti aukščiausią GPU dažnio būseną. Numatytasis elgesys iš tikrųjų yra „atšiaurus terminio droselio mechanizmas […], kuris bandys išlaikyti žymiai žemesnę SoC temperatūros lygį ir bendrą energijos suvartojimą“.

Telefonų įprastas režimas GPU etalonų metu gali pasiekti tuos pačius didžiausius energijos suvartojimo rodiklius, kuriuos skelbia nedarnūs variantai. Tačiau šie skaičiai greitai žymiai sumažėja, o „AnandTech“ pažymi, kad kai kuriais atvejais telefonas sumažėja iki 2,2 W, o tai žymiai sumažina našumą.

Leidinyje teigiama, kad lyginamasis sukčiavimo elgesys, atrodo, buvo įvestas tik šių metų prietaisuose. Tokie telefonai kaip „Huawei Mate 9“ ir „Huawei P10“ neturi įtakos, atrodo, kad tai paveikė tik „EMUI 8.0“ ir naujesnius įrenginius. „AnandTech“ taip pat „Huawei“ sakė, kad tai „grynai programinės įrangos diegimas“, o tai patvirtina leidinio išvadas.

„AnandTech“ paskelbė tikrus GPU našumo duomenis apie paveiktus „Kirin 970“ telefonus, ir daroma išvada, kad „Huawei“ yra žymiai atsilieka nuo konkurentų tiek GPU našumu, tiek efektyvumu .

Leidinyje taip pat paskelbti „Kirin 970“ ir „Kirin 960“ varomų „Huawei“ įrenginių galios palyginimo grafikai. Grafikai rodo, kad „Huawei“ galios ribojimo reguliavimas iš tikrųjų yra naudingesnis vartotojo patirčiai, nes jie sušvelnina didesnio energijos suvartojimo problemą. „AnandTech“ atliktas „Kirin 960“ bandymas parodė, kad jis pasižymėjo „siaubingomis GPU galios charakteristikomis“, o „Kirin 970“ varomi prietaisai turi naują griežtą droselio mechanizmą, kuris sumažina energijos suvartojimą ir temperatūrą.

„AnandTech“ taip pat paminėjo, kad naujoji droseliavimo politika yra prasminga, atsižvelgiant į tai, kad tiek „Kirin 960“, tiek „Kirin 970“ rodo jėgos pritraukimą, kuris gerokai viršija tvarų jų atitinkamų formos veiksnių lygį.

Nors „Huawei“ nebūtinai padarė nieko blogo, įvesdamas naują droseliavimo mechanizmą, jie, be abejo, peržengė apgaulės slenkstį, išimdami populiarias etalonų programas per baltąjį sąrašą, kuris šiuo atveju vadinamas „etaloniniu sukčiavimu“.

UL, įsigijusi „FutMark“, „PCMark“ ir „3DMark“ kompaniją, išbraukė „Huawei P20“, „Huawei P20 Pro“, „Huawei Nova 3“ ir „Honor Play“ iš „3DMark“.

Bendrovė patikrino „Huawei P20 Pro“, „Huawei Nova 3“ ir „Honor Play“ lyginamąjį sukčiavimą. Remdamasis „AnandTech“ bandymais ir ataskaitomis, jis taip pat išbraukė standartinį „Huawei P20“. Vartotojai nebegalės peržiūrėti paveiktų telefonų palyginamųjų rezultatų, nes bendrovė nenori rengti apgautų etalonų rezultatų.

Bendrovė nustatė, kad viešosios „3DMark“ programos balai buvo iki 47% didesni nei privačios programos (kuri nėra prieinama visuomenei), nepaisant to, kad testai yra identiški.

Pranešime UL pridūrė, kad džiaugiasi matydamas „Huawei“ įsipareigojimą ateityje taikyti skaidresnį požiūrį. UL nuomone, pagal dabartines taisykles leidžiami neprivalomi našumo režimai, kuriuos gali nustatyti vartotojas, jei jie pagal nutylėjimą yra išjungti. Bendrovė teigia: „Įrenginys turi vykdyti etaloną taip, lyg tai būtų bet kuri kita programa.“

Apibendrinant galima teigti, kad visi „Huawei“ GPU našumo etalonai, kurie buvo paimti naudojant viešai prieinamus etalonus, neturėtų būti laikomi faktinio našumo vaizdu.

„Huawei“ kreipėsi į UL, kad aptartų geriausią etalonų testavimo praktiką ir paskelbė pareiškimą:

„„ Huawei “ir„ UL “(„ 3DMark “kūrėjai) šią savaitę surengė išsamias diskusijas apie palyginimo praktiką ir pasiekė teigiamą susitarimą dėl tolesnių veiksmų kartu.

Diskusijoje „Huawei“ paaiškino, kad jos išmaniuosiuose telefonuose naudojamas dirbtinis intelektualiųjų išteklių planavimo mechanizmas. Kadangi skirtingi scenarijai turi skirtingus išteklių poreikius, naujausi „Huawei“ telefonai naudoja novatoriškas technologijas, tokias kaip dirbtinis intelektas, kad optimizuotų išteklių paskirstymą taip, kad aparatinė įranga galėtų kuo geriau parodyti savo galimybes, tuo pačiu patenkindama vartotojo poreikius visais atvejais.

UL supranta „Huawei“ požiūrio tikslą, tačiau neprieštarauja priversti naudoti „Performance Mode“ pagal numatytuosius nustatymus, kai įrenginys aptinka etalono programą. Pagal UL taisykles reikalaujama, kad įrenginys atliktų etaloną taip, lyg tai būtų bet kuri kita programa.

„Huawei“ gerbia vartotojų teisę pasirinkti, ką daryti su savo įrenginiais. Todėl „Huawei“ suteiks vartotojams atvirą prieigą prie „Performance Mode“ EMUI 9.0, kad vartotojas galėtų pasirinkti, kada naudoti maksimalią savo įrenginio galią.

„Huawei“ ir UL taip pat apskritai aptarė dabartines bendras etalonų testavimo metodikas. UL ir „Huawei“ norėtų dalyvauti pramonės judėjime, kad būtų sukurti etalonų standartai, kurie geriausiai atitiktų gamintojų, spaudos ir vartotojų poreikius.

Kad būtų išvengta painiavos dėl dabartinių lyginamosios analizės rezultatų, po diskusijų UL ir „Huawei“ laikinai išbraukė daugelio „Huawei“ įrenginių etalonus ir atkurs juos, kai „Huawei“ suteiks visiems „Huawei“ telefonų vartotojams prieigą prie našumo režimo. “