Testy Galaxy Note 7 i kujony, które uwielbiają je nienawidzić

Pomimo ogromnego wycofania w tej chwili, Galaxy Note 7 jest nadal jednym z najlepszych telefonów na rynku. I jest coś głęboko w sercu każdego nerda smartfona, który błyszczy za każdym razem, gdy ma telefon, który ktoś o jakimkolwiek stopniu władzy nazywa „najlepszym” i broni tego stwierdzenia w sposób, z którym się zgadza.

Uwaga 7 fanów ostatnio odebrało to uczucie inteligentnym ludziom z XDA-Developers. Dzięki połączeniu testów „rzeczywistych”, testów porównawczych i narzędzi do monitorowania systemu pisarze XDA opowiedzieli historię o jąkaniu, która zdawała się demonstrować, że ten błyszczący nowy telefon w pewnym sensie nie zasługuje na miejsce na szczycie stosu, więc umieściło go wielu recenzentów technicznych.

To zabawna lektura, zwłaszcza jeśli rozumiesz tylko to, co czytasz. Zanim rozważysz umieszczenie Note 7 z powrotem w sklepie, z którego pochodzi ta domowej roboty katapulta, musisz wiedzieć o testach porównawczych i testach w „prawdziwym świecie”.

Aplikacje testowe są bezcelowe

Jeśli używasz aplikacji porównawczej, aby powiedzieć, jak świetny lub straszny jest Twój telefon, nie uzyskasz niczego w pobliżu pełnego obrazu. Aplikacje testowe świetnie nadawały się do rozwiązywania problemów, istnieją, więc można było sprawdzić, czy nastąpiła jakaś utrata wydajności w czasie lub uszkodzenie sprzętu. Obecnie wielu producentów wdraża specjalny kod, który zmusza ten sprzęt do działania powyżej typowych progów, gdy używana jest aplikacja testowa, co nieodwracalnie zmienia wyniki. Mierzysz wersję sprzętu, do którego w przeciwnym razie telefon nigdy nie pozwala ci uzyskać dostępu, więc zyskujesz jedynie próbę uzyskania jak najlepszego wyniku, gdy uruchomisz dzisiaj aplikacje testowe.

Jeśli zauważysz, że Note 7 działa tak blisko, jak Nexus 6P, zastanów się, o ile więcej rzeczy robi Note 7.

Te zmiany oprogramowania wpływające na wydajność prowadzą do znacznie większego problemu. Porównując Galaxy Note 7 z Moto Z Droid Edition i Nexusem 6P, porównujesz trzy różne doświadczenia, które nigdy nie będą robić tego samego w tym samym czasie. Zarówno Samsung, jak i Lenovo mają zadania w tle, których nie można powielić na Nexusie 6P. Funkcje, których nie można wyłączyć, aby uzyskać porównanie wydajności oprogramowania 1: 1. Jeśli zauważysz, że Note 7 działa tak blisko, jak Nexus 6P, zastanów się, o ile więcej rzeczy robi Note 7. Jeszcze lepiej, spójrz na niezmiernie dokładniejszą recenzję wydajności Note 7 Anandtechu w porównaniu do wszystkich innych wysokowydajnych telefonów i zobacz, jak regularnie wyprzedza Nexusa 6P.

Testowanie takich elementów jak opuszczone klatki ma wartość, a raportowanie tych klatek w kontekście jest ważną rzeczą, gdy Twoim celem jest edukacja i informowanie potencjalnych nabywców. Trudno powiedzieć, że tak się stało z prezentacją z XDA, biorąc pod uwagę brak kontekstu lub właściwe porównanie. Czy Note 7 upuszcza więcej lub mniej klatek niż Galaxy S7 lub S7 Edge? Czy może to być problem wyłącznie w wariancie Snapdragon tego modelu? Czy dzieje się tak, ponieważ nowy interfejs użytkownika Grace firmy Samsung został wypędzony i można go naprawić w przyszłej aktualizacji? Na żadne z tych pytań nie ma odpowiedzi, ponieważ celem nie było poinformowanie.

Zbieranie wiśni w „prawdziwym świecie”

Niedługo po tym, jak XDA opublikowało swoje odkrycia, post z Vlad Verov z The Verge podjął próbę zastosowania rzeczywistości w początkowej eksplozji Internetu. W tym wykazano, że niektóre ustalenia dotyczące XDA nie były tak naprawdę ustaleniami. W szczególności twierdzenie, że 200 ms różnica w uruchamianiu aplikacji było przykładem „zawstydzającej wydajności”, jest głupie i nie reprezentuje tego, jak ludzie faktycznie używają smartfonów. XDA odparł z większą ilością danych, próbując wzmocnić swoją pozycję. Kontrargument, że opóźnienie 200 ms sumuje się z czasem do telefonu w taki sposób, że użytkownik Note 7 chwyta Nexusa 6P i jest zaskoczony, jak szybko „czuje się”, jest wymuszany przez GIF-y pokazujące te różnice w wydajności.

Fascynujące w tej demonstracji jest zbieranie wiśni. Oprogramowanie Samsunga jest dalekie od ideału; w rzeczywistości po odinstalowaniu 13 aplikacji z mojej nowej błyszczącej wersji Verizon Note 7 i znalezieniu ośmiu innych, których nie mogę wyłączyć, chcę teraz rozbić moje młotkiem. Siedząc na tym telefonie obok mojego świeżo wypełnionego Nougatem Nexusa 6P, są absolutnie pewne aspekty tej Note 7, które są wyraźnie szybsze. Na przykład kamera rutynowo uruchamia się o pełną sekundę szybciej. Nietrudno byłoby wybrać pół tuzina przykładów, podnieść GIF-y i napisać coś, co wygląda jak dowód na to, że Note 7 jest lepszy od Nexusa 6P.

Chodzi o to, że nie tak działają testy w świecie rzeczywistym. Celem rzeczywistych testów, jak sama nazwa wskazuje, jest przedstawienie przykładów wydajnościowych działania całego telefonu, tak jakby „przeciętny” użytkownik miał z niego korzystać. Używanie tych danych do porównywania jednego doświadczenia z drugim jest trudne, zamiast oferować porównanie oprogramowania 1: 1, ponieważ funkcjonuje, oferujesz porównanie 1: 1 doświadczenia, jak wygląda korzystanie z telefonów. Pokazanie, jak ładuje się menu udostępniania, szczególnie gdy te telefony wyraźnie nie są skonfigurowane w ten sam sposób w tych samych aplikacjach, nie pasuje do tego opisu. Chyba, że ​​oczywiście popychasz inną narrację.

Lepsze narzędzia i rzeczywista analiza

Prawdziwą wadą tego wszystkiego jest błędne założenie, że Note 7 firmy Samsung i Nexus 6P firmy Google zostały zbudowane w tym samym celu. Proste i proste, nie są. Doświadczenie Google Nexus ewoluowało od czystego zestawu deweloperskiego do demonstracji projektu Android Open Source z kilkoma dodatkami. Telefony Samsunga nie zaczęły od AOSP od dawna i nie ma powodu, aby firma rozważała teraz inną ścieżkę.

Telefony Samsung są oparte na systemie Android, a nie Android.

Telefony Samsung są oparte na systemie Android, a nie Android. W rezultacie telefony Samsung są optymalizowane w sposób, który uznają za najważniejszy. Obecnie te optymalizacje mają na celu dostarczenie unikalnych funkcji Samsunga, takich jak aparat Samsunga, Samsung Pay i unikalne funkcje S Pen. Android, przez który mam na myśli system operacyjny, nie traktuje tych kwestii priorytetowo. W ostatnich wydaniach skupiono się na takich kwestiach, jak zużycie baterii, gdy nie korzystasz z telefonu, bezpieczeństwo przez cały czas i spójny interfejs użytkownika 60 FPS. Trudno argumentować, że żadna z tych rzeczy nie jest ważna, ale ani Android Samsunga, ani Android Google'a nie nadają priorytetu tym wszystkim.

Naprawdę sprowadza się to do tego, że jako użytkownik umieszczasz priorytet. Jeśli chcesz mieć najbezpieczniejszy telefon z eleganckim, nieobciążonym interfejsem, prawdopodobnie chcesz, aby Google i HTC wkrótce ogłosiły. Jeśli zależy Ci na świetnym aparacie i oprogramowaniu, które oferują mnóstwo funkcji, z których możesz korzystać lub nie, Samsung Galaxy Note 7 jest obecnie trudny do pokonania. Próba twierdzenia, że ​​Note 7 jest w jakiś sposób nieskuteczny, ponieważ nie zachowuje się jak telefon, w którym nie został zbudowany, jest absurdalny, bez względu na to, jak mocno starasz się zawrzeć tę narrację w testach porównawczych.