Dlaczego nie dbamy o testy porównawcze Galaxy S7

Czy słyszałeś o facecie, który był podekscytowany testem wydajności niesprawdzonego procesora w niepotwierdzonym środowisku, które zmierza w kierunku niezapowiedzianego telefonu, który prawdopodobnie nie byłby jeszcze gotowy do produkcji i oficjalnych testów? To prawdziwa klapsa na kolana, spodoba ci się.

Jest ta pora roku, kiedy zaczynamy otrzymywać stały strumień informacji o telefonach, o których usłyszymy w oficjalnym charakterze w ciągu najbliższego miesiąca lub dwóch. Z oczywistych powodów Samsung Galaxy S7 jest wysoko na liście rzeczy, o których ludzie chcą słyszeć więcej. Prowadzi to do wielu niepotwierdzonych raportów, wycieków z blurrycamu i załamywania rąk na temat tego, co to wszystko znaczy. Ponad wszystko, co mamy testy, najbardziej bezużyteczne informacje, które moglibyśmy uzyskać o niewydanym sprzęcie z nowymi procesorami.

Prawda jest taka, że ​​większość testów porównawczych dla smartfonów jest bezcelowa, ale wczesne niedokończone i nieoficjalne testy porównawcze są podwójne. Oto krótkie spojrzenie na dlaczego.

Nie jesteśmy jeszcze blisko do zobaczenia gotowych produktów

Wszelkie testy porównawcze, które pojawią się w ciągu najbliższych kilku tygodni, pochodzą z dwóch miejsc. Widzimy albo wyprodukowane przez Samsunga płyty programistyczne Snapdragon 820, albo niedokończone prototypy Samsunga Galaxy S7. Żadne z nich nie da Ci żadnych wyników w pobliżu wyników, jakie otrzymasz w aplikacji detalicznej, gdy przyjdzie czas na zakup telefonu. Te liczby testów przedpremierowych nigdy nie dorównywały wynikom jednostek wypuszczanych i nigdy nie będą.

Proste i proste, te wyniki nic ci nie mówią.

Płyty deweloperskie często nie muszą uwzględniać zasilania z baterii ani konieczności zwracania uwagi na takie czynniki, jak temperatura. Zestawy te zostały opracowane dla programistów w celu szybkiej optymalizacji oprogramowania pod kątem nowych architektur przetwarzania lub podstawowych narzędzi programowych, które Qualcomm oferuje w tym roku w celu lepszej obsługi obrazu w aparatach lub lepszego wsparcia audio. Benchmarki na płycie programisty nawet nie dają szerokiego wyobrażenia o tym, do czego zdolne są te układy, ponieważ często system operacyjny na nich działający nie jest specjalnie zoptymalizowany. Proste i proste, te wyniki nic ci nie mówią.

Jednostki przedprodukcyjne również nie wskazują na rzeczywiste doświadczenia. W tych wersjach telefonów często działa niedokończone oprogramowanie lub brakuje nadętych aplikacji, takich jak oprogramowanie zabezpieczające, które spowalniają telefony, działając w tle. Prototypowe testy porównawcze często są bliższe rzeczywistości niż zestawy deweloperów, ale wciąż są wystarczająco odległe od rzeczywistych doświadczeń, że nie warto brać ich na poważnie.

Krótko mówiąc, dopóki nie zobaczymy liczb na jednostkach handlowych, po prostu powiedz nie.

Testy często są i tak manipulowane

W ciągu ostatnich kilku lat widzieliśmy raport po raporcie od twórców aplikacji porównawczych producentów, którzy trochę podeszli do sposobu, w jaki ich telefony współdziałają z tymi aplikacjami do oceny wydajności. Widzieliśmy specjalny kod, który zwiększa szybkość taktowania procesora tylko wtedy, gdy uruchomiony jest test porównawczy, co prowadzi do liczb, które nie są zbliżone do rzeczywistych warunków korzystania z tych telefonów. Samsung nie jest tu aniołem - i to samo dotyczy innych - zdarzyło się to więcej niż raz i z jakiegokolwiek powodu wielu użytkowników nie przejmuje się tym.

Po co ekscytować się testami porównawczymi, gdy powtarzają się przypadki pisania kodu w celu zwiększenia ich liczby w sposób, który nie odzwierciedla rzeczywistego wykorzystania tych telefonów? Wszyscy wiemy, że powodem, dla którego większość użytkowników przeprowadza testy porównawcze, jest konkurowanie z innymi telefonami, tak jakby ich telefony były w jakiejś dziwnej cyfrowej konkurencji siłaczy, ale po co te informacje nie są prawdziwe?

Wszystko, co naprawdę się liczy, to sposób, w jaki telefon - niezależnie od tego, czy jest to Galaxy S7, czy coś innego - działa, gdy jest w twoich rękach, robiąc rzeczy, które chcesz, a jeśli aplikacje do testów porównawczych nie są w stanie dokładnie tego zmierzyć, ponieważ producenci kradną wyników, potrzebujemy lepszych sposobów pomiaru wydajności w realnym świecie.

Oprogramowanie instalowane podczas korzystania z telefonu ma znaczenie

Widząc testy porównawcze, które ktoś inny publikuje ze swojego Galaxy S7, nawet jeśli jest to wersja detaliczna, a nawet jeśli nie ma oprogramowania do fałszowania wyników, nadal nie będzie dokładnie powiedzieć, jakie będzie doświadczenie po wprowadzeniu się do własnego Galaxy S7. Telefon od razu po wyjęciu z pudełka, zawierający tylko podstawowe aplikacje, będzie działał inaczej po załadowaniu wszystkich aplikacji i rozpoczęciu ich używania. Pamięć podręczna aplikacji, uruchomione procesy, a nawet dostęp do danych z pamięci zewnętrznej będą miały wpływ na ogólną wydajność telefonu.

Testy porównawcze pokazują, jak będą wyglądać próby przekroczenia granic możliwości telefonu.

Nie oznacza to, że testy porównawcze w podobnych warunkach są całkowicie bezwartościowe, to po prostu oznacza, że ​​nadal nie widzisz całego obrazu. I nie zrobisz tego, ponieważ tak naprawdę nie ma sposobu, aby testy porównawcze dały Ci dobry obraz tego, jak zachowa się Twój telefon, gdy będzie w Twojej ręce i będzie używany przez Ciebie. To, co otrzymujesz z testów porównawczych, gdy pochodzą one z urządzeń detalicznych bez oprogramowania zmieniającego wydajność, to rozmyte spojrzenie na pułap potencjalnej wydajności. Możesz zobaczyć, jak będą wyglądać rzeczy, gdy spróbujesz przesunąć telefon do granic możliwości, co tak naprawdę dzieje się tylko w grach wymagających dużej ilości zasobów lub w zabawie z ustawieniami aparatu. Tak naprawdę nic nie czujesz.

Nie oznacza to, że nie powinieneś ekscytować się Samsung Galaxy S7. W ciągu ostatniego roku widzieliśmy wiele imponujących rzeczy od Samsunga, a jeśli pogłoski o trzech telefonach zmierzających do świata z tym brandingiem od razu okażą się prawdą, będzie jeszcze więcej powodów, aby zwracać uwagę na to, jak te telefony wykonać, abyś mógł najlepiej określić, które doświadczenie jest dla Ciebie. Oznacza to, że testy porównawcze nie dostarczą potrzebnych informacji w jakikolwiek wiarygodny sposób, a najlepszą rzeczą do zrobienia w tej chwili jest poczekanie, aż te telefony zaczną docierać do osób, które mogą pokazać, jak zachowują się te telefony w prawdziwym świecie.