Google ถูก! ยุคของการวัดประสิทธิภาพและข้อมูลจำเพาะต้องจบลงในสมาร์ทโฟน

เผยแพร่แล้ว: 2022-10-31

ในที่สุดก็มีคนพูดออกมา เป็นคนที่เด่นมากในเรื่องนั้น ในพอดแคสต์ Made by Google เมื่อเร็ว ๆ นี้ Monika Gupta ผู้อำนวยการอาวุโสฝ่ายการจัดการผลิตภัณฑ์สำหรับ Google Silicon Teams กล่าวว่าสิ่งที่ผู้คนจำนวนมากในเทคโนโลยีรู้อยู่แล้ว แต่หลีกเลี่ยงที่จะพูดเพราะมันขัดกับการรับรู้ที่เป็นที่นิยมโดยสิ้นเชิง:

ข้อมูลจำเพาะและการวัดประสิทธิภาพนั้นมีประโยชน์ แต่เป็นฟังก์ชันที่มีความสำคัญ

smartphone benchmarks specs

จากการวิพากษ์วิจารณ์ชิป Tensor ของ Google สำหรับคะแนนการเปรียบเทียบที่ไม่ดี Gupta ค่อนข้างตรงไปตรงมา:

ฉันคิดว่าเกณฑ์มาตรฐานแบบคลาสสิกมีจุดมุ่งหมายในช่วงเวลาหนึ่ง แต่ฉันคิดว่าอุตสาหกรรมมีวิวัฒนาการตั้งแต่นั้นมา… เกณฑ์มาตรฐานแบบคลาสสิกถูกสร้างขึ้นในช่วงเวลาที่ AI และโทรศัพท์ไม่มีอยู่จริง พวกเขาอาจบอกเล่าเรื่องราวบางอย่าง แต่เราไม่รู้สึกว่าพวกเขาบอกเล่าเรื่องราวทั้งหมด… สิ่งที่เราเปรียบเทียบคือปริมาณงานซอฟต์แวร์จริงที่เรากำลังเรียกใช้บนชิปของเรา จากนั้นเราพยายามอย่างเต็มที่กับชิป Tensor ทุกรุ่นเพื่อให้ดีขึ้น ไม่ว่าจะเป็นคุณภาพที่ดีขึ้น ประสิทธิภาพที่ดีขึ้น หรือกำลังที่ต่ำกว่า

อยากทราบว่าโทรศัพท์ดีอย่างไร? ตรวจสอบเกณฑ์มาตรฐาน

บางคนอาจพบร่องรอยของการประชดประชันสำหรับมาตรฐานและข้อมูลจำเพาะทางเทคนิคเข้ามาอยู่ในการตรวจสอบสมาร์ทโฟนและภาพการวิเคราะห์กับการมาถึงของ Android ก่อนหน้านั้น ในยุคของ Nokia และ BlackBerry เป็นเรื่องยากที่จะทราบชื่อและความเร็วของโปรเซสเซอร์และ RAM ในอุปกรณ์ นับประสาอะไรกับคะแนนของโปรเซสเซอร์ สเปกเดียวที่พิจารณาโดยทั่วไปคือเมกะพิกเซลของกล้อง ขนาดจอแสดงผล (ความละเอียดไม่มากเท่ากับปัจจัย) และขนาดแบตเตอรี่ในระดับหนึ่ง

เปรียบเทียบกับวันนี้ เมื่อทุกอย่างในโทรศัพท์มีการทดสอบเกณฑ์มาตรฐาน เช่น โปรเซสเซอร์ จอแสดงผล กล้อง แบตเตอรี่...คุณตั้งชื่อมัน แล้วคุณจะพบมัน สิ่งเหล่านี้มีอยู่ในอดีตเช่นกัน แต่ในช่วงไม่กี่ครั้งที่ผ่านมา พวกเขาได้กลายเป็นดาราในรายการสมาร์ทโฟนแทนที่จะเป็นนักแสดงข้างเคียง ทุกวันนี้ เป็นเรื่องปกติที่จะเห็นแบรนด์เริ่มแบ่งปันคะแนนเกณฑ์มาตรฐานของโปรเซสเซอร์ของโทรศัพท์ การให้คะแนน DXO ของกล้อง และ/หรือรายละเอียดเกี่ยวกับระดับการแสดงผลก่อนวางจำหน่าย

สามารถเข้าใจที่มาของแบรนด์ในเรื่องนี้ เกณฑ์มาตรฐานและการให้คะแนนเหล่านี้ถูกมองว่าเป็น "บุคคลที่สาม" และเป็นการพิสูจน์ประสิทธิภาพและคุณภาพตามวัตถุประสงค์ และมักจะเป็นวิธีแสดงให้เห็นว่าผลิตภัณฑ์ใดดีที่สุดในบางหมวดหมู่หรือดีกว่าคู่แข่ง และนั่นก็เป็นแนวทางที่ยุติธรรมพอสมควร ท้ายที่สุดแล้ว การวัดประสิทธิภาพและการให้คะแนนถูกคิดค้นขึ้นเพื่อทดสอบส่วนประกอบ ดังนั้นจึงไม่สามารถละเลยได้ว่าพวกเขาทำได้ดีเพียงใดในแผนกนั้น

เกณฑ์มาตรฐานบลูส์: “พวกเขาอาจเล่าเรื่องบางอย่าง แต่ไม่ใช่เรื่องราวทั้งหมด”

ปัญหาเกิดขึ้นเมื่อมองว่าการวัดประสิทธิภาพเป็นแบบ be-all และ end-all เท่าที่เกี่ยวข้องกับอุปกรณ์ นักแข่งรถฟอร์มูล่าวันเคยกล่าวไว้ว่าตัวเลขบนรถยนต์นั้นไม่ดีเลย หากมันไม่ง่ายที่จะควบคุมและขับ และเช่นเดียวกันกับเกณฑ์มาตรฐานของสมาร์ทโฟน ดังที่คุปตะกล่าวไว้ว่า “ พวกเขาอาจเล่าเรื่องบางอย่าง แต่เราไม่รู้สึกว่าพวกเขาบอกเล่าเรื่องราวทั้งหมด ” โปรเซสเซอร์อาจมีคะแนนการวัดประสิทธิภาพที่ดี แต่ไม่สามารถชดเชยซอฟต์แวร์ที่มีปัญหาได้ ระดับ DXO ที่สูงสำหรับกล้องอาจปิดบังการประมวลผลที่เชื่องช้า มีเพียงเกณฑ์มาตรฐานและการให้คะแนนมากมายที่สามารถทำได้ สิ่งเหล่านี้เป็นเหมือนเงื่อนไขการทดสอบ ไม่ใช่ของจริง ที่แย่ไปกว่านั้นคือ ตอนนี้แบรนด์ต่างๆ เริ่มมุ่งเน้นไปที่คะแนนมาตรฐานที่ดี แทนที่จะเป็นประสบการณ์ของผู้บริโภคอย่างแท้จริง อันที่จริง คะแนนเกณฑ์มาตรฐานได้กลายเป็นส่วนสำคัญของการนำเสนอการเปิดตัวแบรนด์!

เครดิต Google ได้พยายามแยกระบบที่ขับเคลื่อนด้วยเกณฑ์มาตรฐานนี้มาระยะหนึ่งแล้ว เมื่อมันเข้ายึดครอง Motorola มันออกมาพร้อมกับอุปกรณ์อย่าง Moto G และ Moto X ซึ่งเน้นย้ำถึงประสิทธิภาพที่ราบรื่นและสร้างสรรค์มากกว่าสเปก แม้ว่าดูเหมือนว่าจะถูกดูดเข้าสู่สงครามข้อมูลจำเพาะด้วยช่วง Pixel แต่ Google ก็ออกมาพร้อมกับ Pixel รุ่น 'A' ที่ให้ประสิทธิภาพที่ดีพร้อมแผ่นข้อมูลจำเพาะที่ค่อนข้างเจียมเนื้อเจียมตัว และเมื่อย้ายไปยังแพลตฟอร์มโปรเซสเซอร์ Tensor ของตัวเองสำหรับ Pixels เมื่อปีที่แล้ว ยักษ์ใหญ่ด้านการค้นหาได้ชี้แจงอย่างชัดเจนว่าให้ความสำคัญกับการทำงานที่ชาญฉลาดมากกว่า "กำลัง" พลังที่กำหนดโดยคะแนนมาตรฐานนั่นคือ

เทนเซอร์: สิ่งที่ทำให้เกณฑ์มาตรฐานตึงเครียด

google tensor

Pixels ได้รับความนิยมเนื่องจากไม่ได้ทรงพลังเท่ากับอุปกรณ์ที่ขับเคลื่อนด้วยชิปเรือธงจาก Qualcomm และ MediaTek อย่างไรก็ตาม ประเด็นที่ควรทราบในที่นี้คือ พวกเขามักจะล้าหลังในสภาวะที่เฉพาะเจาะจงเท่านั้น เช่น ที่การตั้งค่าสูงสุดของเกมระดับไฮเอนด์หรือขณะประมวลผลวิดีโอขนาดยาว ในงานใช้งานทั่วไปส่วนใหญ่ Pixels นั้นดีพอๆ กับเรือธงของ Android หากไม่ดีกว่า และมาพร้อมกับฟีเจอร์อัจฉริยะมากมายที่แฟล็กชิปจำนวนมากขาดหายไป ใช่ พวกเขาอาจไม่โหลดเกมอย่างรวดเร็วเหมือนแฟล็กอื่น ๆ และอาจวางเฟรมคี่ที่นี่และที่นั่น แต่ความแตกต่างไม่ได้เลวร้ายอย่างที่คะแนนมาตรฐานระบุ ในฐานะผู้บริหารจากแบรนด์เทคโนโลยีเคยชี้ให้เห็นว่า “ คะแนนมาตรฐานควรมีความสำคัญหากโทรศัพท์ทำงานได้อย่างราบรื่นสำหรับผู้ใช้หรือไม่? เป็นการไม่ยุติธรรมที่จะโทรหาโทรศัพท์ที่ใช้พลังงานต่ำโดยพิจารณาจากชื่อโปรเซสเซอร์หรือคะแนนมาตรฐาน มันควรจะเกี่ยวกับว่ามันใช้งานได้ดีแค่ไหน ไม่ใช่ว่าคะแนนมาตรฐานเป็น อย่างไร ”

นี่ไม่ได้หมายความว่าการวัดประสิทธิภาพนั้นไร้ประโยชน์โดยสิ้นเชิงและเสียเวลาเปล่า พวกเขามีค่ามากในการให้การวัดประสิทธิภาพและระดับการเปรียบเทียบแก่เรา อย่างไรก็ตาม พวกเขาจำเป็นต้องเสริมการบรรยายเทคโนโลยีผู้บริโภคมากกว่าที่จะขับเคลื่อนมัน เกณฑ์มาตรฐานก็เหมือนกับการสอบทางวิชาการเล็กน้อย โดยเป็นการวัดว่าบุคคลนั้นรู้อะไร แต่ไม่ได้เป็นข้อพิสูจน์ความรู้ของบุคคลโดยไม่สามารถหักล้างได้ แม้แต่ไอน์สไตน์ก็ยังสอบตก เราได้สูญเสียการนับจำนวนอุปกรณ์ที่มีคะแนนเกณฑ์มาตรฐานที่น่าประทับใจไปแล้วอย่างตรงไปตรงมา แต่ติดอ่างและสะดุดในโลกแห่งความเป็นจริง

Google ได้ก้าวไปข้างหน้าอย่างกล้าหาญในโลกที่หมกมุ่นอยู่กับมาตรฐานโดยเลือกใช้ความฉลาดมากกว่าความเร็วที่แท้จริงด้วยชิปเทนเซอร์ เป็นเรื่องที่วิเศษมากที่ได้เห็นมันกลับมาเช่นกัน แม้ว่าผู้เชี่ยวชาญด้านเทคโนโลยีบางคนจะดูถูกเหยียดหยามคะแนนมาตรฐาน “ สิ่งที่เราเปรียบเทียบคือปริมาณงานซอฟต์แวร์จริงที่เราใช้บนชิปของเรา ” Gupta กล่าวในพอดคาสต์ เราคิดว่าเธอมีประเด็น ท้ายที่สุดแล้ว มันควรจะเกี่ยวกับว่าบางสิ่งทำงานได้ดีเพียงใด โทรศัพท์ที่มีเกณฑ์มาตรฐานสูงและประสิทธิภาพปานกลาง/แบบบั๊กๆ นั้นคล้ายกับอาหารที่มีส่วนผสมและการนำเสนอที่ยอดเยี่ยม แต่ก็ยังจบลงด้วยรสชาติที่แปลก เกณฑ์มาตรฐานมีประโยชน์อย่างไม่ต้องสงสัย แต่ถึงเวลาแล้วที่เราจะเริ่มมองข้ามมันไป