เนื้อหา
Google Pixel 4 และ Pixel 4 XL นำเสนอคุณลักษณะซอฟต์แวร์และความสามารถของกล้องที่ดีที่สุดเท่าที่เคยมีมาซึ่งส่วนหนึ่งมาจากการรวมของ Pixel Neural Core ชิปตัวนี้ตั้งอยู่ข้างๆโปรเซสเซอร์หลักของ Pixel 4 เพื่อให้สามารถทำงานได้อย่างมีประสิทธิภาพของ Google ช่วงเหล่านี้มีตั้งแต่การประมวลผลภาพไปจนถึงการจดจำเสียงและความสามารถในการถอดรหัส
Neural Core ไม่ใช่รอยแตกแรกของ Google ที่หน่วยประมวลผลการเรียนรู้เครื่องจักรภายในสำหรับสมาร์ทโฟน Pixel 2 และ 3 มาพร้อมกับ Pixel Visual Core ออกแบบมาเพื่อลดภาระงานถ่ายภาพอย่าง HDR + เพื่อประสิทธิภาพที่เพิ่มขึ้นและประสิทธิภาพการใช้พลังงาน Neural Core ของ Pixel 4 สร้างบนรากฐานนี้ด้วยความสามารถที่ได้รับการปรับปรุงและการเลือกใช้เคสใหม่
อย่าพลาด: นี่คือโหมด Astro ของ Pixel 4
แกนประสาทของ Pixel ทำงานอย่างไร
Google ยังไม่ได้แชร์รายละเอียดเกี่ยวกับสิ่งที่เกิดขึ้นภายใน Neural Core อย่างไรก็ตามเรารู้วิธีการทำงานของ Visual Core รุ่นก่อนหน้าและประเภทของเทคนิคที่ใช้ในการประมวลผลของเครื่องจักรการเรียนรู้ (ML)
ซึ่งแตกต่างจากซีพียูแบบดั้งเดิมที่สร้างขึ้นเพื่อจัดการกับงานการคำนวณที่หลากหลายตัวประมวลผลการเรียนรู้ของเครื่องจักร (NPUs) เช่น Neural Core นั้นได้รับการปรับให้เหมาะกับงานทางคณิตศาสตร์ที่ซับซ้อนโดยเฉพาะ สิ่งนี้ทำให้พวกเขามากขึ้นเช่นตัวประมวลผลสัญญาณดิจิตอล (DSP) หรือหน่วยประมวลผลกราฟิก (GPU) แต่ปรับให้เหมาะสมสำหรับการทำงานเฉพาะที่ใช้โดยอัลกอริทึมการเรียนรู้ของเครื่อง
การรวมทวีคูณแบบหลอมรวมเป็นการดำเนินการเกี่ยวกับภาพและเสียง ML ที่ใช้กันทั่วไปซึ่งคุณจะไม่พบการรองรับในวงกว้างสำหรับซีพียู ซึ่งแตกต่างจาก CPU 32 และ 64 บิตที่ทันสมัยการดำเนินการเหล่านี้ดำเนินการกับขนาดข้อมูลเพียง 16, 8 และ 4 บิต ต้องใช้บล็อกฮาร์ดแวร์ที่กำหนดเองเพื่อสนับสนุนการดำเนินการเหล่านี้อย่างมีประสิทธิภาพสูงสุด
Neural Core เร่งความเร็วอัลกอริธึมของภาพและเสียงที่ทำงานบน CPU หรือ GPU ได้อย่างมีประสิทธิภาพน้อยลง
Neural Core สร้างหน่วยคำนวณทางคณิตศาสตร์แบบพิเศษลงในฮาร์ดแวร์เพื่อจัดการกับคำแนะนำเหล่านี้อย่างรวดเร็วและใช้พลังงานน้อยที่สุดแทนที่จะใช้ CPU หลายรอบ ชิปส่วนใหญ่ประกอบด้วย ALU เหล่านี้หลายร้อยรายการในหลายคอร์พร้อมหน่วยความจำภายในที่ใช้ร่วมกันและไมโครโปรเซสเซอร์ควบคุมดูแลการจัดตารางงาน
Google จะปรับการออกแบบฮาร์ดแวร์ล่าสุดให้เหมาะสมที่สุดโดยใช้อัลกอริทึมของซอฟต์แวร์ผู้ช่วยเสียงและภาพ การพึ่งพาความสามารถ ALU ของ Neural Core คือสาเหตุที่คุณสมบัติการถ่ายภาพล่าสุดของ Pixel 4 จะไม่นำไปใช้กับโทรศัพท์มือถือรุ่นเก่า
แกนประสาทสามารถทำอะไรได้บ้าง
Neural Core ดูเหมือนจะเป็นส่วนประกอบสำคัญในฟังก์ชั่นใหม่จำนวนมากที่บรรจุอยู่ใน Google Pixel 4 และ Pixel 4 XL ศูนย์ปรับปรุงเหล่านี้ส่วนใหญ่เกี่ยวกับการประมวลผลภาพและเสียง
ในด้านการถ่ายภาพรายการนี้มีการควบคุมการเปิดรับแสงแบบคู่, โหมด astrophotography, การแสดงสด HDR + และ Night Sight Pixel 4 ของ Google ทำการปรับค่าแสงคู่และ HDR + แบบเรียลไทม์เพื่อให้ผู้ใช้สามารถเห็นผลลัพธ์ของภาพก่อนที่จะกดชัตเตอร์ สิ่งนี้ชี้ให้เห็นถึงการเพิ่มขึ้นอย่างมากของพลังการคำนวณสำหรับภาพเมื่อเทียบกับพิกเซล 3
นอกจากนี้โทรศัพท์เหล่านี้ยังนำเสนอสมดุลสีขาวแบบเน้นการเรียนรู้ในระบบกล้องถ่ายรูปซึ่งจะแก้ไขเฉดสีเหลืองที่มักเกี่ยวข้องกับภาพที่มีแสงน้อย การตรวจจับการเปิดรับแสงหลายครั้งการตรวจจับท้องฟ้าและการรวมกันของภาพนั้นใช้สำหรับโหมด Astro Night Sight ซึ่งต้องการการประมวลผลและการตรวจจับภาพที่ฉลาด ในที่สุดฟีเจอร์ Frequent Faces ของ Pixel 4 จะระบุและแนะนำภาพถ่ายของคนที่คุณถ่ายภาพบ่อยขึ้น
Pixel 4 ยังมาพร้อมกับผู้ช่วยที่ได้รับการปรับปรุงพร้อมด้วยรูปแบบภาษาที่ได้รับการปรับปรุงซึ่งตอนนี้สามารถเรียกใช้บนอุปกรณ์แทนในคลาวด์ คุณสมบัติด้านเสียงใหม่ยังรวมถึงการสนทนาอย่างต่อเนื่องการถอดเสียงผ่านแอพ Recorder และการรู้จำเสียงที่ได้รับการปรับปรุง Neural Core ยังมีบทบาทในเทคโนโลยีปลดล็อคใบหน้า 3 มิติของโทรศัพท์ด้วย
คลื่นแห่งอนาคต
Neural Core ของ Google เป็นซิลิคอนสมาร์ทโฟนในบ้านที่ทรงพลังที่สุดของ บริษัท ช่วยให้สามารถแก้ไขภาพแบบเรียลไทม์ได้มีประสิทธิภาพมากกว่าเดิม Google ภูมิใจในเทคโนโลยีการเรียนรู้ของเครื่องจักรชั้นนำในอุตสาหกรรมและจุดขายที่ใหญ่ที่สุดของ Pixel 4 ขึ้นอยู่กับผลของการลงทุนเหล่านี้
อย่างไรก็ตาม Pixel 4 ไม่ได้เป็นเพียงสมาร์ทโฟนที่รองรับโปรเซสเซอร์การเรียนรู้ของเครื่องที่ทรงพลัง สมาร์ทโฟนทั้งหมดที่ขับเคลื่อนโดย Snapdragon 855 เสนอฮาร์ดแวร์การเรียนรู้ของเครื่องโดยเฉพาะ แม้ว่า Google จะมีความต้องการที่แตกต่างกันอย่างชัดเจนและอาจมีข้อกำหนดที่ทรงพลังกว่าสำหรับสมาร์ทโฟนของตน ในทำนองเดียวกัน Kirin 990 ของ Huawei มี NPU ในตัวที่ทรงพลังเพียงพอสำหรับเอฟเฟกต์วิดีโอโบเก้แบบเรียลไทม์และอื่น ๆ
ฮาร์ดแวร์การเรียนรู้ของเครื่องกำลังกลายเป็นรากฐานสำคัญของความสามารถในการถ่ายภาพวิดีโอและ AI ของสมาร์ทโฟน Google ที่มี Pixel 4 และ Neural Core อยู่ใกล้กับส่วนบนสุดของแพ็ค
ถัดไป: กล้อง Pixel ของ Google ไม่ได้พยายามเป็นกล้องเลย
