Qualcomm เปิดตัว Adreno Neural Fusion SDK เพิ่ม AI Upscaling และ Frame Generation สำหรับเกม Android

Qualcomm เปิดตัว Adreno Neural Fusion (ANF) SDK ชุดเครื่องมือสำหรับนักพัฒนาเกมมือถือ ซึ่งผสานเทคโนโลยี AI Super Resolution และ Frame Generation เพื่อเพิ่มความละเอียดภาพและอัตราเฟรมที่แสดงผลบนอุปกรณ์ Android โดย SDK รองรับแพลตฟอร์ม Snapdragon 8 Elite Gen 6 และรุ่นใหม่กว่า

AI Upscaling เพิ่มความละเอียดภาพจากต้นฉบับ

Adreno Neural Fusion ใช้เทคนิค Temporal Super Resolution ในการสร้างภาพความละเอียดสูงจากภาพต้นฉบับที่มีความละเอียดครึ่งหนึ่ง โดยนำข้อมูลภาพจากหลายเฟรมมาประมวลผลร่วมกับข้อมูลความลึก เวกเตอร์การเคลื่อนไหว และการขยับของกล้อง แนวทางดังกล่าวมีลักษณะคล้ายเทคโนโลยีอัปสเกลภาพอย่าง NVIDIA DLSS และ AMD FSR ซึ่งช่วยลดภาระการเรนเดอร์ภาพโดยตรง พร้อมสร้างภาพที่มีความละเอียดสูงขึ้น

Frame Generation เพิ่มเฟรมแสดงผลได้สูงสุด 2 เท่า

ฟีเจอร์ Frame Generation จะสร้างเฟรมเพิ่มเติมหนึ่งเฟรมแทรกระหว่างเฟรมที่เรนเดอร์จริงสองเฟรม ทำให้อัตราเฟรมที่แสดงผลสามารถเพิ่มขึ้นได้ประมาณ 2 เท่า

Qualcomm ระบุว่าเกมสามารถใช้ Super Resolution และ Frame Generation ร่วมกัน โดยเรนเดอร์ภาพที่ความละเอียดครึ่งหนึ่งและสร้างเฟรมเพิ่มเติมเพื่อเพิ่มความลื่นไหล อย่างไรก็ตาม เฟรมที่สร้างขึ้นไม่ได้ทำให้อัตราการจำลองเกมจริงเพิ่มขึ้น และอาจเพิ่มความหน่วงในการตอบสนองเทียบเท่ากับเวลาของเฟรมที่เพิ่มเข้ามา

ใช้ฮาร์ดแวร์ AI บน Adreno GPU

บน Adreno GPU ที่รองรับ เทคโนโลยีนี้ใช้ Matrix Core สำหรับประมวลผล AI โดยเฉพาะ พร้อม Adreno High Performance Memory (HPM) ซึ่งช่วยเก็บข้อมูลระหว่างการประมวลผลไว้บนชิป เพื่อลดการเข้าถึงหน่วยความจำระบบและลดความต้องการแบนด์วิดท์ รวมถึงการใช้พลังงานระหว่างเล่นเกม สำหรับฮาร์ดแวร์ที่ไม่มี Matrix Core เฉพาะทาง เฟรมเวิร์กยังสามารถใช้การประมวลผลจาก NPU ได้ หากอุปกรณ์รองรับ

รองรับ Vulkan และเครื่องมือสำหรับนักพัฒนา

Adreno Neural Fusion SDK รองรับแอปพลิเคชัน Android แบบ ARM64 ที่ใช้ Vulkan โดย Qualcomm มีทรัพยากรสำหรับการผสานระบบเข้ากับ Unreal Engine 5 และ Unity 6.6 ขึ้นไป รวมถึงตัวอย่าง Vulkan และเครื่องมือดีบัก ปลั๊กอิน Unity ที่เผยแพร่ในขณะนี้เน้นฟีเจอร์ Super Resolution ขณะที่ Native SDK รองรับทั้ง Super Resolution และ Frame Generation

Qualcomm เปิดให้ดาวน์โหลด Adreno Neural Fusion ผ่าน GitHub สาธารณะแล้ว และมีแผนขยายการรองรับไปยังแพลตฟอร์ม Snapdragon รุ่นอื่นเพิ่มเติม แต่ยังไม่ได้ประกาศกำหนดการรองรับอย่างชัดเจน

ที่มา: Qualcomm, Adreno Neural Fusion GitHub