แสดงผลแอป AR โดยใช้ Vulkan บน Android NDK (C)

เมื่อกำหนดค่า ArTextureUpdateMode เป็น AR_TEXTURE_UPDATE_MODE_EXPOSE_HARDWARE_BUFFER แล้ว ARCore จะส่งบัฟเฟอร์ฮาร์ดแวร์ของ Android ให้เมื่อเรียกใช้ ArSession_update() บัฟเฟอร์ฮาร์ดแวร์นี้เชื่อมโยงกับ Vulkan VkImage ได้

ดูแอปพลิเคชันตัวอย่าง

ดูการรองรับการแสดงผล Vulkan ได้ในแอปตัวอย่าง hello_ar_vulkan_c

เปิดใช้โหมดเอาต์พุตบัฟเฟอร์ของฮาร์ดแวร์

ArTextureUpdateMode ที่กำหนดค่าไว้จะกำหนดวิธีที่ ARCore จะอัปเดตพื้นผิวกล้อง เมื่อตั้งค่าเป็น AR_TEXTURE_UPDATE_MODE_EXPOSE_HARDWARE_BUFFER ARCore จะส่งรูปภาพจากกล้องผ่าน AHardwareBuffer

กำหนดค่าเซสชันเพื่อใช้ AR_TEXTURE_UPDATE_MODE_EXPOSE_HARDWARE_BUFFER ดังนี้

ArConfig* ar_config = NULL;
ArConfig_create(ar_session, &ar_config);
ArConfig_setTextureUpdateMode(ar_session, ar_config,
                              AR_TEXTURE_UPDATE_MODE_EXPOSE_HARDWARE_BUFFER);
CHECK(ArSession_configure(ar_session, ar_config) == AR_SUCCESS);
ArConfig_destroy(ar_config);

หมายเหตุ: เมื่อใช้ AR_TEXTURE_UPDATE_MODE_EXPOSE_HARDWARE_BUFFER ในอุปกรณ์ที่เข้ากันไม่ได้ ArSession_configure() จะล้มเหลวและแสดงผล AR_ERROR_UNSUPPORTED_CONFIGURATION

รับบัฟเฟอร์ฮาร์ดแวร์

เมื่อเปิดใช้ AR_TEXTURE_UPDATE_MODE_EXPOSE_HARDWARE_BUFFER ให้ใช้ ArFrame_getHardwareBuffer() เพื่อรับบัฟเฟอร์ฮาร์ดแวร์ โดยทำดังนี้

void* native_hardware_buffer = NULL;
ArFrame_getHardwareBuffer(ar_session, ar_frame, &native_hardware_buffer);

if ((int64_t)native_hardware_buffer == 0) {
  // The hardware buffer isn't ready yet.
  return;
}

หมายเหตุ: เรารับประกันว่า AHardwareBuffer นี้จะใช้งานได้จนถึงการโทรครั้งถัดไปถึง ArSession_update() เท่านั้น หากต้องการใช้บัฟเฟอร์ของฮาร์ดแวร์นอกเหนือจากนั้น เช่น เพื่อการแสดงผล คุณต้องเรียกใช้ AHardwareBuffer_acquire() จากนั้นเรียกใช้ AHardwareBuffer_release() หลังจากการแสดงผลเสร็จสมบูรณ์แล้ว

ใช้บัฟเฟอร์ฮาร์ดแวร์ระหว่างการแสดงภาพ Vulkan

ดูตัวอย่างวิธีแสดงผลแอปพลิเคชัน AR โดยใช้ Vulkan ได้ที่ vulkan_handler.cc

อุปกรณ์ที่รองรับ

การรองรับการแสดงผล Vulkan มีให้บริการใน API ของ Android ระดับ 27 ขึ้นไปเท่านั้น นอกจากนี้ อุปกรณ์ต้องรองรับส่วนขยาย VK_ANDROID_external_memory_android_hardware_buffer ด้วย

ต้องมี Vulkan ในไฟล์ Manifest ของแอป

Google Play ใช้ <uses-feature> ที่ประกาศในไฟล์ Manifest ของแอปเพื่อกรองแอปจากอุปกรณ์ที่ไม่เป็นไปตามข้อกำหนดด้านฟีเจอร์ฮาร์ดแวร์และซอฟต์แวร์ อุปกรณ์ที่ใช้ Vulkan 1.0 อาจไม่รองรับส่วนขยายที่จำเป็น แต่อุปกรณ์ที่เข้ากันได้กับ Vulkan 1.1 ต้องมีส่วนขยายที่จำเป็นตั้งแต่ Android 10 เป็นต้นไป (API ระดับ 29)