ARCore-এর সাথে শেয়ার করা ক্যামেরা অ্যাক্সেস

এই ডেভেলপার গাইড আপনাকে Android Camera2 API- এর মাধ্যমে ক্যামেরার একচেটিয়া নিয়ন্ত্রণ এবং ARCore-এর সাথে ক্যামেরা অ্যাক্সেস শেয়ার করার মধ্যে নির্বিঘ্নে স্যুইচ করার জন্য আপনার অ্যাপকে সক্ষম করার ধাপগুলির মধ্য দিয়ে চলে।

এই বিষয়টি আপনাকে অনুমান করে:

নমুনা অ্যাপ তৈরি করুন এবং চালান

আপনি যখন শেয়ার্ড ক্যামেরা জাভা নমুনা অ্যাপ তৈরি করেন এবং চালান, তখন এটি একটি ARCore সেশন তৈরি করে যা শেয়ার করা ক্যামেরা অ্যাক্সেস সমর্থন করে। অ্যাপটি নন-এআর মোডে শুরু হয়, ARCore পজ করে।

অ্যাপটি যখন নন-এআর মোডে কাজ করে, ক্যামেরা ভিউয়ার একটি সেপিয়া রঙের প্রভাব প্রদর্শন করে। AR মোডে স্যুইচ করার সময়, সেপিয়া ইফেক্ট বন্ধ হয়ে যায় কারণ অ্যাপটি বিরতি দেওয়া সেশন পুনরায় শুরু করে ARCore-এ ক্যামেরা নিয়ন্ত্রণ ফিরিয়ে দেয়।

আপনি মোড পরিবর্তন করতে অ্যাপে AR সুইচ ব্যবহার করতে পারেন। পূর্বরূপের সময়, উভয় মোডই ক্যামেরা2 দ্বারা ক্যাপচার করা ক্রমাগত ফ্রেমের সংখ্যা প্রদর্শন করে।

শেয়ার্ড ক্যামেরা জাভা নমুনা অ্যাপ তৈরি এবং চালানোর জন্য:

  1. Android এর জন্য Google ARCore SDK ডাউনলোড এবং এক্সট্রাক্ট করুন।

  2. samples/shared_camera_java প্রকল্প খুলুন।

  3. নিশ্চিত করুন যে আপনার অ্যান্ড্রয়েড ডিভাইসটি ইউএসবি এর মাধ্যমে ডেভেলপমেন্ট মেশিনের সাথে সংযুক্ত আছে। বিস্তারিত তথ্যের জন্য ARCore সমর্থিত ডিভাইস দেখুন।

  4. অ্যান্ড্রয়েড স্টুডিওতে, Run ক্লিক করুন .

  5. স্থাপনার লক্ষ্য হিসাবে আপনার ডিভাইসটি চয়ন করুন এবং আপনার ডিভাইসে নমুনা অ্যাপ্লিকেশন চালু করতে OK ক্লিক করুন৷

  6. ডিভাইসে, নিশ্চিত করুন যে আপনি অ্যাপটিকে ছবি তোলা এবং ভিডিও রেকর্ড করার অনুমতি দিতে চান।

  7. যদি তা করতে বলা হয়, ARCore-এর লেটেস্ট ভার্সন আপডেট বা ইনস্টল করুন।

  8. নন-এআর এবং এআর মোডের মধ্যে পরিবর্তন করতে AR সুইচ ব্যবহার করুন।

ARCore-এর সাথে ক্যামেরা অ্যাক্সেস শেয়ার করতে একটি অ্যাপ চালু করার ওভারভিউ

আপনার অ্যাপে ARCore-এর সাথে শেয়ার করা ক্যামেরা অ্যাক্সেস কার্যকর করতে এই ধাপগুলি অনুসরণ করুন। সকল কোড স্নিপেট SharedCameraActivity.java নমুনার মধ্যে shared_camera_java এ উপলব্ধ।

CAMERA অনুমতির অনুরোধ করুন

ডিভাইসের ক্যামেরা ব্যবহার করতে সক্ষম হওয়ার জন্য, ব্যবহারকারীকে অবশ্যই আপনার অ্যাপটিকে CAMERA অনুমতি দিতে হবে । ARCore নমুনাগুলিতে একটি CameraPermissionHelper অন্তর্ভুক্ত রয়েছে, যা আপনার অ্যাপের জন্য সঠিক অনুমতির অনুরোধ করার জন্য ইউটিলিটিগুলি প্রদান করে।

জাভা

protected void onResume() {
  // Request the camera permission, if necessary.
  if (!CameraPermissionHelper.hasCameraPermission(this)) {
      CameraPermissionHelper.requestCameraPermission(this);
  }
}

কোটলিন

override fun onResume() {
  // Request the camera permission, if necessary.
  if (!CameraPermissionHelper.hasCameraPermission(this)) {
    CameraPermissionHelper.requestCameraPermission(this)
  }
}

ARCore ইনস্টল করা এবং আপ টু ডেট আছে তা নিশ্চিত করুন

ARCore ব্যবহার করার আগে অবশ্যই ইনস্টল এবং আপ-টু-ডেট থাকতে হবে। নিম্নলিখিত স্নিপেটটি দেখায় যে কীভাবে ARCore ইনস্টল করার অনুরোধ করা যায় যদি এটি ইতিমধ্যে ডিভাইসে ইনস্টল করা না থাকে।

জাভা

boolean isARCoreSupportedAndUpToDate() {
  // Make sure that ARCore is installed and supported on this device.
  ArCoreApk.Availability availability = ArCoreApk.getInstance().checkAvailability(this);
  switch (availability) {
    case SUPPORTED_INSTALLED:
      return true;

    case SUPPORTED_APK_TOO_OLD:
    case SUPPORTED_NOT_INSTALLED:
        // Requests an ARCore installation or updates ARCore if needed.
        ArCoreApk.InstallStatus installStatus = ArCoreApk.getInstance().requestInstall(this, userRequestedInstall);
        switch (installStatus) {
          case INSTALL_REQUESTED:
            return false;
          case INSTALLED:
            return true;
        }
      return false;

    default:
      // Handle the error. For example, show the user a snackbar that tells them
      // ARCore is not supported on their device.
      return false;
  }
}

কোটলিন

// Determine ARCore installation status.
// Requests an ARCore installation or updates ARCore if needed.
fun isARCoreSupportedAndUpToDate(): Boolean {
  when (ArCoreApk.getInstance().checkAvailability(this)) {
    Availability.SUPPORTED_INSTALLED -> return true

    Availability.SUPPORTED_APK_TOO_OLD,
    Availability.SUPPORTED_NOT_INSTALLED -> {
      when(ArCoreApk.getInstance().requestInstall(this, userRequestedInstall)) {
        InstallStatus.INSTALLED -> return true
        else -> return false
      }
    }

    else -> {
      // Handle the error. For example, show the user a snackbar that tells them
      // ARCore is not supported on their device.
      return false
    }
  }
}

একটি ARCore সেশন তৈরি করুন যা ক্যামেরা শেয়ারিং সমর্থন করে

এতে সেশন তৈরি করা এবং ARCore শেয়ার করা ক্যামেরার রেফারেন্স এবং আইডি সংরক্ষণ করা জড়িত:

জাভা

// Create an ARCore session that supports camera sharing.
sharedSession = new Session(this, EnumSet.of(Session.Feature.SHARED_CAMERA))

// Store the ARCore shared camera reference.
sharedCamera = sharedSession.getSharedCamera();

// Store the ID of the camera that ARCore uses.
cameraId = sharedSession.getCameraConfig().getCameraId();

কোটলিন

// Create an ARCore session that supports camera sharing.
sharedSession = Session(this, EnumSet.of(Session.Feature.SHARED_CAMERA))

// Store the ARCore shared camera reference.
sharedCamera = sharedSession.sharedCamera

// Store the ID of the camera that ARCore uses.
cameraId = sharedSession.cameraConfig.cameraId

(ঐচ্ছিক) যেকোনো কাস্টম সারফেসের ARCore কে জানান

অতিরিক্ত কাস্টম পৃষ্ঠের অনুরোধ ডিভাইসের কর্মক্ষমতা চাহিদা বাড়ায়। এটি ভাল পারফরম্যান্স নিশ্চিত করতে, আপনার ব্যবহারকারীরা যে ডিভাইসগুলি ব্যবহার করবে সেগুলিতে আপনার অ্যাপটি পরীক্ষা করুন৷

ARCore ডিফল্টরূপে দুটি স্ট্রীমের অনুরোধ করবে:

  1. 1x YUV CPU স্ট্রীম , বর্তমানে সর্বদা 640x480
    ARCore মোশন ট্র্যাকিংয়ের জন্য এই স্ট্রিমটি ব্যবহার করে।
  2. একটি 1x GPU স্ট্রীম , সাধারণত 1920x1080
    বর্তমান GPU স্ট্রিম রেজোলিউশন নির্ধারণ করতে Session#getCameraConfig() ব্যবহার করুন।

আপনি getSupportedCameraConfigs() এবং setCameraConfig() ব্যবহার করে সমর্থিত ডিভাইসগুলিতে GPU স্ট্রীমের রেজোলিউশন পরিবর্তন করতে পারেন।

মোটামুটি সূচক হিসাবে, আপনি আশা করতে পারেন:

ডিভাইসের ধরন যুগপত স্ট্রীম সমর্থিত
হাই-এন্ড ফোন
  • 2x YUV CPU স্ট্রীম , যেমন 640x480 এবং 1920x1080
  • 1x GPU স্ট্রীম , যেমন 1920x1080
  • 1x মাঝে মাঝে উচ্চ রেজোলিউশন স্থির চিত্র (JPEG), যেমন 12MP
মধ্য-স্তরের ফোন
  • 2x YUV CPU স্ট্রীম , যেমন 640x480 এবং 1920x1080
  • 1x GPU স্ট্রীম , যেমন 1920x1080
-বা-
  • 1x YUV CPU স্ট্রীম , যেমন 640x480 –অথবা– 1920x1080
  • 1x GPU স্ট্রীম , যেমন 1920x1080
  • 1x মাঝে মাঝে উচ্চ রেজোলিউশন স্থির চিত্র (JPEG), যেমন 12MP

কাস্টম সারফেস ব্যবহার করতে, যেমন একটি CPU ইমেজ রিডার সারফেস, আপডেট করা প্রয়োজন এমন সারফেসগুলির তালিকায় এটি যোগ করা নিশ্চিত করুন (উদাহরণস্বরূপ, একটি ImageReader )।

জাভা

sharedCamera.setAppSurfaces(this.cameraId, Arrays.asList(imageReader.getSurface()));

কোটলিন

sharedCamera.setAppSurfaces(this.cameraId, listOf(imageReader.surface))

ক্যামেরা খুলুন

ARCore-র্যাপড কলব্যাক ব্যবহার করে ক্যামেরা খুলুন:

জাভা

// Wrap the callback in a shared camera callback.
CameraDevice.StateCallback wrappedCallback =
    sharedCamera.createARDeviceStateCallback(cameraDeviceCallback, backgroundHandler);

// Store a reference to the camera system service.
cameraManager = (CameraManager) this.getSystemService(Context.CAMERA_SERVICE);

// Open the camera device using the ARCore wrapped callback.
cameraManager.openCamera(cameraId, wrappedCallback, backgroundHandler);

কোটলিন

// Wrap the callback in a shared camera callback.
val wrappedCallback = sharedCamera.createARDeviceStateCallback(cameraDeviceCallback, backgroundHandler)

// Store a reference to the camera system service.
val cameraManager = this.getSystemService(Context.CAMERA_SERVICE) as CameraManager

// Open the camera device using the ARCore wrapped callback.
cameraManager.openCamera(cameraId, wrappedCallback, backgroundHandler)

ক্যামেরা ডিভাইস স্টেট কলব্যাক ব্যবহার করুন

ক্যামেরা ডিভাইসে স্টেট কলব্যাক ক্যামেরা ডিভাইসের একটি রেফারেন্স সঞ্চয় করে এবং একটি নতুন ক্যাপচার সেশন শুরু করে।

জাভা

public void onOpened(@NonNull CameraDevice cameraDevice) {
    Log.d(TAG, "Camera device ID " + cameraDevice.getId() + " opened.");
    SharedCameraActivity.this.cameraDevice = cameraDevice;
    createCameraPreviewSession();
}

কোটলিন

fun onOpened(cameraDevice: CameraDevice) {
  Log.d(TAG, "Camera device ID " + cameraDevice.id + " opened.")
  this.cameraDevice = cameraDevice
  createCameraPreviewSession()
}

একটি নতুন ক্যাপচার সেশন তৈরি করুন

একটি নতুন ক্যাপচার অনুরোধ তৈরি করুন. ক্যাপচার অনুরোধটি ARCore-এর সাথে সামঞ্জস্যপূর্ণ কিনা তা নিশ্চিত করতে TEMPLATE_RECORD ব্যবহার করুন এবং রানটাইমে নন-এআর এবং এআর মোডের মধ্যে বিরামবিহীন স্যুইচিংয়ের অনুমতি দিন।

জাভা

void createCameraPreviewSession() {
  try {
    // Create an ARCore-compatible capture request using `TEMPLATE_RECORD`.
    previewCaptureRequestBuilder =
        cameraDevice.createCaptureRequest(CameraDevice.TEMPLATE_RECORD);

    // Build a list of surfaces, starting with ARCore provided surfaces.
    List<Surface> surfaceList = sharedCamera.getArCoreSurfaces();

    // (Optional) Add a CPU image reader surface.
    surfaceList.add(cpuImageReader.getSurface());

    // The list should now contain three surfaces:
    // 0. sharedCamera.getSurfaceTexture()
    // 1. …
    // 2. cpuImageReader.getSurface()

    // Add ARCore surfaces and CPU image surface targets.
    for (Surface surface : surfaceList) {
      previewCaptureRequestBuilder.addTarget(surface);
    }

    // Wrap our callback in a shared camera callback.
    CameraCaptureSession.StateCallback wrappedCallback =
        sharedCamera.createARSessionStateCallback(cameraSessionStateCallback, backgroundHandler);

    // Create a camera capture session for camera preview using an ARCore wrapped callback.
    cameraDevice.createCaptureSession(surfaceList, wrappedCallback, backgroundHandler);
  } catch (CameraAccessException e) {
    Log.e(TAG, "CameraAccessException", e);
  }
}

কোটলিন

fun createCameraPreviewSession() {
  try {
    // Create an ARCore-compatible capture request using `TEMPLATE_RECORD`.
    previewCaptureRequestBuilder = cameraDevice.createCaptureRequest(CameraDevice.TEMPLATE_RECORD)

    // Build a list of surfaces, starting with ARCore provided surfaces.
    val surfaceList: MutableList<Surface> = sharedCamera.arCoreSurfaces

    // (Optional) Add a CPU image reader surface.
    surfaceList.add(cpuImageReader.getSurface())

    // The list should now contain three surfaces:
    // 0. sharedCamera.getSurfaceTexture()
    // 1. …
    // 2. cpuImageReader.getSurface()

    // Add ARCore surfaces and CPU image surface targets.
    for (surface in surfaceList) {
      previewCaptureRequestBuilder.addTarget(surface)
    }

    // Wrap the callback in a shared camera callback.
    val wrappedCallback = sharedCamera.createARSessionStateCallback(cameraSessionStateCallback, backgroundHandler)

    // Create a camera capture session for camera preview using an ARCore wrapped callback.
    cameraDevice.createCaptureSession(surfaceList, wrappedCallback, backgroundHandler)
  } catch (e: CameraAccessException) {
    Log.e(TAG, "CameraAccessException", e)
  }
}

নন-এআর বা এআর মোডে শুরু করুন

ফ্রেম ক্যাপচার করা শুরু করতে, কনফিগারড() স্টেট onConfigured() ক্যামেরা ক্যাপচার সেশন থেকে captureSession.setRepeatingRequest() কল করুন। AR মোডে শুরু করতে onActive() কলব্যাকের মধ্যে ARCore সেশন পুনরায় শুরু করুন।

জাভা

// Repeating camera capture session state callback.
CameraCaptureSession.StateCallback cameraSessionStateCallback =
    new CameraCaptureSession.StateCallback() {

      // Called when ARCore first configures the camera capture session after
      // initializing the app, and again each time the activity resumes.
      @Override
      public void onConfigured(@NonNull CameraCaptureSession session) {
        captureSession = session;
        setRepeatingCaptureRequest();
      }

      @Override
      public void onActive(@NonNull CameraCaptureSession session) {
        if (arMode && !arcoreActive) {
          resumeARCore();
        }
      }
    };

// A repeating camera capture session capture callback.
CameraCaptureSession.CaptureCallback cameraCaptureCallback =
    new CameraCaptureSession.CaptureCallback() {
      @Override
      public void onCaptureCompleted(…) {
        shouldUpdateSurfaceTexture.set(true);
      }
    };

void setRepeatingCaptureRequest() {
    captureSession.setRepeatingRequest(
        previewCaptureRequestBuilder.build(), cameraCaptureCallback, backgroundHandler);
}

void resumeARCore() {
    // Resume ARCore.
    sharedSession.resume();
    arcoreActive = true;

    // Set the capture session callback while in AR mode.
    sharedCamera.setCaptureCallback(cameraCaptureCallback, backgroundHandler);
}

কোটলিন

val cameraSessionStateCallback = object : CameraCaptureSession.StateCallback() {
      // Called when ARCore first configures the camera capture session after
      // initializing the app, and again each time the activity resumes.
  override fun onConfigured(session: CameraCaptureSession) {
    captureSession = session
    setRepeatingCaptureRequest()
  }

  override fun onActive(session: CameraCaptureSession) {
    if (arMode && !arcoreActive) {
      resumeARCore()
    }
  }
}

val cameraCaptureCallback = object : CameraCaptureSession.CaptureCallback() {
  override fun onCaptureCompleted(
    session: CameraCaptureSession,
    request: CaptureRequest,
    result: TotalCaptureResult
  ) {
    shouldUpdateSurfaceTexture.set(true);
  }
}

fun setRepeatingCaptureRequest() {
  captureSession.setRepeatingRequest(
    previewCaptureRequestBuilder.build(), cameraCaptureCallback, backgroundHandler
  )
}

fun resumeARCore() {
    // Resume ARCore.
    sharedSession.resume()
    arcoreActive = true

    // Set the capture session callback while in AR mode.
    sharedCamera.setCaptureCallback(cameraCaptureCallback, backgroundHandler)
}

রানটাইমে নন-এআর বা এআর মোডের মধ্যে নির্বিঘ্নে স্যুইচ করুন

নন-এআর থেকে এআর মোডে স্যুইচ করতে এবং বিরতি দেওয়া এআরকোর সেশন পুনরায় শুরু করতে:

জাভা

// Resume the ARCore session.
resumeARCore();

কোটলিন

// Resume the ARCore session.
resumeARCore()

এআর-মোড থেকে নন-এআর মোডে স্যুইচ করতে:

জাভা

// Pause ARCore.
sharedSession.pause();

// Create the Camera2 repeating capture request.
setRepeatingCaptureRequest();

কোটলিন

// Pause ARCore.
sharedSession.pause()

// Create the Camera2 repeating capture request.
setRepeatingCaptureRequest()