Aggiungere dati personalizzati durante la registrazione sulla piattaforma AR che ha come target Android

L'API Recording & Playback consente di registrare una sessione e utilizzarla al posto del feed della videocamera in tempo reale. Tuttavia, queste registrazioni contengono solo dati video e dei sensori. Puoi anche aggiungere dati personalizzati alla registrazione di una sessione e farti restituire i dati durante la riproduzione, come se fossero parte dell'immagine di una videocamera.

ARCore non include automaticamente dati personalizzati nelle registrazioni. Consente invece di aggiungere dati personalizzati a un fotogramma ARCore durante la registrazione e recuperare gli stessi dati dal fotogramma durante la riproduzione. È tua responsabilità programmare l'app in modo che l'utente possa recuperare i dati che si aspetta quando riproduce la sessione.

Casi d'uso per i dati personalizzati

L'aggiunta di dati personalizzati alle registrazioni amplia le possibilità per le tue app AR. Di seguito sono riportati alcuni casi d'uso specifici.

Usa l'AR ovunque ti trovi

In passato, gli utenti potevano accedere alle esperienze AR solo nel posto giusto e al momento giusto. Se volevano posizionare una lampada AR nel salotto, dovevano stare fisicamente nel luogo per vedere come potrebbe apparire la lampada lì. Grazie alle tracce personalizzate, possono registrare una volta sola in salotto e aggiungere mobili virtuali alla scena ogni volta che ne hanno voglia.

Crea esperienze AR in collaborazione

Senza un requisito di sessione dal vivo, gli utenti hanno molte più opzioni per la modifica AR, che consentono loro di creare e accedere a contenuti AR unici in qualsiasi luogo e momento. Ad esempio, possono registrare un determinato ambiente, aggiungere effetti di realtà aumentata e condividerli con gli amici.

Prerequisiti

Assicurati di aver compreso i concetti fondamentali di AR e di configurare una sessione ARCore prima di procedere.

Inizializzare una registrazione con dati personalizzati

Segui questi passaggi per inizializzare una registrazione con dati personalizzati. Per avviare, interrompere e controllare una sessione di registrazione, consulta Registrare e riprodurre una sessione AR.

  1. Ottieni un ARCoreRecordingConfig.
  2. Crea una nuova Track con un UUID personalizzato. Tutti i dati personalizzati verranno salvati qui.
  3. Aggiungi Track alla ARCoreRecordingConfig che hai creato durante la configurazione della sessione.
// Initialize a new track with a custom UUID.
// Make sure to save the UUID because it is the ID that you will use
// to get your data back during playback.
var track = new Track {
 Id = Guid.Parse("de5ec7a4-09ec-4c48-b2c3-a98b66e71893") // from UUID generator
};

// Add the Track to the recordingConfig.
// recordingConfig must already be configured.
List<Track> tracks = new List<Track>();
tracks.Add(track);
recordingConfig.Tracks = tracks;

Tutte le nuove tracce vengono trattate come registrazioni separate e ciascuna traccia registrata occupa il proprio UUID.

Configurare il canale con dati aggiuntivi

Configura il canale con dati aggiuntivi che descrivono la registrazione della sessione. Ad esempio, puoi "taggare" un percorso aggiungendo una nota che descriva il luogo e l'ora in cui hai registrato la sessione: "Questa sessione è stata registrata in un centro commerciale nel pomeriggio".

// Set additional data on this track.
// For example, describe where you recorded the session.
byte[] metadata = ...
track.Metadata = metadata;

Configura la traccia con un tipo MIME

Configura una traccia con un tipo MIME che descriva il tipo di dati registrati nella traccia, per la compatibilità con strumenti esterni.

Se non specifichi un tipo, i dati verranno classificati come application/text. ARCore ignora il tipo MIME durante la lettura dei dati.

// Set a MIME type for compatibility with external tools.
track.MimeType = "text/csv";

Registra tracce di dati personalizzate

Tutti i dati delle tracce personalizzate vengono registrati sui frame. Il momento in cui registri i dati su un frame corrisponde al momento in cui i dati verranno restituiti durante la riproduzione. Ad esempio, se chiami RecordTrackData() con il valore "A" a 00:07:02, riceverai di nuovo "A" al punto 00:07:02 quando la traccia viene riprodotta.

Per registrare una traccia dati personalizzata, chiama RecordTrackData().

// Place an AR lamp in a room.
if (placeLampButtonWasPressed) {
  // Convert the lamp data into a byte array.
  var lampData = new byte[] { (byte) Lamp.FLOOR };  // a floor lamp
  recordingManager.RecordTrackData(trackGuid, lampData);
}

Riprodurre le tracce di dati personalizzate

Estrai dati personalizzati dalla registrazione di una sessione durante la riproduzione.

Inizializzare una riproduzione

Iniziare una riproduzione con dati personalizzati equivale ad iniziare una riproduzione di una normale registrazione di una sessione.

Restituisci dati personalizzati

Chiama GetUpdatedTrackData() per recuperare i dati personalizzati registrati su un frame. È possibile recuperare più dati di tracciamento dallo stesso frame. Ad esempio, se durante la registrazione hai chiamato RecordTrackData() due volte sullo stesso fotogramma, riceverai due istanze di TrackData durante la riproduzione.

// Fetch the data recorded on a select frame and place it in a
// container object.
var trackDataList = recordingManager.GetUpdatedTrackData(trackGuid);

Quando TrackData si trova in un oggetto container, estrai i byte dei dati personalizzati.

// Extract the bytes of custom data from the list of track data.
foreach (TrackData trackData in trackDataList) {
  var data = trackData.Data;
  Lamp lamp = Lamp.fromByte(data[0]); // This is the lamp!
}

Passaggi successivi