Audio spaziale

L'audio spaziale è un'esperienza audio immersiva che mette gli utenti al centro dell'azione, rendendo i tuoi contenuti più realistici. Il suono viene "spazializzato" per creare un effetto multi-speaker, simile a una configurazione audio surround, ma tramite le cuffie.

Ad esempio, in un film, il suono di un'auto potrebbe iniziare dietro l'utente, spostarsi in avanti e scivolare verso la distanza. In una videochiamata, le voci possono essere separate e posizionate intorno all'utente, per identificare più facilmente chi parla.

Se i tuoi contenuti utilizzano un formato audio supportato, puoi aggiungere l'audio spaziale alla tua app a partire da Android 13 (livello API 33).

Query sulle capacità

Utilizza la classe Spatializer per eseguire query sulle funzionalità e sul comportamento di spazializzazione del dispositivo. Inizia recuperando un'istanza di Spatializer da AudioManager:

Kotlin

val spatializer = audioManager.spatializer

Java

Spatializer spatializer = AudioManager.getSpatializer();

Dopo aver ricevuto Spatializer, controlla le quattro condizioni che devono essere soddisfatte affinché il dispositivo generi l'audio spaziale:

Criteri	Verifica
Il dispositivo supporta la spazializzazione?	getImmersiveAudioLevel() non è SPATIALIZER_IMMERSIVE_LEVEL_NONE
La spazializzazione è disponibile? La disponibilità dipende dalla compatibilità con il routing corrente dell'uscita audio.	isAvailable() è true
La spazializzazione è attivata?	isEnabled() è true
Una traccia audio con i determinati parametri può essere spaziale?	canBeSpatialized() è true

Queste condizioni potrebbero non essere soddisfatte, ad esempio, se la spazializzazione non è disponibile per la traccia audio corrente o se è disattivata del tutto sul dispositivo di output audio.

Rilevamento dei movimenti della testa

Con le cuffie supportate, la piattaforma può regolare la spazializzazione dell'audio in base alla posizione della testa dell'utente. Per verificare se un tracker per la testa è disponibile per il routing attuale dell'uscita audio, chiama il numero isHeadTrackerAvailable().

Nota: quando testi l'audio spaziale con tracciamento della testa su Android 13 o versioni successive, assicurati che il tracciamento della testa sulle cuffie in uso sia compatibile con il tuo dispositivo mobile. Ad esempio, puoi utilizzare i Pixel Buds Pro con gli smartphone Pixel.

Contenuti compatibili

Spatializer.canBeSpatialized() indica se l'audio con le proprietà specificate può essere spaziale con il routing corrente del dispositivo di output. Questo metodo prende AudioAttributes e AudioFormat, entrambi descritti più dettagliatamente di seguito.

AudioAttributes

Un oggetto AudioAttributes descrive l'utilizzo di uno stream audio (ad esempio, audio del gioco o contenuti multimediali standard), insieme ai suoi comportamenti di riproduzione e al tipo di contenuti.

Quando chiami canBeSpatialized(), utilizza la stessa istanza AudioAttributes impostata per Player. Ad esempio, se utilizzi la libreria Jetpack Media3 e non hai personalizzato AudioAttributes, utilizza AudioAttributes.DEFAULT.

Nota: quando utilizzi la classe AudioAttributes Media3, assicurati di chiamare AudioAttributes.getAudioAttributesV21().audioAttributes per ottenere l'equivalente AudioAttributes della piattaforma.

Disattivare l'audio spaziale

Per indicare che i contenuti sono già stati spazializzati, chiama setIsContentSpatialized(true) in modo che l'audio non venga elaborato due volte. In alternativa, modifica il comportamento della spazializzazione per disabilitare del tutto la spazializzazione chiamando setSpatializationBehavior(AudioAttributes.SPATIALIZATION_BEHAVIOR_NEVER).

AudioFormat

Un oggetto AudioFormat descrive i dettagli sul formato e sulla configurazione del canale di una traccia audio.

Quando crei un'istanza di AudioFormat da passare in canBeSpatialized(), imposta la codifica sullo stesso formato di output previsto dal decoder. Devi anche impostare una maschera del canale che corrisponda alla configurazione del canale dei tuoi contenuti. Consulta la sezione Comportamento di spazializzazione predefinito per indicazioni sui valori specifici da utilizzare.

Monitora le modifiche a Spatializer

Per ascoltare le modifiche nello stato di Spatializer, puoi aggiungere un listener con Spatializer.addOnSpatializerStateChangedListener(). Analogamente, per ascoltare cambiamenti nella disponibilità di un tracker per la testa, chiama il numero Spatializer.addOnHeadTrackerAvailableListener().

Questo può essere utile se vuoi regolare la selezione delle tracce durante la riproduzione utilizzando i callback del listener. Ad esempio, quando un utente connette o scollega le cuffie dal dispositivo, il callback di onSpatializerAvailableChanged indica se l'effetto spazializzatore è disponibile per il nuovo routing dell'output audio. A questo punto, potresti valutare di aggiornare la logica di selezione delle tracce del player in modo che corrisponda alle nuove funzionalità del dispositivo. Per informazioni dettagliate sul comportamento di selezione delle tracce di ExoPlayer, consulta la sezione ExoPlayer e audio spaziale.

ExoPlayer e audio spaziale

Le recenti versioni di ExoPlayer semplificano l'adozione dell'audio spaziale. Se utilizzi la libreria autonoma ExoPlayer (nome pacchetto com.google.android.exoplayer2), la versione 2.17 configura la piattaforma per l'output dell'audio spaziale, mentre la versione 2.18 introduce vincoli per il numero di canali audio. Se utilizzi il modulo ExoPlayer della libreria Media3, (nome pacchetto androidx.media3), le versioni 1.0.0-beta01 e successive includono gli stessi aggiornamenti.

Dopo aver aggiornato la dipendenza ExoPlayer all'ultima release, la tua app deve solo includere contenuti che possono essere spaziali.

Vincoli per il numero di canali audio

Quando sono soddisfatte tutte e quattro le condizioni per l'audio spaziale, ExoPlayer sceglie una traccia audio multicanale. In caso contrario, ExoPlayer sceglie una traccia stereo. Se le proprietà Spatializer cambiano, ExoPlayer attiva una nuova selezione di traccia per selezionare una traccia audio che corrisponda alle proprietà correnti. Tieni presente che questa nuova selezione di tracce può causare un breve periodo di rebuffering.

Importante: il comportamento del vincolo relativo al numero di canali audio descritto in questa sezione si applica solo ai dispositivi portatili con Android 12L o versioni successive. Sui dispositivi meno recenti o su altri tipi di dispositivi, come Android TV, questi vincoli sono disattivati e la selezione delle tracce di ExoPlayer può essere personalizzata come specificato in Selezione delle tracce audio.

Per disattivare i vincoli relativi al numero di canali audio, imposta i parametri di selezione delle tracce sul player come illustrato di seguito:

Kotlin

exoPlayer.trackSelectionParameters = DefaultTrackSelector.Parameters.Builder(context)
  .setConstrainAudioChannelCountToDeviceCapabilities(false)
  .build()

Java

exoPlayer.setTrackSelectionParameters(
  new DefaultTrackSelector.Parameters.Builder(context)
    .setConstrainAudioChannelCountToDeviceCapabilities(false)
    .build()
);

Analogamente, puoi aggiornare i parametri di un selettore di tracce esistente per disabilitare i vincoli relativi al conteggio dei canali audio nel seguente modo:

Kotlin

val trackSelector = DefaultTrackSelector(context)
...
trackSelector.parameters = trackSelector.buildUponParameters()
  .setConstrainAudioChannelCountToDeviceCapabilities(false)
  .build()

Java

DefaultTrackSelector trackSelector = new DefaultTrackSelector(context);
...
trackSelector.setParameters(
  trackSelector
    .buildUponParameters()
    .setConstrainAudioChannelCountToDeviceCapabilities(false)
    .build()
);

Con i vincoli relativi al numero di canali audio disattivati, se i contenuti hanno più tracce audio, ExoPlayer seleziona inizialmente la traccia con il maggior numero di canali e riproducibile dal dispositivo. Ad esempio, se i contenuti includono una traccia audio multicanale e una traccia audio stereo e il dispositivo supporta la riproduzione di entrambe, ExoPlayer seleziona la traccia multicanale. Per i dettagli su come personalizzare questo comportamento, consulta la sezione Selezione delle tracce audio.

Selezione della traccia audio

Quando il comportamento dei vincoli del conteggio dei canali audio di ExoPlayer è disabilitato, ExoPlayer non seleziona automaticamente una traccia audio che corrisponda alle proprietà dello spazializzatore del dispositivo. Puoi invece personalizzare la logica di selezione delle tracce di ExoPlayer impostando i parametri di selezione delle tracce prima o durante la riproduzione. Per impostazione predefinita, ExoPlayer seleziona tracce audio identiche alla traccia iniziale per quanto riguarda il tipo MIME (codifica), il numero di canali e la frequenza di campionamento.

Modificare i parametri di selezione delle tracce

Per modificare i parametri di selezione delle tracce di ExoPlayer, utilizza Player.setTrackSelectionParameters(). Allo stesso modo, puoi ottenere i parametri attuali di ExoPlayer con Player.getTrackSelectionParameters(). Ad esempio, per selezionare una traccia audio stereo durante la riproduzione:

Kotlin

exoPlayer.trackSelectionParameters = exoPlayer.trackSelectionParameters
  .buildUpon()
  .setMaxAudioChannelCount(2)
  .build()

Java

exoPlayer.setTrackSelectionParameters(
  exoPlayer.getTrackSelectionParameters()
    .buildUpon()
    .setMaxAudioChannelCount(2)
    .build()
);

Tieni presente che la modifica dei parametri di selezione delle tracce durante la riproduzione potrebbe causare un'interruzione della riproduzione. Ulteriori informazioni sull'ottimizzazione dei parametri di selezione delle tracce del player sono disponibili nella sezione per la selezione delle tracce della documentazione di ExoPlayer.

Comportamento di spazializzazione predefinito

Il comportamento predefinito della spazializzazione in Android include i seguenti comportamenti che possono essere personalizzati dagli OEM:

• Solo i contenuti multicanale sono spazializzati e non i contenuti stereo. Se non utilizzi ExoPlayer, a seconda del formato dei tuoi contenuti audio multicanale, potrebbe essere necessario configurare il numero massimo di canali che possono essere inviati da un decoder audio a un numero elevato. Ciò garantisce che il decoder audio emetta un PCM multicanale per la piattaforma da spazializzare.

  Kotlin

  val mediaFormat = MediaFormat()
  mediaFormat.setInteger(MediaFormat.KEY_MAX_OUTPUT_CHANNEL_COUNT, 99)
  

  Java

  MediaFormat mediaFormat = new MediaFormat();
  mediaFormat.setInteger(MediaFormat.KEY_MAX_OUTPUT_CHANNEL_COUNT, 99);
  

  Per un esempio pratico, vedi MediaCodecAudioRenderer.java di ExoPlayer. Per disattivare la spazializzazione autonomamente, indipendentemente dalla personalizzazione dell'OEM, consulta la sezione Disattivare l'audio spaziale.

• AudioAttributes: l'audio è idoneo per la spazializzazione se usage è impostato su USAGE_MEDIA o USAGE_GAME.

• AudioFormat: usa una maschera del canale che contenga almeno i canali AudioFormat.CHANNEL_OUT_QUAD (anteriore sinistro, anteriore destro, retro sinistro e posteriore destro) affinché l'audio sia idoneo per la spazializzazione. Nell'esempio riportato di seguito, utilizziamo AudioFormat.CHANNEL_OUT_5POINT1 per una traccia audio 5.1. Per una traccia audio stereo, usa AudioFormat.CHANNEL_OUT_STEREO.

  Se utilizzi Media3, puoi utilizzare Util.getAudioTrackChannelConfig(int channelCount) per convertire un conteggio dei canali in una maschera del canale.

  Inoltre, imposta la codifica su AudioFormat.ENCODING_PCM_16BIT se hai configurato il decoder per l'output PCM multicanale.

  Kotlin

  val audioFormat = AudioFormat.Builder()
    .setEncoding(AudioFormat.ENCODING_PCM_16BIT)
    .setChannelMask(AudioFormat.CHANNEL_OUT_5POINT1)
    .build()
  

  Java

  AudioFormat audioFormat = new AudioFormat.Builder()
    .setEncoding(AudioFormat.ENCODING_PCM_16BIT)
    .setChannelMask(AudioFormat.CHANNEL_OUT_5POINT1)
    .build();
  

Testare l'audio spaziale

Assicurati che l'audio spaziale sia abilitato sul tuo dispositivo di test:

• Per le cuffie con cavo, vai a Impostazioni di sistema > Suoni e vibrazione > Audio spaziale.
• Per le cuffie wireless, vai a Impostazioni di sistema > Dispositivi connessi > Icona a forma di ingranaggio per il dispositivo wireless > Audio spaziale.

Per verificare la disponibilità dell'audio spaziale per il routing attuale, esegui il comando adb shell dumpsys audio sul tuo dispositivo. Mentre la riproduzione è attiva, dovresti vedere i seguenti parametri nell'output:

Spatial audio:
mHasSpatializerEffect:true (effect present)
isSpatializerEnabled:true (routing dependent)