Benchmark
Actualización más reciente | Versión estable | Versión potencial | Versión beta | Versión alfa |
---|---|---|---|---|
7 de agosto de 2024 | 1.2.4 | 1.3.0-rc01 | - | - |
Cómo declarar dependencias
Para agregar una dependencia en Benchmark, debes agregar el repositorio de Maven de Google a tu proyecto. Consulta el repositorio de Maven de Google para obtener más información.
Macrocomparativas
Cómo usar Macrobenchmark
en tu proyecto, agrega las siguientes dependencias a tu archivo build.gradle
para
tu
Módulo de macrocomparativas:
Groovy
dependencies { androidTestImplementation "androidx.benchmark:benchmark-macro-junit4:1.2.4" }
Kotlin
dependencies { androidTestImplementation("androidx.benchmark:benchmark-macro-junit4:1.2.4") }
Microcomparativas
Cómo usar Microbenchmark
en tu proyecto, agrega las siguientes dependencias a tu archivo build.gradle
para
tu
Módulo de microcomparativas:
Groovy
dependencies { androidTestImplementation "androidx.benchmark:benchmark-junit4:1.2.4" } android { ... defaultConfig { ... testInstrumentationRunner "androidx.benchmark.junit4.AndroidBenchmarkRunner" } }
Kotlin
dependencies { androidTestImplementation("androidx.benchmark:benchmark-junit4:1.2.4") } android { ... defaultConfig { ... testInstrumentationRunner = "androidx.benchmark.junit4.AndroidBenchmarkRunner" } }
La biblioteca de Microbenchmark también proporciona un complemento de Gradle que puedes usar con tu módulo de microcomparativas.
Este complemento establece los valores predeterminados de la configuración de compilación para el módulo, establece la copia de resultados de comparativas en el host y proporciona la tarea de ./gradlew lockClocks
.
Para usar el complemento, incluye la siguiente línea en el bloque "plugins" de tu archivo build.gradle
de nivel superior:
Groovy
plugins { id 'androidx.benchmark' version '1.2.4' apply false }
Kotlin
plugins { id("androidx.benchmark") version "1.2.4" apply false }
Luego, aplica el complemento al archivo build.gradle
de tu módulo de comparativas.
Groovy
plugins { id 'androidx.benchmark' }
Kotlin
plugins { id("androidx.benchmark") }
Comentarios
Tus comentarios ayudan a mejorar Jetpack. Avísanos si descubres nuevos errores o tienes ideas para mejorar esta biblioteca. Consulta los errores existentes de esta biblioteca antes de crear uno nuevo. Puedes agregar tu voto a un error existente haciendo clic en el botón de la estrella.
Consulta la documentación sobre la Herramienta de seguimiento de errores para obtener más información.
Versión 1.3
Versión 1.3.0-rc01
7 de agosto de 2024
Lanzamiento de androidx.benchmark:benchmark-*:1.3.0-rc01
. La versión 1.3.0-rc01 contiene estas confirmaciones.
Correcciones de errores
- Se corrigió
androidx.benchmark.cpuEventCounter
que produce valores dañados para eventos que no son de instrucción (I7386a, b/286306579). - Corrige
resumeTiming
yrunWithTimingDisabled
para respetar el orden de prioridad de las métricas y reducir significativamente el impacto de la detención o reanudación de métricas de menor prioridad en los resultados de las métricas de mayor prioridad. Por ejemplo, si usas contadores de rendimiento de CPU a través del argumento de instrumentacióncpuEventCounter.enable
, timeNs ya no se reduce de manera significativa cuando se produce una pausa o reanudación. (I39c2e, b/286306579, b/307445225). - Se redujo la probabilidad de que el muestreo de pila haga que
measureRepeatedOnMainThread
alcance el tiempo de espera estricto del subproceso principal porque se quita la conversión de muestreo de la pila del subproceso principal. (I487a8, b/342237318). - Se quitó la descripción manual del acceso a las nuevas APIs de la plataforma, ya que esto sucede automáticamente a través del modelado de APIs cuando se usa R8 con AGP 7.3 o versiones posteriores (por ejemplo, R8 versión 3.3) y para todas las compilaciones cuando se usa AGP 8.1 o versiones posteriores (p. ej., D8 versión 8.1). Se recomienda a los clientes que no usan AGP que actualicen a D8 8.1 o versiones posteriores. Consulta este artículo para obtener más detalles. (I9496c, b/345472586).
- Se agregó la verificación de la versión de agp para enviar el nombre del paquete como instr arg. En versiones anteriores a AGP 8.4.0, el nombre del paquete de la app de destino no se puede enviar a la app de instrumentación a través de argumentos de instrumentación. (0c72a3f).
Versión 1.3.0-beta02
10 de julio de 2024
Lanzamiento de androidx.benchmark:benchmark-*:1.3.0-beta02
. La versión 1.3.0-beta02 contiene estas confirmaciones.
Correcciones de errores
- Usa correctamente EXITCODE
2
cuando inicies Perfetto para registrar una advertencia, pero continúa.
Versión 1.3.0-beta01
12 de junio de 2024
Lanzamiento de androidx.benchmark:benchmark-*:1.3.0-beta01
. La versión 1.3.0-beta01 contiene estas confirmaciones.
Cambios en la API
- Se cambió el nombre de
MethodTracing.affectsMeasurementOnThisDevice
aAFFECTS_MEASUREMENT_ON_THIS_DEVICE
para mantener la coherencia. (I1bdfa). - Se agregó la API experimental de
BlackHole.consume()
para evitar la eliminación de código no activado en las microcomparativas. (If6812, b/286091643). - Las microcomparativas ahora arrojarán correctamente para evitar que el seguimiento de métodos interfiera en las mediciones. Esto ocurre en ciertos dispositivos cuando se fuerza el seguimiento de métodos (mediante argumentos de instrumentación o
MicrobenchmarkConfig
) y si se intenta una medición después de un seguimiento de métodos. Los dispositivos afectados ejecutan la API 26 a la 30 o ciertas versiones de módulos de línea principal de ART afectadas por esta interferencia, y se pueden detectar en el tiempo de ejecución a través deProfilerConfig.MethodTracing.affectsMeasurementOnThisDevice
. (Iafb92, b/303660864).
Correcciones de errores
- Se recomienda la versión de agp máxima con cambios a 9.0.0-alpha01. (I5bbb0).
- Se agregó el modo de compilación al contexto de comparativas (If5612, b/325512900).
- Habilita el seguimiento de AIDL de forma predeterminada (requiere el nivel de API 28) (Ia0af2, b/341852305).
- Se agregó información adicional en el contexto de comparativas en el resultado de JSON:
context.artMainlineVersion
: Es la versión de número entero del módulo de línea principal de Art (si está presente en el dispositivo; de lo contrario, es -1).context.build.id
- Es igual aandroid.os.Build.ID
context.build.version.codename
- Es igual aandroid.os.Build.VERSION.CODENAME
context.build.version.abbreviatedCodename
: Corresponde a la primera letra del nombre interno previo al lanzamiento (incluso en compilaciones de lanzamiento) (Ie5020).
- Se corrigió
StackSampling
para respetarandroidx.benchmark.profiling.sampleDurationSeconds
. (Ib1d53) - Cambia la dependencia macro->común para que sea
api()
, de modo que sea más fácil de usar, p.ej.,PerfettoTrace
yPerfettoConfig
. (Icdae3, b/341851833). - Asegúrate de que las tareas
mergeArtProfile
ymergeStartupProfile
siempre esperen a que se genere el perfil de referencia. (I623d6, b/343086054). - Ten en cuenta el estado de habilitación de variantes cuando decidas si se debe habilitar la variante. (I5d19e, b/343249144).
- Mayor tiempo de espera de inicio predeterminado para el procesador de seguimiento perfetto (I87e8c, b/329145808).
Versión 1.3.0-alpha05
14 de mayo de 2024
Lanzamiento de androidx.benchmark:benchmark-*:1.3.0-alpha05
. La versión 1.3.0-alpha05 contiene estas confirmaciones.
Correcciones de errores
- Se arroja una excepción más clara cuando la métrica de Macrobench muestra valores cero para todas las iteraciones. (Iab58f, b/314931695)
- Se agregaron reglas de solución alternativa adicionales a las reglas de ProGuard de Microbench, incluida la compatibilidad con las reglas del objeto de escucha y otras advertencias o errores observados. (I14d8f, b/329126308, b/339085669).
- El seguimiento de métodos se ejecuta como una fase separada durante una macrocomparativa y ya no afecta las mediciones. (If9a50, b/285912360, b/336588271).
- Se agregaron sugerencias de depuración adicionales al mensaje de error de transmisión del sombreador. (I5efa6, b/325502725).
Versión 1.3.0-alpha04
1 de mayo de 2024
Lanzamiento de androidx.benchmark:benchmark-*:1.3.0-alpha04
. La versión 1.3.0-alpha04 contiene estas confirmaciones.
Cambios en la API
- Se agregó la variante experimental
MacrobenchmarkRule#measureRepeated
, que toma un objetoPerfettoConfig
personalizado para el registro completamente personalizado de registros de Perfetto. Ten en cuenta que los parámetros de configuración mal configurados pueden hacer que las clases de métricas integradas fallen. (Idfd3d, b/309841164, b/304038384). - Se cambió el nombre de
PowerMetric.deviceSupportsPowerEnergy
porPowerMetric.deviceSupportsHighPrecisionTracking
para mayor claridad. (I5b82f) - Se agregaron
PowerMetric.deviceBatteryHasMinimumCharge()
yPowerMetric.deviceSupportsPowerEnergy()
para habilitar la omisión o el cambio de comparativas en función de la capacidad de medición de energía del dispositivo. (I6a591, b/322121218).
Correcciones de errores
- Se agregó una comparación con el perfil de Baseline anterior. (I824c8, b/269484510)
- Se agregó un DSL para inhabilitar las advertencias. (Ic4deb, b/331237001)
- Se cambió la excepción al registro de información cuando las variantes de comparativas están inhabilitadas. (I8a517, b/332772491)
- Facilita la captura de seguimientos de métodos para que una Macrobenchmark se limite a la duración de la
measureBlock()
real. Anteriormente, se iniciaba en el inicio del proceso de destino y solo admitía inicios en frío. (Iee85a, b/300651094) - Evita fallas cuando el procesador de seguimiento de perfetto tarda en iniciarse. (I98841, b/329145808)
Versión 1.3.0-alpha03
17 de abril de 2024
Lanzamiento de androidx.benchmark:benchmark-*:1.3.0-alpha03
. La versión 1.3.0-alpha03 contiene estas confirmaciones.
Nuevas funciones
- Se agregaron APIs de
PerfettoTraceProcessor.Session.queryMetrics
de API pública con variantes JSON, textproto y proto binarias (sin decodificar). Te permiten consultar métricas integradas en TraceProcessor. (I54d7f, b/304038382) - Se agregó
profilerOutput
al resultado de JSON para usar herramientas más sencillas en los seguimientos de generación de perfiles (p.ej., perfetto y seguimientos de métodos). (I05ddd, b/332604449). - Se agregó la etiqueta de alimentación a las comparativas de configuración de Perfetto. Esto captura, por ejemplo, los puntos de seguimiento del bloqueo de activación. (Icfe44, b/286551983).
- Se agregó el argumento de inst
androidx.benchmark.profiling.skipWhenDurationRisksAnr
. Se puede configurar como falso para evitar omitir los seguimientos de métodos cuando la duración esperada pueda causar un error de ANR. Se recomienda evitarlo en las ejecuciones de CI. - Se agregó el argumento de inst experimental
androidx.benchmark.profiling.perfCompare.enable
. Configúralo como verdadero para ejecutar el tiempo de comparación entre las fases de medición y generación de perfiles. Útil en, por ejemplo, y evaluar la sobrecarga del seguimiento de métodos. (I61fb4, b/329146942).
Cambios en la API
- Se cambió
TraceSectionMetric.Mode
a clase sellada para permitir la expansión futura sin desglosar las sentencias when. (I71f7b) - Se agregaron
TraceSectionMetric.Mode.Average
y.Count
, y se reordenaron los argumentos para que el argumento más común (mode) estuviera antes en la lista de argumentos, lo que reduce la necesidad de especificar nombres de parámetros. (Ibf0b0, b/315830077, b/322167531). - Se cambió el nombre de
Metric.getResult
agetMeasurements
para que coincida con el tipo de datos que se muestra. (I42595)
Correcciones de errores
- Se corrigió para garantizar que las comparativas usen perfiles de referencia generados cuando
automaticGenerationDuringBuild
esté desactivado. (Ic144f, b/333024280) - Se corrigieron las anulaciones de propiedades del complemento de Gradle
BaselineProfile
para habilitar la generación de perfiles de Baseline y las comparativas cuando se personaliza unnonMinified
o un tipo de compilación de comparativas. (Ib8f05, b/324837887). - Se corrigió la limpieza de los seguimientos de métodos en macrocomparativas, de modo que esos seguimientos se deben capturar por completo y ser válidos, incluso en dispositivos más lentos. (I6349a, b/329904950).
- Habilita el inicio del bloqueo en el registro de registro de Perfetto para reducir el riesgo de que falten datos al comienzo del seguimiento. Solo es compatible con el nivel de API 33 y versiones posteriores. (Ie6e41, b/310760059).
- Se agregó una advertencia cuando se usa Android Test Orchestrator en los módulos de comparativas, ya que esto provocará que los archivos JSON de salida por módulo se reemplacen repetidamente. (Ia1af6, b/286899049).
- Forzar ',' Separadores de miles (coma) para lograr coherencia en el resultado de Studio, sin tener en cuenta la configuración regional del dispositivo (I3e921, b/313496656)
TraceSectionMetric
ahora admite porciones creadas conTrace.{begin|end}AsyncSection
. (I91b32, b/300434906).- Se agregaron etiquetas log.w / Exception a todas las fallas de detección de inicio. Esto no cambia el comportamiento actual (por lo que algunos errores arrojan errores y otros no detectan el inicio silenciosamente), solo lo hace más comprensible. Por lo general, los que
Log.w()
y no informan las métricas de inicio son aquellos en los que faltan eventos que no son de fotogramas, se arrojan excepciones cuando se detecta el inicio, excepto por la información de latencia de fotogramas (de porciones de IU/RT). (Id240f, b/329145809). - Cancela los trabajos de dexopt en segundo plano antes de ejecutar Macrobenchmark para reducir la interferencia. (I989ed).
- Se agregó la medición
frameCount
aFrameTimingMetric
para ayudar a descubrir situaciones en las que las mediciones cambian porque cambió la cantidad de fotogramas producidos (se agregaron animaciones nuevas y se corrigieron problemas de invalidación). (I1e5aa). - Se aclaró que
frameOverrunMs
es la métrica preferida para hacer un seguimiento cuando está disponible en Documentos y por qué. (I18749, b/329478323).
Versión 1.3.0-alpha02
20 de marzo de 2024
Lanzamiento de androidx.benchmark:benchmark-*:1.3.0-alpha02
. La versión 1.3.0-alpha02 contiene estas confirmaciones.
Nuevas funciones
Compatibilidad experimental con R8 en Microbench mediante reglas de ProGuard incorporadas Ten en cuenta que esta compatibilidad es experimental y requiere AGP 8.3 para reducir las pruebas de módulos de biblioteca. Usa lo siguiente para habilitar la optimización o reducción de R8 en el
build.gradle
de tu módulo de comparativas, lo que debería generar un aumento significativo del rendimiento, según la carga de trabajo. (I738a3, b/184378053).android { buildTypes.release.androidTest.enableMinification = true }
Correcciones de errores
- Se corrigió la advertencia de seguimiento de métodos para que esté en una línea separada del resultado de microbench (I0455c, b/328308833).
Versión 1.3.0-alpha01
21 de febrero de 2024
Lanzamiento de androidx.benchmark:benchmark-*:1.3.0-alpha01
. La versión 1.3.0-alpha01 contiene estas confirmaciones.
Cambios en la API
- Se cambió el nombre de los parámetros booleanos
MicrobenchmarkConfig
para evitar la palabra innecesaria “debería”. (Ia8f00, b/303387299). - Se agregó
BenchmarkRule.measureRepeatedOnMainThread
para que las comparativas del subproceso principal (p. ej., las que tocan Views o las IU de Compose) puedan evitar la activación de ANR, en especial durante grandes paquetes de CI (I5c86d). - Se agregó
FrameTimingGfxInfoMetric
, una implementación alternativa experimental deFrameTimingMetric
con mediciones que provienen directamente de la plataforma, en lugar de extraerse del registro de Perfetto. (I457cb, b/322232828). - Se agregó la capacidad de volcar un perfil de ART durante iteraciones de
warmUp
individuales. (I17923). - Varios cambios en la API de
TraceSectionMetric
:- Agregar
Mode.Min
,Mode.Max
- Agrega el argumento de etiqueta para anular el nombre de sección como etiqueta de métrica.
- Se agregó el nombre del modo al resultado para aclarar el significado de las métricas
- Se cambió la configuración predeterminada a suma, ya que la mayor parte del uso de esta métrica es para eventos repetidos Ten en cuenta estos cambios en el uso de CI, ya que puede crear discontinuidades o interrumpir el análisis. (Ic1e82, b/301892382, b/301955938).
- Agregar
Correcciones de errores
- Se mejoró el mensaje de error en el complemento de Gradle del perfil de Baseline cuando no existe el dispositivo administrado especificado (Idea2b, b/313803289).
- Se corrigió la inclusión de perfiles de Baseline de la biblioteca en AAR anteriores a AGP 8.3.0-alpha15 (I1d2af, b/313992099).
- Se corrigieron la URL de salida del perfil de inicio y del modelo de referencia al final de la tarea de generación. (I802e5, b/313976958)
- Se ajustaron los tiempos de espera de la fuente de datos para intentar corregir
java.lang.IllegalStateException: Failed to stop [ProcessPid(processName=perfetto, pid=...)]
(I8dc7d, b/323601788). - Agrega dos argumentos de instrumentación para anular el comportamiento de la acción de soltar del sombreador en caso de fallas de solución alternativa cuando se comparan apps sin
ProfileInstaller
1.3:androidx.benchmark.dropShaders.enable=true/false
: Se puede usar para omitir toda la eliminación del sombreador (incluida la que se realiza en los lanzamientos deStartupMode.Cold
), especialmente cuando se comparan apps que aún no usan profileinstaller 1.3.androidx.benchmark.dropShaders.throwOnFailure=true/false
: Se puede usar para tolerar fallas cuando se intentan descartar sombreadores, por ejemplo, cuando se comparan apps sin profileinstaller 1.3. (I4f573)
- Se omite el seguimiento de métodos en el subproceso de IU cuando se espera que demore más de unos segundos y se limpian los seguimientos de métodos cuando se arrojan. (I6e768).
- Se arroja cuando los nombres de archivo tienen más de 200 caracteres para evitar fallas poco claras cuando se escriben o procesan archivos en el posprocesamiento. (I4a5ab).
- Se solucionó el problema por el que se podían vincular fotogramas sin terminar al principio y al final del seguimiento, lo que se informaba incorrectamente como un solo fotograma extremadamente largo (I39353, b/322232828).
- Usa
--skip verification
en el nivel de API 30 y versiones posteriores cuando reinstales un paquete en el nivel de API 30 a 33 para borrar los perfiles de ART en compilaciones de usuario. Esto ayuda a evitar las advertencias de Play Protect que causan fallas en alguna clase de dispositivos. (Ic9e36). - Usa
am force-stop
para cerrar apps cuando no sea una app del sistema, como IU del sistema o Selector. (I5e028). - Macrobenchmark ahora espera a
1 second
para que la aplicación de destino limpie un perfil de ART (anteriormente, esperaba500 ms
). (I85a50, b/316082056). - Mejora el error
FrameTimingMetric
cuando no se producen fotogramas y siempre genera un vínculo para hacer un seguimiento cuando falla el análisis de métricas para ayudar a diagnosticar el problema. (I956b9). - Se corrigió una falla en
FrameTimingMetric
que no podía analizar el ID del marco, especialmente en ciertos dispositivos de OEM. (Ia24bc, b/303823815, b/306235276). - Se relajó la rigurosidad de las verificaciones en
FrameMetrics
y se agregaron más detalles a los mensajes de error. (Iadede).
Versión 1.2
Versión 1.2.4
17 de abril de 2024
Lanzamiento de androidx.benchmark:benchmark-*:1.2.4
. La versión 1.2.4 contiene estas confirmaciones.
Correcciones de errores
- Se corrigió el elemento srcset del perfil de referencia que no se configuraba en las variantes de comparativas. También se corrigió
automaticGenerationDuringBuild
en bibliotecas, lo que causaba una dependencia circular. (I28ab7, b/333024280). - Usa
am force-stop
para cerrar apps cuando no sea una app del sistema, como IU del sistema o Selector. Esta corrección corrige las comparativas deStartupMode.COLD
que fallan desde el mensaje "El paquete $package no debe ejecutarse antes del inicio en frío". debido a que el cierre del proceso no se realiza de forma correcta. (I5e028).
Versión 1.2.3
24 de enero de 2024
Lanzamiento de androidx.benchmark:benchmark-*:1.2.3
. La versión 1.2.3 contiene estas confirmaciones.
Correcciones de errores
- Se quitó la excepción del complemento de Gradle para perfiles de Baseline cuando la versión de AGP es 8.3.0 o posterior.
- Se corrigió la inclusión de perfiles de Baseline de la biblioteca en AAR anteriores a AGP 8.3.0-alpha15.
Versión 1.2.2
1 de diciembre de 2023
Lanzamiento de androidx.benchmark:benchmark-*:1.2.2
. La versión 1.2.2 contiene estas confirmaciones.
Perfiles de Baseline
- Los registros de ejecución mostrarán la ruta del archivo de salida del perfil de Baseline como un URI de archivo local. (aosp/2843918, aosp/2853665, b/313976958)
Versión 1.2.1
15 de noviembre de 2023
Lanzamiento de androidx.benchmark:benchmark-*:1.2.1
. La versión 1.2.1 contiene estas confirmaciones.
Nuevas funciones
- Se mejoró el mensaje de error que se muestra cuando el usuario inhabilita las variantes de prueba (b/307478189).
- Se agregaron propiedades para admitir la integración de ejecución de pruebas de AS (b/309805233), (b/309116324).
Versión 1.2.0
18 de octubre de 2023
Lanzamiento de androidx.benchmark:benchmark-*:1.2.0
. La versión 1.2.0 contiene estas confirmaciones.
Cambios importantes desde la versión 1.1.0
Perfiles de Baseline
- El nuevo complemento de Gradle para perfiles de Baseline automatiza la captura y la inclusión de perfiles de Baseline en tu flujo de trabajo de prueba y compilación.
BaselineProfileRule.collect
ahora es estable, una versión optimizada y simplificada de la API experimentalBaselineProfileRule.collectBaselineProfile
anterior.- Solo especifica
packageName
y controla tu app
- Solo especifica
- En el caso de las bibliotecas que generan perfiles de Baseline, ahora puedes filtrar las reglas generadas en código (argumento
BaselineProfileRule.collect
) o, incluso, de manera más simple en el complemento de Gradle. - Correcciones
- Se corrigió la recopilación de perfiles de Baseline en Android U+. (Id1392, b/277645214)
Macrocomparativas
- Compilación
- Macrobenchmark ahora restablece por completo el estado de compilación de cada compilación. Para ello, debes reinstalar el APK anterior a Android 14, por lo que te recomendamos que generes comparativas en Android 14 y versiones posteriores si deseas conservar el estado (como el acceso del usuario) en lo que se mide.
- Para solucionar esto, también puedes controlar la compilación de la app por separado y omitir la compilación con
CompilationMode.Ignore()
o el argumento de instrumentación.
Argumentos de instrumentación
- Compatibilidad con el argumento de instrumentación
androidx.benchmark.dryRunMode.enable
, (ya disponible en microcomparativas) para ejecutar validaciones más rápido (p.ej., cuando se crea la comparativa o en el envío previo) - Compatibilidad con
androidx.benchmark.profiling.mode=StackSampling
yMethodTracing
. - Se agregó
androidx.benchmark.enabledRules
para permitir el perfil de referencia del filtro del tiempo de ejecución frente a las pruebas de reglas de macrocomparativas. - Se agregó el argumento
androidx.benchmark.perfettoSdkTracing.enable
para habilitar el seguimiento con trace-perfetto, p.ej., Seguimiento de la recomposición de Compose. Ten en cuenta que, cuando se usa conStartupMode.COLD
, el tiempo se verá afectado significativamente, ya que la biblioteca de seguimiento se carga y se habilita durante el inicio de la app.
- Compatibilidad con el argumento de instrumentación
Requisitos
- Macrobenchmark ahora requiere
ProfileInstaller
1.3.0 o una versión posterior en la app de destino para habilitar la captura y el restablecimiento de perfiles, y el borrado de la caché del sombreador.
- Macrobenchmark ahora requiere
Nuevas APIs de Metric experimentales
- Se agregó el elemento
TraceSectionMetric
experimental, que permite extraer sincronización sencilla de los bloquestrace("") {}
en tu app, o TraceMetric para aprovechar la capacidad de consulta completa deTraceProcessor
de Perfetto. - Se agregó
PowerMetric
experimental para capturar información de uso de energía. - Se agregó
MemoryCountersMetric
experimental para contar los errores de la página. - Se agregó la API experimental de
PerfettoTraceProcessor
, que se usa internamente para extraer métricas de registros del sistema (también conocidos como registros de Perfetto).
- Se agregó el elemento
Correcciones
- Se corrigieron fallas que se producían cuando se instalaban o extraían perfiles de una app instalada desde varios APKs (p.ej., desde un paquete de aplicación).
- Se corrigió el problema por el que
FrameTimingMetric
ignoraba fotogramas con IDs de fotograma inconsistentes (por lo general, fotogramas durante ripples en el nivel de API 31 y versiones posteriores) (I747d2, b/279088460). - Se corrigieron errores de análisis en seguimientos > 64MB (Ief831, b/269949822)
- Se aclararon errores cuando la imagen de SO del dispositivo (especialmente el emulador) no se configuró correctamente para el seguimiento o la compilación.
- Omitir la comprobación del nivel de batería en dispositivos sin batería (micro y macro)
- Mejora en la salida de archivos, con errores más claros para directorios de salida no válidos y valores predeterminados más seguros
- Se mejoró la estabilidad de
StartupMode.COLD
descartando de manera constante la caché del sombreador (también expuesta a través deMacrobenchmarkScope.dropShaderCache
). - Se corrigió el resguardo de Leanback para
startActivityAndWait
.
Microcomparativas
- Funciones
- La generación de perfiles se trasladó a una fase separada, después de otras métricas, por lo que una ejecución de prueba puede mostrar resultados precisos de latencia y generación de perfiles.
- APIs experimentales
- Se agregó la API experimental de
MicrobenchmarkConfig
para definir métricas personalizadas y configurar el seguimiento y la generación de perfiles. Se puede usar para capturar seguimientos de métodos o puntos de seguimiento (pero ten en cuenta la sobrecarga de seguimiento). - Se agregaron APIs experimentales para controlar
BenchmarkState
por separado deBenchmarkRule
, sin JUnit - Se agregó el registro
PerfettoTrace
experimental para habilitar la captura de registros de Perfetto, con configuración personalizada, independiente de las APIs de comparativas.
- Se agregó la API experimental de
- Correcciones
- Se corrigió la falta de espacios en blanco iniciales en el resultado de comparativas de Android Studio.
- Se solucionó el problema por el que no se podían imprimir advertencias en el resultado de comparativas de Android Studio.
- Se corrigió la falla de
SampledProfiling
en Android 13 (nivel de API 33) y versiones posteriores. - Se mejoró de forma masiva el rendimiento de
dryRunMode
mediante la omisión deIsolationActivity
y el registro de Perfetto (modo de ejecución de prueba hasta 10 veces más rápido en versiones de SO anteriores).
Versión 1.2.0-rc02
6 de octubre de 2023
Lanzamiento de androidx.benchmark:benchmark-*:1.2.0-rc02
. La versión 1.2.0-rc02 contiene estas confirmaciones.
Correcciones de errores
- Se corrigió el resultado del archivo de Benchmark para que ya no dañe la copia del archivo del complemento
BaselineProfile
. Los archivos se generaron y se copiaron fuera del dispositivo, pero se les cambió el nombre para que el complemento de Gradle no los viera. (I8dbcc, b/303034735, b/296453339). - Se aclararon los mensajes de error de carga de
tracing-perfetto
cuando se inyectaba el módulo de macrocomparativas en la aplicación de destino.
Versión 1.2.0-rc01
20 de septiembre de 2023
Lanzamiento de androidx.benchmark:benchmark-*:1.2.0-rc01
. La versión 1.2.0-rc01 contiene estas confirmaciones.
Correcciones de errores
- Ahora se arroja una excepción (con instrucciones para solucionar) cuando el registro del SDK de Perfetto no se inicializa en una comparativa. (I6c878, b/286228781).
- Se corrigió la falla de OOM cuando se convertía el seguimiento de método de ART ->. perfetto. (I106bd, b/296905344).
- (Macrocomparativas) Se aclaró la etiqueta de seguimiento de métodos cuando se vincula en el resultado de la prueba de Studio y se corrigieron los nombres de archivo de registro de métodos para que sean únicos en el dispositivo o host, por lo que no se reemplazarán cuando se ejecute más de una comparativa. (I08e65, b/285912360).
- Garantiza que el dispositivo esté activo durante la captura de un perfil de Baseline. (I503fc).
Versión 1.2.0-beta05
30 de agosto de 2023
Lanzamiento de androidx.benchmark:benchmark-*:1.2.0-beta05
. La versión 1.2.0-beta05 contiene estas confirmaciones.
Nuevas funciones
- El complemento de Gradle para el Perfil de Baseline ahora es compatible con el complemento de Android para Gradle 8.3. (aosp/2715214).
Versión 1.2.0-beta04
23 de agosto de 2023
Lanzamiento de androidx.benchmark:benchmark-*:1.2.0-beta04
. La versión 1.2.0-beta04 contiene estas confirmaciones.
Nuevas funciones
- El complemento de Gradle para perfiles de Baseline ahora es compatible con el complemento de Android para Gradle 8.3. (aosp/2715214).
Correcciones de errores
- Corrige las fallas al escribir, mover y extraer archivos (especialmente los de pruebas parametrizadas) limpiando aún más los nombres de los archivos de salida y evitando '='. y “:” en los nombres de los archivos de salida. (I759d8).
Versión 1.2.0-beta03
9 de agosto de 2023
Lanzamiento de androidx.benchmark:benchmark-*:1.2.0-beta03
. La versión 1.2.0-beta03 contiene estas confirmaciones.
Cambios en la API
- Se agregó un argumento para filtrar
TraceSectionMetric
solo en el paquete de destino, activado de forma predeterminada (Ia219b, b/292208786).
Correcciones de errores
- Se cambió el nombre del argumento de instrumentación
fullTracing.enable
aperfettoSdkTracing.enable
para mantener la coherencia con el nombre del artefacto y otras referencias.fullTracing.enable
seguirá funcionando como resguardo. (I7cc00). - Los puntos de seguimiento internos de la biblioteca de comparativas (incluido el registro de fases y bucles de microcomparativas) ahora aparecerán en el lector de registros del sistema de Studio y se anidarán en el proceso correcto en Perfetto. (I6b2e7, b/293510459).
- Se quitó el error NOT-PROFILEABLE de macrocomparativas en el nivel de API 31 y versiones posteriores, y se omitió la verificación perfilable en dispositivos con permisos de administrador eng/userdebug. (I2abac, b/291722507).
- Cuando se usan las optimizaciones de diseño Dex, las reglas de perfil de inicio ahora también se consideran como reglas de perfil de Baseline. (aosp/2684246, b/293889189).
Versión 1.2.0-beta02
26 de julio de 2023
Lanzamiento de androidx.benchmark:benchmark-*:1.2.0-beta02
. La versión 1.2.0-beta02 contiene estas confirmaciones.
Cambios en la API
- Se agregaron APIs experimentales para la configuración y las métricas personalizadas de microbench (p.ej., el generador de perfiles y el seguimiento). (I86101, b/291820856).
Correcciones de errores
- Se informa un error en Macrobench cuando el SO está mal configurado para el seguimiento, como se corrigió recientemente en los emuladores de ARM64 de la API 26/28. (I0a328, b/282191686).
- Se agregaron detalles al error de restablecimiento de la compilación para sugerir la actualización del emulador, ya que algunos emuladores solucionaron este problema recientemente. (I8c815, b/282191686).
- Haz que
androidx.test.uiautomator:uiautomator:2.2.0
sea unaapi
en lugar de una dependenciaimplementation
. (I1981e).
Versión 1.2.0-beta01
18 de julio de 2023
Lanzamiento de androidx.benchmark:benchmark-*:1.2.0-beta01
. La versión 1.2.0-beta01 contiene estas confirmaciones.
Correcciones de errores
- Se corrigieron las advertencias que a veces se suprimen en los resultados de Benchmark en Studio y que no se muestran en Studio las soluciones alternativas que aparecen en blanco del resultado de Benchmark (Ia61d0, b/227205461, b/286306579, b/285912360).
- Se corrigió el comentario de
FrameTimingMetric
. La submétrica se llamaframeDurationCpuMs
. (Ib097f, b/288830934).
Versión 1.2.0-alpha16
21 de junio de 2023
Lanzamiento de androidx.benchmark:benchmark-*:1.2.0-alpha16
. La versión 1.2.0-alpha16 contiene estas confirmaciones.
Cambios en la API
- Se cambió el nombre de la API de
BaselineProfileRule.collectBaselineProfile()
aBaselineProfileRule.collect()
. (I4b665).
Correcciones de errores
- Compatibilidad con macrocomparativas para
androidx.benchmark.profiling.mode = MethodTracing
. (I7ad37, b/285912360). - La creación de perfiles de microcomparativas se trasladó a una fase separada, para que se produzca en secuencia después de la medición, en lugar de reemplazarla. Las secciones de registro de
MethodTracing
ahora también se incluyen en el registro de Perfetto capturado, si está presente. (I9f657, b/285014599). - Agrega la medición de recuento a
TraceSectionMetric
conMode.Sum
. (Ic121a, b/264398606).
Versión 1.2.0-alpha15
7 de junio de 2023
Lanzamiento de androidx.benchmark:benchmark-*:1.2.0-alpha15
. La versión 1.2.0-alpha15 contiene estas confirmaciones.
Nuevas funciones
- Se agregó
MemoryUsageMetric
experimental para hacer un seguimiento del uso de memoria de una aplicación de destino. (I56453, b/133147125, b/281749311). - Se agregó compatibilidad para configuraciones de Perfetto completamente personalizadas con
PerfettoTrace.record
(If9d75, b/280460183). - Se agregó una propiedad para omitir la generación de perfiles de Baseline. Uso:
./gradlew assemble -Pandroidx.baselineprofile.skipgeneration
. (I37fda, b/283447020).
Cambios en la API
- La API de
collectBaselineProfile
siempre genera perfiles de Baseline estables. Se quitó la API decollectStableBaselineProfile
, por lo que se debe usarcollectBaselineProfile
en su lugar. (I17262, b/281078707). - Se cambió el argumento
filterPredicate
deBaselineProfileRule
a no nulo, con un valor predeterminado equivalente para que el comportamiento predeterminado del filtro sea más claro en los documentos. (I3816e).
Correcciones de errores
- Inhabilita
IsolationActivity
y el registro de Perfetto endryRunMode
para mejorar significativamente el rendimiento, ya que eran la mayor parte del tiempo de ejecución. (Ie4f7d). - Compatibilidad con el muestreo de pila de llamadas en Macrobenchmarks mediante los argumentos de prueba de instrumentación
androidx.benchmark.profiling.mode=StackSampling
yandroidx.benchmark.profiling.sampleFrequency
. (I1d13b, b/282188489). - Se corrigió la falla que se producía cuando se descartaban sombreadores en Android U (nivel de API 34), así como en emuladores. (I031ca, b/274314544).
Versión 1.2.0-alpha14
3 de mayo de 2023
Lanzamiento de androidx.benchmark:benchmark-*:1.2.0-alpha14
. La versión 1.2.0-alpha14 contiene estas confirmaciones.
Correcciones de errores
- Se corrigió el problema por el que
FrameTimingMetric
ignoraba marcos con IDs de fotogramas incoherentes. Esto hacía que algunas animaciones en versiones recientes de la plataforma (nivel de API 31 y superiores) ignoraran muchos fotogramas mientras se hacía la animaciónRenderThread
(p.ej., durante un efecto de ondas). (I747d2, b/279088460). - Se corrigió el análisis del procesador de seguimiento para seguimientos de más de 64 MB. (Ief831, b/269949822).
- Se corrigió la falla de la generación de perfiles de Baseline en Android U debido a la salida diferente del comando
pm dump-profiles
. (Id1392, b/277645214). - Se corrigió la secuencia de comandos de bloqueo del reloj de la GPU para comparar correctamente las cadenas (I53e54, b/213935715).
Versión 1.2.0-alpha13
5 de abril de 2023
Lanzamiento de androidx.benchmark:benchmark-*:1.2.0-alpha13
. La versión 1.2.0-alpha13 contiene estas confirmaciones.
Cambios en la API
- Se agregó el parámetro de tipo de perfil cuando se generan perfiles de Baseline para admitir la próxima función de perfil de inicio. (Ie20d7, b/275093123)
- Se agregó una nueva API experimental de
TraceMetric
para definir métricas completamente personalizadas basadas en el contenido de un registro de Perfetto. (I4ce31, b/219851406). - Agrega una métrica experimental para determinar la cantidad de fallas de la página durante una comparativa. (I48db0).
Versión 1.2.0-alpha12
22 de marzo de 2023
Lanzamiento de androidx.benchmark:benchmark-*:1.2.0-alpha12
. La versión 1.2.0-alpha12 contiene estas confirmaciones.
Nuevas funciones
- El nuevo complemento de Gradle para perfiles de Baseline se lanzó en versión alfa, lo que facilita la generación de un perfil de Baseline y simplifica el flujo de trabajo de los desarrolladores.
Cambios en la API
- Se quitó la compatibilidad con el registro de Perfetto en las APIs 21 y 22, que incluye microcomparativas y las APIs experimentales de
PerfettoTrace
. Antes de esta versión,UiAutomation
conexiones no eran confiables en algunos dispositivos. (I78e8c). - Se agregó una API experimental pública para
PerfettoTraceProcessor
para habilitar el análisis del contenido de seguimiento. Este es un paso para lograr métricas completamente personalizadas basadas en datos de registro de Perfetto. (I2659e, b/219851406).
Versión 1.2.0-alpha11
8 de marzo de 2023
Lanzamiento de androidx.benchmark:benchmark-*:1.2.0-alpha11
. La versión 1.2.0-alpha11 contiene estas confirmaciones.
Correcciones de errores
- Se corrigieron fallas en
MacrobenchmarkRule
yBaselineProfileRule
que se producían cuando se reinstalaban o extraían perfiles de un paquete de aplicación con varios APK. (I0d8c8, b/270587281).
Versión 1.2.0-alpha10
22 de febrero de 2023
Lanzamiento de androidx.benchmark:benchmark-*:1.2.0-alpha10
. La versión 1.2.0-alpha10 contiene estas confirmaciones.
Nuevas funciones
- En Android 14 y versiones posteriores, Macrobenchmark ya no reinstala aplicaciones objetivo para restablecer el estado de compilación, gracias a una nueva función de la plataforma. Anteriormente, era necesario tener un dispositivo con permisos de administrador o resolver la eliminación todos los estados de la aplicación (por ejemplo, datos de acceso del usuario) antes de cada ejecución de comparativa (I9b08c, b/249143766).
Correcciones de errores
- Se corrigió
DryRunMode
para que ya no falle en caso de perfil vacío debido a una omisión de compilación. En cambio, ejecuta una sola iteración y extrae el perfil para garantizar que se capture algo. (I2f05d, b/266403227). - Se corrigió la falla de
PowerMetric
que se producía cuando se verificaba la presencia de powerstats en niveles de API anteriores (5faaf9, b/268253898).
Versión 1.2.0-alpha09
11 de enero de 2023
Lanzamiento de androidx.benchmark:benchmark-*:1.2.0-alpha09
. La versión 1.2.0-alpha09 contiene estas confirmaciones.
Correcciones de errores
- Se habilitó el paso del argumento de instrumentación de
None
aandroidx.benchmark.enabledRules
para inhabilitar la generación de perfiles de Baseline y todas las comparativas (I3d7fd, b/258671856). - Se corrigió la captura
PerfettoTrace
en módulos de apps (es decir, las APK de prueba de instrumentación que no son automáticas) (I12cfc). - Se corrigió el orden de los argumentos de extracción de adb de perfiles de Baseline en los resultados de salida de Studio (I958d1, b/261781624).
- Ahora se reconoce correctamente la API 33 del emulador de ARM cuando se intenta ejecutar una macrocomparativa y, además, se imprime la advertencia de forma correcta (69133b,b/262209591).
- Se omite la comprobación de nivel de batería en dispositivos sin batería en Macrobenchmark (fe4114, b/232448937).
Versión 1.2.0-alpha08
7 de diciembre de 2022
Lanzamiento de androidx.benchmark:benchmark-*:1.2.0-alpha08
. La versión 1.2.0-alpha08 contiene estas confirmaciones.
Cambios en la API
- Se agregaron las nuevas APIs experimentales
PerfettoTrace.record {}
yPerfettoTraceRule
para capturar los registros de Perfetto (también conocidos como Registros del sistema) como parte de una prueba, para inspeccionar el comportamiento y el rendimiento de la misma (I3ba16). BaselineProfileRule
ahora acepta un predicado de filtro, en lugar de una lista de prefijos de paquetes. Esto le da al control total del filtro (I93240).- Se agregó una API experimental,
BaselineProfileRule.collectStableBaselineProfile
, que espera hasta que un Perfil de Baseline sea estable para N iteraciones (I923f3). - Se agregó la capacidad de especificar un prefijo de nombre de archivo de resultado durante la generación de Perfiles de Baseline con
BaselineProfileRule
(I7b59f, b/260318655).
Correcciones de errores
- Se mejoró la seguridad de la escritura de los archivos salientes, que debería evitar que los archivos de salida se escriban/anexen silenciosamente, especialmente en las APIs 21/22 (If8c44, b/227510293).
- Se corrigió el resultado de seguimiento de
simpleperf
para crear y colocar el archivo correctamente. Por lo general, también se corrigen errores en los que Gradle extrae un archivo sin éxito (I12a1c, b/259424099). - Se mejoró el mensaje de error de profileinstaller impreso cuando la versión es demasiado antigua. Este te indicará que actualices la versión de profileinstaller (1.2.1) para medir los Perfiles de Baseline de la APIs 31 a 33, en lugar de indicar que no es compatible (Ia517f, b/253519888).
- Se corrigieron varias fallas del comando de shell del mensaje de one error "Print needed API <=23", incluidas las fallas de configuración de perfetto para capturar objetos binarios y las de captura de seguimiento (Ib6b87, b/258863685).
- Ordena automáticamente las reglas de perfiles generadas para minimizar la cantidad de cambios que se realizan con el tiempo (al revisar las reglas de perfiles en el control de código fuente) (Ie2509).
- Se corrigió una falla en compilaciones inferiores a Android 13 sin permisos de administrador (API 33) con el mensaje
Expected no stderr from echo 3 > /proc/sys/vm/drop_caches
(I6c245, b/259508183).
Problemas conocidos: MacrobenchmarkScope.dropShaderCache()
puede fallar debido a la falta de un registro de emisión en el manifiesto del instalador de perfiles, que aún no se lanzó (I5c728, b/258619948). Para resolver el problema en profileinstaller:1.3.0-alpha02
, agrega lo siguiente al AndroidManifest.xml de la aplicación (no de las comparativas):
<!-- workaround bug in profileinstaller 1.3.0-alpha02, remove when updating to alpha03+ -->
<receiver
android:name="androidx.profileinstaller.ProfileInstallReceiver"
android:permission="android.permission.DUMP"
android:exported="true">
<intent-filter>
<action android:name="androidx.profileinstaller.action.BENCHMARK_OPERATION" />
</intent-filter>
</receiver>
Versión 1.2.0-alpha07
9 de noviembre de 2022
Se lanzó androidx.benchmark:benchmark-*:1.2.0-alpha07
. La versión 1.2.0-alpha07 contiene estas confirmaciones.
Cambios en la API
- Se agregó la API de
PowerMetric
para medir la energía y la potencia en Macrobenchmarks (Ife601, b/220183779). - Se corrigió
MacrobenchmarkScope.dropShaderCache()
para descartar la caché del sombreador. Esto quita alrededor de 20 ms de ruido de las comparativas deStartupMode.COLD
, ya que los sombreadores ahora se borran de manera coherente en cada iteración. Antes, la compilación dePartial
con iteraciones de preparación informaba números incorrectamente rápidos, ya que era más probable que el sombreador de caché se realizara durante la preparación. Esta corrección requiere un dispositivo con permisos de administrador o el uso deprofileinstaller:1.3.0-alpha02
en la app de destino. Para conocer los cambios en la API de la biblioteca deProfileInstaller
, consulta la página ProfileInstaller 1.30-alpha02 (Ia5171, b/231455742). - Se agregó
TraceSectionMode("label", Mode.Sum)
, lo que permite medir el tiempo total empleado en varias secciones de seguimiento con la misma etiqueta. Por ejemplo,TraceSectionMetric("inflate", Mode.Sum)
registrará una métricainflateMs
para el tiempo total en una macrocomparativa invertida en inflación. También se quitó el requisito de nivel de API 29, ya queTraceSectionMetric
funciona junto conandroidx.tracing.Trace
hasta niveles de API inferiores, con el uso deforceEnableAppTracing
dentro de la app de destino (Id7b68, b/231455742).
Correcciones de errores
- Se mejoró la seguridad de todos los comandos de shell internos con la validación de todos los resultados/errores (I5984d, b/255402908, b/253094958).
- Se especificó el dispositivo en el comando
adb pull
del perfil de referencia, de modo que se pueda copiar el comando de extracción si hay varios dispositivos conectados (hasta un emulador) (I6ac6c, b/223359380). - Se agregó un error si el APK de prueba de macrocomparativas no está configurado como instrumentación autónoma. Este error evita las macrocomparativas dentro del proceso de la app de destino. En el proceso, Macrobench no podría compilar, eliminar ni iniciar la app, ni controlar sus propios permisos (I4279b).
- Se corrigió un problema en
measureRepeated()
por el queStartupMode.COLD
no finalizaba el proceso de destino después desetupBlock
. Ahora cuandosetupBlock
interactúe con la app no dejará el proceso en ejecución ni una medición de inicio en frío no válida (I8ebb7).
Versión 1.2.0-alpha06
24 de octubre de 2022
Lanzamiento de androidx.benchmark:benchmark-*:1.2.0-alpha06
. La versión 1.2.0-alpha06 contiene estas confirmaciones.
Cambios en la API
BaselineProfileRule
ya no requiere raíces en Android 13 (nivel de API 33) y ya no es experimental (Ie0a7d, b/250083467, b/253094958).- Este cambio también corrige cómo se vacían los perfiles de una app en el disco en dispositivos que no tienen raíces, pero requiere actualizar la dependencia de ProfileInstaller de la app de destino.
- Si quieres usar
BaselineProfileRule
oCompilationMode.Partial(warmupIterations)
en un dispositivo sin raíces, también debes actualizar tu app de destino a fin de que useandroidx.profileinstaller.profileinstaller:1.3.0-alpha01
. Esto permite vaciar correctamente el perfil en el disco, de modo que pueda compilarse o extraerse.
Correcciones de errores
- Se corrigió la falla de
SampledProfiling
en el nivel de API 33 y superiores (I40743, b/236109374).
Versión 1.2.0-alpha05
5 de octubre de 2022
Lanzamiento de androidx.benchmark:benchmark-*:1.2.0-alpha05
. La versión 1.2.0-alpha05 contiene estas confirmaciones.
Correcciones de errores
- Se corrigió el desglose de fotogramas en el visor de seguimiento del sistema de Studio para comparativas de seguimientos capturados (I3f3ae, b/239677443).
- Se corrigió
FrameTimingMetric
para enumerarFrameOverrun
como requisito de la API 31 en lugar de la 29 (I716dd, b/220702554). - Se estableció la iteración en
BaselineProfileRule
y ahor se muestra con claridad si el paquete de destino no está instalado (ya se hizo para MacrobenchmarkRule) (Ic09a3, b/227991471).
Versión 1.2.0-alpha04
21 de septiembre de 2022
Lanzamiento de androidx.benchmark:benchmark-*:1.2.0-alpha04
. La versión 1.2.0-alpha04 contiene estas confirmaciones.
Nuevas funciones
Se agregó compatibilidad con el argumento de instrumentación
dryRunMode.enable
a macrocomparativas (ya disponibles en micro) a fin de lograr un desarrollo local más rápido y validar la automatización de apps (p. ej., en el envío previo). Esto anula las iteraciones a 1, omite la compilación, elimina todos los errores de configuración e inhabilita la salida del archivo de medición .json (Ib51b4, b/175149857).En la línea de comandos de Gradle:
./gradlew macrobenchmark:cC -P android.testInstrumentationRunnerArguments.androidx.benchmark.dryRunMode.enable=true
En build.gradle:
android { defaultConfig { testInstrumentationRunnerArgument 'androidx.benchmark.dryRunMode.enable', 'true' } }
Correcciones de errores
- Se corrigió
StartupTimingMetric
para que ya no requiera que las actividades medidas se inicien a través deMacrobenchmarkScope.startActivityAndWait()
. Esto significa que la métrica puede recoger lanzamientos de, p. ej., notificaciones,Context.startActivity()
, navegación basada en la actividad en la app o comandos de shell (Ia2de6, b/245414235). - Se corrigió el error por el que
startActivityAndWait
agotaba el tiempo de espera al intentar esperar la finalización del inicio en emuladores reduciendo la rigurosidad de la detección de fotogramas (Ibe2c6, b/244594339, b/228946895).
Versión 1.2.0-alpha03
7 de septiembre de 2022
Lanzamiento de androidx.benchmark:benchmark-*:1.2.0-alpha03
. La versión 1.2.0-alpha03 contiene estas confirmaciones.
Nuevas funciones
- Se agregaron APIs experimentales para usar
BenchmarkState
de forma independiente, separadas deBenchmarkRule
/JUnit4
(Id478f, b/228489614).
Correcciones de errores
- Se agregó el resguardo de Leanback para
startActivityAndWait
(01ed77, b/242899915).
Versión 1.2.0-alpha02
24 de agosto de 2022
Lanzamiento de androidx.benchmark:benchmark-*:1.2.0-alpha02
. La Versión 1.2.0-alpha02 contiene estas confirmaciones.
Cambios en la API
- La configuración predeterminada es
am force stop
paraMacrobenchmarkScope.killProcess()
, incluso cuando tiene permisos de administrador, excepto durante la generación del perfil de Baseline. Esto se puede anular con un argumento booleano opcional (02cce9, b/241214097).
Correcciones de errores
- Se admite la generación de perfiles de referencia para apps del sistema (I900b8, b/241214097).
- Se admite la verificación de métricas de energía de ODPM en dispositivos sin derechos de administrador (a38c78, b/229623230).
Versión 1.2.0-alpha01
27 de julio de 2022
Lanzamiento de androidx.benchmark:benchmark-*:1.2.0-alpha01
. La versión 1.2.0-alpha01 contiene estas confirmaciones.
Nuevas funciones
- Se agregó un nuevo componente tracing-perfetto-common que permite habilitar el seguimiento del SDK de Perfetto en una app que lo expone (I2cc7f).
Se agregó el argumento de instrumentación
androidx.benchmark.enabledRules
para habilitar el filtrado de macrobenchmarks solo a benchmarks o solo a la generación de perfiles de referencia. Pasa "Macrobenchmark" o "BaselineProfile" para ejecutar un solo tipo de prueba, p. ej., cuando se genereBaselineProfiles
en un emulador. También se admite la lista separada por comas (I756b7, b/230371561).Por ejemplo, en el archivo build.gradle de tu macrobenchmark:
android { defaultConfig { testInstrumentationRunnerArgument 'androidx.benchmark.enabledRules', 'BaselineProfile' } }
O bien, desde la línea de comandos de Gradle:
./gradlew macrobenchmark:cC -P android.testInstrumentationRunnerArguments.androidx.benchmark.enabledRules=BaselineProfile
Cambios en la API
- Se agregó un nuevo
PowerMetric
para medir tareas de energía y energía en comparativas (I9f39b, b/220183779). - Se agregó un nuevo modo de compilación
CompilationMode.Ignore
para omitir la compilación y el restablecimiento del perfil (Ibbcf8, b/230453509). - Se agregó un parámetro nuevo a
BaselineProfileRule#collectBaselineProfile
para filtrar el archivo de salida por nombres de paquetes (If7338, b/220146561). - Permite que el programador descargue el dispositivo para medir el consumo de energía (I6a6cb).
- Se agregó la capacidad de borrar la caché del sombreador en
MacrobenchmarkScope
(I32122). - Permite al desarrollador configurar la visualización del tipo de métrica y detallar las categorías del subsistema deseadas (I810c9).
- Anteriormente, se arrojaba una
UnsupportedOperationException
en la comparativa si se ejecutaba en un dispositivo no compatible. Ahora, la UOE solo ocurre si se usa la métrica en el dispositivo no compatible (es decir,PowerMetric.configure
) (I5cf20, b/227229375). - Se agregaron
TotalPowerMetric
yTotalEnergyMetric
para medir la energía total y la de cada categoría del sistema en macrobenchmarks (I3b26b, b/224557371).
Correcciones de errores
- Se solucionó un problema por el que no se restablecían correctamente los métodos compilados entre cada macrobenchmark en compilaciones sin permisos de administrador. Lamentablemente, esto requiere reinstalar el APK cada vez que se realice una iteración, lo que borrará los datos de la aplicación para cada macrobenchmark (I31c74, b/230665435).
- Se corrigió la falla de registro de seguimiento en la API 21/22 (If7fd6, b/227509388, b/227510293, b/227512788).
- Se detecta la finalización del inicio de la actividad de sobrecarga para corregir la excepción "No se puede leer ninguna métrica" en la macrobenchmark de inicio (Ia517c).
Versión 1.1.1
Versión 1.1.1
9 de noviembre de 2022
Se lanzó androidx.benchmark:benchmark-*:1.1.1
. La versión 1.1.1 contiene estas confirmaciones.
Correcciones de errores
- Se corrigió
android.system.ErrnoException: open failed: EACCES
que se producía en algunos dispositivos con Android 11 (nivel de API 30) y superiores. Esta es una corrección puntual de1.2.0-alpha01
(aosp/2072249).
Versión 1.1.0
Versión 1.1.0
15 de junio de 2022
Lanzamiento deandroidx.benchmark:benchmark-*:1.1.0
. La versión 1.1.0 contiene estas confirmaciones.
- Esta versión es idéntica a
androidx.benchmark:benchmark-*:1.1.0-rc03
.
Cambios importantes desde 1.0.0
La compatibilidad con Jetpack Macrobenchmark, que te permite medir interacciones completas de la app, como el inicio y el desplazamiento, brinda la capacidad para capturar registros y medir secciones de estos registros.
Compatibilidad con perfiles de Baseline
CompilationMode.Partial
para medir la efectividad de los perfiles de Baseline.@BaselineProfileRule
para generar automáticamente perfiles de Baseline para un recorrido crítico del usuario.
Compatibilidad con métricas de asignación y generación de perfiles durante ejecuciones de Microbenchmark.
Versión 1.1.0-rc03
1 de junio de 2022
Lanzamiento de androidx.benchmark:benchmark-*:1.1.0-rc03
. La versión 1.1.0-rc03 contiene estas confirmaciones.
Correcciones de errores
Se evita la reinstalación del paquete de destino en cada iteración de benchmark (aosp/2093027, b/231976084).
Se quitó la demora de
300ms
depressHome()
(aosp/2086030, b/231322975).Se mejoró la velocidad de iteración de macrobenchmarks mediante la optimización de los comandos de shell que se usan en nivel interno (aosp/2086023, b/231323582).
Se agregó compatibilidad con dispositivos Gradle administrados cuando se generan perfiles de Baseline con Macrobenchmarks (aosp/2062228, b/228926421).
Versión 1.1.0-rc02
11 de mayo de 2022
Lanzamiento de androidx.benchmark:benchmark-*:1.1.0-rc02
. La versión 1.1.0-rc02 contiene estas confirmaciones.
- Ten en cuenta que esta versión incluye un cambio de comportamiento, ya que ahora las apps se vuelven a instalar por completo entre cada comparativa para garantizar mediciones precisas.
Correcciones de errores/Cambios de comportamiento
Se solucionó un problema por el que no se restablecía, de forma correcta, la compilación de apps entre macrobenchmarks ni en todas las compilaciones sin permisos de administrador. Esto corrige muchos casos en los que ejecutar varias pruebas causaba que
CompilationMode
produjera poco o ningún efecto en las mediciones. Para solucionar este problema, la app de destino ahora está reinstalando por completo cada método de prueba, lo que borrará los datos de la aplicación entre cada macrobenchmark (I31c74, b/230665435).Como esto evita que las apps configuren el estado antes de las pruebas, ahora es posible omitir la compilación o reinstalación para poder solucionar este problema. Por ejemplo, puedes compilar por completo el destino con un comando de shell
cmd package compile -f -m speed <package>
y, luego, omitir el paso de compilación de macrobenchmarks.Por ejemplo, en el archivo build.gradle de tu macrobenchmark:
android { defaultConfig { testInstrumentationRunnerArgument 'androidx.benchmark.compilation.enabled, 'false' } }
O bien, desde la línea de comandos de Gradle:
./gradlew macrobenchmark:cC -P android.testInstrumentationRunnerArguments.androidx.benchmark.compilation.enabled=false
Ahora es posible compartir un módulo entre macrobenchmarks y el perfil de Baseline que genera pruebas si agregas el argumento de instrumentación
androidx.benchmark.enabledRules
. Pasa "Macrobenchmark" o "BaselineProfile" para ejecutar un solo tipo de prueba, p. ej., cuando se genereBaselineProfiles
en un emulador (I756b7, b/230371561).Por ejemplo, en el archivo build.gradle de tu macrobenchmark:
android { defaultConfig { testInstrumentationRunnerArgument 'androidx.benchmark.enabledRules', 'BaselineProfile' } }
O bien, desde la línea de comandos de Gradle:
./gradlew macrobenchmark:cC -P android.testInstrumentationRunnerArguments.androidx.benchmark.enabledRules=BaselineProfile
Versión 1.1.0-rc01
20 de abril de 2022
Lanzamiento de androidx.benchmark:benchmark-*:1.1.0-rc01
. La versión 1.1.0-rc01 contiene estas confirmaciones.
Correcciones de errores
- Los vínculos de salida del perfil de Baseline en Android Studio ahora usan un nombre de archivo único. De esta manera, el resultado siempre refleja los más recientes del uso de una
BaselineProfileRule
(aosp/2057008, b/228203086).
Versión 1.1.0-beta06
6 de abril de 2022
Lanzamiento de androidx.benchmark:benchmark-*:1.1.0-beta06
. La versión 1.1.0-beta06 contiene estas confirmaciones.
Correcciones de errores
- Se corrigió una falla de registro de seguimiento en la API 21/22 (If7fd6, b/227509388).
- Se detecta la finalización del inicio de la actividad de sobrecarga para corregir la excepción "No se puede leer ninguna métrica" en la macrobenchmark de inicio (Ia517c).
- Se corrigieron las métricas de inicio de Macrobenchmarks cuando se usa
CompilationMode.None()
. Antes de este cambio, el valor deCompilationMode.Partial()
parecía ser más lento que el deCompilation.None()
(611ac9).
Versión 1.1.0-beta05
23 de marzo de 2022
Lanzamiento de androidx.benchmark:benchmark-*:1.1.0-beta05
. La versión 1.1.0-beta05 contiene estas confirmaciones.
Correcciones de errores
- Finaliza el paquete después de omitir la instalación del perfil cuando se usa
CompilationMode.None
(aosp/1991373). - Se solucionó un problema por el que Macrobenchmarks no podía recopilar métricas de inicio cuando se usaba
StartupMode.COLD
(aosp/2012227 b/218668335).
Versión 1.1.0-beta04
23 de febrero de 2022
Lanzamiento de androidx.benchmark:benchmark-*:1.1.0-beta04
. La versión 1.1.0-beta04 contiene estas confirmaciones.
Correcciones de errores
Se corrigieron las métricas que faltaban en Android 10 y
NoSuchElementException
que causaban los nombres de procesos que no se capturaban, de manera correcta, en los seguimientos (Ib4c17, b/218668335).Se usó
PowerManager
para la detección de modelos térmicos en Q (API 29) y versiones posteriores. Esto reduce significativamente la frecuencia de los falsos positivos en la detección de modelos térmicos (reintento de comparativas después del enfriamiento de 90 segundos) y acelera las comparativas de manera considerable en compilaciones de usuarios. También proporciona detección de modelos térmicos incluso cuando los relojes están bloqueados (si están bloqueados demasiado alto para el entorno físico del dispositivo) (I9c027, b/217497678, b/131755853).Se filtró la generación de perfiles de muestra de simpleperf para el subproceso
measureRepeated
a fin de simplificar la inspección (Ic3e12, b/217501939).Se admitieron métricas de subprocesos de la IU con nombre en apps de varios procesos (Ice6c0, b/215988434).
Se filtraron las reglas del perfil de Baseline para orientarlas a Android 9 (SDK 28) (aosp/1980331 b/216508418).
Se omite la instalación de perfiles cuando se usa
Compilation.None()
. Además, se informan advertencias cuando la app use una versión anterior deandroidx.profileinstaller
y del complemento de Android para Gradle (aosp/1977029).
Versión 1.1.0-beta03
9 de febrero de 2022
Lanzamiento de androidx.benchmark:benchmark-*:1.1.0-beta03
. La versión 1.1.0-beta03 contiene estas confirmaciones.
Cambios en la API
- Se agregó
AudioUnderrunMetric
a la biblioteca de macrobenchmarks en la marca experimental para permitir la detección de subdesbordamientos de audio (Ib5972). BaselineProfileRule
ya no acepta un bloquesetup
porque esto funcionaba igual queprofileBlock
(Ic7dfe, b/215536447).Por ejemplo:
@Test fun collectBaselineProfile() { baselineRule.collectBaselineProfile( packageName = PACKAGE_NAME, setupBlock = { startActivityAndWait() }, profileBlock = { // ... } ) }
@Test fun collectBaselineProfile() { baselineRule.collectBaselineProfile( packageName = PACKAGE_NAME, profileBlock = { startActivityAndWait() // ... } ) }
Correcciones de errores
- Se solucionó el problema por el que no se actualizaban los seguimientos del generador de perfiles de microbench en ejecuciones posteriores cuando se vinculaban en el resultado de Studio (I5ae4d, b/214917025).
- Se impiden los comandos de shell de compilación en el nivel de API 23 (Ice380).
- Se cambió el nombre de
FrameCpuTime
porFrameDurationCpu
yFrameUiTime
porFrameDurationUi
para aclarar que son duraciones, no marcas de tiempo, y para que coincidan con los prefijos (I0eba3, b/216337830).
Versión 1.1.0-beta02
26 de enero de 2022
Lanzamiento de androidx.benchmark:benchmark-*:1.1.0-beta02
. La versión 1.1.0-beta02 contiene estas confirmaciones.
Correcciones de errores
- Los resultados de Microbenchmark Stack Sampling/Method Tracing Profile ahora están vinculados en el resultado de Studio, de manera similar a otras salidas de generación de perfiles, y no suprimen la métrica de asignación (Idcb65, b/214440748 y b/214253245).
- Ahora, BaselineProfileRule imprime el comando
adb pull
en logcat y el resultado de Studio para extraer el archivo de texto de BaselineProfile generado (f08811).
Versión 1.1.0-beta01
12 de enero de 2022
Lanzamiento de androidx.benchmark:benchmark-*:1.1.0-beta01
. La versión 1.1.0-beta01 contiene estas confirmaciones.
Correcciones de errores
- Se corrigió la opción que habilitaba ignorar el argumento del generador de perfiles (I37373, b/210619998).
- Se quitó el objeto
CompliationModes
obsoleto (I98186, b/213467659). - Se modificó el argumento del perfil del modelo de referencia de
CompilationMode.Partial
para aclarar la numeración (Id67ea).
Versión 1.1.0-alpha13
15 de diciembre de 2021
Lanzamiento de androidx.benchmark:benchmark-*:1.1.0-alpha13
. La versión 1.1.0-alpha13 contiene estas confirmaciones.
Cambios en la API
- Se agregó el Registro del sistema de baja sobrecarga a la salida de microbench en Android Q (nivel de API 29 o superior). Ten en cuenta que, actualmente, no se obtiene el seguimiento personalizado (a través de las APIs de
android.os.Trace
oandroidx.tracing
de Jetpack) para evitar que se vean afectados los resultados. Este seguimiento debería ser útil para diagnosticar inestabilidad, sobre todo desde fuentes que se encuentran fuera de las comparativas (I298be, b/205636583, b/145598917). - Se aclaró
CompilationModes
en tres clases: Completo, Ninguno y Parcial. Antes, se les asignaba un nombre inconsistente según argumentos de compilación (que ahora conocemos como detalles de implementación) y funciones. Esto permite que las compensaciones, las combinaciones potenciales y el comportamiento en las versiones de la plataforma sean más claras (I3d7bf, b/207132597). - La configuración y la medición ahora están siempre en pares y en orden. Ahora puedes consultar el nombre y la iteración del paquete (aunque la iteración puede ser
null
en algunas situaciones de preparación) (Id3b68, b/208357448, b/208369635).
Correcciones de errores
- Se corrigió
CompilationMode.Speed
que se consideraba incorrectamente comoNone
(I01137).
Versión 1.1.0-alpha12
17 de noviembre de 2021
Lanzamiento de androidx.benchmark:benchmark-*:1.1.0-alpha12
. La versión 1.1.0-alpha12 contiene estas confirmaciones.
Nuevas funciones
- Agrega TraceSectionMetric experimental para las mediciones de tiempo personalizadas basadas en seguimientos (I99db1, b/204572664).
Correcciones de errores
- Activa el dispositivo en cada iteración para asegurarte de que se pueda probar la IU (se requiere que la pantalla de bloqueo esté inhabilitada) (Ibfa28, b/180963442).
- Se corrigieron varias fallas en el modo de generación de perfiles de StackSampling en emuladores y dispositivos sin derechos de administrador (Icdbda, b/202719335).
- Quitamos 0.5 segundos de suspensión al final de cada iteración. Si ves que faltan métricas con este cambio, informa un error (Iff6aa).
- Disminuye las posibilidades de pérdida de datos y reducción de la sobrecarga de memoria del seguimiento (Id2544, b/199324831, b/204448861).
- Reduce el tamaño de registro en aproximadamente un 40% si cambias al formato de almacenamiento programable compacto (Id5fb6, b/199324831).
- Se actualizaron las implementaciones de métricas de inicio para que siempre terminen al final del procesamiento de subprocesos. Esto será más coherente en todas las versiones de la plataforma y se asignará más estrechamente a las mediciones dentro de la app (Ic6b55).
Versión 1.1.0-alpha11
3 de noviembre de 2021
Lanzamiento de androidx.benchmark:benchmark-*:1.1.0-alpha11
. La versión 1.1.0-alpha11 contiene estas confirmaciones.
Cambios en la API
- Macrobenchmark ahora tiene un
minSdkVersion
de23
(If2655). - Se agrega un nuevo
BaselineProfileRule
experimental que es capaz de generar perfiles de referencia para el recorrido crítico del usuario de la app. Documentación detallada a continuación (Ibbefa, b/203692160). - Se quitó la variante de la interfaz measureRepeated, que se agregó para los emisores de Java, ya que causó ambigüedad al completar o resolver el método. Los emisores de Java deberán volver a mostrar Unit.Instance de measureRepeated. Si esto te resulta poco conveniente, informa un error y podemos volver a revisarlo en una versión futura (Ifb23e, b/204331495).
Versión 1.1.0-alpha10
27 de octubre de 2021
Lanzamiento de androidx.benchmark:benchmark-*:1.1.0-alpha10
. La versión 1.1.0-alpha10 contiene estas confirmaciones.
Cambios en la API
- Portabilidad a versiones anteriores de StartupTimingMetric para volver al nivel de API 23. Esta nueva implementación también controla mejor reportFullyDrawn() para esperar hasta que se procese el contenido correspondiente (If3ac9, b/183129298).
- Se agregó JvmOverloads a varios métodos de MacrobenchmarkScope para emisores de Java (I644fe, b/184546459).
- Proporciona la función alternativa MacrobenchmarkRule.measureRepeated que usa un
Consumer<MacrobenchmarkScope>
para el uso idiomático en Java (If74ab, b/184546459).
Correcciones de errores
- Se corrigieron los seguimientos que no se iniciaron con anticipación y faltan datos de métricas. Se espera que esto solucione las excepciones "No se puede leer ninguna métrica durante las comparativas" que haya provocado la biblioteca (I6dfcb, b/193827052, b/200302931).
- Se cambió el nombre de FrameNegativeSlack por FrameOverrun para aclarar su significado: por cuánto superó el marco su límite de tiempo (I6c2aa, b/203008701).
Versión 1.1.0-alpha09
13 de octubre de 2021
Lanzamiento de androidx.benchmark:benchmark-*:1.1.0-alpha09
. La versión 1.1.0-alpha09 contiene estas confirmaciones.
Correcciones de errores
- Se admite la eliminación de caché de la página del kernel sin raíz en el nivel de API 31/S+, lo que aumentará la exactitud de los inicios de StartupMode.COLD (Iecfdb, b/200160030).
Versión 1.1.0-alpha08
29 de septiembre de 2021
Lanzamiento de androidx.benchmark:benchmark-*:1.1.0-alpha08
. La versión 1.1.0-alpha08 contiene estas confirmaciones.
Cambios en la API
- Se habilitaron las macroscomparativas de desplazamiento para volver a la API 23 (If39c2, b/183129298).
- Se agregó un nuevo tipo de métrica de muestra a la IU y el resultado de JSON que se centra en los percentiles de varias muestras por iteración (I56247, b/199940612).
- Se cambió a las métricas de punto flotante en las bibliotecas comparativas (truncadas en la IU de Studio) (I69249, b/197008210).
Versión 1.1.0-alpha07
1 de septiembre de 2021
Lanzamiento de androidx.benchmark:benchmark-*:1.1.0-alpha07
. La versión 1.1.0-alpha07 contiene estas confirmaciones.
Cambios en la API
- Se aumentó la API mínima a 21 para reflejar el nivel de API más bajo que se admitirá en el futuro. La API mínima actual admitida (29) sigue transmitiéndose mediante RequiredApi() (I440d6, b/183129298).
Correcciones de errores
- Se corrigió
ProfileInstaller
para facilitar que las apps que usan perfiles de referencia puedan ejecutar MacroBenchmarks medianteCompilationMode.BaselineProfile
(I42657, b/196074999). NOTA: También se debe actualizar aandroidx.profileinstaller:profileinstaller:1.1.0-alpha04
o una versión posterior. - Las comparativas de
StartupMode.COLD
+CompilationMode.None
ahora son más estables (I770cd, b/196074999).
Versión 1.1.0-alpha06
18 de agosto de 2021
Lanzamiento de androidx.benchmark:benchmark-*:1.1.0-alpha06
. La versión 1.1.0-alpha06 contiene estas confirmaciones.
Cambios en la API
- Se agregó un argumento de instrumentación
androidx.benchmark.iterations
para permitir la anulación manual del recuento de iteraciones cuando se realizan pruebas o se generan perfiles a nivel local. (6188be, b/194137879).
Correcciones de errores
- Se cambió a Simpleperf como generador de perfiles de muestras predeterminado en la API nivel 29 y versiones posteriores (Ic4b34, b/158303822).
Errores conocidos
CompilationMode.BaselineProfile
está en mantenimiento. Evita usarlo para determinar qué tan buen perfil es por ahora.
Versión 1.1.0-alpha05
4 de agosto de 2021
Lanzamiento de androidx.benchmark:benchmark-*:1.1.0-alpha05
. La versión 1.1.0-alpha05 contiene estas confirmaciones.
Se canceló 1.1.0-alpha04
antes del lanzamiento debido a una falla esporádica (b/193827052).
Cambios en la API
- Se cambió startActivityAndWait para invocar el lanzamiento a través de
am start
, lo que reduce el tiempo de cada iteración de medición aproximadamente 5 segundos, a costa de ya no se admitan elementos parcelables de intent (I5a6f5, b/192009149).
Correcciones de errores
- Reduce la agresividad de la detección de limitaciones térmicas y vuelve a calcular el modelo de referencia si se regulan con frecuencia (I7327b).
- Se corrigió FrameTimingMetric para que funcione en la versión beta de Android S (Ib60cc, b/193260119).
- Usa una
EmptyActivity
para sacar la app de destino de un estado de detención forzada a fin de admitir mejorCompilationMode.BaselineProfile
(Id7cac, b/192084204). - Se cambió la extensión del archivo de registro a
.perfetto-trace
para que coincida con el estándar de la plataforma (I4c236, b/174663039). - StartupTimingMetric ahora genera la métrica "fullDrawnMs" para medir el tiempo que tarda tu app en completar la renderización. A fin de definir esta métrica para tu app, llama a Activity.reportFullyDrawn cuando el contenido inicial esté listo, por ejemplo, cuando los elementos de la lista inicial se carguen desde la base de datos o la red (método reportFullyDrawn disponible sin verificaciones de la versión de compilación en ComponentActivity). Ten en cuenta que tu prueba debe ejecutarse durante el tiempo suficiente para capturar la métrica (startActivityAndWait no espera a reportFullyDrawn) (If1141, b/179176560).
- Se redujo el costo de agregar metadatos de IU a los seguimientos en más de 50 ms (Ic8390, b/193923003).
- Se aumentó drásticamente la frecuencia de sondeo cuando se detiene el seguimiento, lo que puede reducir el tiempo de ejecución de comparativas de inicio en más de un 30% (Idfbc1, b/193723768).
Versión 1.1.0-alpha03
16 de junio de 2021
Lanzamiento de androidx.benchmark:benchmark-*:1.1.0-alpha03
. La versión 1.1.0-alpha03 contiene estas confirmaciones.
Nuevas funciones
- Se agregó un
CompilationMode.BaselineProfile
nuevo para admitir perfiles instalados usando la biblioteca de Jetpack ProfileInstaller (aosp/1720930).
Correcciones de errores
Se actualizó el código de muestra de Gradle que suprime errores de comparativas para usar una API que no sea obsoleta con una sintaxis que también sea compatible con los usuarios de .gradle.kts.
P. ej.:
testInstrumentationRunnerArguments["androidx.benchmark.suppressErrors"] = "EMULATOR,LOW-BATTERY"
Versión 1.1.0-alpha02
18 de mayo de 2021
La versión 1.1.0-alpha02 de Benchmark proporciona Macrobenchmarks, un gran componente para generar comparativas. Además de generar comparativas, lo que le permite medir los bucles de CPU, macrobenchmarks te permite medir interacciones completas de la aplicación, como inicio y desplazamiento, y capturar seguimientos. Para obtener más información, consulta la documentación sobre bibliotecas.
Lanzamiento de androidx.benchmark:benchmark-*:1.1.0-alpha02
. La versión 1.1.0-alpha02 contiene estas confirmaciones.
Nuevas funciones
Se agregaron artefactos de macrobenchmarks (androidx.benchmark:benchmark-macro-junit4
y androidx.benchmark:benchmark-macro
):
- Captura de métricas de rendimiento de inicio, desplazamiento y animación desde tu app, de forma local o en IC
- Captura e inspección de seguimientos desde Android Studio
Correcciones de errores
- Se ideó una solución alternativa al problema de permisos de shell en el directorio de salida de Android 12 (Nota: Es posible que se tenga que actualizar el complemento de Android para Gradle a la versión canary 7.0.0 y Android Studio a Arctic Fox (2020.3.1) para continuar capturando archivos de salida en dispositivos afectados) (Icb039).
- Compatibilidad de caché de configuración en BenchmarkPlugin (6be1c1, b/159804788).
- Se corrigió la activación de forma predeterminada del archivo de salida simplificado en un directorio que no requiere
requestLegacyExternalStorage=true
(8b5a4d, b/172376362). - Se corrigieron las advertencias de impresión de logcat de la biblioteca cuando no encontraba subprocesos de JIT en versiones de la plataforma en las que no está presente (I9cc63, b/161847393).
- Se corrigió la frecuencia máxima del dispositivo de lectura (I55c7a).
Versión 1.1.0-alpha01
10 de junio de 2020
Lanzamiento de androidx.benchmark:benchmark-common:1.1.0-alpha01
, androidx.benchmark:benchmark-gradle-plugin:1.1.0-alpha01
y androidx.benchmark:benchmark-junit4:1.1.0-alpha01
. La versión 1.1.0-alpha01 contiene estas confirmaciones.
Nuevas funciones de 1.1
- Métrica de asignación: Las comparativas ahora ejecutan una fase adicional luego de la preparación y sincronización, y capturan los recuentos de asignación. Las asignaciones pueden causar problemas de rendimiento en versiones anteriores de la plataforma (los 140 ns en O se convirtieron en 8 ns en M, medidos en Nexus 5X con relojes bloqueados). Se muestra esta métrica en el resultado de la consola de Android Studio, así como en
- Compatibilidad con la generación de perfiles: Ahora puedes capturar datos de generación de perfiles para obtener comparativas a fin de inspeccionar el motivo de la ejecución lenta de tu código. Benchmark admite la captura mediante seguimiento de métodos o muestreo de métodos desde ART. Estos archivos pueden inspeccionarse con el generador de perfiles de Android Studio mediante File > Open.
- El complemento de Gradle de la biblioteca de Benchmark ahora brinda valores predeterminados para una configuración más simple:
- Se establece
testBuildType
para lanzarse de forma predeterminada, a fin de evitar el uso de dependencias con cobertura de código incorporada. El buildType de lanzamiento es también el predeterminado, que permite que Android Studio seleccione automáticamente la variante de compilación correcta cuando abre un proyecto por primera vez (b/138808399). - Se usa
signingConfig.debug
como la configuración de firma predeterminada (b/153583269).
- Se establece
** Correcciones de errores **
- Se redujo de forma significativa la sobrecarga de la transición de preparación, en la que la primera medición para cada comparativa fue artificialmente más alta que otras. Este problema era más evidente en comparativas muy pequeñas (1 microsegundo o menos) (b/142058671).
- Se corrigió el error
InstrumentationResultParser
que se mostraba para cada comparativa cuando se ejecutaba desde la línea de comandos (I64988, b/154248456).
Errores conocidos
- La línea de comandos y las invocaciones de Gradle de la biblioteca Benchmark no imprimen los resultados de forma directa. Para solucionar este problema, ejecuta el código mediante Studio o analiza el archivo de salida JSON a fin de obtener los resultados.
- La función de informes de Benchmark no puede extraer informes de dispositivos que tengan una app instalada con un applicationID que termine en "android" o "download" (no distingue entre mayúsculas y minúsculas). Los usuarios que tengan este problema deberán actualizar el complemento de Gradle para Android a la versión 4.2-alpha01 o posterior.
Versión 1.0.0
Versión de Benchmark 1.0.0
20 de noviembre de 2019
Lanzamiento de androidx.benchmark:benchmark-common:1.0.0
, androidx.benchmark:benchmark-gradle-plugin:1.0.0
y androidx.benchmark:benchmark-junit4:1.0.0
sin cambios desde la versión 1.0.0-rc01. La versión 1.0.0 contiene estas confirmaciones.
Funciones principales de la versión 1.0.0
La biblioteca de Benchmark te permite escribir comparativas de rendimiento del código de la app y obtener resultados rápidamente.
Evita problemas de compilación y configuración del tiempo de ejecución, y estabiliza el rendimiento del dispositivo para garantizar que las mediciones sean exactas y consistentes. Ejecuta las comparativas directamente en Android Studio o en integración continua para observar el rendimiento del código en el tiempo y evitar las regresiones.
Las funciones principales incluyen:
- Estabilización del reloj
- Priorización automática de subprocesos
- Compatibilidad con las pruebas de rendimiento de IU, como en la muestra de RecyclerView
- Repetición y calentamiento con JIT
- Resultado de comparativa JSON para el posprocesamiento
Versión 1.0.0-rc01
23 de octubre de 2019
Lanzamiento de androidx.benchmark:benchmark-common:1.0.0-rc01
, androidx.benchmark:benchmark-gradle-plugin:1.0.0-rc01
y androidx.benchmark:benchmark-junit4:1.0.0-rc01
. La versión 1.0.0-rc01 contiene estas confirmaciones.
Nuevas funciones
- Se agregó el seguimiento de systrace a las comparativas
Correcciones de errores
- Se corrigió el problema de inestabilidad de métrica donde JIT no finalizaba antes del calentamiento debido a la falta de priorización (b/140773023).
- Directorio de resultado de JSON unificado en el complemento de Gradle para Android 3.5 y 3.6
Versión 1.0.0-beta01
9 de octubre de 2019
Lanzamiento de androidx.benchmark:benchmark-common:1.0.0-beta01
, androidx.benchmark:benchmark-gradle-plugin:1.0.0-beta01
y androidx.benchmark:benchmark-junit4:1.0.0-beta01
. La versión 1.0.0-beta01 contiene estas confirmaciones.
Nuevas funciones
- Ejecuta la recolección de elementos no utilizados antes de cada preparación para reducir la presión de memoria de una comparativa a otra (b/140895105).
Correcciones de errores
- Se agregó la dependencia de
androidx.annotation:android-experimental-lint
para que el código de Java produzca correctamente los errores de lint cuando no se utiliza la API experimental, de forma similar a lo que proporciona la anotación experimental Kotlin para las llamadas a Kotlin. - Ahora detecta de manera correcta el uso del argumento de instrumentación
additionalTestOutputDir
para el resultado en el complemento de Gradle para Android 3.6, a fin de saber cuándo AGP procesará la copia de datos. - Se corrigió la frecuencia de reloj no detectada en JSON para imprimir correctamente
-1
(b/141945670).
Versión 1.0.0-alpha06
18 de septiembre de 2019
Lanzamiento de androidx.benchmark:benchmark-common:1.0.0-alpha06
, androidx.benchmark:benchmark-gradle-plugin:1.0.0-alpha06
y androidx.benchmark:benchmark-junit4:1.0.0-alpha06
. La versión 1.0.0-alpha06 contiene estas confirmaciones.
Nuevas funciones
- Se agregó una búsqueda del uso incorrecto del paquete anterior para el corredor de prueba, que ahora proporciona un mensaje de error más útil.
Cambios en la API
- La anotación experimental
ExperimentalAnnotationReport
ahora es correctamente pública. El uso de la API experimental BenchmarkState#report ahora requiere esta anotación
Versión 1.0.0-alpha05
5 de septiembre de 2019
Lanzamiento de androidx.benchmark:benchmark-common:1.0.0-alpha05
, androidx.benchmark:benchmark-gradle-plugin:1.0.0-alpha05
y androidx.benchmark:benchmark-junit4:1.0.0-alpha05
. Para conocer las confirmaciones incluidas en esta versión, consulta este artículo.
Cambios en la API
- La API de
BenchmarkState.reportData
ahora se marca como experimental
Correcciones de errores
- Se corrigió la secuencia de comandos de bloqueo de reloj, que fallaba en los dispositivos a los que les faltaban las utilidades de shell
cut
oexpr
. - Se corrigió un problema con la tarea
./gradlew lockClocks
que se bloqueaba en los dispositivos con permisos de administrador con una versión anterior de la utilidad su, que no era compatible con la marca-c
.
Versión 1.0.0-alpha04
7 de agosto de 2019
Lanzamiento de androidx.benchmark:benchmark-common:1.0.0-alpha04
, androidx.benchmark:benchmark-gradle-plugin:1.0.0-alpha04
y androidx.benchmark:benchmark-junit4:1.0.0-alpha04
. Para conocer las confirmaciones incluidas en esta versión, consulta este artículo.
También se agregó nueva documentación sobre cómo usar la biblioteca Benchmark sin Gradle, tanto para usarla con diferentes sistemas de compilación (como Bazel o Buck), como para cuando se ejecuta en CI. Para obtener más información, consulta Cómo compilar comparativas sin Gradle y Cómo ejecutar comparativas en integración continua.
Nuevas funciones
- Complemento de Gradle
- Ahora inhabilita automáticamente la cobertura de la prueba y establece
AndroidBenchmarkRunner
de forma predeterminada (b/138374050). - Se agregó compatibilidad con la nueva copia de datos basada en AGP, para cuando se ejecutan comparativas y se usa AGP 3.6+.
- Ahora inhabilita automáticamente la cobertura de la prueba y establece
- Adiciones de formato JSON.
- Tiempo total de ejecución de prueba de comparativas (b/133147694).
- Las comparativas
@Parameterized
que usan una string de nombre (por ejemplo,@Parameters(name = "size={0},depth={1}")
) ahora muestran nombres y valores de parámetros por comparativa en el resultado de JSON ( b/132578772 ).
- Modo de ejecución en seco (b/138785848).
- Se agregó un modo de "ejecución en seco" para ejecutar cada bucle de comparativa solo una vez, a fin de verificar errores/fallas sin capturar mediciones. Esto puede ser útil, p. ej., para ejecutar comparativas con rapidez en el envío previo para verificar que no estén dañadas.
Cambios en la API
- Se modificó la estructura del módulo y se dividió la biblioteca (b/138451391).
benchmark:benchmark-junit4
contiene clases con dependencia de JUnit:AndroidBenchmarkRunner
yBenchmarkRule
, que se movieron al paqueteandroidx.benchmark.junit4
.benchmark:benchmark-common
contiene el resto de la lógica, incluida la API de BenchmarkState.- Esta división permitirá que la biblioteca admita comparativas sin las APIs de JUnit4 en el futuro.
- Las advertencias de configuración ahora se tratan como errores y producen fallas en las pruebas (b/137653596).
- Esto se hace para alentar aún más las mediciones precisas, especialmente en IC.
- Estos errores se pueden volver a reducir a advertencias con un argumento de instrumentación. Por ejemplo:
-e androidx.benchmark.suppressErrors "DEBUGGABLE,LOW_BATTERY"
Correcciones de errores
- Los errores que se producen al escribir en el almacenamiento externo en dispositivos Q proporcionan mensajes más descriptivos, con sugerencias sobre cómo resolver el problema.
- Las pantallas se encienden automáticamente durante las ejecuciones de comparativas, en lugar de fallar cuando la pantalla está apagada.
Contribuciones externas
- ¡Gracias a Sergey Zakharov por contribuir con las mejoras de resultados de JSON y la solución para los problemas de apagado de la pantalla!
Versión 1.0.0-alpha03
2 julio de 2019
Lanzamiento de androidx.benchmark:benchmark:1.0.0-alpha03
y androidx.benchmark:benchmark-gradle-plugin:1.0.0-alpha03
. Para conocer las confirmaciones incluidas en esta versión, consulta este artículo.
Nuevas funciones
- Se expone la duración de la suspensión debido a la regulación térmica por comparativas en el informe de JSON completo.
Correcciones de errores
- Ya no es necesario aplicar el complemento de Gradle después de los complementos de Android y el bloque Android.
- Se agregó compatibilidad con informes de comparativas en dispositivos Android 10 que usan almacenamiento específico.
Versión 1.0.0-alpha02
6 de junio de 2019
Lanzamiento de androidx.benchmark:1.0.0-alpha02
y androidx.benchmark:benchmark-gradle-plugin:1.0.0-alpha02
. Para conocer las confirmaciones incluidas en esta versión, consulta este vínculo.
Ten en cuenta que tratamos al esquema JSON como una API. Nuestra idea es seguir las mismas restricciones de estabilidad que otras APIs: estable (con muy pocas excepciones) una vez en la versión beta, y corregido en la versión final, con solo adiciones en versiones menores y cambios/eliminaciones en versiones principales.
Cambios en la API
Se revisó el esquema de JSON. Es probable que los próximos cambios en el esquema de JSON se limiten a adiciones:
- Se reorganizó la estructura del objeto de resultado para admitir grupos de métricas adicionales en el futuro (b/132713021).
- Se agregó información de contexto de ejecución de prueba, como información sobre el dispositivo y la compilación, y si los relojes están bloqueados, al objeto de nivel superior (b/132711920).
- Los nombres de métrica de tiempo ahora incluyen "ns" (b/132714527).
- Se agregaron estadísticas adicionales por métrica informada (máxima, media, mínima) y se quitó la estadística de resumen de "nanos" (b/132713851).
Se quitó el resultado de XML (b/132714414).
Se quitó la detección de regulador térmico de la API de
BenchmarkState.reportData
(b/132887006 ).
Correcciones de errores
- Se corrigió un error por el que
./gradlew lockClocks
no permanecía en algunos dispositivos recientes del SO (b/133424037). - Se inhabilitó la detección de regulación para el emulador (b/132880807).
Versión 1.0.0-alpha01
7 de mayo de 2019
Lanzamiento de androidx.benchmark:benchmark:1.0.0-alpha01
. Las confirmaciones incluidas en esta versión están disponibles en este vínculo.