Die Gesamtstruktur der Modulkonfiguration folgt einem ähnlichen Muster wie die reguläre Tradefed-XML-Konfiguration, jedoch mit einigen Einschränkungen, da sie im Rahmen einer Suite ausgeführt wird.
Liste der zulässigen Tags
AndroidTest.xml
oder allgemeiner die Modulkonfiguration darf nur die folgenden XML-Tags enthalten: target_preparer
, multi_target_preparer
, test
und metrics_collector
.
Diese Liste mag zwar restriktiv erscheinen, aber sie ermöglicht es Ihnen, die Anforderungen an die Einrichtung des Testmoduls und den durchzuführenden Test genau zu definieren.
HINWEIS: Weitere Informationen zu den verschiedenen Tags findest du unter Tradefed-XML-Konfiguration.
Objekte wie build_provider
oder result_reporter
lösen eine ConfigurationException
aus, wenn versucht wird, sie innerhalb einer Modulkonfiguration auszuführen. So soll verhindert werden, dass Nutzer davon ausgehen, dass diese Objekte tatsächlich eine Aufgabe innerhalb eines Moduls ausführen.
Beispiel für eine Modulkonfiguration
<configuration description="Config for CTS Gesture test cases">
<option name="test-suite-tag" value="cts" />
<target_preparer class="com.android.tradefed.targetprep.suite.SuiteApkInstaller">
<option name="cleanup-apks" value="true" />
<option name="test-file-name" value="CtsGestureTestCases.apk" />
</target_preparer>
<test class="com.android.tradefed.testtype.AndroidJUnitTest" >
<option name="package" value="android.gesture.cts" />
<option name="runtime-hint" value="10m50s" />
</test>
</configuration>
Diese Konfiguration beschreibt einen Test, für den CtsGestureTestCases.apk
installiert sein muss. Es wird eine Instrumentierung für das android.gesture.cts
-Paket ausgeführt.
Einschluss-Tags <include>
und <template-include>
Die Verwendung von <include>
und <template-include>
in Modulkonfigurationen wird nicht empfohlen. Es kann nicht garantiert werden, dass sie wie erwartet funktionieren.
Sonderfall für das Tag „metrics_collector“
Der Befehl metrics_collector
ist zulässig, aber auf die Klasse FilePullerLogCollector
beschränkt. Damit kann eine bestimmte Datei oder ein bestimmtes Verzeichnis für das Modul abgerufen und protokolliert werden. Das ist nützlich, wenn Sie Protokolle an einem bestimmten Speicherort ablegen und sie automatisch wiederherstellen möchten.
Beispielkonfiguration:
<configuration description="Config for CTS UI Rendering test cases">
<target_preparer class="com.android.tradefed.targetprep.suite.SuiteApkInstaller">
<option name="cleanup-apks" value="true" />
<option name="test-file-name" value="CtsUiRenderingTestCases.apk" />
</target_preparer>
<test class="com.android.tradefed.testtype.AndroidJUnitTest" >
<option name="package" value="android.uirendering.cts" />
<option name="runtime-hint" value="11m55s" />
<option name="runner" value="android.uirendering.cts.runner.UiRenderingRunner" />
<option name="isolated-storage" value="false" />
</test>
<!-- Collect the files in the dump directory for debugging -->
<metrics_collector class="com.android.tradefed.device.metric.FilePullerLogCollector">
<option name="directory-keys" value="/sdcard/UiRenderingCaptures" />
<option name="collect-on-run-ended-only" value="true" />
</metrics_collector>
</configuration>
Was ist mit Build-Informationen oder Downloads?
Die Definition der zulässigen Tags kann den falschen Eindruck erwecken, dass für ein Modul keine Build-Informationen abgerufen werden. Das ist nicht richtig.
Die Build-Informationen werden von der Einrichtung auf Suite-Ebene bereitgestellt und werden von allen Modulen der Suite verwendet. So ist eine einzige Einrichtung auf oberster Ebene für die Suite möglich, um alle zugehörigen Module auszuführen.
Anstatt dass jedes CTS-Modul (Compatibility Test Suite) die Geräteinformationen, -typen usw. einzeln abfragt, geschieht dies bei der CTS-Suite-Ebene (cts.xml
) einmal. Jedes Modul erhält diese Informationen dann auf Anfrage.
Damit die Objekte in einem Modul die Build-Informationen erhalten, müssen sie dasselbe tun wie bei der regulären Tradefed-Konfiguration: die IBuildReceiver
-Schnittstelle implementieren, um die IBuildInfo
zu empfangen. Weitere Informationen finden Sie unter Mit dem Gerät testen.
Metadaten-Felder
Viele Testmodule enthalten einige metadata
-Spezifikationen, die jeweils ein eigenes Ziel haben.
Beispiel:
<option name="config-descriptor:metadata" key="component" value="framework" />
<option name="config-descriptor:metadata" key="parameter" value="instant_app" />
<option name="config-descriptor:metadata" key="parameter" value="multi_abi" />
<option name="config-descriptor:metadata" key="parameter" value="secondary_user" />
Komponente
Die component
-Metadaten beschreiben die allgemeine Android-Komponente, die mit dem Modul getestet werden soll. Sie hat keine direkten Auswirkungen auf die Testausführung und wird hauptsächlich zu organisatorischen Zwecken verwendet.
Eine aktuelle Liste der zulässigen Komponenten für CTS finden Sie unter CtsConfigLoadingTest. Dieser Test schlägt in der Vorab-Einreichung fehl, wenn einem CTS-Modul eine nicht vorhandene Komponente hinzugefügt wird.
Mit module-metadata-include-filter
und module-metadata-exclude-filter
können Sie einen Suite-Lauf nach den Komponenten filtern.
Beispiel:
--module-metadata-include-filter component framework
In diesem Beispiel wird nur das Testmodul ausgeführt, das mit der framework
-Komponente annotiert ist.
Parameter
Die parameter
-Metadaten dienen nur Informationszwecken und wirken sich auf die Testausführung aus. Hier wird angegeben, auf welchen Android-Modus sich das Testmodul bezieht.
In diesem Fall sind Modi auf Android-Modi der obersten Ebene wie instant apps
, secondary users
oder different abis
beschränkt.
Wenn der Modus während der Ausführung der Suite auf den Test angewendet wird, werden je nach Modus mehrere Varianten des Testmoduls erstellt. Für jede Variante werden ähnliche Tests, aber in verschiedenen Modi ausgeführt.
instant_app
: Erstellen Sie eine Variante der Tests, bei der APKs als Instant-Apps installiert werden.multi_abi
: Erstellen Sie eine Variante der Tests für jede vom Gerät unterstützte ABI.secondary_user
: Erstellen Sie eine Variante der Tests, bei der APKs installiert und Tests als sekundärer Nutzer ausgeführt werden.
Messwerterfassung und Nachbearbeitung für Leistungstestmodule
Für Leistungstestmodule sind metrics_collector
und metric_post_processor
auf Modulebene zulässig, da sie für Leistungstests unerlässlich sind.
Die Messwert-Collectors und ‑Nachbearbeiter auf Modulebene können modulspezifisch sein.
Es wird nicht empfohlen, Postprozessoren sowohl auf oberster Ebene als auch auf Modulebene anzugeben.
Eine Leistungstestmodulkonfiguration muss die test-type
-Metadaten mit dem Wert performance
enthalten, z. B.:
xml
<option name="config-descriptor:metadata" key="test-type" value="performance" />
Wenn eine Testkonfiguration metric_collector
enthält, das nicht FilePullerLogCollector
oder metric_post_processor
ist, schlägt der Test vor dem Einreichen fehl.
Beispielkonfiguration für das Leistungstestmodul:
<configuration description="Runs sample performance test.">
<!-- Declare as a performance test module -->
<option name="config-descriptor:metadata" key="test-type" value="performance" />
<option name="test-tag" value="hello-world-performance-test" />
<test class="com.android.tradefed.testtype.HostTest" >
<option name="class" value="android.test.example.helloworldperformance.HelloWorldPerformanceTest" />
</test>
<!-- Add module-level post processor MetricFilePostProcessor -->
<metric_post_processor class="com.android.tradefed.postprocessor.MetricFilePostProcessor">
<option name="aggregate-similar-tests" value="true" />
<option name="enable-per-test-log" value="false" />
</metric_post_processor>
</configuration>