AndroidJUnitRunner 单元测试执行起来很慢

Question

我在我的项目中使用 AndroidJUnitRunner，但无论是在 Android Studio 中还是通过 gradlew 从命令行在设备和模拟器上执行单元测试都非常慢。

我正在使用这个开源项目的主分支 OneBusAway(截至 this commit): https://github.com/OneBusAway/onebusaway-android

我看到所有 142 个测试的执行时间在实际运行时间中超过 3 分钟，但 Android 只在“测试结果”下显示的执行时间中记录了其中的一小部分。在切换到 AndroidJUnitRunner 之前，所有这些单元测试的执行时间都在 20 秒内。

下面是一个示例测试:

/**
 * Tests to evaluate utility methods related to math conversions
 */
@RunWith(AndroidJUnit4.class)
public class MathUtilTest {

    @Test
    public void testOrientationToDirection() {
        // East
        double direction = MathUtils.toDirection(0);
        assertEquals(90.0, direction);
    }
}

这是 build.gradle 配置:

android {
    dexOptions {
        preDexLibraries true
    }
    compileSdkVersion this.ext.compileSdkVersion
    buildToolsVersion "27.0.3"

    defaultConfig {
        minSdkVersion 14
        targetSdkVersion 21
        versionCode 93
        versionName "2.3.8"

        multiDexEnabled true

        testInstrumentationRunner "android.support.test.runner.AndroidJUnitRunner"

        // The following argument makes the Android Test Orchestrator run its
        // "pm clear" command after each test invocation. This command ensures
        // that the app's state is completely cleared between tests.
        testInstrumentationRunnerArguments clearPackageData: 'true'
    }
    ...
    testOptions {
        execution 'ANDROID_TEST_ORCHESTRATOR'
        unitTests.includeAndroidResources true
    }
...
}
dependencies {
...
    // Unit tests
    androidTestImplementation 'com.android.support.test:runner:1.0.2'
    androidTestUtil 'com.android.support.test:orchestrator:1.0.2'
...
}

为什么这个运行的单元测试这么慢？

Answer 1

显然，减速与包含对 Android Test Orchestrator 的依赖有关。 ，我不需要(即使我在需要 Android 上下文的设备上运行测试)。根据现有文档，我不清楚这些测试不需要 Orchestrator。

我从 build.gradle 中删除了以下几行，我通过 Android Studio 的总执行时间回落到大约 15 秒的范围内:

// The following argument makes the Android Test Orchestrator run its
// "pm clear" command after each test invocation. This command ensures
// that the app's state is completely cleared between tests.
testInstrumentationRunnerArguments clearPackageData: 'true'
...
execution 'ANDROID_TEST_ORCHESTRATOR'
...
androidTestUtil 'com.android.support.test:orchestrator:1.0.2'

所以这是在大约 15 秒内执行测试的新 build.gradle:

android {
    dexOptions {
        preDexLibraries true
    }
    compileSdkVersion this.ext.compileSdkVersion
    buildToolsVersion "27.0.3"

    defaultConfig {
        minSdkVersion 14
        targetSdkVersion 21
        versionCode 93
        versionName "2.3.8"

        multiDexEnabled true

        testInstrumentationRunner "android.support.test.runner.AndroidJUnitRunner"
    }
    ...
    testOptions {
        unitTests.includeAndroidResources true
    }
    ...
}
...
dependencies {
    ...
    // Unit tests
    androidTestImplementation 'com.android.support.test:runner:1.0.2'
}

我想也许 testInstrumentationRunnerArguments clearPackageData: 'true' 是导致执行时间增加以清除包数据的罪魁祸首，但单独删除该行并没有改变测试的总执行时间- 我必须完全删除 Orchestrator 依赖项。

这是 Github 上删除 Orchestrator 的提交: https://github.com/OneBusAway/onebusaway-android/commit/a1657c443258ac49b1be83a75399cf2ced71080e