深入浅出前端单元测试框架的实现原理

在本文开始之前,先说一下笔者对于单元测试(或集成测试、e2e 测试)的感受。

在国外,软件工程师们对于软件质量十分重视,大部分也都崇尚于使用 TDD 方式开发,保证代码质量。而国内往往不是十分重视自动化测试这方面。究其根本来说,国内确实存在不少原因导致自动化测试不流行。这里就不赘述了。

但是其实在中大型软件开发中,自动化测试其实十分重要。笔者认为,在现代软件开发中,完善的自动化测试和 Lint 工具、良好代码设计,基本可以保证软件长期保持稳定的生命力。

因此,笔者相信,即使不是现在,在未来,自动化测试也是工程师必备的一项技能(快乐下班的技能哈哈哈)。

关于单元测试

先看*:

在计算机编程中,单元测试(英语:Unit Testing)又称为模块测试,是针对程序模块(软件设计的最小单位)来进行正确性检验的测试工作。程序单元是应用的最小可测试部件。在过程化编程中,一个单元就是单个程序、函数、过程等;对于面向对象编程,最小单元就是方法,包括基类(超类)、抽象类、或者派生类(子类)中的方法。

在前端背景下,这个也可以很简单理解为测试工具函数。通常来说,单元测试,关于验证我们应用中每一个函数是否调用正确。如何判断调用正确呢?考虑一般如下:

  • 函数调用次数合理
  • 函数入参符合预期
  • 函数出参,也即是返回值符合预期

当然函数本身可能又会调用其他函数,或者也可以说函数会依赖其他模块、第三方库,同时函数也可能是同步或异步。所以当被测试的函数是纯函数时,就是测试函数本身的出入参是否符合预期就行了,否则,我们需要做许多 mock 的工作,借此来排除不是我们目标的测试代码。

当然我们日常工作中,如果要写单元测试的话,一般都会使用业界成熟的测试库,比如 jest、mocha、chai、ava、tape、QUnit 等等。其实大部分测试框架背后的原理基本类似。所以,让我们通过实现一个最简单的单元测试框架,来学习单元测试原理吧!

测试容器和断言库

测试框架基本可以拆分出两个部分:

  • 测试容器(Test Runner)
  • 断言库(Assertion Library)

简介

测试容器最基本的作用是,自动运行所有测试,对测试结果进行数据汇总等。我们常见的使用方式一般如下,编写测试单元:

// ./math.test.js
const { sumAsync, subtractAsync } = require('./math');

test('sumAsync adds numbers asynchronously', async () => {
  const result = await sumAsync(3, 7);
  const expected = 10;
  expect(result).toBe(expected);
});

test('subtractAsync subtracts numbers asynchronously', async () => {
  const result = await subtractAsync(7, 3);
  const expected = 4;
  expect(result).toBe(expected);
});
复制代码

假设我们有 math 工具函数如下:

// ./math.js
const sum = (a, b) => a + b;
const subtract = (a, b) => a - b;
const sumAsync = (...args) => Promise.resolve(sum(...args));
const subtractAsync = (...args) => Promise.resolve(subtract(...args));

module.exports = { sum, subtract, sumAsync, subtractAsync };
复制代码

我们用 jest 运行测试,在终端反馈汇总后的测试结果:

$ jest
 PASS  ./math.test.js
  ✓ sumAsync adds numbers asynchronously (4ms)
  ✓ subtractAsync subtracts numbers asynchronously (1ms)

Test Suites: 1 passed, 1 total
Tests:       2 passed, 2 total
Snapshots:   0 total
Time:        1.145s
Ran all test suites.
复制代码

断言库一般形式如下:

expect(result).toBe(expected);
expect(func).toHaveBeenCalled();
expect(func).toHaveBeenCalledTimes(1);
expect(func).toHaveBeenCalledWith(arg1, arg2 /* ...args  */);
// ...
复制代码

断言库是不是看起来很语义化~

测试容器实现示例

测试容器其实并不复杂,最简单的实现不过如下:

// ./test.js
async function test(title, callback) {
  try {
    await callback();
    console.log(`✓ ${title}`);
  } catch (error) {
    console.error(`✕ ${title}`);
    console.error(error);
  }
}
复制代码

需要留意的是,这里加上了 async/await 是为了等待测试用例中的异步逻辑。

断言库实现示例

断言库也没有黑魔法,我们写一个最简单的 expect(x).toBe(y) 的语法如下:

// ./expect.js
function expect(actual) {
  return {
    toBe(expected) {
      if (actual !== expected) {
        throw new Error(`${actual} is not equal to ${expected}`);
      }
    },
  };
}
复制代码

远比想象中简单,对不对~

这里有个比较关键的地方是,断言函数里如果断言失败时,我们的选择是抛出一个错误,然后在测试容器中会 try/catch 捕获,同时打印错误堆栈。(在简单情况下,我们也可以使用 Node.js 自带的 assert 库进行断言)

除此之外,还有很多更复杂的断言语法,不过基本形式也就是这样。当然如何巧妙设计测试函数调用次数(toHaveBeenCalledTimes)、出入参(toHaveBeenCalledWith)的断言函数,后文会提到。

自动注入

有些同学可能留意到了,在测试框架中,我们并不需要手动引入 test、expect 这些函数,每个测试文件可以直接使用。这个其实也很简单。参考代码如下:

// ./test-framework.js
// 注入给全局对象,使得每个文件可以访问
global.test = require('./test');
global.expect = require('./expect');

// 从命令行加载所有测试用例:
process.argv.slice(2).forEach(file => {
  // 测试文件中
  require(file);
});
复制代码

然后在终端运行:

$ node test-framework.js ./math.test.js
✓ sumAsync adds numbers asynchronously
✓ subtractAsync subtracts numbers asynchronously
复制代码

对不对!就是这么简单!

接下来我们只需要把这件事情做得更优雅,比如

  • 把它封装成 TestRunner 对象
  • 把命令放在 ./bin 中
  • 扩展更多的断言语法
  • 使用 glob 匹配所有测试文件
  • 支持配置(参考 jest.config.js)
  • 测试汇总统计
  • 支持优雅的错误堆栈

甚至于你可以扩展进行支持 DOM 测试,因为 DOM 测试的核心逻辑也是使用 JSDOM 根据 W3C 标准在内存中模拟相似的 DOM 结构,从而支持断言测试的。

函数测试

上文中我们基本搭建了一个最简单的测试框架,文件结构如下:

.
├── expect.js
├── math.js
├── math.test.js
├── test-framework.js
└── test.js
复制代码

说起来,在某些场景下,其实我们需要能够保证函数只被执行一次,以及被调用时候的入参是准确的。

因为函数调用多次可能会引发内存泄露,入参错误则可能会导致应用不可预期的行为。所以我们需要从断言库中更细粒度的去测试保障。

那么断言库是怎么做到的呢?

接下来我们将扩展一下断言库,使其支持更丰富的函数测试。

入参与调用次数监控的实现原理

假设我们扩展支持这两种断言语法:

expect(sum).toHaveBeenCalledTimes(1);
expect(sum).toHaveBeenCalledWith(3, 7);
复制代码

大家可以思考一下如何设计实现呢?

我们在测试框架中,集成下面这个函数:

// ./test-framework.js
global.jest = {
  fn: (impl = () => {}) => {
    const mockFn = (...args) => {
      mockFn.mock.calls.push(args);
      return impl(...args);
    };
    mockFn.originImpl = impl;
    mockFn.mock = { calls: [] };
    return mockFn;
  },
};
复制代码

其中的 fn 函数是一个高阶函数,包裹传入的待测试函数 impl。挂载 mock 对象,在返回的 mockFn 中调用时,用以统计调用数据。

当然对于编写测试用例的调用方来说是无需感知的,只需要使用 jest.fn 进行包裹即可:

const sumMockFn = jest.fn(sum);
复制代码

接下来只需要对返回的 sumMockFn 进行测试即可,本质上对 sumMockFn 的操作,都会透传到 sum 中。

扩展断言函数

所以我们还差什么?... 嗯对了。还有断言函数:

// ./expect
const { isEqual } = require('lodash');

module.exports = function expect(actual) {
  return {
    toBe(expected) {
      // ...
    },
    toEqual(expected) {
      if (!isEqual(actual, expected)) {
        throw new Error(`${actual} is not equal to ${expected}`);
      }
    },
    toHaveBeenCalledTimes(expected) {
      let actualCallTimes = 0;
      try {
        actualCallTimes = actual.mock.calls.length;
        expect(actualCallTimes).toEqual(expected);
      } catch (err) {
        throw new Error(
          `expect function: ${actual.originImpl.toString()} to call ${expected} times, but actually call ${actualCallTimes} times`
        );
      }
    },
    toHaveBeenCalledWith(...expectedArgs) {
      let actualCallArgs = [];
      try {
        actualCallArgs = actual.mock.calls;
        actualCallArgs.forEach(callArgs => {
          expect(callArgs).toEqual(expectedArgs);
        });
      } catch (err) {
        throw new Error(
          `expect function: ${actual.originImpl.toString()} to be called with ${expectedArgs}, but actually it was called with ${actualCallArgs}`
        );
      }
    },
  };
};
复制代码

别看代码有点长,其实细看很简单对不对。关键点就是对 jest.fn 包裹过后的函数挂载的对象 mock 长度、内容进行断言。这里需要留意的是。我们捕获了 expect(x).toEqual(y) 抛出的错误,抛出了一个对用户更友好的错误。

终于,我们编写测试用例如下:

test('sum should have been called once', () => {
  const sumMockFn = jest.fn(sum);
  sumMockFn(3, 7);
  expect(sumMockFn).toHaveBeenCalledTimes(1);
});

test('sum should have been called with `3` `7`', () => {
  const sumMockFn = jest.fn(sum);
  sumMockFn(3, 7);
  expect(sum).toHaveBeenCalledWith(3, 7);
});
复制代码

成功运行!

$ node test-framework.js ./math.test.js
✓ sum should have been called once
✓ sum should have been called with `3` `7`
复制代码

模块

经过我们的努力。我们已经做了一个像模像样的测试框架了。但是请等等!现实真的有这么简单么?

突然需要测试一个新的函数,这个函数好像有点不一样...

// ./user.js
const { v4: uuidv4 } = require('uuid');

module.exports = {
  createUser({ name, age }) {
    return {
      id: uuidv4(),
      name,
      age,
    };
  },
};
复制代码

我们想要测试这个函数返回带有一个 id 的用户对象,同时也调用了 uuidv4。但是发现这个函数没办法编写测试,因为每次生成的 id 不一样,所以它每次返回对象都不一样。没办法简单的使用 expect(x).toEqual(y)

但是我们不可能去测试 uuid 库。因为测试它们是毫无意义的,也是不现实的。

那怎么办呢?我们还是有办法的。扩展测试框架如下:

// ./test-framework.js
global.jest = {
  fn: (impl = () => {}) => {
    // ...
  },
  mock: (mockPath, mockExports = {}) => {
    const path = require.resolve(mockPath);

    require.cache[path] = {
      id: path,
      filename: path,
      loaded: true,
      exports: mockExports,
    };
  },
};
// ...
复制代码

我们发现上面的 mock 函数使用 require.resolve 获取了模块加载路径,然后在 require.cache 准备好构造后的缓存导出对象。

编写测试如下:

// ./user.test.js
jest.mock('uuid', {
  v4: () => 'FAKE_ID',
});

const { createUser } = require('./user');

test('create an user with id', () => {
  const userData = {
    name: 'Christina',
    age: 25,
  };
  const expectUser = {
    ...userData,
    id: 'FAKE_ID',
  };

  expect(createUser(userData)).toEqual(expectUser);
});
复制代码

因为 require.cache 的关系,我们需要把 jest.mock 提到文件最前面调用。(jest 里同样的操作不需要提前,那是因为测试框架在运行测试用例时自动提前此类操作了)然后模拟导出的 v4 对象返回一个 FAKE_ID。

运行测试如下:

$ node test-framework.js ./user.test.js
✓ create an user with id
复制代码

完美解决~

真实世界里的应用函数往往不会是干净可爱的纯函数,依赖大量第三方流行库进行开发是我们的日常,也是开源世界里一件幸福的事情。

如何排除第三方依赖库进行测试,基本原理也是如上。

让它更优雅

每次都要调用 node test-framework.js ./user.test.js 来运行测试,看上去不是很好。我们让这个测试框架变得更优雅吧!

嗯,我们给这个测试框架起个名字,就叫 mjest 吧!

第一步,我们在项目新建 bin 目录,将上文的测试框架的实现丢进 ./bin/mjest.js 中。

$ tree ./bin/
./bin/
└── mjest.js
复制代码

第二步,在 mjest.js 文件顶部加入 Shebang。使用 node 作为默认解释器。

#!/usr/bin/env node

// mjest code
复制代码

第三步,在 package.json 中加入 bin 声明:

{
  "name": "mjest",
  "version": "1.0.0",
  "description": "mini jest implementation",
  "main": "index.js",
  "bin": {
    "mjest": "./bin/mjest.js"
  }
}
复制代码

第四步,在项目路径终端下运行 npm link。该命令会将项目的 bin 软链接到系统中 bin 中:

$ which mjest
/Users/sulirc/.nvm/versions/node/v10.20.1/bin/mjest
复制代码

第五步!使用热乎乎刚出炉的 mjest 运行测试用例吧:

$ mjest ./user.test.js
✓ create an user with id
复制代码
$ mjest ./math.test.js
✓ sum should have been called once
✓ sum should have been called with `3` `7`
✓ sumAsync adds numbers asynchronously
✓ subtractAsync subtracts numbers asynchronously
复制代码

我们也可以用 glob 语法更优雅的匹配文件:

$ mjest *.test.js
✓ sum should have been called once
✓ sum should have been called with `3` `7`
✓ create an user with id
✓ sumAsync adds numbers asynchronously
✓ subtractAsync subtracts numbers asynchronously
复制代码

本文的完整测试框架代码,笔者也已经放在 github 上,欢迎阅读:github.com/sulirc/mjes…

更多

到此为止,相信大家应该对测试框架原理基本有一定了解了。在 jest 中,还有比如 beforeEach、beforeAll 等钩子函数,大家也可以想办法自己实现。断言库里丰富的断言函数,也可以一个一个击破。

自学时找不到完整的学习资料?
2021最新软件测试合集零基础入门https://www.bilibili.com/video/BV1ey4y1W7n6/

遇到问题找不到解决方法?
可以加我的软件测试交流群:1140267353里面有海量的软件测试学习资料和技术大佬在线解决问题。

不断丰富特性,四舍五入,我们就实现了一个测试框架。

在单元测试的基础上,其实集成测试框架原理也相差不远。因为集成测试其实就是建立在单元测试上的。大家也可以进行思考。

上一篇:第十周练习


下一篇:自动化运维必须要学的Shell脚本之——免交互操作,分分钟解放双手!