关于webpack性能优化,我们能做些什么?

  • Post author:
  • Post category:其他


file

本文首发于:https://github.com/bigo-frontend/blog/ 欢迎关注、转载。




我们做了啥

Bigo前端组计算平台前端组基于amis框架,参考之前的文章:https://github.com/bigo-frontend/blog/issues/17 ,有很好的研发效率提升,但是构建速度却很慢,亟需进行优化。优化之后达到了将webpack构建速度提升80%左右的一个成绩,以下是优化前后的对比👇


30965ms ➡️ 6545ms

团队做了3件事情来达到这样的一个效果:


  1. split-chunks

    进行公共模块优化👇

    optimization: {
        splitChunks: {
            chunks: "all",
            cacheGroups: {
                vendorsa: {
                    chunks: 'all',
                    test: /(mobx-state-tree|react-color|react-dom-router|sortablejs|mobx-react)/,
                    priority: 100,
                    name: 'vendors-react-mobx',
                },
                venodrb: {
                    test: /lodash/,
                    priority: 100,
                    name: 'vendor-lodash',
                    chunks: 'all'
                },
            }
        }
    },
    

  2. external

    避免将比较大的第三方依赖打包到bundle中👇

    webpack.config.js:
    
    externals: [
        {
            'react': 'React',
            'react-dom': 'ReactDOM',
            'moment': 'moment',
            'mobx': 'mobx',
            'monaco-editor': 'monaco',
            'echarts': 'echarts',
            'jquery': 'jQuery',
            'hls.js': 'hls',
            'flv.js': 'flv',
        },
        function (context, request, callback) {
            if (/^moment\/.+$/.test(request)) {
                return callback(null, 'root ' + 'moment');
            }
            if (/^tinymce\/.+$/.test(request)){
                return callback(null, 'root ' + 'tinymce');
            }
            if (/^froala-editor\/.+$/.test(request)){
                return callback(null, 'root ' + 'froala');
            }
            if (/^echarts\/.+$/.test(request)){
                return callback(null, 'root ' + 'echarts');
            }
            // 继续下一步且不外部化引用
            callback();
        },
    ]
    
    index.html:
    <script src="https://unpkg.com/react@16.8.6/umd/react.production.min.js"></script>
    <script src="https://unpkg.com/react-dom@16.8.6/umd/react-dom.production.min.js"></script>
    <script src="https://unpkg.com/moment@2.29.1/min/moment.min.js"></script>
    <script src="https://unpkg.com/moment@2.29.1/min/locales.min.js"></script>
    <script src="https://unpkg.com/mobx@4.5.2/lib/mobx.umd.min.js"></script>
    


  3. ts-loader

    的优化:

    {
        test: /\.tsx?$/,
        use: [
          {
            loader: 'ts-loader',
            options: {
              transpileOnly: true
            }
          }
        ],
        exclude: /node_modules/
    },
      ...
    
    plugins: [
        new ForkTsCheckerWebpackPlugin(),
    ]
    

基于这次优化做了功课,看了一些资料,看看还有哪些可以优化的地方。




webpack是什么

官网的定义:


webpack is a static module bundler for modern JavaScript applications. When webpack processes your application, it internally builds a dependency graph which maps every module your project needs and generates one or more bundles.

也就是说 webpack 是一个用于现代 JavaScript 应用程序的静态模块打包工具,从入口出发,找到入口文件所有的依赖,生成浏览器可以用的bundle文件。webpack的出现使得前端的工程化更加地丰富。从webpack在2013的第一次release(v1.0.0-beta2)开始,至今已经有8、9年的历史了,是一个相当成熟的工具,其生态也比较完善,所以前端圈用webpack也是非常地广泛。




版本

尽量用较新的版本,新版本想较之前都会有一定的性能提升和优化,包括Node和Webpack。要注意的是

Node.js v8.9.10 - v9.11.1

ES6的

Set



Map

会有性能回退问题,现在LTS的node已经是

v14.16.0

,所以假设

Node

版本已经较新,并且用的是

WP4

(

webpack4

)。目前还不建议对求稳的或者已经很庞大的项目立即升级到

WP5

,其一是因为webpack生态里面并不一定所有的插件都能跟的上最新的版本,可能会出现兼容性的问题;其二由于webpack5还并未被广泛地应用,到新版本的稳定和成熟还是需要一定的时间,为避免不必要的bug,建议暂时使用

webpack4




为什么要优化

对于开发者来说,每次在build的时候不希望花费较长的时间,优化构建速度能够减少开发成本;对于用户而言,优化bundle文件的数量和大小能减少用户的流失率,提升用户体验。所以webpack的性能优化是一个非常关键的技术手段。




优化手段




两个测量工具


  • speed-measure-webpack-plugin

    (

    SMP

    ),要对webpack的构建速度进行优化,得知道要优化的重点在哪里,而该插件则是帮助检查哪些地方需要进一步优化的工具。

  • webpack-bundle-analyzer

    ,虽然webpack也有官方的

    分析工具

    ,社区也有许多其他的工具可以参考,但是通过资料、技术分享以及项目经验,

    webpack-bundle-analyzer

    用的还是不错的,它可以将bundle展示为交互式、可缩放的树状图形式,使用起来非常便捷。




三个可优化阶段



webpack构建大概可分为

loader解析

->

依赖搜索

->

打包

等三个阶段,就这三个阶段我们分别展开阐述如何去优化。


loader解析:


  • include/exclude

    ,对于loader而言,不需要对项目中所有的文件进行文件转换,应将loader应用于最少数量的必要模块,常见的配置:

    {
        ...,
        exclude: /node_modules/
    },
    
  • 如果项目中用到了

    ts-loader

    ,那就要小心了,因为如果不做额外的配置,会发现构建速度是非常耗时的。原因是因为

    ts-loader

    在每次构建的时候都会对所有文件进行类型检查,当项目越来越庞大,会发现构建速度越来越慢。这个时候需要设置

    transpileOnly: true

    来提高构建速度,该配置只处理编译而不做类型检查;然而类型检查是使用

    TypeScript

    的初衷,可以使用

    fork-ts-checker-webpack-plugin

    插件来在

    单独的进程

    中做类型检查。那性能和类型检查都能cover到。

  • 如果使用的是

    babel-loader

    ,可以设置其cache相关的选项,比如

    cacheDirectory



    cacheCompression

    等;


  • cache-loader

    : 利用文件的modifier time来检查文件是否更新,如果没有更新则利用缓存的内容,是一个轻量级的比较。特点是在第一次构建的时候比较慢,后面的构建会快很多。但是用它也要特别注意,最好用在性能消耗比较昂贵的地方,否则基本没有什么效果。该loader已经被作者

    Archive

    了,因为webpack5内置了cache的相关配置,将来如果升级就不需要它了。使用cache-loader时要放在其他loader的前面。


  • thread-loader

    :也是应用于比较昂贵的地方,可以将打包任务划分多个node进程,把模块一次分配给这些进程,实现多进程构建。跟

    cache-loader

    一样也需要放到其他loader的前面。

    {
        ...,
        use: [
            'thread-loader',
            // 昂贵的loader (e.g babel-loader)
        ],
    },
    
  • 最后一点是,尽量少用工具,因为每个loader/plugin都有其启动时间,不用就不会有性能问题啦。


依赖搜索:

  • 减少

    resolve.modules

    ,

    resolve.extensions

    等 中条目数量,因为IO操作比较消耗性能;

  • 基本上webpack对这些配置有默认值,比如

    resolve.modules



    node_modules

    ,告诉webpack解析模块时应该搜索

    node_modules

    目录;

    resolve.extensions

    默认值为

    ['.wasm', '.mjs', '.js', '.json']

    ,如果用了

    TypeScript

    还是要配置一下的,

    extensions

    是说在引入模块时可以不需要带扩展:

    import File from '../path/to/file';
    


打包: Smaller = Faster


  • splitChunks

    ,本着“小即是快”的原则,尽量使chunk包越小越好。在webpack4之前,可以使用

    CommonsChunkPlugin

    来避免模块与模块之间的重复依赖,webpack4内置了

    optimization.splitChunks

    ,可开箱即用。

    splitChunks

    有它默认的行为,不同的项目根据需求做不同的调整。可以设置不同的cacheGroup,拆分前必须共享模块的最小chunk数量等等,能最大程度地优化重复依赖的问题。一个简单的🌰 :

    splitChunks: {
      chunks: "all",
      cacheGroups: {
        lodash: {
          test: /lodash/,
          priority: 1,
        },
      }
    }
    

  • externals

    ,防止将某些 import 的包打包到 bundle 中,而是在运行时再去从外部获取这些扩展依赖。例如:

    externals: [
        {
            'moment': 'moment',
        }
        ...
    ]
    

当然需要在

index.html

里面引入cdn依赖,否则在runtime无法找到相应的模块:

<script src="https://unpkg.com/moment@2.29.1/min/moment.min.js"></script>




多环境



生产环境


: 生产环境关注与压缩bundle、更轻量的source map等,建议不同环境写不同的配置,当然可以有共用的配置,利用

webpack-merge

可以实现配置共用;对于devTools,推荐使用

source-Map

,相对于

inline-source-map



eval-cheap-module-source-map

性能好一点;代码压缩,在WP5中内置了

terser-webpack-plugin

,现在使用WP4的话,需要安装插件,这个插件功能非常强大,除了基本的压缩功能以外,还可以使用多进程并发构建,以及去除注释等功能;不带路径的配置,

path-info

会在bundle中包含模块信息的注释,但在庞大的项目中,会导致GC性能很差,应该关闭;



开发环境


: 同样地,生产环境有些配置也不适用于开发环境,比如

TerserPlugin

就不需要,因为在开发环境中压缩代码是没有意义的;devTools的最佳实践是

eval-cheap-module-source-map

,我现在的项目比较轻量,但是也能看出对比:

`inline-source-map`:5205ms

VS

`eval-cheap-module-source-map`: 4744ms

虽然是不到1000ms的差距,苍蝇肉也是肉不是?而且将来代码量越来越庞大的时候,差距就更明显了。

当然还有其他的可以优化的方法,比如使用ES module,能更好地利用webpack的tree shaking功能;Dll,为更改不频繁的代码生成单独的编译结果,但却是一个配置比较复杂的过程;还有对图片的压缩等等。以上是对于webpack4性能优化基本的配置,期待webpack5成熟稳定的那一天。




参考


  • https://webpack.docschina.org/guides/build-performance/
  • https://developers.google.com/web/fundamentals/performance/webpack

欢迎大家留言讨论,祝工作顺利、生活愉快!

我是bigo前端,下期见。



版权声明:本文为yeyeye0525原创文章,遵循 CC 4.0 BY-SA 版权协议,转载请附上原文出处链接和本声明。