如何在Typescript / Webpack的Bitbucket管道中增加NodeJS堆(--max-old-space-size)?

时间:2019-02-08 14:33:55

标签: node.js typescript serverless-framework bitbucket-pipelines

在无服务器/ TypeScript项目的webpack打包步骤中,我遇到了内存问题。

我尝试过:

  • “增加内存限制” npm程序包无济于事
  • 从npm运行脚本中调用以下命令

  • 直接通过bitbucket-pipelines.yml调用以下命令。

    node --max-old-space-size=4096 ./node_modules/.bin/serverless deploy
    

使用此命令在本地运行良好,但是在Bitbucket管道中,我得到以下输出:

    Serverless: Bundling with Webpack...

    internal/child_process.js:323
        throw errnoException(err, 'spawn');
        ^
    Error: spawn ENOMEM
        at _errnoException (util.js:1022:11)
        at ChildProcess.spawn (internal/child_process.js:323:11)
        at exports.spawn (child_process.js:502:9)
        at Object.exports.fork (child_process.js:103:10)
        at fork (/opt/atlassian/pipelines/agent/build/node_modules/worker-farm/lib/fork.js:17:36)
        at Farm.startChild (/opt/atlassian/pipelines/agent/build/node_modules/worker-farm/lib/farm.js:106:16)
        at Farm.processQueue (/opt/atlassian/pipelines/agent/build/node_modules/worker-farm/lib/farm.js:279:10)
        at Farm.<anonymous> (/opt/atlassian/pipelines/agent/build/node_modules/worker-farm/lib/farm.js:97:21)
        at ontimeout (timers.js:475:11)
        at tryOnTimeout (timers.js:310:5)
        at Timer.listOnTimeout (timers.js:270:5)
    npm ERR! code ELIFECYCLE
    npm ERR! errno 1
    npm ERR! platform-state-machine-import@0.0.2 deploy: `node --max-old-space-size=4096 ./node_modules/.bin/serverless deploy "--stage"    "feattsify" "--region" "us-east-1"`
    npm ERR! Exit status 1
    npm ERR! 
    npm ERR! Failed at the platform-state-machine-import@0.0.2 deploy script.
    npm ERR! This is probably not a problem with npm. There is likely additional logging output above.
    npm ERR! A complete log of this run can be found in:
    npm ERR!     /root/.npm/_logs/2019-02-07T22_37_25_150Z-debug.log

我在这里进行了大量的搜索和搜索,以尝试查找Bitbucket是否具有某种环境。您可以为运行时参数等设置变量,但似乎找不到与上述NPM包无关的任何内容。

3 个答案:

答案 0 :(得分:0)

前一段时间,我在一些Jenkins构建任务中遇到了类似的问题。 您可能可以使用NODE_OPTION环境变量来解决它:

NODE_OPTIONS=--max_old_space_size=4096

从错误堆栈跟踪中可以看出,新的节点进程正在蜂拥而至。 如果您可以设置此环境变量,则节点将使用它来将参数传递给任何新进程,并传递给此处耗尽内存的衍生进程。

https://nodejs.org/dist/latest-v8.x/docs/api/cli.html#cli_node_options_options

答案 1 :(得分:0)

从您的启动命令中增加它,例如

 node --max-old-space-size=8192 server.js  

答案 2 :(得分:0)

此问题最终有两种解决方法。首先出现ENOMEM错误,是因为我需要给Node进程更多的内存,其次是因为我分配给Node进程的内存超过了Bitbucket环境中可用的内存(默认为4gb)。

选项1:

使用任何其他答案的选项,并确保Bitbucket管道环境具有足够的内存-对我来说,这意味着将大小提高到2倍(请​​参阅this link)。

选项2:

使用ts-loader作为转译器,将'transpileOnly'标志添加到webpack.config.js文件中。这样会跳过类型检查,并在打包/部署时节省内存。警告:您仍应在构建时对项目进行类型检查。对我来说,这意味着在打包/部署之前先运行tsc

rules: [
  // all files with a `.ts` or `.tsx` extension will be handled by `ts-loader`
  { 
    test: /\.tsx?$/, 
    loader: 'ts-loader',
    options: {
      transpileOnly: true
    }
  },
],