对单元数组的每个元素执行算术运算的最快方法是什么?

时间:2013-04-06 13:47:45

标签: arrays performance matlab loops

假设我想将单元格数组A的每个元素与系数k相乘。我可以通过以下方式做到:

A = cellfun(@(x) k*x, A, 'UniformOutput', false)

但这非常慢。有更快更好的方法吗?单元格数组元素是可变长度向量,因此cell2num不适用。

编辑:根据for循环的 fpe的推荐,这是一个示例基准。从这个数据开始

A = arrayfun(@(n) rand(n,1), randi(5,1000,1000), 'UniformOutput',false);

上面的cellfun调用需要9.45 seconds,而for循环:

A2 = cell(size(A));
for i = 1:size(A,1), for j = 1:size(A,2), A2{i,j} = A{i,j}*k; end; end
A = A2;

1.67 seconds,这是一项重大改进。我仍然更喜欢几个数量级的东西。 (我也不明白为什么Matlab解释器无法像for循环一样快地进行cellfun调用。它们在语义上是相同的。)

编辑2: Amro建议制作一个for循环的建议要快得多:

for i = 1:numel(A), A{i} = A{i}*k; end

需要1.11 seconds,如果我在它之前运行pack来对齐内存0.88 seconds

实现MEX功能实际上并没有那么好:0.73 seconds,(0.53 seconds之后的pack),这表明在Matlab中分配许多小矩阵的速度很慢。

#include "mex.h"

void mexFunction(int nlhs, mxArray *plhs[], int nrhs, const mxArray *prhs[]) {
    if (nrhs != 2)
        mexErrMsgTxt("need 2 arguments (Cell, Coefficient)");

    mwSize const* size = mxGetDimensions(prhs[0]);
    int N = mxGetNumberOfDimensions(prhs[0]);

    if (mxGetNumberOfElements(prhs[1]) != 1)
        mexErrMsgTxt("second argument to multcell must be a scalar");

    double coefficient = *mxGetPr(prhs[1]);

    plhs[0] = mxCreateCellArray(N, size);

    int M = mxGetNumberOfElements(prhs[0]);

    for (int i = 0; i < M; i++) {
        mxArray *r = mxGetCell(prhs[0], i);
        mxArray *l = mxCreateNumericArray(mxGetNumberOfDimensions(r),
                                          mxGetDimensions(r),
                                          mxDOUBLE_CLASS,
                                          mxREAL);
        double *rp = mxGetPr(r);
        double *lp = mxGetPr(l);
        int num_elements = mxGetNumberOfElements(r);
        for (int i = 0; i < num_elements; i++)
            lp[i] = rp[i] * coefficient;
        mxSetCell(plhs[0], i, l);
    }
}

然而,作弊,实现实际编辑内存的MEX函数似乎是获得合理性能的唯一方法:0.030 seconds。这使用了Amro建议的未记录的mxUnshareArray

#include "mex.h"

extern "C" bool mxUnshareArray(mxArray *array_ptr, bool noDeepCopy);

void mexFunction(int nlhs, mxArray *plhs[], int nrhs, const mxArray *prhs[]) {
    if (nrhs != 2)
        mexErrMsgTxt("need 2 arguments (Cell, Coefficient)");

    mwSize const* size = mxGetDimensions(prhs[0]);
    int N = mxGetNumberOfDimensions(prhs[0]);

    if (mxGetNumberOfElements(prhs[1]) != 1)
        mexErrMsgTxt("second argument to multcell must be a scalar");

    double coefficient = *mxGetPr(prhs[1]);

    mxUnshareArray(const_cast<mxArray *>(prhs[0]), false);
    plhs[0] = const_cast<mxArray *>(prhs[0]);

    int M = mxGetNumberOfElements(prhs[0]);

    for (int i = 0; i < M; i++) {
        mxArray *r = mxGetCell(prhs[0], i);
        double *rp = mxGetPr(r);
        int num_elements = mxGetNumberOfElements(r);
        for (int i = 0; i < num_elements; i++)
            rp[i] = rp[i] * coefficient;
    }
}

1 个答案:

答案 0 :(得分:3)

不完全是答案,但这里有一种方法可以看到JIT编译器和加速器在两种方法中的影响(cellfun与for循环):

feature('jit', 'off'); feature('accel', 'off');
tic, A = cellfun(@(x) k*x, A, 'UniformOutput', false); toc
tic, for i=1:numel(A), A{i} = A{i}*k; end, toc

feature('jit', 'on'); feature('accel', 'on');
tic, A = cellfun(@(x) k*x, A, 'UniformOutput', false); toc
tic, for i=1:numel(A), A{i} = A{i}*k; end, toc

我得到以下

Elapsed time is 25.913995 seconds.
Elapsed time is 13.050288 seconds.

VS。

Elapsed time is 10.053347 seconds.
Elapsed time is 1.978974 seconds.

在第二次开启优化。

顺便说一句,并行parfor执行得更糟(至少在我的本地测试机器上,池大小为2个进程)。

看到您发布的结果,MEX功能是可行的方法:)