javascript - Node.js 中的快速数组分块

Question

我正在对长数据集进行数组分块。我需要创建一个新的具有一定大小的 block 数组。目前，我使用这个解决方案，但它的性能很差。

function array_to_chunks(data, size){
   let chunks = []
   let d = data.slice()
   while (d.length >= size) chunks.push(d.splice(0, size))
   return chunks
}

我想找到一些更好的想法来了解如何足够快地完成它以及为什么我的代码性能不佳。

Answer 1

这会稍微提高性能，因为您不必复制数组:

const createGroupedArray = function (arr, chunkSize) {

    if (!Number.isInteger(chunkSize)) {
        throw 'Chunk size must be an integer.';
    }

    if (chunkSize < 1) {
        throw 'Chunk size must be greater than 0.';
    }

    const groups = [];
    let i = 0;
    while (i < arr.length) {
        groups.push(arr.slice(i, i += chunkSize));
    }
    return groups;
};

如果您正在执行 I/O，则使用 Node.js 流:

const strm = new Writable({
  write(chunk, enc, cb){
     // do whatever
  }
});