具有异步功能的 for 循环会耗尽内存

for-loop with async function runs out memory

本文关键字:内存 循环 for 异步 功能      更新时间:2023-09-26

在你开始大喊"不要将for循环与异步函数一起使用!"让我声明一下,我确实知道如何使用异步函数从回调中调用下一次迭代来编程循环。

但是,如果我对回调不感兴趣,或者只在前置任务完成后处理一次迭代。就我而言,我正在从xml文件中导入大量记录并将它们写入mongoDB。对我的"write"函数的正常调用是这样的:

asyncWrite( record, function(err, result) {
    ...
});

现在正如我所说,我对回调不感兴趣(不会发生错误!)也不对串行过程感兴趣。所以我使用了一个for循环并省略了回调:

for( i=0; i<max; i+=1) {
    asyncWrite( record_arr[i] );
}

对于小max,这非常有效。但是随着max变大(> 100.000),我最终会得到"内存不足"错误。防止这种情况的唯一方法是回到"正常"异步循环(从回调中递归函数调用)。

还有其他想法吗?

在 for 循环完成其工作之前,不会执行异步函数。它刚刚收集了一个太乞求的队列。对于大max您收到out of memory错误,因为队列已满。您可以通过在循环中插入console.log(process.memoryUsage());来查看内存泄漏的方式。您需要使用块来处理此任务。