将数据异步追加到文件



我正在使用这个异步递归函数来遍历目录的文件和文件夹,当找到.css文件时,我会将数据附加到一个名为"common.css"的文件中。

var walk = function(dir, done) {
 var results = [];
 fs.readdir(dir, function(err, list) {
      if (err) return done(err);
      var pending = list.length;
      if (!pending) return done(null);
      list.forEach(function(file) {
           file = dir + '/' + file;
           fs.stat(file, function(err, stat) {
                if (stat && stat.isDirectory()) {
                     minimizer(file, function(err, res) {
                          results = results.concat(res);
                          if (!--pending) done(null);
                     });
                } else if(file) {
                     fs.open('common.css', 'a', 666, function( err, id ) {
                         fs.write( id, 'hello', null, 'utf8', function(){
                             fs.close(id, function(){
                                  console.log('file closed');
                             });
                         });
                     });
                }
                if (!--pending) done(null);
           });  
      });
});   }

问题是,由于是异步的,我感觉到有时函数的多个实例同时写入文件。有什么方法可以控制此通量并将写入任务排队吗?

此代码的目的是合并目录中找到的.css文件。我不能在此项目中使用外部工具。

编辑答案:好吧,为此,我可以收集要合并的所有.css文件的路径,并在拥有所有文件后,调用同步函数来编写它们。

这就是

变量结果 = []

是在那里。我刚刚意识到这一点。

我想我会考虑使用类似 async.js 库的东西,它有能力确保事情以正确的顺序发生,包括async.forEachSeries(arr, eachFn, doneFn)

我的建议是,如果您将其作为独立应用程序执行此操作 - 而不是一些更大的应用程序的一部分,您可以将所有 css 文件写入控制台.log并通过"node combine.js> combined.cc"调用。从我看到的FileStreams和控制台.log来看,它不会大杂烩写。

您可以在开始时打开common.css并保持文件描述符打开,然后在遇到 CSS 文件时调用 fs.write(id, ...)。这不是您每次重新打开common.css的当前方法。

在您的代码中,您似乎正在向文件写入hello。如果从字面上看这是真的,或者如果你正在编写的内容相对较短(通常为 512 或 4096 字节,具体取决于平台),那么附加到common.css的所有内容都将是原子的,因此同时写入的不同异步函数不会相互干扰。

好吧,我最终出于同样的目的使用了一个串行递归函数。它解决了问题。在用户"chjj"的答案中取自节点.js fs.readdir 递归目录搜索

var fs = require('fs');
var walk = function(dir, done) {
  var results = [];
  fs.readdir(dir, function(err, list) {
    if (err) return done(err);
    var i = 0;
    (function next() {
      var file = list[i++];
      if (!file) return done(null, results);
      file = dir + '/' + file;
      fs.stat(file, function(err, stat) {
        if (stat && stat.isDirectory()) {
          walk(file, function(err, res) {
            results = results.concat(res);
            next();
          });
        } else {
          results.push(file);
          next();
        }
      });
    })();
  });
};

谢谢大家的建议:)

最新更新