MongoClient节点游标流和数据管道

Question

我刚刚开始学习节点流，我使用的是MongoClient (MongoClient Cursor Doc)。在这个文档中，它声明我可以以文档流的形式获得返回的查询。像这样:

var MongoClient = require('mongodb').MongoClient
  , assert = require('assert');
// Connection URL
var url = 'mongodb://localhost:27017/myproject';
// Use connect method to connect to the Server
MongoClient.connect(url, function(err, db) {
  assert.equal(null, err);
  console.log("Connected correctly to server");
  var col = db.collection('streams');
  // Insert a single document
  col.insert([{a:1}, {a:1}, {a:1}], function(err, r) {
    assert.equal(null, err);
    assert.equal(3, r.result.n);
    // Get the results using a find stream
    var cursor = col.find({});
    cursor.on('data', function(doc) {
      console.dir(doc);
    });
    cursor.once('end', function() {
      db.close();
    });
  });
});

现在我正试图使用由var cursor = col.find({});创建的流管道到through2，并取出数据上的侦听器，并以如下方式结束:

  var cursor = col.find({});
  cursor.pipe(through2(function (buf, _, next) {
    console.log('chunkString: ', buf.toString());
    next();
  }));

但是，我得到这个错误:

/Users/blah/projects/mybuz/blah-ad/node_modules/mongodb/lib/utils.js:97
    process.nextTick(function() { throw err; });
                                        ^
TypeError: Invalid non-string/buffer chunk
    at validChunk (/Users/blah/projects/mybuz/blah-ad/node_modules/through2/node_modules/readable-stream/lib/_stream_writable.js:164:14)

不知道我做错了什么，因为我正在从可读流管道到双工流，只是在控制台输出该值

Answer 1

我有一个非常相似的问题。原来发生的事情是，我试图管道由MongoClient返回的对象模式流到字符串/缓冲区流。这会导致错误。

从下面的代码片段判断:

var cursor = col.find({});
cursor.pipe(through2(function (buf, _, next) {
  console.log('chunkString: ', buf.toString());
  next();
}));

你的消费流正在等待一个缓冲区。

cursor.pipe(through2({ objectMode: true }, function(chunk, enc, next) {
  console.log('chunk: ', chunk);
  next();
}));

应该能解决你的问题。

来源:https://nodesource.com/blog/understanding-object-streams