Android:流式传输相机数据并将其写入服务器

Question

我将网络摄像头数据流式传输到我的客户端。

我可以通过监听（"数据"）看到数据正在到达。但是，当我创建它时，我无法查看它，它可能是垃圾数据或缺少一些标题。VLC 无法播放它。

我的下一步是使其可实时流式传输到浏览器。

我做错了什么？

net = require('net');
fs = require('fs');
// Start a TCP Server
net.createServer(function (socket) {    
    console.log("client connected");
    var file = fs.createWriteStream("temp.mp4");
    socket.pipe(file, {end: false});
    socket.on('end', function(){
        console.log("ended");
    });
}).listen(5000);

我测试了一下它是否真的捕获了视频输出：

$ mediainfo temp.mp4 
General
Complete name                            : temp.mp4
Format                                   : H.263
Format version                           : H.263
File size                                : 126 KiB
Video
Format                                   : H.263
Width                                    :  pixel0
Height                                   :  pixel0
Color space                              : YUV
Chroma subsampling                       : 4:2:0
Bit depth                                : 8 bits
Compression mode                         : Lossy

这是以下用于设置mediaRecorder的Android代码（假设套接字已连接，没问题）

    mediaRecorder.setAudioSource(MediaRecorder.AudioSource.CAMCORDER);
    mediaRecorder.setVideoSource(MediaRecorder.VideoSource.CAMERA);
    mediaRecorder.setOutputFormat(MediaRecorder.OutputFormat.DEFAULT);
    mediaRecorder.setVideoSize(320, 240);
    mediaRecorder.setVideoEncoder(MediaRecorder.VideoEncoder.DEFAULT);
    mediaRecorder.setAudioEncoder(MediaRecorder.AudioEncoder.DEFAULT);
    ParcelFileDescriptor pfd = ParcelFileDescriptor.fromSocket(socket);     
    mediaRecorder.setOutputFile(pfd.getFileDescriptor());
    mediaRecorder.setMaxDuration(5000);
    mediaRecorder.setMaxFileSize(5000000);

Answer 1

有一些开源项目可以解决这个问题，例如Spydroid（浏览器/VLC流）和Android IP Camera（浏览器流）。你的实现似乎类似于Spydroid，所以也许你可以调整它的一些代码。

核心问题是MediaRecorder将原始视频帧写入套接字。它需要等到视频完成才能写入标头，但它们需要出现在文件的开头。由于套接字不可查找，因此无法在正确的位置写入标头。上面链接的项目通过将流打包到RTSP（Spydroid）或将一系列静止图像"流式传输"到浏览器（Android IP摄像机）来处理这个问题。