IframeExtractor 不使用 rtsp 输出声音

Question

我从git mooncatventure中使用IframeExtractor，它可以很好地播放。mov文件。但是当我尝试读取rtsp流时，我没有听到任何声音。

这是rtsp流的FFMEG转储:

Metadata:
title           : unknown
comment         : unknown
Duration: N/A, start: 49435.000589, bitrate: 258 kb/s
Program 3223 
No Program
Stream #0:0: Video: h264 (High) ([27][0][0][0] / 0x001B), yuv420p, 720x576 [SAR 64:45 DAR 16:9], 25 fps, 25 tbr, 90k tbn, 50 tbc
Stream #0:1(fra): Audio: aac ([15][0][0][0] / 0x000F), 48000 Hz, stereo, fltp, 142 kb/s
Stream #0:2(fra): Subtitle: dvb_teletext ([6][0][0][0] / 0x0006)
Stream #0:3(qad): Audio: aac ([15][0][0][0] / 0x000F), 48000 Hz, mono, fltp, 47 kb/s
Stream #0:4(qaa): Audio: aac ([15][0][0][0] / 0x000F), 48000 Hz, stereo, fltp, 68 kb/s

这是本地。mov文件的转储:

Metadata:
major_brand     : qt  
minor_version   : 0
compatible_brands: qt  
creation_time   : 2010-01-17 21:52:33
model           : iPhone 3GS
model-eng       : iPhone 3GS
date            : 2010-01-17T16:52:33-0500
date-eng        : 2010-01-17T16:52:33-0500
encoder         : 3.1.2
encoder-eng     : 3.1.2
make            : Apple
make-eng        : Apple
Duration: 00:00:03.25, start: 0.000000, bitrate: 3836 kb/s
Stream #0:0(und): Video: h264 (Baseline) (avc1 / 0x31637661), yuv420p, 640x480, 3695 kb/s, 30.02 fps, 30 tbr, 600 tbn, 1200 tbc
Metadata:
  rotate          : 90
  creation_time   : 2010-01-17 21:52:33
  handler_name    : Core Media Data Handler
Stream #0:1(und): Audio: aac (mp4a / 0x6134706D), 44100 Hz, mono, fltp, 63 kb/s
Metadata:
  creation_time   : 2010-01-17 21:52:33
  handler_name    : Core Media Data Handler

管理声音的音频类包含一个编解码器检测器，它表示为两个输入找到编解码器CODEC_ID_AAC:

audioStreamBasicDesc_.mFormatFlags = 0;
switch (_audioCodecContext->codec_id) {
    case CODEC_ID_MP3:
         audioStreamBasicDesc_.mFormatID = kAudioFormatMPEGLayer3;
        break;
    case CODEC_ID_AAC:
         audioStreamBasicDesc_.mFormatID = kAudioFormatMPEG4AAC;
         audioStreamBasicDesc_.mFormatFlags = kMPEG4Object_AAC_Main;
        NSLog(@"audio format aac %s (%d) is  supported",  _audioCodecContext->codec_name, _audioCodecContext->codec_id);
        break;
}

我看到数据进入缓冲区，但我什么也没听到。它可能是audioStreamBasicDesc_有错误的设置，但我找不到什么。

是否可能不是同一个AAC编解码器?

有人遇到过同样的问题吗?

欢迎任何帮助，我已经研究这个问题好几天了

编辑:我发现了一个以前没有的错误，我不知道该如何解决。如果我改变audioStreamBasicDesc。mFramesPerPacket为0或除以2，错误信息消失。

AudioConverterNew returned 'fmt?'
Prime failed ('fmt?'); will stop (72000/0 frames)

Answer 1

你可以尝试在这里强制设置一个任意大的缓冲区大小，比如480000

status = AudioQueueAllocateBufferWithPacketDescriptions(audioQueue_, 
    audioStreamBasicDesc_.mSampleRate * kAudioBufferSeconds / 8, 
    _audioCodecContext->sample_rate * kAudioBufferSeconds / 
      _audioCodecContext->frame_size + 1, 
    &audioQueueBuffer_[i]);