原始音频数据
RegisterAudioFrameObserver
注册音频观测器对象。
public abstract int RegisterAudioFrameObserver(IAudioFrameObserver audioFrameObserver, AUDIO_FRAME_POSITION position, OBSERVER_MODE mode = OBSERVER_MODE.INTPTR);
该方法用于注册音频观测器对象,即注册回调。当需要 SDK 触发 OnMixedAudioFrame、OnRecordAudioFrame、OnPlaybackAudioFrame、OnPlaybackAudioFrameBeforeMixing 和 OnEarMonitoringAudioFrame 回调时,需要调用该方法注册回调。
调用时机
该方法需要在加入频道前调用。
调用限制
无。
参数
- audioFrameObserver
接口对象实例。详见 IAudioFrameObserver。如果传入 NULL,则表示取消注册。建议在收到 OnLeaveChannel 后调用,来释放音频观测器对象。
- mode
- 音频数据回调模式,详见 OBSERVER_MODE。
- position
- 音频观测位置。
- AUDIO_FRAME_POSITION_PLAYBACK (0x0001):该位置可观测所有远端用户混音后的播放音频,对应 OnPlaybackAudioFrame 回调。
- AUDIO_FRAME_POSITION_RECORD (0x0002):该位置可观测采集的本地用户的音频,对应 OnRecordAudioFrame 回调。
- AUDIO_FRAME_POSITION_MIXED (0x0004):该位置可观测本地和所有远端用户混音后的音频,对应 OnMixedAudioFrame 回调。
- AUDIO_FRAME_POSITION_BEFORE_MIXING (0x0008):该位置可观测单个远端用户混音前的音频,对应 OnPlaybackAudioFrameBeforeMixing 回调。
- AUDIO_FRAME_POSITION_EAR_MONITORING (0x0010):该位置可观测单个本地用户耳返的音频,对应 OnEarMonitoringAudioFrame 回调。
返回值
- 0:方法调用成功。
- < 0:方法调用失败。详见错误码了解详情和解决建议。
SetEarMonitoringAudioFrameParameters
设置耳返的音频数据格式。
public abstract int SetEarMonitoringAudioFrameParameters(int sampleRate, int channel, RAW_AUDIO_FRAME_OP_MODE_TYPE mode, int samplesPerCall);
详情
该方法用于设置 OnEarMonitoringAudioFrame 回调的耳返音频数据格式。
- 调用该方法前,你需要先调用 EnableInEarMonitoring,将 includeAudioFilters 设置为 EAR_MONITORING_FILTER_BUILT_IN_AUDIO_FILTERS 或 EAR_MONITORING_FILTER_NOISE_SUPPRESSION。
- SDK 会通过该方法中的 samplesPerCall、sampleRate 和 channel 参数计算出采样间隔,计算公式为采样间隔 = samplesPerCall/(sampleRate × channel)。请确保采样间隔不小于 0.01 秒。SDK 会根据该采样间隔触发 OnEarMonitoringAudioFrame 回调。
参数
- sampleRate
- OnEarMonitoringAudioFrame 中报告音频的采样率 (Hz),可设置为 8000、 16000、 32000、44100 或 48000。
- channel
- OnEarMonitoringAudioFrame 中报告音频的声道数,可设置为 1 或 2:
- 1: 单声道。
- 2: 双声道。
- mode
音频帧的使用模式,详见 RAW_AUDIO_FRAME_OP_MODE_TYPE。
- samplesPerCall
- OnEarMonitoringAudioFrame 中报告的音频的采样点数,如旁路推流应用中通常为 1024。
返回值
- 0:方法调用成功。
- < 0:方法调用失败。详见错误码了解详情和解决建议。
SetMixedAudioFrameParameters
设置采集和播放音频混音后的原始音频数据格式。
public abstract int SetMixedAudioFrameParameters(int sampleRate, int channel, int samplesPerCall);
SDK 会通过该方法中的 samplesPerCall、sampleRate 和 channel 参数计算出采样间隔,计算公式为采样间隔 = samplesPerCall/(sampleRate × channel)。请确保采样间隔不小于 0.01 秒。SDK 会根据该采样间隔触发 OnMixedAudioFrame 回调。
调用时机
该方法需要在加入频道前调用。
调用限制
无。
参数
- sampleRate
- 音频数据的采样率 (Hz),可设置为 8000、 16000、 32000、44100 或 48000。
- channel
- 音频数据的声道数,可设置为 1 或 2:
- 1: 单声道。
- 2: 双声道。
- samplesPerCall
- 音频数据的采样点数,如旁路推流应用中通常为 1024。
返回值
- 0: 方法调用成功。
- < 0: 方法调用失败。详见错误码了解详情和解决建议。
SetPlaybackAudioFrameBeforeMixingParameters
设置混音前的原始音频播放数据格式。
public abstract int SetPlaybackAudioFrameBeforeMixingParameters(int sampleRate, int channel);
SDK 会根据该采样间隔触发 OnPlaybackAudioFrameBeforeMixing 回调。
调用时机
该方法需要在加入频道前调用。
调用限制
无。
参数
- sampleRate
- 音频数据的采样率 (Hz),可设置为 8000、 16000、 32000、44100 或 48000。
- channel
- 音频数据的声道数,可设置为 1 或 2:
- 1: 单声道。
- 2: 双声道。
返回值
- 0: 方法调用成功。
- < 0: 方法调用失败。详见错误码了解详情和解决建议。
SetPlaybackAudioFrameParameters
设置播放的原始音频数据格式。
public abstract int SetPlaybackAudioFrameParameters(int sampleRate, int channel,
RAW_AUDIO_FRAME_OP_MODE_TYPE mode, int samplesPerCall);
SDK 会通过该方法中的 samplesPerCall、sampleRate 和 channel 参数计算出采样间隔,计算公式为采样间隔 = samplesPerCall/(sampleRate × channel)。请确保采样间隔不小于 0.01 秒。SDK 会根据该采样间隔触发 OnPlaybackAudioFrame 回调。
调用时机
该方法需要在加入频道前调用。
调用限制
无。
参数
- sampleRate
- 音频数据的采样率 (Hz),可设置为 8000、 16000、 32000、44100 或 48000。
- channel
- 音频数据的声道数,可设置为 1 或 2:
- 1: 单声道。
- 2: 双声道。
- mode
音频帧的使用模式,详见 RAW_AUDIO_FRAME_OP_MODE_TYPE。
- samplesPerCall
- 音频数据的采样点数,如旁路推流应用中通常为 1024。
返回值
- 0:方法调用成功。
- < 0:方法调用失败。详见错误码了解详情和解决建议。
SetRecordingAudioFrameParameters
设置采集的原始音频数据格式。
public abstract int SetRecordingAudioFrameParameters(int sampleRate, int channel, RAW_AUDIO_FRAME_OP_MODE_TYPE mode, int samplesPerCall);
SDK 会通过该方法中的 samplesPerCall、sampleRate 和 channel 参数计算出采样间隔,计算公式为采样间隔 = samplesPerCall/(sampleRate × channel)。请确保采样间隔不小于 0.01 秒。SDK 会根据该采样间隔触发 OnRecordAudioFrame 回调。
调用时机
该方法需要在加入频道前调用。
调用限制
无。
参数
- sampleRate
- 音频数据的采样率 (Hz),可设置为 8000、 16000、 32000、44100 或 48000。
- channel
- 音频数据的声道数,可设置为 1 或 2:
- 1: 单声道。
- 2: 双声道。
- mode
音频帧的使用模式,详见 RAW_AUDIO_FRAME_OP_MODE_TYPE。
- samplesPerCall
- 音频数据的采样点数,如旁路推流应用中通常为 1024。
返回值
- 0:方法调用成功。
- < 0:方法调用失败。详见错误码了解详情和解决建议。
UnRegisterAudioFrameObserver
OnEarMonitoringAudioFrame
获得耳返的原始音频数据。
public virtual bool OnEarMonitoringAudioFrame(AudioFrame audioFrame)
{
return true;
}
详情
为保证耳返的音频数据格式符合预期,你可以调用 SetEarMonitoringAudioFrameParameters 设置音频数据格式后,调用 RegisterAudioFrameObserver 注册音频观测器对象,SDK 会根据该方法中的参数计算采样间隔,并根据该采样间隔触发 OnEarMonitoringAudioFrame 回调。
参数
- audioFrame
- 音频原始数据。详见 AudioFrame。
返回值
无实际含义。
所属接口类OnPlaybackAudioFrameBeforeMixing
获取所订阅的远端用户混音前的声音。
public virtual bool OnPlaybackAudioFrameBeforeMixing(string channel_id,
uint uid,
AudioFrame audio_frame)
{
return false;
}
参数
- channel_id
- 频道 ID。
- uid
- 订阅的远端用户的 ID。
- audio_frame
- 音频原始数据。详见 AudioFrame。
返回值
无实际含义。
所属接口类OnPlaybackAudioFrame
获得播放的原始音频数据。
public virtual bool OnPlaybackAudioFrame(string channelId, AudioFrame audio_frame)
{
return true;
}
详情
为保证播放的音频数据格式符合预期,你可以调用 SetPlaybackAudioFrameParameters 设置音频数据格式后,调用 RegisterAudioFrameObserver 注册音频观测器对象,SDK 会根据该方法中的参数计算采样间隔,并根据该采样间隔触发 OnPlaybackAudioFrame 回调。
参数
- audio_frame
- 音频原始数据。详见 AudioFrame。
- channelId
- 频道 ID。
返回值
无实际含义。
所属接口类OnRecordAudioFrame
获得采集的原始音频数据。
public virtual bool OnRecordAudioFrame(string channelId, AudioFrame audioFrame)
{
return true;
}
详情
为保证采集的音频数据格式符合预期,你可以调用 SetRecordingAudioFrameParameters 设置音频数据格式后,调用 RegisterAudioFrameObserver 注册音频观测器对象,SDK 会根据该方法中的参数计算采样间隔,并根据该采样间隔触发 OnRecordAudioFrame 回调。
参数
- audioFrame
- 音频原始数据。详见 AudioFrame。
- channelId
- 频道 ID。
返回值
无实际含义。
所属接口类OnMixedAudioFrame
获取采集和播放音频混音后的数据。
public virtual bool OnMixedAudioFrame(string channelId, AudioFrame audio_frame)
{
return true;
}
详情
为保证采集和播放混音后的音频数据格式符合预期,你可以调用 SetMixedAudioFrameParameters 设置音频数据格式后,调用 RegisterAudioFrameObserver 注册音频观测器对象,SDK 会根据该方法中的参数计算采样间隔,并根据该采样间隔触发 OnMixedAudioFrame 回调。
参数
- audio_frame
- 音频原始数据。详见 AudioFrame。
- channelId
- 频道 ID。
返回值
无实际含义。
所属接口类