# 原始音频数据 (/zh-CN/realtime-media/rtc/build/audio/raw-audio-data/macos) > For AI agents: see the complete documentation index at [llms.txt](/llms.txt). 本文介绍如何对采集到的原始音频数据进行前处理和后处理。 ## 技术原理 [#技术原理-2] 在实时音视频互动过程中,你可以对音视频数据进行前处理和后处理,并对它们进行修改,获取想要的播放效果。 对于有自行处理音频数据需求的场景,声网提供原始数据功能。你可以在将数据发送给编码器前进行前处理,对捕捉到的音频信号进行修改;也可以在将数据发送给解码器后进行后处理,对接收到的音频信号进行修改。 原始音频数据功能的 CPU 占用率高,可能会影响性能。 ### 数据传输 [#数据传输-1] 下图展示原始音频数据前处理和后处理过程中的数据传输: ![img](https://web-cdn.agora.io/docs-files/1638261086824) 通过 `onRecordAudioFrame`,`onPlaybackAudioFrame`,`onPlaybackAudioFrameBeforeMixing` 或者 `onMixedAudioFrame` 回调,你可以: - 获取原始音频帧。 - 处理原始数据,并返回至 SDK。 下图展示使用原始音频数据的基础流程: ![实现流程](https://web-cdn.agora.io/docs-portal/img/rtc/raw-audio-data.svg) ## 前提条件 [#前提条件-2] 在进行操作之前,请确保你已经在项目中实现了基本的实时音视频功能。详见[实现音视频互动](/zh-CN/realtime-media/rtc/get-started/quick-start)。 ## 实现方法 [#实现方法-2] 参考如下步骤,在你的项目中实现原始音频数据功能: 1. 加入频道前,调用 `setAudioFrameDelegate` 设置音频帧 delegate。 2. 调用 `setRecordingAudioFrameParametersWithSampleRate`、`setPlaybackAudioFrameParametersWithSampleRate` 和 `setMixedAudioFrameParametersWithSampleRate` 为前缀的方法设置音频帧格式。 3. 实现 `onRecordAudioFrame`,`onPlaybackAudioFrame`,`onPlaybackAudioFrameBeforeMixing` 和 `onMixedAudioFrame` 回调。以上回调会对音频帧进行采集和处理。如果以上回调的返回值是 `false`,则说明对音频帧的处理无效。 ### 示例代码 [#示例代码-1] ```swift class RawAudioDataMain: BaseViewController { var localVideo = Bundle.loadVideoView(type: .local, audioOnly: true) var remoteVideo = Bundle.loadVideoView(type: .remote, audioOnly: true) @IBOutlet weak var container: AGEVideoContainer! // 定义 agoraKit 变量 var agoraKit: AgoraRtcEngineKit! // ... // 初始化 agoraKit,并注册相应回调 agoraKit = AgoraRtcEngineKit.sharedEngine(with: config, delegate: self) // 调用 setAudioFrameDelegate 设置音频帧 delegate。你需要在该方法中实现 AgoraAudioFrameDelegate 协议 agoraKit.setAudioFrameDelegate(self) // 调用 set 为前缀的方法,配置每个回调采集到的音频帧 agoraKit.setRecordingAudioFrameParametersWithSampleRate(44100, channel: 1, mode: .readWrite, samplesPerCall: 4410) agoraKit.setMixedAudioFrameParametersWithSampleRate(44100, samplesPerCall: 4410) agoraKit.setPlaybackAudioFrameParametersWithSampleRate(44100, channel: 1, mode: .readWrite, samplesPerCall: 4410) // ... // 在当前类下,实现 AgoraAudioFrameDelegat 协议的 extension extension RawAudioDataMain: AgoraAudioFrameDelegate { // 实现 onRecordAudioFrame 回调 func onRecordAudioFrame(_ frame: AgoraAudioFrame, channelId: String) -> Bool { return true } // 实现 onPlaybackAudioFrame 回调 onPlaybackAudioFrame(_ frame: AgoraAudioFrame, channelId: String) -> Bool { return true } // 实现 onMixedAudioFrame 回调 func onMixedAudioFrame(_ frame: AgoraAudioFrame, channelId: String) -> Bool { return true } // 实现 onPlaybackAudioFrameBeforeMixing 回调 func onPlaybackAudioFrame(beforeMixing frame: AgoraAudioFrame, channelId: String, uid: UInt) -> Bool { return true } } } ``` ## 参考信息 [#参考信息-2] ### 注意事项 [#注意事项-2] 声网实时互动 SDK 提供的音频裸数据采用同步回调机制。当你需要对原始音频数据进行保存或回写等操作时,请考虑以下建议: - 为确保音频流的连续性,请不要阻塞 SDK 线程,建议不要直接在回调函数中处理数据。你可以先对接收的音频数据进行深拷贝,然后将复制的数据转移到另一个线程进行处理。 - 如果你决定在回调函数内直接同步处理音频数据,请严格控制处理时长。例如,若回调函数每 10 毫秒触发一次,那么在回调内的处理时间必须小于 10 毫秒,防止造成音频流的延迟或中断。 ### 示例项目 [#示例项目-2] 声网提供了开源的原始音频数据示例项目供你参考,你可以前往下载或查看其中的源代码。 RawAudioData} href="https://gitee.com/agoraio-community/API-Examples/tree/main/macOS/APIExample/Examples/Advanced/RawAudioData" /> RawAudioData} href="https://github.com/Shengwang-Community/API-Examples/tree/main/macOS/APIExample/Examples/Advanced/RawAudioData" /> ### API 参考 [#api-参考-2] - [`setAudioFrameDelegate`](/zh-CN/api-reference/rtc/macos/audio/audio-raw#api_irtcengine_registeraudioframeobserver) - [`setRecordingAudioFrameParametersWithSampleRate`](/zh-CN/api-reference/rtc/macos/audio/audio-raw#api_irtcengine_setrecordingaudioframeparameters) - [`setPlaybackAudioFrameParametersWithSampleRate`](/zh-CN/api-reference/rtc/macos/audio/audio-raw#api_irtcengine_setplaybackaudioframeparameters) - [`setMixedAudioFrameParametersWithSampleRate`](/zh-CN/api-reference/rtc/macos/audio/audio-raw#api_irtcengine_setmixedaudioframeparameters) - [`onRecordAudioFrame`](/zh-CN/api-reference/rtc/macos/audio/audio-raw#callback_iaudioframeobserver_onrecordaudioframe) - [`onPlaybackAudioFrame`](/zh-CN/api-reference/rtc/macos/audio/audio-raw#callback_iaudioframeobserver_onplaybackaudioframe) - [`onPlaybackAudioFrameBeforeMixing`](/zh-CN/api-reference/rtc/macos/audio/audio-raw#callback_iaudioframeobserver_onplaybackaudioframebeforemixing) - [`onMixedAudioFrame`](/zh-CN/api-reference/rtc/macos/audio/audio-raw#callback_iaudioframeobserver_onmixedaudioframe)