Android Native层音频采集与播放实战:AudioTrack与AudioRecord

发布时间:2026/11/22 19:48:46

Android Native层音频采集与播放实战:AudioTrack与AudioRecord 1. 项目概述在Android音视频开发领域音频采集与播放是最基础也是最重要的功能之一。作为一名长期从事Android底层开发的工程师我经常需要处理各种音频相关的需求。今天要分享的是如何在Native层直接使用AudioTrack和AudioRecord这两个核心类来实现低延迟的音频采集与播放。与Java层的实现相比Native层的AudioTrack和AudioRecord能够提供更低的延迟和更高的性能。这对于需要实时音频处理的应用场景如语音通话、音频直播、游戏音效等尤为重要。在本文中我将详细介绍如何在C代码中初始化这两个类并实现边录音边播放的功能。2. 环境准备与依赖配置2.1 开发环境要求要开发Native层的音频功能需要准备以下环境Android NDK开发环境建议使用最新稳定版Android源码环境至少需要包含frameworks/av目录支持C17的编译器Android设备或模拟器建议使用真机测试模拟器可能存在音频延迟问题2.2 项目依赖配置在Android.bp文件中需要添加以下依赖shared_libs: [ framework-permission-aidl-cpp, libaudioclient, libutils, libcutils, liblog, libbinder, ],这些依赖项分别提供了libaudioclient包含AudioTrack和AudioRecord的核心实现libutils提供Android基础工具类libcutils提供底层C工具函数liblog用于日志输出libbinder用于进程间通信framework-permission-aidl-cpp提供权限相关的AIDL接口3. AudioRecord初始化与配置3.1 AudioRecord核心参数解析AudioRecord的初始化需要配置以下关键参数音频源Audio SourceAUDIO_SOURCE_DEFAULT默认音频源AUDIO_SOURCE_MIC麦克风AUDIO_SOURCE_VOICE_COMMUNICATION语音通话专用AUDIO_SOURCE_VOICE_RECOGNITION语音识别专用采样率Sample Rate常用值8000Hz、16000Hz、44100Hz、48000Hz选择依据根据应用场景和硬件支持情况决定音频格式Audio FormatAUDIO_FORMAT_PCM_16_BIT16位PCMAUDIO_FORMAT_PCM_8_BIT8位PCMAUDIO_FORMAT_PCM_FLOAT浮点PCM声道配置Channel ConfigAUDIO_CHANNEL_IN_MONO单声道AUDIO_CHANNEL_IN_STEREO立体声缓冲区大小Buffer Size必须大于等于getMinBufferSize()返回的最小值过小会导致音频数据丢失过大会增加延迟3.2 初始化代码实现以下是完整的AudioRecord初始化代码#include media/AudioRecord.h #include utils/Log.h spAudioRecord AudioTest::initRecord() { // 获取最小帧数 size_t minFrameCount; status_t status AudioRecord::getMinFrameCount(minFrameCount, 16000, AUDIO_FORMAT_PCM_16_BIT, AUDIO_CHANNEL_IN_MONO); if (status ! NO_ERROR) { ALOGE(Failed to get min frame count, using default); minFrameCount 480 * 4; // 默认值 } // 创建AttributionSourceState std::string packageName{AudioCapture}; AttributionSourceState attributionSource; attributionSource.packageName packageName; attributionSource.token spBBinder::make(); // 创建AudioRecord实例 spAudioRecord audioRecord new AudioRecord(attributionSource); // 配置AudioRecord参数 status audioRecord-set(AUDIO_SOURCE_DEFAULT, 16000, AUDIO_FORMAT_PCM_16_BIT, AUDIO_CHANNEL_IN_MONO, minFrameCount); // 检查初始化状态 if (audioRecord-initCheck() ! NO_ERROR) { ALOGE(AudioRecord initialization failed); return nullptr; } // 开始录音 status audioRecord-start(); if (status ! NO_ERROR) { ALOGE(Failed to start AudioRecord); return nullptr; } return audioRecord; }3.3 注意事项与常见问题权限问题必须确保应用有RECORD_AUDIO权限在Android 10及以上版本还需要在AndroidManifest.xml中声明FOREGROUND_SERVICE权限缓冲区大小计算音频帧与字节数的转换公式字节数 帧数 × 声道数 × 每样本字节数例如单声道16位PCM每帧1×22字节采样率选择语音通话8000Hz或16000Hz足够音乐录制建议44100Hz或48000Hz注意不是所有设备都支持所有采样率4. AudioTrack初始化与配置4.1 AudioTrack核心参数解析AudioTrack的初始化需要配置以下关键参数流类型Stream TypeAUDIO_STREAM_MUSIC音乐播放AUDIO_STREAM_VOICE_CALL语音通话AUDIO_STREAM_SYSTEM系统声音采样率Sample Rate必须与AudioRecord的采样率一致否则会导致播放速度异常音频格式Audio Format必须与AudioRecord的格式一致否则会导致播放声音失真声道配置Channel ConfigAUDIO_CHANNEL_OUT_MONO单声道输出AUDIO_CHANNEL_OUT_STEREO立体声输出输出标志Output FlagsAUDIO_OUTPUT_FLAG_PRIMARY主输出设备AUDIO_OUTPUT_FLAG_FAST低延迟模式AUDIO_OUTPUT_FLAG_DEEP_BUFFER大缓冲区模式4.2 初始化代码实现以下是完整的AudioTrack初始化代码#include media/AudioTrack.h #include utils/Log.h spAudioTrack AudioTest::initPlayback() { // 创建AudioTrack实例 spAudioTrack audioTrack new AudioTrack( AUDIO_STREAM_MUSIC, 16000, AUDIO_FORMAT_PCM_16_BIT, AUDIO_CHANNEL_OUT_MONO, AUDIO_OUTPUT_FLAG_PRIMARY); // 检查初始化状态 if (audioTrack-initCheck() ! NO_ERROR) { ALOGE(AudioTrack initialization failed); return nullptr; } // 设置缓冲区大小与AudioRecord一致 audioTrack-setBufferSizeInFrames(minFrameCount); // 开始播放 status_t status audioTrack-start(); if (status ! NO_ERROR) { ALOGE(Failed to start AudioTrack); return nullptr; } return audioTrack; }4.3 输出模式选择建议低延迟场景如游戏音效使用AUDIO_OUTPUT_FLAG_FAST配合AUDIO_STREAM_VOICE_CALL流类型缓冲区大小尽可能小高质量音乐播放使用AUDIO_OUTPUT_FLAG_DEEP_BUFFER配合AUDIO_STREAM_MUSIC流类型缓冲区大小可以适当增大语音通话场景使用AUDIO_OUTPUT_FLAG_PRIMARY配合AUDIO_STREAM_VOICE_CALL流类型缓冲区大小适中5. 音频采集与播放实现5.1 核心流程设计边录音边播放的流程如下初始化AudioRecord和AudioTrack创建音频数据缓冲区循环读取音频数据并写入AudioTrack处理停止信号释放资源5.2 完整实现代码void AudioTest::startRecordAndPlay() { // 初始化AudioRecord spAudioRecord audioRecord initRecord(); if (audioRecord nullptr) { ALOGE(Failed to initialize AudioRecord); return; } // 初始化AudioTrack spAudioTrack audioTrack initPlayback(); if (audioTrack nullptr) { ALOGE(Failed to initialize AudioTrack); audioRecord-stop(); return; } // 计算缓冲区大小字节 size_t bufferSize minFrameCount * 2; // 单声道16位PCM // 创建音频缓冲区 std::unique_ptruint8_t[] audioBuffer(new uint8_t[bufferSize]); // 设置运行标志 mProcessRunningFlag true; // 主循环 while (mProcessRunningFlag) { // 读取音频数据 ssize_t readSize audioRecord-read(audioBuffer.get(), bufferSize); if (readSize 0) { // 写入AudioTrack ssize_t written audioTrack-write(audioBuffer.get(), readSize); // 日志记录 ALOGV(Read %zd bytes, wrote %zd bytes, readSize, written); // 处理写入不完整的情况 if (written readSize) { ALOGW(Partial write: %zd/%zd bytes, written, readSize); } } else if (readSize 0) { ALOGE(Error reading from AudioRecord: %zd, readSize); break; } } // 停止并释放资源 audioRecord-stop(); audioTrack-stop(); } void AudioTest::stopRecordAndPlay() { // 设置停止标志 mProcessRunningFlag false; }5.3 性能优化技巧缓冲区管理使用智能指针管理内存避免内存泄漏缓冲区大小应根据实际需求调整线程优先级音频处理线程应设置为高优先级可以使用pthread_setschedparam设置实时性保障减少循环内的非音频处理逻辑避免在音频线程中进行IO操作错误处理检查每次read/write的返回值处理部分写入的情况6. 常见问题与解决方案6.1 音频延迟问题症状录音和播放之间存在明显延迟解决方案检查AudioRecord和AudioTrack的缓冲区大小是否一致尝试使用更小的缓冲区使用AUDIO_OUTPUT_FLAG_FAST标志确保音频处理线程有足够的CPU资源6.2 音频失真问题症状播放的声音有杂音或失真解决方案检查AudioRecord和AudioTrack的采样率、格式是否匹配确保缓冲区大小足够大检查音频源质量尝试不同的音频格式如改用PCM_FLOAT6.3 权限相关问题症状录音功能无法正常工作解决方案检查是否声明了RECORD_AUDIO权限在运行时检查权限对于Android 10确保有前台服务权限检查音频源是否可用6.4 内存泄漏问题症状长时间运行后内存占用持续增加解决方案使用智能指针管理资源确保所有资源都被正确释放使用Android Studio的内存分析工具检查泄漏点7. 高级应用与扩展7.1 音频数据处理可以在读取和写入之间添加音频处理逻辑如回声消除噪声抑制音频编码/解码音效处理7.2 多线程设计对于复杂的音频应用建议采用多线程设计单独的线程负责音频采集单独的线程负责音频处理单独的线程负责音频播放使用线程安全队列传递数据7.3 低延迟优化要实现极低延迟的音频处理使用AAudio APIAndroid O及以上设置合适的线程优先级使用高性能音频路径如FastMixer优化缓冲区大小在实际项目中我发现Native层的AudioTrack和AudioRecord虽然性能更好但也更加复杂。特别是在处理不同Android版本的兼容性问题时需要做大量的测试和适配工作。建议在关键音频应用中加入详细的日志和性能监控以便及时发现和解决问题。
延伸阅读

更多相关文章

2026/11/22 22:44:23

渲染管线全解析:从三维场景到屏幕像素的完整链路

1. 渲染管线到底在解决什么问题很多人第一次接触计算机图形学,看到“渲染管线”这四个字,脑子里浮现的是一根管子,里面流着各种颜色。这个直觉其实不算错,但不够精确。渲染管线本质上是一条从三维场景数据到二维屏幕像素的流水线&…

2026/11/23 1:31:36

YOLOv8室内家具数据集训练:2416张图像从解压到部署全攻略

简介:这份室内家具目标检测数据集以YOLO格式标注,共包含2416张图像及对应标签,覆盖常见室内家具类别,适合使用YOLOv3、v4、v5等系列算法训练与验证,面向目标检测方向的研究人员、算法学习者及开发者,可有效…

2026/11/20 10:28:31

JavaWeb超市订单管理系统源码解析:结构、运行与答辩指南

简介:一套完整可运行的JavaWeb超市订单管理系统源码与数据库打包资源,面向正在完成JavaWeb课程设计的高校学生,也适合需要参考完整管理系统的入门开发者,可用于课程设计提交、项目实训或毕业设计前期参考。压缩包内共162个文件&am…

2026/11/23 2:08:06

电工证怎么公证值不值得考工地太忙根本没时间复习考试

电工证怎么公证值不值得考工地太忙根本没时间复习考试 工地太忙根本没时间复习考试,很多人一想到电工证考试就头大,尤其是像你这样的房建工程从业者,天天在工地上跑,哪还有时间去准备考试?但问题是, 电工证怎么公证…

2026/11/23 2:08:06

电工证视频动画片真实经历:学历不高怕报不上名?这几点你得知道

电工证视频动画片真实经历:学历不高怕报不上名?这几点你得知道 我是个没上过大学的建筑工人,从济源出来干工地,平时干点电工活儿,可真没少被师傅们念叨:“你这证还没办,真要出事可咋整?”说实话,那时候我心里也犯嘀咕: 学历不高,怕报不上名…

2026/11/23 2:08:05

电工证考完有补贴吗 网上查询补贴政策全攻略

电工证考完有补贴吗 网上查询补贴政策全攻略 你是不是也担心学历不高报不了电工证?别慌,现在国家鼓励技能型人才发展,像你这样的朋友完全有机会。而且 电工证考完有补贴吗 这个问题,现在已经有明确的答案了。接下来我来告诉你怎么 网上查询…

2026/11/23 2:08:05

准安培训电工证全国通用吗?学历不高也能考!

准安培训电工证全国通用吗?学历不高也能考! 你是不是总担心自己学历不高,连准安培训电工证都报不了名?别急,我来告诉你真相。现在全国通用的准安培训电工证,不看你学历,只看你有没有实际操作能力。只要符合条件,学历不是问题。…

2026/11/23 2:08:05

温岭哪里可以考电工证多少钱?全攻略帮你快速上岗

温岭哪里可以考电工证多少钱?全攻略帮你快速上岗 急需特种作业证才能上岗找工作,别再等了!在温岭,考电工证已经不是难事,但很多人不知道从哪里开始,多少钱能搞定,流程复杂不复杂。如果你也正在为电工证发愁,这篇指南专门为你准备,帮你一步步搞定从报…

2026/11/23 2:03:05

大厂电工证报名网址复审延期怎么办理 值不值得考

大厂电工证报名网址复审延期怎么办理 值不值得考 证书过期了不知道怎么复审延期,你不是一个人。现在越来越多的电工从业者发现,自己手里那张特种作业操作证,不知不觉已经到期,却对复审流程一无所知。特别是像驻马店这样的地方,很多水利工程从业者在项目…

2026/11/22 0:09:40

高压电工证还能年审吗良心建议来了,学历不高也能考!

高压电工证还能年审吗良心建议来了,学历不高也能考! 你是不是也担心,自己学历不高,根本报不上高压电工证?其实不然,现在政策已经非常明确, 高压电工证还能年审 ,而且只要符合条件, 学历不是门槛 , 良心建议…

2026/11/22 0:09:40

吴江的电工证免费培训怎么报名?官方报名入口全解析

吴江的电工证免费培训怎么报名?官方报名入口全解析 你急需特种作业证才能上岗找工作,但不知道从哪里下手?别急,现在就给你讲明白【吴江的电工证免费培训】到底怎么操作,以及怎么通过 官方报名入口…

2026/11/23 0:26:19

电工证复审肃州区的真实经历:别被中介坑了,自己搞定更靠谱

电工证复审肃州区的真实经历:别被中介坑了,自己搞定更靠谱 不知道去哪报名怕被中介坑?这几乎是每个需要办理或复审电工证的人的真实经历。尤其在肃州区,信息不透明、流程复杂、中介收费高又不靠谱,让很多电工从业者感到头疼。作为一个在应急管理和特种作…

2026/11/23 0:01:38

南宁哪里可以学电工证值不值得考?怕被中介坑?看这篇就够了

南宁哪里可以学电工证值不值得考?怕被中介坑?看这篇就够了 不知道去哪报名怕被中介坑?南宁哪里可以学电工证值不值得考?这是很多想考电工证的朋友最关心的问题。现实中,不少人在选择培训机构时被各种五花八门的广告信息搞得晕头转向,甚至被坑了钱还没拿…

2026/11/23 0:01:38

建设局特种工证怎么查全国通用的复审流程

建设局特种工证怎么查全国通用的复审流程 证书过期了不知道怎么复审延期,这是很多特种作业从业者常遇到的问题。尤其是在洛阳涧西区从事水利工程工作的你,特种作业操作证不仅是上岗的“通行证”,更是保障安全作业的法律底线。如果操作证过期了,不仅影响工…

2026/11/23 0:01:38

电工证跨考政策值不值得考?学历不高也能考的真相

电工证跨考政策值不值得考?学历不高也能考的真相 你是不是也觉得学历不够,报电工证怕被拒?别急,国家安全生产考试网明文规定, 电工证跨考政策 对学历门槛没有硬性限制,只要你年满18岁,身体健康,能通过实操考试,就能报考。关键是, 值不值得考…

2026/11/22 9:39:14

面向复杂光照与角度的宠物面部识别鲁棒性增强策略

在智慧养宠时代,基于视觉的宠物身份识别技术正逐步从实验室走向家庭应用。然而,与配合度高的人类不同,宠物是典型的“非合作生物识别对象”——它们不会主动配合摄像头调整姿态,更无法控制光照环境。实际应用中,我们常…

2026/11/22 5:39:03

SSM电子书店源码全解析:结构、原理、部署与排错实战

/* MD / 富文本中的 .toc(含博客园搬家等嵌套结构);.toc-box 在侧栏,不受影响 */#content_views .toc,/* 编辑器常在目录前后插入空 p(:empty 仍占 20px),一并去掉避免顶空隙 */#content_views.markdown_views > p:empty:has(+ .toc),#content_views.markdown_views …

还想了解更多?直接咨询顾问

免费诊断 + 免费方案 + 透明报价。

全国咨询热线400-8866-253
免费获取方案
☎咨询二维码 ☎ ↑