Android笔记--MediaCodec(二)

         这一节主要了解MediaCodec处理音频,MediaCodec直译媒体解码器,用于访问媒体编解码器,即编码器/解码器组件,它是 Android 多媒体支持基础设施的一部分;从广义上讲,编解码器处理输入数据以生成输出数据。它异步处理数据并使用一组输入和输出缓冲区。在简单的层面上,您请求(或接收)一个空的输入缓冲区,用数据填充它并将其发送到编解码器进行处理。编解码器用完数据并将其转换为空输出缓冲区之一。最后,您请求(或接收)已填充的输出缓冲区,使用其内容并将其释放回编解码器。

        PCM(脉冲编码调制)是一种常见的音频数据格式,但由于其体积较大,不利于网络传输和存储,因此通常需要将其转换为AAC(高级音频编码)格式,简单看个栗子:

 PCM转AAC:

 1. 创建AAC编码器MediaFormat format = MediaFormat.createAudioFormat(MediaFormat.MIMETYPE_AUDIO_AAC, sampleRate, channelCount);  
format.setInteger(MediaFormat.KEY_AAC_PROFILE, MediaCodecInfo.CodecProfileLevel.AACObjectLC);  
format.setInteger(MediaFormat.KEY_BIT_RATE, bitRate);  
format.setInteger(MediaFormat.KEY_MAX_INPUT_SIZE, frameSize); // 根据你的PCM数据设置  MediaCodec encoder = MediaCodec.createEncoderByType(MediaFormat.MIMETYPE_AUDIO_AAC);  
encoder.configure(format, null, null, MediaCodec.CONFIGURE_FLAG_ENCODE);  
encoder.start();
2. 编码PCM数据ByteBuffer[] inputBuffers = encoder.getInputBuffers();  
ByteBuffer[] outputBuffers = encoder.getOutputBuffers();  
MediaCodec.BufferInfo bufferInfo = new MediaCodec.BufferInfo();  // 假设你有一个PCM数据的ByteBuffer  
ByteBuffer pcmData = ...; // 从文件或网络获取PCM数据  int inputBufferIndex = encoder.dequeueInputBuffer(-1);  
if (inputBufferIndex >= 0) {  ByteBuffer inputBuffer = inputBuffers[inputBufferIndex];  inputBuffer.clear();  inputBuffer.put(pcmData);  encoder.queueInputBuffer(inputBufferIndex, 0, pcmData.remaining(), 0, 0);  
}  int outputBufferIndex = encoder.dequeueOutputBuffer(bufferInfo, 10000);  
while (outputBufferIndex >= 0) {  ByteBuffer outputBuffer = outputBuffers[outputBufferIndex];  byte[] aacData = new byte[bufferInfo.size];  outputBuffer.get(aacData);  // 处理AAC数据,例如写入文件或发送到网络  encoder.releaseOutputBuffer(outputBufferIndex, false);  outputBufferIndex = encoder.dequeueOutputBuffer(bufferInfo, 0);  
}  // 结束编码  
encoder.signalEndOfInputStream();

AAC转PCM

1. 创建AAC解码器MediaFormat format = MediaFormat.createAudioFormat(MediaFormat.MIMETYPE_AUDIO_AAC, sampleRate, channelCount);  
format.setInteger(MediaFormat.KEY_AAC_PROFILE, MediaCodecInfo.CodecProfileLevel.AACObjectLC);  
format.setInteger(MediaFormat.KEY_MAX_INPUT_SIZE, aacFrameSize); // 根据你的AAC数据设置  MediaCodec decoder = MediaCodec.createDecoderByType(MediaFormat.MIMETYPE_AUDIO_AAC);  
decoder.configure(format, null, null, 0);  
decoder.start();
2. 解码AAC数据ByteBuffer[] inputBuffers = decoder.getInputBuffers();  
ByteBuffer[] outputBuffers = decoder.getOutputBuffers();  
MediaCodec.BufferInfo bufferInfo = new MediaCodec.BufferInfo();  // 假设你有一个AAC数据的ByteBuffer  
ByteBuffer aacData = ...; // 从文件或网络获取AAC数据  int inputBufferIndex = decoder.dequeueInputBuffer(-1);  
if (inputBufferIndex >= 0) {  ByteBuffer inputBuffer = inputBuffers[inputBufferIndex];  inputBuffer.clear();  inputBuffer.put(aacData);  decoder.queueInputBuffer(inputBufferIndex, 0, aacData.remaining(), 0, 0);  
}  int outputBufferIndex = decoder.dequeueOutputBuffer(bufferInfo, 10000);  
while (outputBufferIndex >= 0) {  ByteBuffer outputBuffer = outputBuffers[outputBufferIndex];  byte[] pcmData = new byte[bufferInfo.size];  outputBuffer.get(pcmData);  // 处理PCM数据,例如播放或写入文件  decoder.releaseOutputBuffer(outputBufferIndex, true);  outputBufferIndex = decoder.dequeueOutputBuffer(bufferInfo, 0);  
}  // 结束解码  
decoder.stop();  
decoder.release();

注:

正确配置编解码器:在创建和配置MediaCodec实例时,需要确保使用正确的参数,如音频格式、采样率、通道数等。这些参数应该与你的音频数据源和目标格式相匹配。错误的配置可能导致编码或解码失败。

处理缓冲区:MediaCodec使用输入和输出缓冲区来传递音频数据。你需要正确地管理这些缓冲区,包括从PCM数据源读取数据到输入缓冲区,以及从输出缓冲区获取编码后的AAC数据。

线程同步:音频编码和解码通常是异步进行的,因此需要在正确的线程上调用MediaCodec的方法,并妥善处理线程同步问题。

本文来自互联网用户投稿,该文观点仅代表作者本人,不代表本站立场。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如若转载,请注明出处:http://www.mzph.cn/news/815394.shtml

如若内容造成侵权/违法违规/事实不符,请联系多彩编程网进行投诉反馈email:809451989@qq.com,一经查实,立即删除!

相关文章

OpenHarmony C/C++三方库移植适配

简介 众所周知,C/C三方库相对与JS/ETS的三方组件来说,其运行效率高。那如何将一个C/C三方库移植到OH系统上呢?本文将介绍如何快速高效的移植一个C/C三方库到OpenHarmony上。 C/C三方库适配问题与解决方案 由上图可以看出,三方库…

回溯算法初识

文章目录 回溯算法初识什么是回溯算法回溯算法的步骤回溯算模版例题 回溯算法初识 什么是回溯算法 ​ 回溯算法是一种通过不断尝试可能的解决方案来解决问题的算法。它通常用于解决组合优化问题,如排列组合问题、子集和问题等。该算法通过尝试所有可能的候选解&am…

【Redis】事务

Redis事务是一组命令的集合。这组命令顺序化执行而不会被其他命令插入。 Redis事务命令 命令描述DISCARD取消事务,放弃执行EXEC执行事务MULTI标记事务的开始UNWATCH取消WATCH对所有key的监控WATCH监控所有key Redis事务特点 特点说明单独的隔离操作Redis命令执行…

方法引用(详)

一.方法引用 1.概念:把已经有的方法拿过来用,当作函数式接口中抽象方法的方法体 2.使用方法引用之前需要满足的规则 (1).引用处必须是函数式接口 (2).被引用的方法必须已经存在(如果不存在就…

时序分解 | Matlab实现WOA-VMD鲸鱼算法WOA优化VMD变分模态分解

时序分解 | Matlab实现WOA-VMD鲸鱼算法WOA优化VMD变分模态分解 目录 时序分解 | Matlab实现WOA-VMD鲸鱼算法WOA优化VMD变分模态分解效果一览基本介绍程序设计参考资料 效果一览 基本介绍 Matlab实现WOA-VMD鲸鱼算法WOA优化VMD变分模态分解(完整源码和数据) 1.利用鲸…

MySQL 全文检索

不是所有的数据表都支持全文检索 MySQL支持多种底层数据库引擎,但是并非所有的引擎支持全文检索 ,目前最常用引擎是是MyISAM和InnoDB;前者支持全文检索,后者不支持。 booolean模式操作符 操作符含义必须有-必须不包含>包含对应…

建模设计软件 Archicad 27 for mac激活版

在建筑设计领域,每一次技术的革新都意味着设计效率和质量的飞跃。Archicad 27 for Mac,就是这样一款引领行业变革的设计软件。 Archicad 27凭借出色的性能优化和强大的功能更新,为Mac用户带来了前所未有的建筑设计体验。它支持BIM&#xff08…

洛谷P1263题解

题目描述 从前有一个王国,这个王国的城堡是 m 行 n 列的一个矩形,被分为 mn 个方格。一些方格是墙,而另一些是空地。这个王国的国王在城堡里设了一些陷阱,每个陷阱占据一块空地。 一天,国王决定在城堡里布置守卫&…

leetcode热题HOT 22. 括号生成(回溯)

一、问题描述: 数字 n 代表生成括号的对数,请你设计一个函数,用于能够生成所有可能的并且 有效的 括号组合。 示例 1: 输入:n 3 输出:[“((()))”,“(()())”,“(())()”,“()(())”,“()()()”] 示例 2&a…

Docker搭建FFmpeg

FFmpeg 是一套可以用来记录、转换数字音频、视频,并能将其转化为流的完整解决方案。FFmpeg 包含了领先的音视频编解码库libavcodec,可以用于各种视频格式的转换。 应用场景包括: 视频转换:把视频从一种格式转换成另一种格式。视…

线程池的七大参数如何确定?

目录 一、前言 二、ThreadPoolExecutor的重要参数 1、corePoolSize: 核心线程数 2、maximumPoolSize:最大线程数 3、keepAliveTime:线程空闲时间 4、queueCapacity:任务队列容量(阻塞队列) 5、allowCoreThreadTi…

【日常记录】【JS】styled-components库的原理,模板字符串调用函数

文章目录 1、引言2、模板字符串调用函数3、实现 1、引言 在react 中,styled-components 是最流行的 css in js 模式的库 2、模板字符串调用函数 let stu {name: 呆呆狗,age: 30,address: 中国}let str fn你好${stu.name}今年${stu.age}岁,来自${stu.address}这样会…

3D室内装潢设计 Sweet Home 3D for Mac 中文直装版

Sweet Home 3D 是一款非常棒的家装辅助设计软件,支持包括中文在内的16中语言,它能帮您通过二维的家居平面图来设计和布置您的家具,还可以用三维的视角浏览整个装修布局的全貌。是一款操作起来简单方便,使用起来快捷、迅速,拥有超高…

什么是线程的上下文切换?

我们知道使用多线程的目的是为了充分利用多核CPU,比如说我们是16核,但是当创建很多线程比如说160个,CPU不够用了,此时就是一个CPU来应付多个线程(这里我们是一个CPU应对10个线程)。这个时候,操作…

HttpServletRequest/Response

HttpServletRequest 一些常用类的用法 package Demo;import javax.jws.WebService; import javax.servlet.ServletException; import javax.servlet.annotation.WebServlet; import javax.servlet.http.HttpServlet; import javax.servlet.http.HttpServletRequest; import ja…

C# 操作自定义config文件

读取: //先实例化一个ExeConfigurationFileMap对象,把物理地址赋值到它的 ExeConfigFilename 属性中; ExeConfigurationFileMap fileMap new ExeConfigurationFileMap(); fileMap.ExeConfigFilename "DB.config";//再调用fileMa…

vue--检测对象,数组的改变

1. 检测对象的改变 对象中后追加的属性,Vue默认不做响应式处理 如需给后添加的属性做响应式,请使用如下API: Vue.set(target,propertyName/index,value) 或 vm.$set(target,propertyName/index&#xff0c…

CS 创世 SD NAND:嵌入式系统中的闪存存储利器

在当今数字化世界中,嵌入式系统的需求不断增长,而CS 创世 SD NAND作为一种关键的存储技术,正扮演着重要的角色。其高速、低功耗和较大存储容量的特点,使得它成为各种嵌入式设备的理想选择。 CS 创世 SD NAND 具有高度集成的特点&…

IntelliJ IDEA 2022.3.2 解决decompiled.class file bytecode version:52.0(java 8)

1 背景 使用idea 打开一个Kotlin语言编写的demo项目,该项目使用gradle构建。其gradle文件如下: plugins {id javaid org.jetbrains.kotlin.jvm version 1.8.20 } group me.administrator version 1.0-SNAPSHOTrepositories {mavenCentral()jcenter()…

低功耗高效能ARM架构助力自动化边缘小站建设

自动化边缘计算在智慧工厂中扮演着越来越重要的角色。其中,采用ARM架构的计算机因其独特的性能特点,在自动化边缘小站领域展现出了巨大的应用潜力。 ARM架构以其低功耗、高性能以及高度可定制化的优势,为构建高效率、低成本的自动化边缘小站…