Android笔记--MediaCodec(一)

         这一节主要来了解一下MediaCodec,Android MediaCodec 是 Android 平台提供的一个用于处理音频和视频数据的 API。它允许开发者对音频和视频数据进行编码和解码,支持多种格式和编解码器。MediaCodec API 通常用于实现实时音视频处理,如视频录制、播放、转码等。

基本概念:

编解码器(Codec):编解码器是负责将原始音视频数据压缩成特定格式(编码)或将压缩数据还原为原始数据(解码)的组件。
输入缓冲区(Input Buffers):用于向编解码器提供待处理的数据。
输出缓冲区(Output Buffers):编解码器处理后的数据存储在这里,开发者可以从这里读取处理后的数据。

优点:

高效的硬件加速:MediaCodec 支持硬件加速功能,这意味着它可以利用设备的硬件资源来提高音视频处理的效率和性能。硬件加速对于实现流畅且高质量的音视频处理至关重要,特别是在处理高分辨率或高帧率的内容时。
直接访问底层编解码器:通过 MediaCodec,开发者可以直接访问底层的编解码器,从而实现更高效的音视频处理。这有助于减少不必要的中间层开销,提高整体性能。
节省包体积:与常规的编解码库相比,MediaCodec 通常具有更小的体积,因此使用它可以帮助减小应用程序的包大小,降低用户的下载和安装成本。

缺点:
API 复杂性:MediaCodec 的 API 相对较为复杂,需要开发者具备较深的音视频处理知识和编程经验。这使得学习和使用 MediaCodec 的门槛相对较高,可能会增加开发难度和成本。
版本兼容性问题:MediaCodec 在不同版本的 Android 系统上可能存在兼容性问题。某些旧版本的 Android 系统可能不支持 MediaCodec 或支持有限,这可能导致开发者需要针对不同版本进行额外的适配工作。
硬件依赖:虽然 MediaCodec 支持硬件加速,但这也意味着它的性能受限于设备的硬件能力。不同设备的硬件性能差异可能导致音视频处理效果的差异,这要求开发者在设计和优化应用时需要考虑设备的硬件条件。

主要步骤

使用 MediaCodec API 通常涉及以下步骤:
创建编解码器实例:使用 MediaCodec.createDecoderByType 或 MediaCodec.createEncoderByType 方法创建编解码器实例。
配置编解码器:通过调用 MediaCodec.configure 方法配置编解码器的参数,如输入/输出格式、回调等。
启动编解码器:调用 MediaCodec.start 方法启动编解码器。

处理数据:
编码:从输入缓冲区获取数据,传递给编解码器进行编码,然后从输出缓冲区获取编码后的数据。
解码:将压缩数据写入输入缓冲区,从编解码器获取解码后的数据(通常写入输出缓冲区)。
停止和释放编解码器:完成数据处理后,调用 MediaCodec.stop 方法停止编解码器,并调用 MediaCodec.release 方法释放资源。

关键方法
configure:配置编解码器的参数。
start 和 stop:启动和停止编解码器。
dequeueInputBuffer 和 queueInputBuffer:获取输入缓冲区的索引并将数据送入编解码器。
dequeueOutputBuffer 和 releaseOutputBuffer:获取输出缓冲区的索引并读取处理后的数据,然后释放缓冲区。
getInputBuffers 和 getOutputBuffers:获取输入和输出缓冲区的直接引用。

栗子(设置编码器,输入原始视频帧,并从编码器获取编码后的数据):

通常需要在 AndroidManifest.xml 中添加如下权限:

<uses-permission android:name="android.permission.RECORD_AUDIO" />  
<uses-permission android:name="android.permission.CAMERA" />  
<uses-feature android:name="android.hardware.camera" />  
<uses-feature android:name="android.hardware.camera.autofocus" />
import android.media.MediaCodec;  
import android.media.MediaCodecInfo;  
import android.media.MediaFormat;  
import android.util.Log;  
import java.nio.ByteBuffer;  public class VideoEncoder {  private static final String TAG = "VideoEncoderTest";  private MediaCodec encoder;  private boolean isRunning;  public void start(int width, int height, int bitrate) {  isRunning = true;  encoder = MediaCodec.createEncoderByType(MediaFormat.MIMETYPE_VIDEO_AVC);  MediaFormat format = MediaFormat.createVideoFormat(MediaFormat.MIMETYPE_VIDEO_AVC, width, height);  format.setInteger(MediaFormat.KEY_COLOR_FORMAT, MediaCodecInfo.CodecCapabilities.COLOR_FormatSurface);  format.setInteger(MediaFormat.KEY_BIT_RATE, bitrate);  format.setInteger(MediaFormat.KEY_FRAME_RATE, 30);  format.setInteger(MediaFormat.KEY_I_FRAME_INTERVAL, 5);  encoder.configure(format, null, null, MediaCodec.CONFIGURE_FLAG_ENCODE);  encoder.start();  }  public ByteBuffer[] getInputBuffers() {  return encoder.getInputBuffers();  }  public int dequeueInputBuffer(long timeoutUs) {  return encoder.dequeueInputBuffer(-1);  }  public void queueInputBuffer(int inputBufferIndex, int offset, int size, long presentationTimeUs, int flags) {  encoder.queueInputBuffer(inputBufferIndex, offset, size, presentationTimeUs, flags);  }  public ByteBuffer[] getOutputBuffers() {  return encoder.getOutputBuffers();  }  public MediaCodec.BufferInfo dequeueOutputBuffer(long timeoutUs) {  MediaCodec.BufferInfo bufferInfo = new MediaCodec.BufferInfo();  int outputBufferIndex = encoder.dequeueOutputBuffer(bufferInfo, timeoutUs);  while (outputBufferIndex >= 0) {  // 处理输出缓冲区的数据  encoder.releaseOutputBuffer(outputBufferIndex, false);  outputBufferIndex = encoder.dequeueOutputBuffer(bufferInfo, 0);  }  return bufferInfo;  }  public void stop() {  if (isRunning) {  isRunning = false;  encoder.stop();  encoder.release();  encoder = null;  }  }  
}

本文来自互联网用户投稿,该文观点仅代表作者本人,不代表本站立场。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如若转载,请注明出处:http://www.mzph.cn/news/787382.shtml

如若内容造成侵权/违法违规/事实不符,请联系多彩编程网进行投诉反馈email:809451989@qq.com,一经查实,立即删除!

相关文章

我的C++奇迹之旅:值和引用的本质效率与性能比较

文章目录 &#x1f4dd;引用&#x1f320;引用概念&#x1f309;引用特性 &#x1f320;使用场景&#x1f309;做参数&#xff08;传值与传地址&#xff09;&#x1f309;传值、传引用效率比较 &#x1f320;引用做返回值&#x1f309;引用和指针的区别 &#x1f320;常引用&am…

苹果开发者账号注册步骤中的常见疑问解答与技巧分享

转载&#xff1a;注册苹果开发者账号的方法 在2020年以前&#xff0c;注册苹果开发者账号后&#xff0c;就可以生成证书。 但2020年后&#xff0c;因为注册苹果开发者账号需要使用Apple Developer app注册开发者账号&#xff0c;所以需要缴费才能创建ios证书了。 所以新政策出…

蓝桥杯-单片机基础12——对芯片LM555产生的频率脉冲计数思路

蓝桥杯单片机组备赛指南请查看 &#xff1a;本专栏第1篇文章 本文章针对蓝桥杯-单片机组比赛开发板所写&#xff0c;代码可直接在比赛开发板上使用。 型号&#xff1a;国信天长4T开发板&#xff08;绿板&#xff09;&#xff0c;芯片&#xff1a;IAP15F2K61S2 &#xff08;使…

C++ TCP 服务端和客户端通信的例子

以下是一个简单的C TCP 服务端和客户端通信的例子&#xff0c;针对 Windows 环境&#xff1a; 服务器端代码&#xff08;server.cpp&#xff09;&#xff1a; #include <iostream> #include <winsock2.h> #include <Ws2tcpip.h> // for inet_ntop#pragma c…

如何在CentOS安装StackEdit Markdown编辑器并实现无公网IP远程访问使用

最近&#xff0c;我发现了一个超级强大的人工智能学习网站。它以通俗易懂的方式呈现复杂的概念&#xff0c;而且内容风趣幽默。我觉得它对大家可能会有所帮助&#xff0c;所以我在此分享。点击这里跳转到网站。 文章目录 前言1. ubuntu安装VNC2. 设置vnc开机启动3. windows 安…

反射的学习

反射的作用&#xff1a; 1.获取一个类里面的所有信息&#xff0c;获取到之后&#xff0c;在执行其他的业务逻辑 2.结合配置文件&#xff0c;动态的创建对象并调用方法

(4)(4.5) Underwater Sonar (Analog)

文章目录 前言 1 推荐硬件 2 连接和配置 3 参数说明 前言 本页详细介绍了低成本模拟水下声纳&#xff08;又称"探鱼器"&#xff09;和数字转换器的设置&#xff0c;数字转换器可将模拟读数转换成 NMEA 0183&#xff0c;供 ardupilot 读取。这种设置可以测量船下…

Kubernetes篇(三)— 资源管理

目录 前言资源管理介绍YAML语言介绍资源管理方式命令式对象管理命令式对象配置声明式对象配置 前言 本章节主要介绍yaml语法和kubernetes的资源管理方式 资源管理介绍 在kubernetes中&#xff0c;所有的内容都抽象为资源&#xff0c;用户需要通过操作资源来管理kubernetes。 …

【THM】SQL Injection(SQL注入)-初级渗透测试

简介 SQL(结构化查询语言)注入,通常称为 SQLi,是对 Web 应用程序数据库服务器的攻击,导致执行恶意查询。当 Web 应用程序使用未经正确验证的用户输入与数据库进行通信时,攻击者有可能窃取、删除或更改私人数据和客户数据,并攻击 Web 应用程序身份验证方法以获取私有数据…

java-map接口学习

java-map接口学习 Java Map接口HashMapLinkedHashMapTreeMap例子 Java Map接口 Map接口是基于键(key)和值(value)对的集合。每个键值对被称为一个条目(entry)。Map中的键是唯一的。 如果需要根据键进行搜索、更新或删Java Map接口除元素&#xff0c;那么Map是很有用的。 在Ja…

PCB三大走线,如何高效率检查?

在PCB设计中&#xff0c;走线的布局与检查是至关重要的环节。按照走线类型&#xff0c;可分为直角走线、差分走线及蛇形线&#xff0c;如何针对这三种走线方式进行高效率检查&#xff0c;去也报电路的稳定性和可靠性&#xff1f; 1、直角走线 容性负载&#xff1a;观察直角拐角…

从SQL质量管理体系来看SQL审核(4)- 如何设计一个优秀的SQL审核引擎

如何设计一个优秀的SQL审核引擎 从SQL质量管理体系来看SQL审核系列包括多篇文章&#xff0c;从SQL质量管理体系的角度来讨论如何设计一个优秀SQL审核引擎&#xff0c;欢迎订阅。 从SQL质量管理体系来看SQL审核&#xff08;1&#xff09;- SQL质量管理体系概览 从SQL质量管理…

YOLOv9改进策略 :主干优化 | 无需TokenMixer也能达成SOTA性能的极简ViT架构 | CVPR2023 RIFormer

💡💡💡本文改进内容: token mixer被验证能够大幅度提升性能,但典型的token mixer为自注意力机制,推理耗时长,计算代价大,而RIFormers是无需TokenMixer也能达成SOTA性能的极简ViT架构 ,在保证性能的同时足够轻量化。 💡💡💡RIFormerBlock引入到YOLOv9,多个数…

JavaEE 初阶篇-深入了解单例模式(经典单例模式:饿汉模式、懒汉模式)

&#x1f525;博客主页&#xff1a; 【小扳_-CSDN博客】 ❤感谢大家点赞&#x1f44d;收藏⭐评论✍ 文章目录 1.0 单例模式的概述 2.0 单例模式 - 饿汉式单例 2.1 关于饿汉式单例的线程安全问题 3.0 单例模式 - 懒汉式单例 3.1 关于懒汉式单例的线程安全问题 3.1.1 加锁 synchr…

spring boot3登录开发-3(2短信验证登录/注册逻辑实现)

⛰️个人主页: 蒾酒 &#x1f525;系列专栏&#xff1a;《spring boot实战》 &#x1f30a;山高路远&#xff0c;行路漫漫&#xff0c;终有归途 目录 写在前面 上文衔接 内容简介 功能分析 短信验证登录实现 1.创建交互对象 用户短信登录/注册DTO 创建用户登录VO…

IOTX:未来市场爆发点的RWA协议?DePIN赛道被低估的龙头

从基本面来看&#xff0c;IoTeX的目标是创建一个连接的世界&#xff0c;在这个世界中&#xff0c;每个人都能控制自己的数据、设备和身份。通过区块链技术&#xff0c;IoTeX旨在解锁智能设备和数据的潜力&#xff0c;支持新一代的现实世界Dapp和数字资产的发展。IOTX始终致力于…

红黑树剖析

目录 一. 红黑树的概念 二. 红黑树的性质 三. 红黑树节点的定义 四. 红黑树的插入操作 4.1 uncle存在且颜色为红 4.2 uncle不存在或者uncle存在且为黑 五. 整体代码展示 一. 红黑树的概念 红黑树&#xff0c;是一种二叉搜索树&#xff0c;但在每…

OpenCV 4.9基本绘图

返回&#xff1a;OpenCV系列文章目录&#xff08;持续更新中......&#xff09; 上一篇&#xff1a;OpenCV使用通用内部函数对代码进行矢量化 下一篇&#xff1a;OpenCV系列文章目录&#xff08;持续更新中......&#xff09; ​目标 在本教程中&#xff0c;您将学习如何&am…

ResutBuilder 学习笔记二:增加新的输入数据类型

ResutBuilder 学习笔记二&#xff1a;增加新的输入数据类型 我们在前面的博客中创建了一个非常简单的结果构建器ConcatBuilder&#xff0c;用于连接多个字符串。 ConcatBuilder虽然非常简单&#xff0c;但已经展现出一些令人兴奋的特征&#xff0c;代码简洁&#xff0c;清晰&a…

广东小团队惊艳业绩揭秘:链动模式助力面膜销售破千万!

惊爆&#xff01;广东一个默默无闻的小团队竟然在短短一个月内&#xff0c;仅凭销售面膜就实现了超过千万的惊人业绩&#xff01;这背后究竟隐藏着怎样的秘密武器呢&#xff1f; 揭开链动模式的神秘面纱 链动模式&#xff0c;作为社交电商领域的一股新兴力量&#xff0c;正以其…