AV1技术学习:Reference Frame System

一、Reference Frames

AV1 Codec 允许在其解码的帧缓冲区中最多允许保存 8 帧。对于一个编码帧,可以从解码的帧缓冲区中选择任意 7 个帧作为它的参考帧。编码端可以通过比特流显式地传输参考帧索引,范围从 1到 7。原则上,参考帧索引 1-4 为当前帧显示顺序之前的帧,而索引 5-7 则为当前帧显式顺序之后的帧。对于双向融合(bidirectional compound)预测,可以将两个参考帧组合起来生成预测值。

如果两个参考帧在当前帧之前或之后,这被认为是单向融合预测。实际上,编解码器可以将参考帧索引链接到被解码帧缓冲区中的任何帧,通过此方法可以保证它在两边没有足够的参考帧时填充所有参考帧索引。

运动估计理论上,通常认为单向融合预测不如双向融合预测准确。因此,允许的单向参考帧组合仅限于四对,即(1,2),(1,3),(1,4)和(5,7),但双向情况下的所有12种组合都被支持。这一限制将融合参考帧组合的总数从21个减少到16个。假设当前帧两侧的参考帧数量按照显示顺序上基本平衡,双向预测可能会提供更好的预测,当大多数参考帧位于当前帧的同一侧时,距离当前帧更近的参考帧可能和当前帧更相关。

当一帧编码完成后,编码器可以决定将该帧替换解码帧缓冲区中的哪个参考帧,并在比特流中显式地发出信号。此外,允许不将当前帧加入到缓冲区中,及可以不更新解码帧缓冲区。这对于某些帧与相邻帧不太相关的高动态视频特别有用。

二、Alternate Reference Frame

Alternate Reference Frame (ARF) 被编码并存储在已解码的帧缓冲区中,作为后续编码帧的参考帧,可以选择不显示。为了传输显示帧,AV1编解码器既可以编码一个新帧,也可以直接使用已解码帧缓冲区中的帧——这被称为“显示现有帧”。稍后直接显示的ARF可以有效地用于在金字塔编码结构中对未来的帧进行编码。

此外,编码器还可以选择合成一帧,该帧可以潜在地减少若干显示帧之间的集体预测误差。一个例子是沿着连续的原始帧的运动轨迹应用时间滤波来构建一个ARF,它保留了共同的信息,并且在很大程度上去除了每一帧的采集噪声。

编码器通常使用相对较低的量化步长对公共信息(即ARF)进行编码,以优化整体率失真性能。这里的一个潜在的缺点是,这会导致解码器需要处理额外的帧,这可能会扩大某些硬件的吞吐量。为了平衡压缩性能和解码器吞吐量,每个级别定义定义了允许解码采样率的上限,即最大解码率。由于解码的采样率是根据可显示帧和不用作“显示现有帧”的ARF中的样本总数计算的,因此它有效地限制了允许的合成ARF帧的数量。

三、Frame Scaling

AV1编解码器支持将原始帧缩放到较低的分辨率进行压缩,并将重建帧重新缩放到原始帧分辨率。

该方法对于一些帧过于复杂而无法压缩时适应目标流带宽范围时,特别有用。缩放系数限制在8/16-15/16的范围内。

首先将重建帧线性缩放到原始大小,然后使用环路重建滤波器(loop restoration filter )作为后处理阶段。线性上采样滤波器和环路恢复滤波器操作都是标准定义的。为了保持一个经济有效的硬件实现,除了常规帧解码的大小之外,不需要额外的行缓冲区费用,重新缩放过程被限制在水平方向上。解码帧上采样和滤波后的帧将作为编码后续帧的参考帧。

本文来自互联网用户投稿,该文观点仅代表作者本人,不代表本站立场。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如若转载,请注明出处:http://www.mzph.cn/pingmian/49108.shtml

如若内容造成侵权/违法违规/事实不符,请联系多彩编程网进行投诉反馈email:809451989@qq.com,一经查实,立即删除!

相关文章

GeoHash原理介绍以及在redis中的应用

GeoHash将二维信息编码成了一个一维信息。降维后有三个好处: 编码后数据长度变短,利于节省存储。利于使用前缀检索当分割的足够细致,能够快速的对双方距离进行快速查询 GeoHash是一种地址编码方法。他能够把二维的空间经纬度数据编码成一个字符串。 1…

react开发-配置开发时候@指向SRC目录

这里写目录标题 配置开发时候指向SRC目录VScode编辑器给出提示总体1.配置react的 2.配置Vscode的1.配置react的2,配置VSCode的提示支持 配置开发时候指向SRC目录VScode编辑器给出提示 总体1.配置react的 2.配置Vscode的 1.配置react的 1. 我么需要下载一个webpack的插件 这样…

判断推理1

判断推理 1.定义判断 2.类比推理 3.逻辑判断 4.图形推理 加粗文本 加粗文本

发展产业带动,助力安康振兴

“人间烟火,四时飘香,南北风味,各有所长”在中国的传统文化中,美食与历史也有着千丝万缕的联系。安康蒸面这道美食经过千年的传承,不仅在当地享有盛誉,也在美食界占据了一席之地。 队员们先参观了蒸面的制作…

map/multimap容器及STL案例

1.map概念:map中所有元素都是pair pair中的第一个元素为key(键值)起到索引作用,第二个为value(实值) 所有元素都会根据key值自动排序 本质:map/multimap属于关联式容器,底层结构是…

Vue3 reactive原理(一)-代理对象及数组

Proxy 只能拦截对一个对象的基本操作(例如读取、设置属性值),而无法拦截复合操作(例如,obj.fun(),由两个基本操作组成,1)get到fun这个属性,2)函数调用)。 1 …

C语言 | Leetcode C语言题解之第257题二叉树的所有路径

题目: 题解: char** binaryTreePaths(struct TreeNode* root, int* returnSize) {char** paths (char**)malloc(sizeof(char*) * 1001);*returnSize 0;if (root NULL) {return paths;}struct TreeNode** node_queue (struct TreeNode**)malloc(size…

vue3使用html2canvas

安装 yarn add html2canvas 代码 <template><div class"container" ref"container"><div class"left"><img :src"logo" alt"" class"logo"><h2>Contractors pass/承包商通行证&l…

Mamba-yolo|结合Mamba注意力机制的视觉检测

一、本文介绍 PDF地址&#xff1a;https://arxiv.org/pdf/2405.16605v1 代码地址&#xff1a;GitHub - LeapLabTHU/MLLA: Official repository of MLLA Demystify Mamba in Vision: A Linear AttentionPerspective一文中引入Baseline Mamba&#xff0c;指明Mamba在处理各种高…

网络通讯实验报告

拓扑图 需求 1、通过DHCP服务&#xff0c;给PC4和PC5分配IP地址、网关、掩码、DNS服务器IP地址 2、Client-1要求手工配置IP地址&#xff0c;为192.168.1.1, c 3、telnet客户端可以远程登录telnet服务器进行设备管理&#xff0c;并成功修改telnet服务器的名字为123 &#xff0c…

操作系统——进程与线程(死锁)

1&#xff09;为什么会产生死锁&#xff1f;产生死锁有什么条件&#xff1f; 2&#xff09;有什么办法解决死锁&#xff1f; 一、死锁 死锁:多个程序因竞争资源而造成的一种僵局&#xff08;互相等待对方手里的资源&#xff09;&#xff0c;使得各个进程都被阻塞&#xff0c;…

一篇文章搞懂MySQL的事务与隔离级别

事务 概述 一个事务其实就是一个完整的业务逻辑&#xff0c;是一个最小的工作单元。要么同时成功&#xff0c;要么同时失败&#xff0c;不可再分 假设转账&#xff0c;从A账户向B账户转账10000 A账户的钱减去10000&#xff08;update语句&#xff09; B账户的钱加上10000&…

【HarmonyOS学习】用户文件访问

概述 文件所有者为登录到该终端设备的用户&#xff0c;包括用户私有的图片、视频、音频、文档等。 应用对用户文件的创建、访问、删除等行为&#xff0c;需要提前获取用户授权&#xff0c;或由用户操作完成。 用户文件访问框架 是一套提供给开发者访问和管理用户文件的基础框…

Web开发:属性

属性 介绍全局属性特定元素属性超链接元素 (< a >)图像元素 (< img >)输入元素 (< input >)表单元素 (< form >)表格元素 (< table >) 其他元素段落元素 (< p >)列表元素 (< ul >, < ol >, < li >) 新增的HTML5属性示例…

无需抠图!AI绘画直接文本生成透明底图层,设计师必看的ComfyUI透明图层生成工作流教程!(附插件模型)

大家好&#xff0c;我是画画的小强 AI 绘画自出现以来一直都在不断发展完善&#xff0c;实现了很多我们在实际应用中迫切需要的功能&#xff0c;比如生成正确的手指、指定的姿势、准确的文本内容等。上周&#xff0c;又一个重磅新功能在开源的 SD 生态内实现了——直接通过文本…

PyCharm中的版本控制大师:Git的高效应用

PyCharm中的版本控制大师&#xff1a;Git的高效应用 在软件开发中&#xff0c;版本控制是一个不可或缺的工具&#xff0c;它帮助开发者管理代码变更、跟踪历史和协同工作。Git是目前最流行的版本控制系统之一&#xff0c;而PyCharm&#xff0c;作为一款功能强大的集成开发环境…

【北京迅为】《i.MX8MM嵌入式Linux开发指南》-第三篇 嵌入式Linux驱动开发篇-第四十四章 注册字符设备号

i.MX8MM处理器采用了先进的14LPCFinFET工艺&#xff0c;提供更快的速度和更高的电源效率;四核Cortex-A53&#xff0c;单核Cortex-M4&#xff0c;多达五个内核 &#xff0c;主频高达1.8GHz&#xff0c;2G DDR4内存、8G EMMC存储。千兆工业级以太网、MIPI-DSI、USB HOST、WIFI/BT…

Springboot项目打包成镜像、使用docker-compose启动

Springboot项目打包成镜像、使用docker-compose启动 1、创建一个boot项目 1、添加依赖 <?xml version"1.0" encoding"UTF-8"?> <project xmlns"http://maven.apache.org/POM/4.0.0" xmlns:xsi"http://www.w3.org/2001/XMLSch…

什么是保费保额,什么是豁免条款

保额1000万和300万的保费具体数额会因多种因素而异&#xff0c;包括保险公司的不同、保险产品的类型、被保险人的年龄、性别、健康状况、生活习惯&#xff08;如是否吸烟&#xff09;等。因此&#xff0c;没有统一的保费标准。 保费的计算通常涉及以下几个因素&#xff1a; 风…

gitee的怎么上传项目

前提 1.先下载Git Bash (如果没有下载的宝子们下载连接如下: 链接: link ) 项目上传到Gitee步骤 1.在Gitee上建立远程仓库 2.填写相关信息 3.进入本地你想要上传的文件目录下&#xff0c;右键单击空白处&#xff0c;点击Git Bash Here 4.配置你的用户名和邮箱 git con…