【Android GUI】FramebufferNativeWindow与Surface

文章目录

  • 显示整体体系
  • FramebufferNativeWindow
    • FramebufferNativeWindow构造函数
  • dequeueBuffer
  • Surface
  • 总结
  • 参考

显示整体体系

native window为OpenGL与本地窗口系统之间搭建了桥梁。
在这里插入图片描述
这个窗口系统中，有两类本地窗口，nativewindow1是能直接显示在屏幕的，使用的是帧缓冲区；nativewindow2是从内存缓冲区分配的空间，通常需要通过其他方式（例如将其内容绘制到帧缓冲区）才能在屏幕上显示。

当系统中存在多个需要显示UI的应用程序时，一方面这种改进设计保证了它们都能获得一个“本地窗口”；另一方面这些“本地窗口”也都可以被有序地显示到终端屏幕上，因为SurfaceFlinger会收集所有程序的显示需求，对它们进行统一的图像混合操作，然后输出到自己的NativeWindow-1上。

应用程序也可以使用Skia等第三方图形库，只要它们和SurfaceFlinger之间的“协议”不变即可。
在这里插入图片描述

FramebufferNativeWindow

EGL需要本地窗口为OpenGL创造环境：

EGLSurface eglCreateWindowSurface(  EGLDisplay dpy, EGLConfig config,
NativeWindowTypewindow, const EGLint *attrib_list);

无论哪种本地窗口都需要和NativeWindowType保持一致，数据类型的定义：

/*frameworks/native/opengl/include/egl/Eglplatform.h*/
typedef EGLNativeWindowType  NativeWindowType;//注意这两种数据类型其实是一样的
…
#if defined(_WIN32) || defined(__VC32__) && !defined(__CYGWIN__) && !defined(__SCITECH_SNAP__)/* Win32 和 WinCE系统下的定义 */
…
typedef HWND    EGLNativeWindowType;
#elif defined(__WINSCW__) || defined(__SYMBIAN32__)  /* Symbian系统 */
…
typedef void *EGLNativeWindowType;
#elif defined(__ANDROID__) || defined(ANDROID)/* Android系统 */
struct ANativeWindow;
…
typedef struct ANativeWindow* EGLNativeWindowType;
…
#elif defined(__unix__)/* UNIX系统 */
…
typedef Window   EGLNativeWindowType;
#else
#error "Platform not recognized"
#endif

ANativeWindow定义：

/*system/core/include/system/Window.h*/
struct ANativeWindow
{…const uint32_t flags; //与Surface或updater有关的属性const int   minSwapInterval;//所支持的最小交换间隔时间const int   maxSwapInterval;//所支持的最大交换间隔时间const float xdpi; //水平方向的密度，以dpi为单位const float ydpi;//垂直方向的密度，以dpi为单位intptr_t    oem[4];//为OEM定制驱动所保留的空间int (*setSwapInterval)(struct ANativeWindow* window, int interval);int (*dequeueBuffer)(struct ANativeWindow* window,struct ANativeWindowBuffer** buffer, int* fenceFd);int (*queueBuffer)(struct ANativeWindow* window,struct ANativeWindowBuffer* buffer, int fenceFd);int (*cancelBuffer)(struct ANativeWindow* window,struct ANativeWindowBuffer* buffer, int fenceFd);int (*query)(const struct ANativeWindow* window,int what, int* value);int (*perform)(struct ANativeWindow* window,int operation, ... );void* reserved_proc[2];
};

FramebufferNativeWindow构造函数

/*frameworks/native/libs/ui/FramebufferNativeWindow.cpp*/
FramebufferNativeWindow::FramebufferNativeWindow() : BASE(), fbDev(0), grDev(0), mUpdateOnDemand(false)
{hw_module_t const* module;if (hw_get_module(GRALLOC_HARDWARE_MODULE_ID, &module) == 0) {…//加载模块int stride;int err;int i;err = framebuffer_open(module, &fbDev);err = gralloc_open(module, &grDev);//分别打开fb和gralloc…if(fbDev->numFramebuffers >= MIN_NUM_FRAME_BUFFERS &&fbDev->numFramebuffers <= MAX_NUM_FRAME_BUFFERS){//根据fb设备属性获得buffer数mNumBuffers = fbDev->numFramebuffers;} else {mNumBuffers = MIN_NUM_FRAME_BUFFERS;//否则就采用最少的buffer数值，即2}mNumFreeBuffers = mNumBuffers;//可用的buffer个数，初始时是所有buffer可用mBufferHead = mNumBuffers-1;…for (i = 0; i < mNumBuffers; i++) //给每个buffer初始化{buffers[i] = new NativeBuffer(fbDev->width, fbDev->height, fbDev->format,GRALLOC_USAGE _HW_FB);}//NativeBuffer是什么？for (i = 0; i < mNumBuffers; i++) //给每个buffer分配空间{err = grDev->alloc(grDev, fbDev->width, fbDev->height, fbDev->format,GRALLOC_USAGE_HW_FB, &buffers[i]->handle, &buffers[i]->stride);…}/*为本地窗口赋属性值*/const_cast<uint32_t&>(ANativeWindow::flags) = fbDev->flags; const_cast<float&>(ANativeWindow::xdpi) = fbDev->xdpi;const_cast<float&>(ANativeWindow::ydpi) = fbDev->ydpi;const_cast<int&>(ANativeWindow::minSwapInterval) =fbDev->minSwapInterval;const_cast<int&>(ANativeWindow::maxSwapInterval) = fbDev->maxSwapInterval;} else {ALOGE("Couldn't get gralloc module");}/*以下代码段开始履行窗口“协议”*/ANativeWindow::setSwapInterval = setSwapInterval;ANativeWindow::dequeueBuffer = dequeueBuffer;ANativeWindow::queueBuffer = queueBuffer;ANativeWindow::query = query;ANativeWindow::perform = perform;/*下面这几个接口已经被废弃了，不过为了保持兼容性，暂时还是保留的*/ANativeWindow::dequeueBuffer_DEPRECATED = dequeueBuffer_DEPRECATED;ANativeWindow::lockBuffer_DEPRECATED = lockBuffer_DEPRECATED;ANativeWindow::queueBuffer_DEPRECATED = queueBuffer_DEPRECATED; 
}

重点关注的是FramebufferNativeWindow是如何分配buffer的。

成员变量mNumBuffers代表了FramebufferNativeWindow所管理的buffer总数。它取决于两个方面：首先从fb设备中取值，即numFramebuffers；否则就默认定义为MIN_NUM_FRAME_BUFFERS：

#define MIN_NUM_FRAME_BUFFERS  2
#define MAX_NUM_FRAME_BUFFERS  3

这代表双缓冲或者三缓冲机制。
FramebufferNativeWindow构造函数中的第一个for循环里先给各buffer创建相应的实例（new NativeBuffer），其中的属性值都来源于fbDev，如宽、高、格式等。紧随其后的就是调用Gralloc设备的alloc()方法：

err = grDev->alloc(grDev, fbDev->width, fbDev->height, fbDev->format,
GRALLOC_USAGE_HW_FB, &buffers[i]->handle, &buffers[i]->stride);

所有申请到的缓冲区都需要由FramebufferNativeWindow中的全局变量buffers[MAX_NUM_FRAME_BUFFERS]来记录，每个数据元素是一个NativeBuffer：

class NativeBuffer : public ANativeObjectBase<ANativeWindowBuffer, NativeBuffer,LightRefBase<NativeBuffer>>
{…

NativeBuffer 继承自ANativeWindowBuffer：

typedef struct ANativeWindowBuffer
{…int width; //宽int height;//高…buffer_handle_t handle;/*代表内存块的句柄，比如ashmem机制。*/…
} ANativeWindowBuffer_t;

一个本地窗口包含了很多属性值，如各种标志（flags）、横纵坐标的密度值等。这些数值都可以从fb设备中查询到，我们需要将它们赋予刚生成的FramebufferNativeWindow实例的属性。

FramebufferNativeWindow会将其对应的成员函数逐个填充到ANativeWindow的函数指针中：

ANativeWindow::setSwapInterval = setSwapInterval;
ANativeWindow::dequeueBuffer = dequeueBuffer;

这样的话OpenGL ES就通过ANativeWindow与本地窗口建立了联系。

dequeueBuffer

OpenGL ES就是通过这个方法来分配用于渲染的缓冲区的：

int FramebufferNativeWindow::dequeueBuffer(ANativeWindow* window, ANativeWindowBuffer** buffer, int* fenceFd)
{FramebufferNativeWindow* self = getSelf(window); /*Step1*/Mutex::Autolock _l(self->mutex);/*Step2*/…/*Step3. 计算mBufferHead */int index = self->mBufferHead++;if (self->mBufferHead >= self->mNumBuffers)self->mBufferHead = 0;//循环/*Step4. 如果当前没有可用缓冲区*/while (!self->mNumFreeBuffers) {self->mCondition.wait(self->mutex);}/*Step5. 如果有人释放了缓冲区*/self->mNumFreeBuffers--;self->mCurrentBufferIndex = index;*buffer = self->buffers[index].get();*fenceFd = -1;return 0;
}

Surface

应用程序端的本地窗口是Surface，和FramebufferNativeWindow一样，它必须继承AnativeWindow

class Surface: public ANativeObjectBase<ANativeWindow, Surface, RefBase>

/*frameworks/native/libs/gui/Surface.cpp*/
Surface::Surface(const sp<IGraphicBufferProducer>& bufferProducer): mGraphicBufferPro duc  er(bufferProducer)
{/*给ANativeWindow中的函数指针赋值*/ANativeWindow::setSwapInterval  = hook_setSwapInterval;ANativeWindow::dequeueBuffer    = hook_dequeueBuffer;…/*为各内部变量赋值，因为此时用户还没有发起申请，所以大部分变量的初始值是0*/mReqWidth = 0;mReqHeight = 0;…mDefaultWidth = 0;mDefaultHeight = 0;mUserWidth = 0;mUserHeight = 0;…
}

surface承担应用进程UI显示的责任。

Surface将通过mGraphicBufferProducer来获取buffer，而且这些缓冲区会被记录在mSlots数组中。

int Surface::dequeueBuffer(android_native_buffer_t** buffer,int *fenceFd) {…Mutex::Autolock lock(mMutex);int buf = -1;/*Step1. 宽高计算*/int reqW = mReqWidth ? mReqWidth : mUserWidth;int reqH = mReqHeight ? mReqHeight : mUserHeight;/*Step2. dequeueBuffer得到一个缓冲区*/sp<Fence> fence;status_t result = mGraphicBufferProducer->dequeueBuffer(&buf, &fence,reqW, reqH, mReqFormat, mReqUsage);/*生产者发挥作用了*/ …
sp<GraphicBuffer>&gbuf(mSlots[buf].buffer);/*注意buf是一个int值，代表的是mSlots数组序号*/…if ((result & IGraphicBufferProducer::BUFFER_NEEDS_REALLOCATION) || gbuf == 0) {result = mGraphicBufferProducer->requestBuffer(buf, &gbuf);//申请空间…}…*buffer = gbuf.get();
}

摘自原书：

大致流程是：ViewRootImpl持有一个Java层的Surface对象（即mSurface），初始时是空的。后续ViewRootImpl将向WindowManagerService发起relayout请求，此时mSurface才被赋予真正有效的值。WindowManagerService会先让WindowStateAnimator生成一个SurfaceControl，然后通过Surface.copyFrom()函数将其复制到mSurface中。这个复制函数会通过native接口nativeCreateFrom SurfaceControl来生成本地Surface(C++)对象，具体是在android_view_Surface.cpp文件中。JNI函数nativeCreateFromSurfaceControl将从SurfaceControl中提取出Surface(C++)，最终记录到Surface(Java)的成员变量中。这样，后期我们就可以从此变量中还原出底层的Surface对象了。

Surface由SurfaceControl管理，而后者又由SurfaceComposerClient创建。

/*frameworks/native/libs/gui/SurfaceComposerClient.cpp*/
sp<SurfaceControl> SurfaceComposerClient::createSurface(const String8& name,uint32_t w,uint32_t h,PixelFormat format,uint32_t flags)
{sp<SurfaceControl> sur;if (mStatus == NO_ERROR) {sp<IBinder> handle;sp<IGraphicBufferProducer> gbp;status_t err = mClient->createSurface(name, w, h, format, flags, &handle, &gbp);  //生成一个Surface…if (err == NO_ERROR) {sur = new SurfaceControl(this, handle, gbp);//SurfaceControl是“本地”的对象}}return sur;
}

mClient是一个ISurfaceComposerClient的sp指针，通过它创建一个surface。

SurfaceControl对象并不是由ISurfaceComposerClient的createSurface直接生成的，这个函数的参数中包括了gbp，即前面所说的“buffer生产者”。

真正与SurfaceFlinger间有联系的应该就是gbp。

来看下ISurfaceComposerClient的服务端：

void SurfaceComposerClient::onFirstRef() {sp<ISurfaceComposer> sm(ComposerService::getComposerService());if (sm != 0) {sp<ISurfaceComposerClient> conn = sm->createConnection();if (conn != 0) {mClient = conn;mStatus = NO_ERROR;}}
}

这里面与三个匿名Binder相关联，它们是由surfaceflinger提供的。surface flinger是注册在server manager上面的。

总结

FramebufferNativeWindow是为surfaceflinger服务的，由Gralloc提供。
surface虽然为应用程序服务的，但是本质上还是由surface flinger服务统一管理的。

参考

《深入理解Android内核设计思想》

本文来自互联网用户投稿，该文观点仅代表作者本人，不代表本站立场。本站仅提供信息存储空间服务，不拥有所有权，不承担相关法律责任。如若转载，请注明出处：http://www.mzph.cn/news/823747.shtml

如若内容造成侵权/违法违规/事实不符，请联系多彩编程网进行投诉反馈email:809451989@qq.com，一经查实，立即删除！

相关文章

上班族副业指南：六种实用赚钱途径

上班族副业指南：六种实用赚钱途径

在现今竞争激烈的社会中&#xff0c;许多上班族都选择开辟副业来增加收入与实现自我价值。副业不仅能够增强经济安全感&#xff0c;还能满足个人兴趣爱好&#xff0c;并为未来铺设更坚实的财务基石。本文将为你揭示六种适合上班族的副业选择&#xff0c;帮助你找到最适合自己的…
阅读更多...
JookDB下载安装使用

JookDB下载安装使用

天行健&#xff0c;君子以自强不息&#xff1b;地势坤&#xff0c;君子以厚德载物。 每个人都有惰性&#xff0c;但不断学习是好好生活的根本&#xff0c;共勉&#xff01; 文章均为学习整理笔记&#xff0c;分享记录为主&#xff0c;如有错误请指正&#xff0c;共同学习进步。…
阅读更多...
leetcode706-Design HashMap

leetcode706-Design HashMap

题目 不使用任何内建的哈希表库设计一个哈希映射&#xff08;HashMap&#xff09;。 实现 MyHashMap 类&#xff1a; MyHashMap() 用空映射初始化对象 void put(int key, int value) 向 HashMap 插入一个键值对 (key, value) 。如果 key 已经存在于映射中&#xff0c;则更新…
阅读更多...
CUDA优化入门

CUDA优化入门

本文记录了我的cuda学习经历&#xff0c;和大多数人一样&#xff0c;通过优化矩阵乘法的过程来了解一些基本的概念。仓库链接&#xff1a; GiteeGithub Refences NVIIDA Fermi Architecture WhitepaperCUDA C Programming GuideCUDA C Best Practices Guide 其中Fermi架构是…
阅读更多...
LINUX中使用cron定时任务被隐藏，咋回事？

LINUX中使用cron定时任务被隐藏，咋回事？

一、问题现象 线上服务器运行过程中&#xff0c;进程有莫名进程被启动&#xff0c;怀疑是有定时任务自动启动&#xff0c;当你用常规方法去查看&#xff0c;比如使用crontab去查看定时器任务&#xff0c;提示no crontab for root 或者使用cat到/var/spool/cron目录下去查看定时…
阅读更多...
反射

反射

目录 01、Java反射机制概述1.1、使用反射&#xff0c;实现同上的操作、调用私有属性 02、理解Class类并获取Class实例2.1、Class类的理解2.2、获取Class实例的4种方式2.3、Class实例对应的结构的说明 03、ClassLoader的理解3.1、ClassLoader的理解3.2、使用ClassLoader加载配置…
阅读更多...
基于Python|Java的自定义问卷系统-开题报告+代码

基于Python|Java的自定义问卷系统-开题报告+代码

开题报告是学术研究或项目开发前的一个重要步骤&#xff0c;它概述了研究或项目的目的、目标、研究问题、方法论、预期成果以及可能遇到的问题和挑战。以下是一个关于“基于PythonVue的问卷系统开发”的开题报告示例&#xff1a; 基于PythonVue的问卷系统开发开题报告 一、研…
阅读更多...
C++ Const的作用

C++ Const的作用

在C中&#xff0c;const关键字是一个类型修饰符&#xff0c;用于声明一个对象或变量的值是不可变的。它提供了多种方式来确保数据的完整性和安全性。以下是const的主要用途和好处&#xff1a; 1.定义常量&#xff1a; const可以用于定义常量&#xff0c;这些常量的值在初始化…
阅读更多...
20240329-2-树模型集成学习TreeEmbedding

20240329-2-树模型集成学习TreeEmbedding

树模型集成学习 集成学习主要有两个思想&#xff0c;分别是bagging和boosting。树模型的集成模型都是使用树作为基模型&#xff0c;最常用的cart树&#xff0c;常见的集成模型有RandomForest、GBDT、Xgboost、Lightgbm、Catboost。 概要介绍 RandomForest 随机森林(Random …
阅读更多...
Java面试八股之JDK和JRE的区别

Java面试八股之JDK和JRE的区别

JDK和JRE的区别 定义&#xff1a;JDK&#xff08;Java Development Kit&#xff09;是Java开发工具包的缩写&#xff0c;它是Java开发人员必备的工具。JDK包含了编译器(javac)、Java虚拟机(JVM)和Java类库等开发工具和资源。它提供了开发、编译、调试和运行Java程序所需的一切…
阅读更多...
LeetCode 2924.找到冠军 II：脑筋急转弯——只关心入度

LeetCode 2924.找到冠军 II：脑筋急转弯——只关心入度

【LetMeFly】2924.找到冠军 II&#xff1a;脑筋急转弯——只关心入度 力扣题目链接&#xff1a;https://leetcode.cn/problems/find-champion-ii/ 一场比赛中共有 n 支队伍&#xff0c;按从 0 到 n - 1 编号。每支队伍也是 有向无环图&#xff08;DAG&#xff09; 上的一个节…
阅读更多...
POXIS共享内存及信号量使用

POXIS共享内存及信号量使用

文章目录 POSIX共享内存shm_openftruncatemmapPOXIS共享内存文件的位置munmapclose POXIS信号量POXIS信号量的共同操作sem_waitsem_postsem_getvaluesem_t有名信号量sem_opensem_closesem_unlink 无名信号量sem_init - 初始化信号量sem_destroy - 销毁信号量 多进程注意事项问题…
阅读更多...
L2-2 老板的作息表

L2-2 老板的作息表

新浪微博上有人发了某老板的作息时间表&#xff0c;表示其每天 4:30 就起床了。但立刻有眼尖的网友问&#xff1a;这时间表不完整啊&#xff0c;早上九点到下午一点干啥了&#xff1f; 本题就请你编写程序&#xff0c;检查任意一张时间表&#xff0c;找出其中没写出来的时间段…
阅读更多...
web攻防基础

web攻防基础

文章目录 网站的组成服务器中间件数据库源码 网站的架构目录型端口型多个站点 网站搭建对渗透有影响的技术站库分离CDNWAF 要进行渗透&#xff0c;首先我们需要对目标有一个清晰的认识&#xff0c;如果连网站有哪些东西&#xff0c;怎么构成都不知道&#xff0c;那你渗透个什么…
阅读更多...
queue基础知识

queue基础知识

queue 1.queue 1&#xff09; queue 的定义与结构 template <class T, class Container deque<T>> class queue; queue 是一个先进先出&#xff08;FIFO&#xff09;的数据结构&#xff1b; 其中T表示 stack 中存放的数据类型&#xff1b; Contaier&#xff…
阅读更多...
Java中面向对象的继承性：初学者指南

Java中面向对象的继承性：初学者指南

Java中面向对象的继承性&#xff1a;初学者指南 在Java编程语言中&#xff0c;面向对象编程&#xff08;OOP&#xff09;的四大特性之一是继承性。继承允许我们创建新的类&#xff08;称为子类或派生类&#xff09;&#xff0c;这些类继承另一个类&#xff08;称为父类或基类&…
阅读更多...
web按钮点击打开qt窗体

web按钮点击打开qt窗体

要在Web页面上的按钮点击时打开Qt窗体&#xff0c;你可以通过使用Qt的信号槽机制来实现。具体步骤如下&#xff1a; 1. 创建一个Qt窗体&#xff0c;例如一个简单的QWidget或者QDialog。 2. 在该窗体中添加你想要显示的内容和功能。 3. 在Web页面中创建一个按钮&#xff0c;并使…
阅读更多...
nginx安装在linux上

nginx安装在linux上

nginx主要用于反向代理和负载均衡&#xff0c;现在简单的说说如何在linux操作系统上安装nginx 第一步&#xff1a;安装依赖 yum install -y gcc-c pcre pcre-devel zlib zlib-devel openssl openssl-devel 第二步&#xff1a; 下载nginx&#xff0c;访问官网&#xff0c;ngin…
阅读更多...
加速催化剂设计，上海交大贺玉莲课题组基于 AutoML 进行知识自动提取

加速催化剂设计，上海交大贺玉莲课题组基于 AutoML 进行知识自动提取

日常生活中&#xff0c;「催化」是最为常见的化学反应之一。比如&#xff0c;酿酒酿醋的本质&#xff0c;就是粮食中的淀粉在微生物酶的催化作用下&#xff0c;转变成酒精和醋酸的过程。 用更为学术的说法——在化学反应里能改变反应物反应速率&#xff08;既能提高也能降低&a…
阅读更多...
51单片机工程模板的建立（基于STC15系列库）

51单片机工程模板的建立（基于STC15系列库）

一、开启前准备 1.STC15官方库文件 1.1 stc15-software-lib-v1.0.rar&#xff1b;下载地址&#xff1a;STC15系列库&#xff08;带使用手册&#xff09;资源-CSDN文库 2.Keil4_C51软件&#xff0c;或其它版本&#xff1b; 二、创建工程模板 1.建立文件分类 listing&#xf…
阅读更多...
最新文章

Copyright @ 2022~2023