欢迎您访问程序员文章站本站旨在为大家提供分享程序员计算机编程知识!
您现在的位置是: 首页

音视频直播技术--视频渲染之EGL

程序员文章站 2022-03-13 20:57:02
...

前言

我们在Andriod系统下做视频渲染时要使用 OpengGL ES, 而使用 OpengGL ES 就不得不提到 EGL。那么EGL是什么呢?它又在渲染时起到什么作用呢?今天我就给大家介绍一下 EGL.

什么是EGL

EGL是一套用于管理绘制Surface的API。它的运行机制如下:

  • 与系统的本地窗口进行通信。
  • 查询绘制Surface的有效类型与配置。
  • 创建会制Surface。
  • 创建Context来管理渲染资源,如OpenGL ES 的 Shader 数组数据。
  • 将 OpengGL ES 渲染的数据输出到 Surface中,并最终将 Surface中的内容输出到本地窗口。

下图展示了 EGL 在视频渲染中的作用:

音视频直播技术--视频渲染之EGL

  • Display(EGLDisplay) 是对实际显示设备的抽象。
  • Surface(EGLSurface)是对用来存储图像的内存区域FrameBuffer的抽象,包括Color Buffer, Stencil Buffer ,Depth Buffer.
  • Context (EGLContext) 存储OpenGL ES绘图的一些状态信息及Shader数组数据。

使用 EGL 的步骤

可以把 EGL 看作是 OpenGL ES 与 本地窗口系统之间的胶水层。使用EGL需按如下步聚操作:

获取EGLDisplay对象

在EGL能够确定什么类型的会制Surface或底层系统的其它特性之前,需要先与系统窗口建立通信。EGL提供了一个类型EGLDisplay,它封装了所有操作本地窗口的API。使用EGL时,第一步操作就是创建并初始化与EGLDisplay的连接。下面是连接EGLDisplay的具体函数:

EGLDisplay eglGetDisplay(EGLNativeDisplayType display_id);

初始化与EGL之间的连接

EGL成功与EGLDisplay连接后,需要初始化EGL,调用eglInitialize函数完这成这个作务。函数如下:

EGLBoolean eglInitialize(
        EGLDisplay display,
        int[] major,
        int majorOffset,
        int[] minor,
        int minorOffset
);

eglInitialize函数初始化EGL的内部数据结构,如果EGL初始化失败,就会返回EGL_FALSE。

获取EGLConfig对象

EGL初始化完成后,我们就可以获取渲染Surfaces的类型和配置了。EGLConfig包括所有关于Surface的配置信息。这些信息包括可用颜色数,与配置相关的额外缓冲区(如深度和模板缓冲),Surface的类型和众多的其他特点。函数如下:

boolean eglChooseConfig(
        EGLDisplay display,
        int[] attrib_list,
        int attrib_listOffset,
        EGLConfig[] configs,
        int configsOffset,
        int config_size,
        int[] num_config,
        int num_configOffset
);

创建EGLContext实例

EGLContext结构内部包含OpenGL ES 2所有的状态及所需的操作。例如,它包含引用到顶点和片段着色器的数组数据。在OpenGL ES 2可以绘制之前,需要先创建好EGLContext。函数如下:

EGLContext eglCreateContext(
        EGLDisplay display,
        EGLConfig config,
        EGLContext share_context,
        int[] attrib_list,
        int offset
);

创建EGLSurface实例

创建完EGLConfig后,可根据EGLConfig创建EGLSurface。EGLSurface相当于一块画布(一块内存空间),用户想绘制的信息首先都要先绘制到EGLSurface上。

EGLSurface eglCreateWindowSurface(
        EGLDisplay dpy,
        EGLConfig config,
        Object win,
        int[] attrib_list,
        int offset
);

连接EGLContext和EGLSurface

通过上面的步骤,我们已经有了 EGLContext 和 EGLSurface 对象。下面我们需要将二者关联在一起,这样 EGL 就可以控制 OpenGL ES 从 EGLContext 读取 shader 数据,并向 EGLSurface 中绘制内容了。

boolean eglMakeCurrent(
        EGLDisplay dpy,
        EGLSurface draw,
        EGLSurface read,
        EGLContext ctx
);

使用GL指令绘制图形

EGL将EGLSurface中的内容通过 EGLDisplay 输出到本地窗口上。

boolean eglSwapBuffers(
        EGLDisplay dpy,
        EGLSurface surface
);

断开并释放与EGLSurface关联的EGLContext对象

使用 eglMakeCurrent 函数,将 EGLSurface 和 EGLContext 分别设置为 EGL14.EGL_NO_SURFACE 和 EGL14.EGL_NO_CONTEXT,这样就将两者的关系断开了。

eglMakeCurrent(
          mEGLDisplay,
          EGL14.EGL_NO_SURFACE, 
          EGL14.EGL_NO_SURFACE,
          EGL14.EGL_NO_CONTEXT
);

删除EGLSurface对象

boolean eglDestroySurface(
        EGLDisplay dpy,
        EGLSurface surface
);

删除EGLContext对象

boolean eglDestroyContext(
        EGLDisplay dpy,
        EGLContext ctx
);

终止与EGLDisplay之间的连接

boolean eglTerminate(
        EGLDisplay dpy
);

音视频直播技术--视频渲染之EGL