android渲染视频流（android渲染引擎）

本篇目录：

1、「Android渲染」图像是怎样显示到屏幕上的?
2、手机看视频时,是调用GPU的2D渲染还是3D渲染。
3、Android系统中的多媒体框架是怎么样的
4、为什么短视频应用在服务器端渲染那么慢?

「Android渲染」图像是怎样显示到屏幕上的?

当屏幕这一帧还没绘制完成时，即屏幕内容刚显示一半时，GPU 将新的一帧内容提交到帧缓冲区并把两个缓冲区进行交换后，显卡的像素同步模块就会把新的一帧数据的下半段显示到屏幕上，造成画面撕裂现象。

CPU负责计算需要渲染的数据，把计算好的数据交给GPU，GPU会对图形数据进行渲染，渲染好后放到buffer(图像缓冲区)里存起来，然后Display（屏幕或显示器）负责把buffer里的数据呈现到屏幕上。

所有情况下的绘图都渲染到一个包含 GraphicBuffer的Surface上，当一块 Surface 显示在屏幕上时，就是用户所看到的窗口。 Canvas：画布，2D图形API，Android View树实际的渲染者。

弊处：首先，图形处理从由CPU承担转移到GPU上，手机是保证运行流畅了，但耗能肯定会相应的提升，这就会造成你的手机续航时间将会缩短一些。

Android 系统的屏幕刷新频率为 60 fps，也就是每隔 16 ms 刷新一次。如果在某次绘制过程中，我们的操作不能在 16 ms 内完成，那它则不能赶上这次的绘制公交车，只能等下一轮。

Android 的显示过程可以简单概括为：应用程序把经过 measure(测量)、layout(布局)、draw(绘制)后的 surface 缓存数据，通过 SurfaceFlinger 把数据渲染到显示屏幕上，通过 Android 的刷新机制来刷新数据。

手机看视频时,是调用GPU的2D渲染还是3D渲染。

1、在应用程序中使用GPU进行2D绘图渲染，就是俗称的硬件加速，以前由CPU进行工作的选上这个就可以由GPU来渲染，当然会减轻CPU的压力，增加界面的流畅程度。当然也会各有利弊的，比如有一些程序是不兼容的，很容易闪退。

2、GPU是显示卡的“心脏，相当于CPU在电脑中的作用，它决定了显卡的档次和大部分性能，同时也是2D显示卡和3D显示卡的区别依据。2D显示芯片在处理3D图像和特效时主要依赖CPU的处理能力，称为“软加速”。

3、调整GPU渲染模式：GPU渲染模式可以提高应用程序的绘制速度和流畅度。可以在开发者选项中找到“GPU呈现模式”选项，并将其设置为“2D硬件加速”或“3D渲染”模式。

4、对于硬件支持Pixel Shader的显卡(即完全硬件支持DirectX 0或者以上级别的显卡)VMR9能获得更好的视频效果，并且，由于Pixel Shader是GPU操作(要选择“纹理表面并以3D模式渲染”，CPU占用率比VMR7低不少。

5、打开“强制进行GPU渲染”后，不支持GPU加速的软件也强制GPU渲染，这有可能会造成程序无响应、死机等兼容性问题。总之，强制gpu渲染会充分利用gpu，而不是游戏时才使用gpu，同时增加功耗，降低续航，不会影响手机使用寿命。

6、强制GPU渲染其实就是强行把高维度信息变成低维度信息，比如把3D场景变成2D的图片。GPU就是手机的图形处理器，强制通过GPU渲染的应用界面会更流畅，程序运行时会得到更好的优化。

Android系统中的多媒体框架是怎么样的

Android采用OpenCORE作为基础多媒体框架。OpenCORE可分7大块：PVPlayer、PVAuthor、Codec、PacketVideoMultimediaFramework(PVMF)、OperatingSystemLibrary(OSCL)、Common、OpenMAX。Android使用skia为核心图形引擎，搭配OpenGL/ES。

MediaPlayer：MediaPlayer是Android系统中最常用的多媒体播放器。它能够以流的方式处理多种音频和视频格式，如MPWAV等音频格式，以及MPH.264等视频格式。

框架。同时封装了android中的Bitmap与Http操作的框架，使其更加简单易用；的设计思想是通过封装Android原生SDK中复杂的复杂操作而达到简化Android应用级开发，最终实现快速而又安全的开发APP。

Android的多媒体框架包括支持播放多种常见的媒体类型，可以轻松地把音频、视频和图像集成到你的应用。可以播放音频或视频媒体文件，这些文件是存储在你的应用程序的资源文件中的。

包含一个C/C库的集合，供Android系统的各个组件使用。这些功能通过Android的应用程序框架（application framework）暴露给开发者。