一些基础知识
临时对象(创建和销毁是廉价的,它们的创建方法都返回 autoreleased对象):
- Command Buffers
- Command Encoders 代码中不需要持有。
高消耗对象(在性能相关的代码里应该尽量重用它,避免反复创建), 代码中需长期持有:
- Command Queues
- Buffers
- Textures
- Compute States
- Render Pipeline States。
视频图像格式
Planar: 平面;BiPlanar:双平面
平面/双平面主要应用在yuv上。uv分开存储的为Planar,反之是BiPlanar。
所以,kCVPixelFormatType_420YpCbCr8PlanarFullRange是420p,kCVPixelFormatType_420YpCbCr8BiPlanarFullRange是nv12。VideoRange和FullRange的区别在于数值的范围,FullRange比VideoRange大一些,颜色也更丰富一些。
常用视频像素格式NV12、NV2、I420、、Yv12、YUYV
BGRA: a single plane where the blue, green, red and alpha values are stored in a 32 bit integer each
420YpCbCr8BiPlanarFullRange: Two planes, the first containing a byte for each pixel with the Y (luma) value, the second containing the Cb and Cr (chroma) values for groups of pixels
420YpCbCr8BiPlanarVideoRange: The same as 420YpCbCr8BiPlanarFullRange but the Y values are restricted to the range 16 – 235 (for historical reasons)FullRange和VideoRange的唯一区别是VideoRange的Y的范围是16 – 235。
学习资料
此博主还有很多其他系列文章值得学习,感谢:
Metal框架详细解析(一)—— 基本概览
Metal框架详细解析(二) —— 器件和命令(一)
Metal框架详细解析(三) —— 渲染简单的2D三角形(一)
Metal框架详细解析(四) —— 关于GPU Family 4(一)
Metal框架详细解析(五) —— 关于GPU Family 4之关于Imageblocks(二)
Metal框架详细解析(六) —— 关于GPU Family 4之关于Tile Shading(三)
Metal框架详细解析(七) —— 关于GPU Family 4之关于光栅顺序组(四)
Metal框架详细解析(八) —— 关于GPU Family 4之关于增强的MSAA和Imageblock采样覆盖控制(五)
Metal框架详细解析(九) —— 关于GPU Family 4之关于线程组共享(六)
Metal框架详细解析(九) —— 关于GPU Family 4之关于线程组共享(六)
Metal框架详细解析(十一) —— 基本组件之器件选择 - 图形渲染的器件选择(二)
Metal框架详细解析(十二) —— 基本组件之器件选择 - 计算处理的设备选择(三)
Metal框架详细解析(十三) —— 计算处理(一)
Metal框架详细解析(十四) —— 计算处理之你好,计算(二)
Metal框架详细解析(十五) —— 计算处理之关于线程和线程组(三)
Metal框架详细解析(十六) —— 计算处理之计算线程组和网格大小(四)
Metal框架详细解析(十七) —— 工具、分析和调试(
Metal框架详细解析(十八) —— 工具、分析和调试之Metal GPU Capture(二)
Metal框架详细解析(十九) —— 工具、分析和调试之GPU活动监视器(三)
Metal框架详细解析(二十) —— 工具、分析和调试之关于Metal着色语言文件名扩展名、使用Metal的命令行工具构建库和标记Metal对象和命令(四)
Metal框架详细解析(二十一) —— 基本课程之基本缓冲区(一)
Metal框架详细解析(二十二) —— 基本课程之基本纹理(二)
Metal框架详细解析(二十三) —— 基本课程之CPU和GPU同步(三)
Metal框架详细解析(二十四) —— 基本课程之参数缓冲 - 基本参数缓冲(四)
Metal框架详细解析(二十五) —— 基本课程之参数缓冲 - 带有数组和资源堆的参数缓冲区(五)
Metal框架详细解析(二十六) —— 基本课程之参数缓冲 - 具有GPU编码的参数缓冲区(六)
Metal框架详细解析(二十七) —— 高级技术之图层选择的反射(一)
Metal框架详细解析(二十八) —— 高级技术之使用专用函数的LOD(一)
Metal框架详细解析(二十九) —— 高级技术之具有参数缓冲区的动态地形(一)
Metal框架详细解析(三十) —— 延迟照明(一)
Metal框架详细解析(三十一) —— 在视图中混合Metal和OpenGL渲染(一)
Metal框架详细解析(三十二) —— Metal渲染管道教程(一)
Metal框架详细解析(三十三) —— Metal渲染管道教程(二)
Metal框架详细解析(三十四) —— Hello Metal! 一个简单的三角形的实现(一)
Metal框架详细解析(三十五) —— Hello Metal! 一个简单的三角形的实现(二)
Metal框架详细解析(三十六) —— Metal编程指南之概览(一)
Metal框架详细解析(三十七) —— Metal编程指南之基本Metal概念(二)
Metal框架详细解析(三十八) —— Metal编程指南之命令组织和执行模型(三)
Metal框架详细解析(三十九) —— Metal编程指南之资源对象:缓冲区和纹理(四)
Metal框架详细解析(四十) —— Metal编程指南之函数和库(五)
Metal框架详细解析(四十一) —— Metal编程指南之图形渲染:渲染命令编码器之Part 1(六)
Metal框架详细解析(四十二) —— Metal编程指南之图形渲染:渲染命令编码器之Part 2(七)
Metal框架详细解析(四十三) —— Metal编程指南之数据并行计算处理:计算命令编码器(八)
Metal框架详细解析(四十四) —— Metal编程指南之缓冲和纹理操作:Blit命令编码器(九)
Metal框架详细解析(四十五) —— Metal编程指南之Metal工具(十)
Metal框架详细解析(四十六) —— Metal编程指南之Tessellation(十一)
Metal框架详细解析(四十七) —— Metal编程指南之资源堆(十二)
Metal框架详细解析(四十八) —— 将项目从OpenGL转化到Metal(一)
Metal框架详细解析(四十九) —— 将项目从OpenGL转化到Metal(二)
Metal框架详细解析(五十) —— 将项目从OpenGL转化到Metal(三)
视频处理相关(一) —— 视频深度相关处理简单示例(一)
视频处理相关(二) —— 基于AVFoundation的视频拼接处理(一)
Metal Performance Shaders框架详细解析(一)—— 基本概览
Metal 系列教程(1)- Metal 介绍及基本使用
Metal 系列教程(2)- Metal 实现 LUT 滤镜
Metal 系列教程(3)- 性能优化点
Metal入门教程(一)图片绘制
Metal入门教程(二)三维变换
Metal入门教程(三)摄像头采集渲染
Metal入门教程(四)灰度计算
Metal入门教程(五)视频渲染
Metal入门教程(六)边界检测
Metal入门教程(七)天空盒全景
Metal入门教程(八)Metal与OpenGL ES交互
Metal入门教程总结
【Metal引擎剖析(一):MTLRenderPassDescriptor和MTLVertexDescriptor】
【Metal引擎剖析(二):传统延迟渲染和TBDR】
【Metal引擎剖析(三):OIT顺序无关透明渲染Imageblo
【Metal引擎剖析(四):基于MPS的GPU加速光线追踪(Accelerating Ray Tracing)】
【Metal引擎剖析(五):Forward+ with Tile Shading】
Metal2新特性:光栅顺序组(ROG,Raster Order Groups)