IOS硬编码

1. IOS硬编码步骤

编码步骤:
  • 创建编码器,调用接口 VTCompressionSessionCreate
  • 设置编码器属性:帧率、码率、GOP、分辨率、像素格式,调用接口 VTSessionSetProperty
  • 设置完属性准备编码,调用接口VTCompressionSessionPrepareToEncodeFrames
  • 编码,调用接口VTCompressionSessionEncodeFrame输入采集到的视频数据
  • 获取到编码后的数据并进行处理
  • 停止编码器,调用接口VTCompressionSessionCompleteFrames
  • 销毁编码器,调用接口VTCompressionSessionInvalidate

2. 关键接口说明

2.1 码率控制

  码率直接影响到图像的质量及大小,故码率的设置是至关重要的。H264有以下4种码率控制方法:
a. CBR(Constant Bit Rate)是以恒定比特率方式进行编码,有Motion发生时,由于码率恒定,只能通过增大QP来减少码字大小,图像质量变差,当场景静止时,图像质量又变好,因此图像质量不稳定。这种算法优先考虑码率(带宽)。

b. VBR(Variable Bit Rate)动态比特率,其码率可以随着图像的复杂程度的不同而变化,因此其编码效率比较高,Motion发生时,马赛克很少。码率控制算法根据图像内容确定使用的比特率,图像内容比较简单则分配较少的码率(似乎码字更合适),图像内容复杂则分配较多的码字,这样既保证了质量,又兼顾带宽限制。这种算法优先考虑图像质量。

c. CVBR(Constrained VariableBit Rate),这样翻译成中文就比较难听了,它是VBR的一种改进方法。但是Constrained又体现在什么地方呢?这种算法对应的Maximum bitRate恒定或者Average BitRate恒定。这种方法的兼顾了以上两种方法的优点:在图像内容静止时,节省带宽,有Motion发生时,利用前期节省的带宽来尽可能的提高图像质量,达到同时兼顾带宽和图像质量的目的。

d. ABR (Average Bit Rate) 在一定的时间范围内达到设定的码率,但是局部码率峰值可以超过设定的码率,平均码率恒定。可以作为VBR和CBR的一种折中选择

  VideoToolBox框架只支持ABR模式。设置平均码率是一个柔性的指标,实际输出码率允许在其上下浮动。kVTCompressionPropertyKey_DataRateLimits 用来设置硬性码率限制,别看这段代码很冗长,实际做的就是设置码率的硬性限制是每秒码率不超过平均码率的 1.5 倍,设置接口如下所示:

//设置平均码率,单位为bps,码率会上下浮动
VTStatus status = VTSessionSetProperty_int(_encoderSession,
                                               kVTCompressionPropertyKey_AverageBitRate,
                                               _bitrate * 1024 * 1.0);

int bytesLimit = _bitrate * 1024 * GopValue / 8;
int secondLimit = GopValue;
CFNumberRef n1 = CFNumberCreate(kCFAllocatorDefault, kCFNumberIntType, &bytesLimit);
CFNumberRef n2 = CFNumberCreate(kCFAllocatorDefault, kCFNumberIntType, &secondLimit);
const void *values[] = {n1, n2};
CFArrayRef dataRateLimits = CFArrayCreate(kCFAllocatorDefault,
                                              (const void**)&values,
                                              sizeof(values)/sizeof(values[0]),
                                              NULL);
status = VTSessionSetProperty(_encoderSession, kVTCompressionPropertyKey_DataRateLimits,                                        dataRateLimits);
    
CFRelease(dataRateLimits);
CFRelease(n1);
CFRelease(n2);

2.2 设置画质

a. BP(Baseline Profile):基本画质。
  支持I/P 帧,只支持无交错(Progressive)和CAVLC;主要应用:可视电话,会议电视,和无线通讯等实时视频通讯领域
b. EP(Extended profile):进阶画质。
  支持I/P/B/SP/SI 帧,只支持无交错(Progressive)和CAVLC;
c. 主流画质。
  提供I/P/B 帧,支持无交错(Progressive)和交错(Interlaced),也支持CAVLC 和CABAC 的支持;主要应用:数字广播电视和数字视频存储
d. 高级画质。
  在main Profile 的基础上增加了8×8内部预测、自定义量化、 无损视频编码和更多的YUV 格式;应用于广电和存储领域

//设置画质
status = VTSessionSetProperty(encoder->_encoderSession,
                                      kVTCompressionPropertyKey_ProfileLevel,
                                      kVTProfileLevel_H264_High_AutoLevel);

IOS 常用画质配置:
实时直播:
  低清Baseline Level 1.3
  标清Baseline Level 3
  半高清Baseline Level 3.1
  全高清Baseline Level 4.1
存储媒体:
  低清 Main Level 1.3
  标清 Main Level 3
  半高清 Main Level 3.1
  全高清 Main Level 4.1
高清存储:
  半高清 High Level 3.1
  全高清 High Level 4.1

2.3 配置I帧间隔,GOP

// 设置一个GOP多少帧
VTSessionSetProperty_int(encoder->_encoderSession,
                                          kVTCompressionPropertyKey_MaxKeyFrameInterval,
                                          frameRate * kGOPIntervalInSeconds);
//SetVTSessionProperty(_compressionSession,
                     kVTCompressionPropertyKey_MaxKeyFrameInterval, 180);
// 设置3s必须有一个关键帧
//SetVTSessionProperty(_compressionSession,
                     kVTCompressionPropertyKey_MaxKeyFrameIntervalDuration,
                     3);

2.4 配置工作模式

  设置编码器的工作模式是实时还是离线,实时会编得快些,延迟更低,但压缩效率会差一些,离线则编得慢些,延迟更大,但压缩效率会更高。本地录制视频文件可以使用离线模式,RTC 场景下为了降低延迟,则需要使用实时模式了。

VTSessionSetProperty(encoder->_encoderSession,
                             kVTCompressionPropertyKey_RealTime,
                             kCFBooleanTrue);

2.5 配置是否产生B帧

  High profile 支持 B 帧, 但是 B 帧会加大延迟。

VTSessionSetProperty(encoder->_encoderSession,
                             kVTCompressionPropertyKey_AllowFrameReordering,
                             kEnableBFrame ? kCFBooleanTrue : kCFBooleanFalse);
最后编辑于
©著作权归作者所有,转载或内容合作请联系作者
  • 序言:七十年代末,一起剥皮案震惊了整个滨河市,随后出现的几起案子,更是在滨河造成了极大的恐慌,老刑警刘岩,带你破解...
    沈念sama阅读 204,293评论 6 478
  • 序言:滨河连续发生了三起死亡事件,死亡现场离奇诡异,居然都是意外死亡,警方通过查阅死者的电脑和手机,发现死者居然都...
    沈念sama阅读 85,604评论 2 381
  • 文/潘晓璐 我一进店门,熙熙楼的掌柜王于贵愁眉苦脸地迎上来,“玉大人,你说我怎么就摊上这事。” “怎么了?”我有些...
    开封第一讲书人阅读 150,958评论 0 337
  • 文/不坏的土叔 我叫张陵,是天一观的道长。 经常有香客问我,道长,这世上最难降的妖魔是什么? 我笑而不...
    开封第一讲书人阅读 54,729评论 1 277
  • 正文 为了忘掉前任,我火速办了婚礼,结果婚礼上,老公的妹妹穿的比我还像新娘。我一直安慰自己,他们只是感情好,可当我...
    茶点故事阅读 63,719评论 5 366
  • 文/花漫 我一把揭开白布。 她就那样静静地躺着,像睡着了一般。 火红的嫁衣衬着肌肤如雪。 梳的纹丝不乱的头发上,一...
    开封第一讲书人阅读 48,630评论 1 281
  • 那天,我揣着相机与录音,去河边找鬼。 笑死,一个胖子当着我的面吹牛,可吹牛的内容都是我干的。 我是一名探鬼主播,决...
    沈念sama阅读 38,000评论 3 397
  • 文/苍兰香墨 我猛地睁开眼,长吁一口气:“原来是场噩梦啊……” “哼!你这毒妇竟也来了?” 一声冷哼从身侧响起,我...
    开封第一讲书人阅读 36,665评论 0 258
  • 序言:老挝万荣一对情侣失踪,失踪者是张志新(化名)和其女友刘颖,没想到半个月后,有当地人在树林里发现了一具尸体,经...
    沈念sama阅读 40,909评论 1 299
  • 正文 独居荒郊野岭守林人离奇死亡,尸身上长有42处带血的脓包…… 初始之章·张勋 以下内容为张勋视角 年9月15日...
    茶点故事阅读 35,646评论 2 321
  • 正文 我和宋清朗相恋三年,在试婚纱的时候发现自己被绿了。 大学时的朋友给我发了我未婚夫和他白月光在一起吃饭的照片。...
    茶点故事阅读 37,726评论 1 330
  • 序言:一个原本活蹦乱跳的男人离奇死亡,死状恐怖,灵堂内的尸体忽然破棺而出,到底是诈尸还是另有隐情,我是刑警宁泽,带...
    沈念sama阅读 33,400评论 4 321
  • 正文 年R本政府宣布,位于F岛的核电站,受9级特大地震影响,放射性物质发生泄漏。R本人自食恶果不足惜,却给世界环境...
    茶点故事阅读 38,986评论 3 307
  • 文/蒙蒙 一、第九天 我趴在偏房一处隐蔽的房顶上张望。 院中可真热闹,春花似锦、人声如沸。这庄子的主人今日做“春日...
    开封第一讲书人阅读 29,959评论 0 19
  • 文/苍兰香墨 我抬头看了看天上的太阳。三九已至,却和暖如春,着一层夹袄步出监牢的瞬间,已是汗流浃背。 一阵脚步声响...
    开封第一讲书人阅读 31,197评论 1 260
  • 我被黑心中介骗来泰国打工, 没想到刚下飞机就差点儿被人妖公主榨干…… 1. 我叫王不留,地道东北人。 一个月前我还...
    沈念sama阅读 44,996评论 2 349
  • 正文 我出身青楼,却偏偏与公主长得像,于是被迫代替她去往敌国和亲。 传闻我的和亲对象是个残疾皇子,可洞房花烛夜当晚...
    茶点故事阅读 42,481评论 2 342

推荐阅读更多精彩内容

  • 前言 系列文章:《iOS视频开发(一):视频采集》《iOS视频开发(二):视频H264硬编码》《iOS视频开发(三...
    GenoChen阅读 19,050评论 11 60
  • iOS硬编码实现 前言 在上一篇中,我们已经知道iOS编码的一些概念知识,从现在开始,我们可以正式对采集到的视频进...
    coderwhy阅读 5,430评论 4 8
  • 前言 这里我们重点介绍硬编码的使用方式,也就是VideoToolBox框架的使用 编码的流程:采集--> 获取到视...
    CoreCoder阅读 557评论 0 1
  • GOP(Group of picture) 关键帧的周期,也就是两个IDR帧之间的距离,一个帧组的最大帧数,一般而...
    Caiaolun阅读 4,753评论 0 3
  • FFmpeg X264编码参数 目录 码率控制 1 X264的preset和tune 2 编码延时建议...
    古则阅读 29,662评论 1 15