FFmpeg 视频解码过程

1.获得ffmpeg 总上下文,打开媒体注意:配置权限,授权文件读写权限

    AVFormatContext *avFormatContext = avformat_alloc_context();
    AVDictionary *opts = NULL;
    av_dict_set(&opts, "timeout", "3000000", 0);
    int ret = avformat_open_input(&avFormatContext, path_, NULL, &opts);
    if (ret) {
        // 配置权限,授权文件读写权限
        LOGE("打开媒体失败:%s", av_err2str(ret));
        return;
    }
  1. 查找媒体中的流信息
    ret = avformat_find_stream_info(avFormatContext, 0);
    if (ret < 0) {
        LOGE("查找媒体中的流信息失败:%s", av_err2str(ret));
        //TODO 通过反射通知java
        return;
    }

avFormatContext->nb_streams 文件流中存在多个流,视频流或音频流

        //3获取媒体流(音频或视频)
        AVStream *stream = avFormatContext->streams[i];
        //4获取编解码这段流的参数
        AVCodecParameters *codecParameters = stream->codecpar;
        //5 通过参数中的id(编解码的方式),来查找当前流的解码器
        AVCodec *codec = avcodec_find_decoder(codecParameters->codec_id);
        if (!codec) {
            LOGE("查找当前流的解码器失败");
            //TODO 反射通知java
            return;
        }
        //6 创建解码器上下文
        AVCodecContext *codecContext = avcodec_alloc_context3(codec);
        //7 设置解码器上下文的参数
        ret = avcodec_parameters_to_context(codecContext, codecParameters);
        if (ret < 0) {
            //TODO 反射通知java
            LOGE("设置解码器上下文的参数失败:%s", av_err2str(ret));
            return;
        }
        //8 打开解码器
        ret = avcodec_open2(codecContext, codec, 0);
        if (ret) {
            //TODO 反射通知java
            LOGE("打开解码器失败:%s", av_err2str(ret));
            return;
        }

判断视频流或音频流做相应处理

  //判断流类型(音频还是视频?)
 if (codecParameters->codec_type == AVMEDIA_TYPE_AUDIO) {
    //音频
     LOGE("音频流");
 } else if (codecParameters->codec_type == AVMEDIA_TYPE_VIDEO) {
    LOGE("视频流");
    videoDecode(aNativeWindow, avFormatContext, ret, video_stream_idx, i, codecContext);
 }

视频解码

void
videoDecode(ANativeWindow *aNativeWindow, AVFormatContext *avFormatContext, int ret,
            int video_stream_idx, int i, AVCodecContext *&codecContext) {
    video_stream_idx = i;
    //视频
    AVPacket *packet = av_packet_alloc();
    // 重视速度:fast_bilinear,point
//重视质量cubic,spline,lanczos
//缩写:
//重视速度:fast_bilinear,point
//重视质量gauss,bilinear
//重视锐度cubic,spline,lanczos
    SwsContext *swsContext = sws_getContext(codecContext->width, codecContext->height,
                                            codecContext->pix_fmt,
                                            codecContext->width, codecContext->height,
                                            AV_PIX_FMT_RGBA, SWS_BILINEAR, 0, 0, 0);
    ANativeWindow_setBuffersGeometry(aNativeWindow, codecContext->width,
                                     codecContext->height,
                                     WINDOW_FORMAT_RGBA_8888);
    ANativeWindow_Buffer outBuffer;

    //从视频流中读取数据包
    while (av_read_frame(avFormatContext, packet) == 0) {
        if (packet->stream_index == video_stream_idx) {
            //拿到了视频数据包(编码压缩了的),需要把数据包给解码器进行解码
            ret = avcodec_send_packet(codecContext, packet);
            if (ret) {
                LOGE("avcodec_send_packet %d", ret);
                break;
            }

            AVFrame *frame = av_frame_alloc();
            int ret = avcodec_receive_frame(codecContext, frame);
            LOGE("receive %d", ret);

            if (ret == AVERROR(EAGAIN)) {
                continue;
            } else if (ret < 0) {
                break;
            }
            //接收的容器
            uint8_t *dst_data[4];
            //每一行的地址
            int dst_linesize[4];
            av_image_alloc(dst_data, dst_linesize, codecContext->width,
                           codecContext->height,
                           AV_PIX_FMT_RGBA, 1);
            sws_scale(swsContext, frame->data, frame->linesize, 0, frame->height, dst_data,
                      dst_linesize);
            //AVFrame yum -->image-->dst_data-->渲染surfaceView
            //锁定window
            ANativeWindow_lock(aNativeWindow, &outBuffer, 0);
            //渲染
            uint8_t *firstWindow = static_cast<uint8_t *>(outBuffer.bits);
            //输入源(rgb)
            uint8_t *src_data = dst_data[0];
            //拿一行有多少字节RGBA
            int destStride = outBuffer.stride * 4;
            int src_linesize = dst_linesize[0];
            for (int i = 0; i < outBuffer.height; ++i) {
                //内存拷贝
                memcpy(firstWindow + i * destStride, src_data + i * src_linesize,
                       destStride);
            }
            //window解锁
            ANativeWindow_unlockAndPost(aNativeWindow);
            usleep(1000 * 16);
            av_frame_free(&frame);
        }
    }
    av_packet_free(&packet);
    avcodec_free_context(&codecContext);
    //内存释放
    ANativeWindow_release(aNativeWindow);
}
©著作权归作者所有,转载或内容合作请联系作者
  • 序言:七十年代末,一起剥皮案震惊了整个滨河市,随后出现的几起案子,更是在滨河造成了极大的恐慌,老刑警刘岩,带你破解...
    沈念sama阅读 199,064评论 5 466
  • 序言:滨河连续发生了三起死亡事件,死亡现场离奇诡异,居然都是意外死亡,警方通过查阅死者的电脑和手机,发现死者居然都...
    沈念sama阅读 83,606评论 2 376
  • 文/潘晓璐 我一进店门,熙熙楼的掌柜王于贵愁眉苦脸地迎上来,“玉大人,你说我怎么就摊上这事。” “怎么了?”我有些...
    开封第一讲书人阅读 146,011评论 0 328
  • 文/不坏的土叔 我叫张陵,是天一观的道长。 经常有香客问我,道长,这世上最难降的妖魔是什么? 我笑而不...
    开封第一讲书人阅读 53,550评论 1 269
  • 正文 为了忘掉前任,我火速办了婚礼,结果婚礼上,老公的妹妹穿的比我还像新娘。我一直安慰自己,他们只是感情好,可当我...
    茶点故事阅读 62,465评论 5 359
  • 文/花漫 我一把揭开白布。 她就那样静静地躺着,像睡着了一般。 火红的嫁衣衬着肌肤如雪。 梳的纹丝不乱的头发上,一...
    开封第一讲书人阅读 47,919评论 1 275
  • 那天,我揣着相机与录音,去河边找鬼。 笑死,一个胖子当着我的面吹牛,可吹牛的内容都是我干的。 我是一名探鬼主播,决...
    沈念sama阅读 37,428评论 3 390
  • 文/苍兰香墨 我猛地睁开眼,长吁一口气:“原来是场噩梦啊……” “哼!你这毒妇竟也来了?” 一声冷哼从身侧响起,我...
    开封第一讲书人阅读 36,075评论 0 254
  • 序言:老挝万荣一对情侣失踪,失踪者是张志新(化名)和其女友刘颖,没想到半个月后,有当地人在树林里发现了一具尸体,经...
    沈念sama阅读 40,208评论 1 294
  • 正文 独居荒郊野岭守林人离奇死亡,尸身上长有42处带血的脓包…… 初始之章·张勋 以下内容为张勋视角 年9月15日...
    茶点故事阅读 35,185评论 2 317
  • 正文 我和宋清朗相恋三年,在试婚纱的时候发现自己被绿了。 大学时的朋友给我发了我未婚夫和他白月光在一起吃饭的照片。...
    茶点故事阅读 37,191评论 1 328
  • 序言:一个原本活蹦乱跳的男人离奇死亡,死状恐怖,灵堂内的尸体忽然破棺而出,到底是诈尸还是另有隐情,我是刑警宁泽,带...
    沈念sama阅读 32,914评论 3 316
  • 正文 年R本政府宣布,位于F岛的核电站,受9级特大地震影响,放射性物质发生泄漏。R本人自食恶果不足惜,却给世界环境...
    茶点故事阅读 38,482评论 3 302
  • 文/蒙蒙 一、第九天 我趴在偏房一处隐蔽的房顶上张望。 院中可真热闹,春花似锦、人声如沸。这庄子的主人今日做“春日...
    开封第一讲书人阅读 29,585评论 0 19
  • 文/苍兰香墨 我抬头看了看天上的太阳。三九已至,却和暖如春,着一层夹袄步出监牢的瞬间,已是汗流浃背。 一阵脚步声响...
    开封第一讲书人阅读 30,825评论 1 255
  • 我被黑心中介骗来泰国打工, 没想到刚下飞机就差点儿被人妖公主榨干…… 1. 我叫王不留,地道东北人。 一个月前我还...
    沈念sama阅读 42,194评论 2 344
  • 正文 我出身青楼,却偏偏与公主长得像,于是被迫代替她去往敌国和亲。 传闻我的和亲对象是个残疾皇子,可洞房花烛夜当晚...
    茶点故事阅读 41,703评论 2 339

推荐阅读更多精彩内容