视频编解码六:FFmpeg音频解码

FFmpeg音频解码流程

AAC视频格式解码为PCM编码格式
iOS/Android编解码Demo代码有详细注释自行阅读

#include <jni.h>
#include <string>
#include "android/log.h"
extern "C"
{

//核心库
#include "libavcodec/avcodec.h"
//封装格式处理库
#include "libavformat/avformat.h"
//工具库
#include "libavutil/imgutils.h"
//音频采样数据格式库
#include "libswresample/swresample.h"

JNIEXPORT void JNICALL
Java_yochi_com_yochi_1ffmpeg_1audiodecoding_MainActivity_ffmpegAudioDecode(
        JNIEnv *env,jobject jobj,jstring jinFilePath, jstring joutFilePath);
}

JNIEXPORT void JNICALL
Java_yochi_com_yochi_1ffmpeg_1audiodecoding_MainActivity_ffmpegAudioDecode(
        JNIEnv *env,jobject jobj,jstring jinFilePath, jstring joutFilePath)
{
    /**第一步:组册组件*/
    av_register_all();

    /** 第二步:打开封装格式->打开文件 */
    //作用:保存整个视频信息(解码器、编码器等等...)
    //信息:码率、帧率等...
    AVFormatContext* avformat_context = avformat_alloc_context();

    const char *url = env->GetStringUTFChars(jinFilePath, NULL);

    int avformat_open_input_result = avformat_open_input(&avformat_context, url, NULL, NULL);

    if (avformat_open_input_result != 0){

        __android_log_print(ANDROID_LOG_INFO, "main", "打开文件失败");
        return;
    }

    __android_log_print(ANDROID_LOG_INFO, "main", "打开文件成功");

    /** 第三步:拿到视频基本信息 */
    int avformat_find_stream_info_result = avformat_find_stream_info(avformat_context, NULL);
    if (avformat_find_stream_info_result < 0){
        __android_log_print(ANDROID_LOG_INFO, "main", "查找失败");
        return;
    }

    /** 第四步查找音频解码器 */
    //第一点:查找音频流索引位置
    int av_stream_index = -1;
    for (int i = 0; i < avformat_context->nb_streams; ++i) {
        //判断是否是音频流
        if (avformat_context->streams[i]->codec->codec_type == AVMEDIA_TYPE_AUDIO){
            //AVMEDIA_TYPE_AUDIO->表示音频类型
            av_stream_index = i;
            break;
        }
    }
    //第二点:获取音频解码器上下文
    AVCodecContext * avcodec_context = avformat_context->streams[av_stream_index]->codec;

    //第三点:获得音频解码器
    AVCodec *avcodec = avcodec_find_decoder(avcodec_context->codec_id);
    if (avcodec == NULL){
        __android_log_print(ANDROID_LOG_INFO, "main", "查找音频解码器失败");
        return;
    }

    /**第五步:打开音频解码器*/
    int avcodec_open2_result = avcodec_open2(avcodec_context, avcodec, NULL);
    if (avcodec_open2_result != 0){
        __android_log_print(ANDROID_LOG_INFO, "main", "打开音频解码器失败");
        return;
    }

    /**第六步:读取音频压缩数据->循环读取*/

    //创建音频压缩数据帧->acc格式、mp3格式
    AVPacket* avpacket = (AVPacket*)av_malloc(sizeof(AVPacket));

    //创建音频采样数据帧
    AVFrame* avframe = av_frame_alloc();

    // 确保解码为pcm我们需要转换为pcm格式
    SwrContext* swr_context = swr_alloc();

    /**输出*/
    //立体声 输出声道布局类型(立体声、环绕声、机器人等等...)
    int64_t out_ch_layout = AV_CH_LAYOUT_STEREO;

    //输出采样精度->编码 例如:采样精度8位 = 1字节,采样精度16位 = 2字节
    //int out_sample_fmt = AV_SAMPLE_FMT_S16;
    AVSampleFormat out_sample_fmt = AV_SAMPLE_FMT_S16;//avcodec_context->sample_fmt;

    //输出采样率(44100HZ)
    int out_sample_rate = avcodec_context->sample_rate;

    /**输入*/
    //输入声道布局类型
    int64_t in_ch_layout = av_get_default_channel_layout(avcodec_context->channels);

    //输入采样精度
    AVSampleFormat in_sample_fmt = avcodec_context->sample_fmt;

    //输入采样率
    int in_sample_rate = avcodec_context->sample_rate;

    //log日志->从那里开始统计
    int log_offset = 0;

    //音频采样上下文->开辟了一块内存空间->pcm、MP3格式等...
    swr_alloc_set_opts(swr_context,
                       out_ch_layout,
                       out_sample_fmt,
                       out_sample_rate,
                       in_ch_layout,
                       in_sample_fmt,
                       in_sample_rate,
                       log_offset, NULL);

    //初始化音频采样数据上下文
    swr_init(swr_context);

    //缓冲区大小 = 采样率(44100HZ) * 采样精度(16位 = 2字节)
    int MAX_AUDIO_SIZE = 44100 * 2;
    uint8_t *out_buffer = (uint8_t *)av_malloc(MAX_AUDIO_SIZE);

    //输出声道数量 上面设置为立体声
    int out_nb_channels = av_get_channel_layout_nb_channels(out_ch_layout);

    int audio_decode_result = 0;

    //打开文件
    const char *coutFilePath = env->GetStringUTFChars(joutFilePath, NULL);
    FILE* out_file_pcm = fopen(coutFilePath, "wb");
    if (out_file_pcm == NULL){
        __android_log_print(ANDROID_LOG_INFO, "main", "打开音频输出文件失败");
        return;
    }

    int current_index = 0;

    //计算:4分钟一首歌曲 = 240ms = 4MB
    //现在音频时间:24ms->pcm格式->8.48MB
    //如果是一首4分钟歌曲->pcm格式->85MB

    // 循环读取一份音频压缩数据
    while (av_read_frame(avformat_context,avpacket) >=0) {

        //判定是否是音频流
        if (avpacket->stream_index==av_stream_index) {

            /** 第七步音频解码 */
            //1、发送一帧音频压缩数据包->音频压缩数据帧
            avcodec_send_packet(avcodec_context, avpacket);
            //2、解码一帧音频压缩数据包->得到->一帧音频采样数据->音频采样数据帧
            audio_decode_result = avcodec_receive_frame(avcodec_context, avframe);

            // 解码成功
            if (audio_decode_result == 0) {

                //3、类型转换(音频采样数据格式有很多种类型)
                //我希望我们的音频采样数据格式->pcm格式->保证格式统一->输出PCM格式文件
                //swr_convert:表示音频采样数据类型格式转换器
                //参数一:音频采样数据上下文
                //参数二:输出音频采样数据
                //参数三:输出音频采样数据->大小
                //参数四:输入音频采样数据
                //参数五:输入音频采样数据->大小
                swr_convert(swr_context,
                            &out_buffer,
                            MAX_AUDIO_SIZE,
                            (const uint8_t **)avframe->data,
                            avframe->nb_samples);

                //4、获取缓冲区实际存储大小
                //参数一:行大小
                //参数二:输出声道数量
                //参数三:输入大小
                int nb_samples = avframe->nb_samples;
                //参数四:输出音频采样数据格式
                //参数五:字节对齐方式
                int out_buffer_size = av_samples_get_buffer_size(NULL,
                                                                 out_nb_channels,
                                                                 nb_samples,
                                                                 out_sample_fmt,
                                                                 1);

                //5、写入文件(你知道要写多少吗?)
                fwrite(out_buffer, 1, out_buffer_size, out_file_pcm);
                current_index++;
                __android_log_print(ANDROID_LOG_INFO, "main", "当前音频解码第%d帧", current_index);
            }
        }
    }

    __android_log_print(ANDROID_LOG_INFO, "main", "解码完成");

    /** 第八步:释放内存资源,关闭音频解码器 */
    fclose(out_file_pcm);

    av_packet_free(&avpacket);

    swr_free(&swr_context);

    av_free(out_buffer);

    av_frame_free(&avframe);

    avcodec_close(avcodec_context);

    avformat_close_input(&avformat_context);
}
最后编辑于
©著作权归作者所有,转载或内容合作请联系作者
  • 序言:七十年代末,一起剥皮案震惊了整个滨河市,随后出现的几起案子,更是在滨河造成了极大的恐慌,老刑警刘岩,带你破解...
    沈念sama阅读 204,684评论 6 478
  • 序言:滨河连续发生了三起死亡事件,死亡现场离奇诡异,居然都是意外死亡,警方通过查阅死者的电脑和手机,发现死者居然都...
    沈念sama阅读 87,143评论 2 381
  • 文/潘晓璐 我一进店门,熙熙楼的掌柜王于贵愁眉苦脸地迎上来,“玉大人,你说我怎么就摊上这事。” “怎么了?”我有些...
    开封第一讲书人阅读 151,214评论 0 337
  • 文/不坏的土叔 我叫张陵,是天一观的道长。 经常有香客问我,道长,这世上最难降的妖魔是什么? 我笑而不...
    开封第一讲书人阅读 54,788评论 1 277
  • 正文 为了忘掉前任,我火速办了婚礼,结果婚礼上,老公的妹妹穿的比我还像新娘。我一直安慰自己,他们只是感情好,可当我...
    茶点故事阅读 63,796评论 5 368
  • 文/花漫 我一把揭开白布。 她就那样静静地躺着,像睡着了一般。 火红的嫁衣衬着肌肤如雪。 梳的纹丝不乱的头发上,一...
    开封第一讲书人阅读 48,665评论 1 281
  • 那天,我揣着相机与录音,去河边找鬼。 笑死,一个胖子当着我的面吹牛,可吹牛的内容都是我干的。 我是一名探鬼主播,决...
    沈念sama阅读 38,027评论 3 399
  • 文/苍兰香墨 我猛地睁开眼,长吁一口气:“原来是场噩梦啊……” “哼!你这毒妇竟也来了?” 一声冷哼从身侧响起,我...
    开封第一讲书人阅读 36,679评论 0 258
  • 序言:老挝万荣一对情侣失踪,失踪者是张志新(化名)和其女友刘颖,没想到半个月后,有当地人在树林里发现了一具尸体,经...
    沈念sama阅读 41,346评论 1 299
  • 正文 独居荒郊野岭守林人离奇死亡,尸身上长有42处带血的脓包…… 初始之章·张勋 以下内容为张勋视角 年9月15日...
    茶点故事阅读 35,664评论 2 321
  • 正文 我和宋清朗相恋三年,在试婚纱的时候发现自己被绿了。 大学时的朋友给我发了我未婚夫和他白月光在一起吃饭的照片。...
    茶点故事阅读 37,766评论 1 331
  • 序言:一个原本活蹦乱跳的男人离奇死亡,死状恐怖,灵堂内的尸体忽然破棺而出,到底是诈尸还是另有隐情,我是刑警宁泽,带...
    沈念sama阅读 33,412评论 4 321
  • 正文 年R本政府宣布,位于F岛的核电站,受9级特大地震影响,放射性物质发生泄漏。R本人自食恶果不足惜,却给世界环境...
    茶点故事阅读 39,015评论 3 307
  • 文/蒙蒙 一、第九天 我趴在偏房一处隐蔽的房顶上张望。 院中可真热闹,春花似锦、人声如沸。这庄子的主人今日做“春日...
    开封第一讲书人阅读 29,974评论 0 19
  • 文/苍兰香墨 我抬头看了看天上的太阳。三九已至,却和暖如春,着一层夹袄步出监牢的瞬间,已是汗流浃背。 一阵脚步声响...
    开封第一讲书人阅读 31,203评论 1 260
  • 我被黑心中介骗来泰国打工, 没想到刚下飞机就差点儿被人妖公主榨干…… 1. 我叫王不留,地道东北人。 一个月前我还...
    沈念sama阅读 45,073评论 2 350
  • 正文 我出身青楼,却偏偏与公主长得像,于是被迫代替她去往敌国和亲。 传闻我的和亲对象是个残疾皇子,可洞房花烛夜当晚...
    茶点故事阅读 42,501评论 2 343

推荐阅读更多精彩内容

  • Android 自定义View的各种姿势1 Activity的显示之ViewRootImpl详解 Activity...
    passiontim阅读 171,443评论 25 707
  • 音频编码流程pcm->aac FFmpeg默认不包含aac音频编码器库,需要自行下载 acc音频编码器库:fdka...
    Yochi阅读 1,357评论 0 0
  • 我们知道AndroidApI提供了MediaRecorder和AudioRecord两个类给开发者来很方便地实现音...
    IT小魔女的故事阅读 2,816评论 0 2
  • 过去的已然走远 现在的悄悄来临 一场风雨洗刷了我的过往 也把我引向明天 阳光灿烂,岁月静好 从要看到久违的鸟鸣
    风雪长阅读 192评论 0 2
  • 任何一个技能的学习,都有从浅到深的过程,数据分析也不例外。一个完整的数据分析知识体系类似金字塔结构:最顶层是对数据...
    Taniawow阅读 535评论 0 2