您当前的位置： 首页 > 学无止境 > 心得笔记 网站首页心得笔记

12. av_read_frame和av_seek_frame代码示例并分析内存占用和清理情况~1

发布时间：2021-05-31 18:11:39编辑：雪饮阅读（）

 接著上篇完成了獲取音視頻流索引之後，這次來瞭解下幀數據的讀寫以及快進操作。

幀數據讀取首先必須要有av_packet_alloc來開闢一個結構體大小的内存，然後通過av_read_frame每次填充一個av_packet_alloc產生的結構體内存。

那麽具體的實現如：cpp/native-lib.cpp:

#include <jni.h>
 #include <string>
 #include <android/log.h>
 #define LOGW(...) __android_log_print(ANDROID_LOG_WARN,"testff",__VA_ARGS__)
 extern "C"{
     #include <libavcodec/avcodec.h>
     #include <libavformat/avformat.h>
 }
 static double r2d(AVRational r){
     return r.num==0 | r.den==0 ? 0:(double) r.num/(double)r.den;
 }
 extern "C" JNIEXPORT jstring JNICALL
 Java_com_example_ndk_1and_141_MainActivity_stringFromJNI(JNIEnv* env,jobject) {
     std::string hello = "Hello from C++";
     hello+=avcodec_configuration();
     //初始化解封裝
     av_register_all();
     //初始化網絡
     avformat_network_init();
     AVFormatContext *ic=NULL;
     //要取一些信息，mp4格式取的比較多
     char path[]="/sdcard/1080.mp4";
     int re=avformat_open_input(&ic,path,0,0);
     if(re!=0){
         LOGW("avformat_open_input failed!:%s",av_err2str(re));
         return env->NewStringUTF(hello.c_str());
     }
     /*
      這裏需要漲點教訓，原來這裏是LOGW("avformat_open_input %s success!");
      也就是多帶了一個%s，很明顯這裏語法在c中是有問題的，可是編譯過程時候沒有報錯。
      日志貓中報錯信息讓我一度懷疑自己的arm64位動態鏈接庫編譯錯了呢。。。
       */
     LOGW("avformat_open_input success!");
     /*
      duration方法：
       mp4格式可以直接獲取到時長
      返回類型是int64_t:
          int64_t 是标准C ++类型，用于完全64位的有符号整数。 int64 不是标准类型。
         第一个C ++标准没有固定宽度类型。在将 int64_t 添加到标准C ++之前，不同的编译器都实现了64位类型，但它们使用了自己的名称（例如 long long < / code>， __ int64 等。）
     那麽因爲long long < / code>，所以這裏int64_t的輸出就是l ld了
      */
     //對於flv來説，要先探測獲取下流信息,若不先探測，則獲取的場地可能就是如：-9223372036854775808一樣的負數
     re=avformat_find_stream_info(ic,0);
     if(re!=0){
         LOGW("avformat_find_stream_info failed!");
     }
     //這裏格式化int64_t的時候千萬記住不是%lld而是%l ld
     LOGW("duration=%l ld nb_streams=%d",ic->duration,ic->nb_streams);
     int fps = 0;
     int videoStream = 0;
     int audioStream = 1;
     /*
      遍历获取AVStream音视频流信息并打印参数
      */
     for(int i = 0; i < ic->nb_streams; i++)
     {
         AVStream *as = ic->streams[i];
         if(as->codecpar->codec_type == AVMEDIA_TYPE_VIDEO)
         {
             LOGW("视频数据");
             videoStream = i;
             //avg_frame_rate：幀率，一個分數，就是fps的分數表示法，分數表示可以有效保護精度損失
             fps = r2d(as->avg_frame_rate);
             /*
              codecpar->width,codecpar->height:视频的宽高，只有视频有
              codecpar->codec_id: 獲取解碼器的id號
              codecpar->format：格式。对于视频来说指的就是像素格式(YUV420,YUV422...)，对于音频来说，指的就是音频的采样格式。
               */
             LOGW("fps = %d,width=%d height=%d codeid=%d pixformat=%d",fps,
                  as->codecpar->width,
                  as->codecpar->height,
                  as->codecpar->codec_id,
                  as->codecpar->format
             );
         }
         else if(as->codecpar->codec_type ==AVMEDIA_TYPE_AUDIO )
         {
             LOGW("音频数据");
             audioStream = i;
             /*
              codecpar->sample_rate：樣本率
              codecpar->channels：声道数
              codecpar->format：格式。对于视频来说指的就是像素格式(YUV420,YUV422...)，对于音频来说，指的就是音频的采样格式。
               */
             LOGW("sample_rate=%d channels=%d sample_format=%d",
                  as->codecpar->sample_rate,
                  as->codecpar->channels,
                  as->codecpar->format
             );
         }
     }
     /*
      獲取音頻流信息
      第一個參數：AVStream的實例
      第二個參數type：音頻或視頻流類型
      第三個參數wanted_stream_nb是指定索引，這裏沒有必要，所以就為-1
      第四個參數related_stream,同一節目組的相關流信息,這裏也沒有節目組,所以也就設置為-1
      第五個參數decoder_ret 這個參數的作用我們要單獨做
      第五個參數flags 目前還沒有用
      */
     audioStream=av_find_best_stream(ic,AVMEDIA_TYPE_AUDIO,-1,-1,NULL,0);
     LOGW("av_find_best_stream audioStream=%d",audioStream);
     /*
      讀取幀數據
     av_packet_alloc():分配一个结构体大小的内存
     av_read_frame():获取视频的一帧，不存在半帧说法。但可以获取音频的若干帧。
     av_seek_frame():
      函數原型：
      int av_seek_frame(AVFormatContext *s, int stream_index, int64_t timestamp,int flags);
      参数说明：
             s：操作上下文；
             stream_index：基本流索引，表示当前的seek是针对哪个基本流，比如视频或者音频等等。
             timestamp：要seek的时间点，以time_base或者AV_TIME_BASE为单位。單位毫秒。
             Flags：seek标志，可以设置为按字节，在按时间seek时取该点之前还是之后的关键帧，以及不按关键帧seek等
      */
     AVPacket *pkt=av_packet_alloc();
     for(;;){
         int re=av_read_frame(ic,pkt);
         if(re!=0){
             LOGW("讀取到結尾処!");
 
             /*
              這裏跳轉到第20秒処
              AVSEEK_FLAG_BACKWARD表示所跳的時間點如果沒有幀则向前找第一个:若你设置seek时间为1秒，但是只有0秒和2秒上才有I帧，则时间从0秒开始。
              AVSEEK_FLAG_FRAME:若你设置seek时间为1秒，但是只有0秒和2秒上才有I帧，则时间从2秒开始。是基于帧数量快进.
              AVSEEK_FLAG_BACKWARD|AVSEEK_FLAG_FRAME：既往後找，又找關鍵幀
              */
             int pos=20*r2d(ic->streams[videoStream]->time_base);
             av_seek_frame(ic,videoStream,pos,AVSEEK_FLAG_BACKWARD|AVSEEK_FLAG_FRAME);
             continue;
         }
         LOGW("stream =%d size=%d pts=%l ld flag=%d",pkt->stream_index,pkt->size,pkt->pts,pkt->flags);
         /*
         av_packet_unref():释放空间,减少引用计数:
             对AVPacket缓冲区的引用计数-1.（内部调用 atomic_fetch_add_explicit(…, -1, …)），如果引用为个数为1，将释放data缓冲区;
             将其余信息包字段重置为它们的默认值。
             例如在编码时，循环处理压缩数据，每循环一次都会分配AVPacket->data来存储压缩后的数据（如 avcodec_receive_packet，内部使用 av_new_packet ），
             处理完压缩数据之后，并且在进入下一次循环之前，记得使用 av_packet_unref 来释放已经分配的AVPacket->data缓冲区。
         */
         av_packet_unref(pkt);
     }
     avformat_close_input(&ic);
     return env->NewStringUTF(hello.c_str());
 }

編譯運行到設備上

這裏可以看到日志貓出現read: Unexpected EOF。

因为logcat日志信息太多了了，

解决，在终端或命令窗口

adb logcat -G 2m

设置缓冲区大小，-G是設置。据說系统默认的缓存只有256k。