使用 Ffmpeg 设置视频流元数据

android java video ffmpeg javacv

2022-09-03 02:56:31

我正在使用JavaCV FFmpegFrameRecorder类将Android的相机预览帧编码为视频。

目标是复制以下命令行的结果：

ffmpeg -i input.mp4 -metadata:s:v:0 rotate="90" output.mp4

我按如下方式修改了该方法，但它无法生成所需的输出：startUnsafe()

if ((video_st = avformat_new_stream(oc, video_codec)) != null) {
        video_c = video_st.codec();
        video_c.codec_id(oformat.video_codec());
        video_c.codec_type(AVMEDIA_TYPE_VIDEO);
        ...
        AVDictionary avDictionary = new AVDictionary(null);
        av_dict_set(avDictionary, "rotate", "90", 0);
        video_st.metadata(avDictionaty);
        ...
}
...
avformat_write_header(oc, (PointerPointer) null);

这仍然可以正确编码视频，但添加的元数据永远不会出现在ffprobe上。如果有帮助，视频编码为h264。

顺便说一句，这是ffprobe输出：

ffprobe version 2.3.3 Copyright (c) 2007-2014 the FFmpeg developers
  built on Jan 22 2015 18:22:57 with Apple LLVM version 6.0 (clang-600.0.56) (based on LLVM 3.5svn)
  configuration: --prefix=/usr/local/Cellar/ffmpeg/2.3.3 --enable-shared --enable-pthreads --enable-gpl --enable-version3 --enable-nonfree --enable-hardcoded-tables --enable-avresample --enable-vda --cc=clang --host-cflags= --host-ldflags= --enable-libx264 --enable-libfaac --enable-libmp3lame --enable-libxvid --enable-libfreetype --enable-libvorbis --enable-libvpx --enable-libass --enable-ffplay --enable-libfdk-aac --enable-libopus --enable-libquvi --enable-libx265
  libavutil      52. 92.100 / 52. 92.100
  libavcodec     55. 69.100 / 55. 69.100
  libavformat    55. 48.100 / 55. 48.100
  libavdevice    55. 13.102 / 55. 13.102
  libavfilter     4. 11.100 /  4. 11.100
  libavresample   1.  3.  0 /  1.  3.  0
  libswscale      2.  6.100 /  2.  6.100
  libswresample   0. 19.100 /  0. 19.100
  libpostproc    52.  3.100 / 52.  3.100
Input #0, mov,mp4,m4a,3gp,3g2,mj2, from 'abcd.mp4':
  Metadata:
    major_brand     : isom
    minor_version   : 512
    compatible_brands: isomiso2avc1mp41
    encoder         : Lavf56.15.102
  Duration: 00:00:19.48, start: 0.023220, bitrate: 572 kb/s
    Stream #0:0(und): Video: h264 (Constrained Baseline) (avc1 / 0x31637661), yuv420p, 1280x720, 573 kb/s, 5.71 fps, 30 tbr, 15360 tbn, 60 tbc (default)
    Metadata:
      handler_name    : VideoHandler
    Stream #0:1(und): Audio: aac (mp4a / 0x6134706D), 44100 Hz, mono, fltp, 64 kb/s (default)
    Metadata:
      handler_name    : SoundHandler

关于它为什么失败的任何建议？谢谢。

答案 1

似乎这个问题引起了很多兴趣，所以我正在添加更多信息。在此 GitHub 问题之后，JavaCV 的 Samuel 提交了一些更改，以便更轻松地访问元数据设置。

设置元数据可以通过以下代码段实现：

AVDictionary metadata = new AVDictionary(null);
for (Entry<String, String> e : videoMetadata.entrySet()) {
    av_dict_set(metadata, e.getKey(), e.getValue(), 0);
}
video_st.metadata(metadata);

您可以立即启用它，或者等到下一个JavacV版本，应该是0.12。mvn install -Pffmpeg

PS：如您所见，这与我在问题中介绍的内容非常相似，因此我不确定为什么它首先不起作用。

答案 2

您正在使用的类使用类。在第 2579 行左右，您可以从方法签名中看到，该类使用本机代码来实现这两者FFmpegFrameRecorderAVFormatContextAVFormatContext

public native AVDictionary metadata()方法
public native AVFormatContext metadata(AVDictionary metadata)方法。

您提供的链接的答案说他们直接使用了属性 - 类似于我认为的第一种方法。但是第649行使用第二种方法-我怀疑。即：metadataAVFormatContextFFmpegFrameRecorder

AVDictionary metadata = new AVDictionary(null);
... code to fill up dictionary ...
...

avformat_write_header(oc.metadata(metadata), options);

不幸的是，我现在不能尝试这个，但我想知道你是否可以做这样的事情：

AVDictionary metadata = co.metadata();
... code to fill up dictionary ...

//I would assume at this point that oc has the metadata so
avformat_write_header(oc, (PointerPointer) null);
//if not then maybe
// avformat_write_header(oc.metadata(metadata), options);

签名显示它是公开的，所以我不明白为什么你不能直接从中获取元数据字典。我不确定该方法是如何工作的，所以我在上面提出了两件事。AVFormatContextavformat_write_header

注意：我以前没有使用过这个库。我过去尝试过使用Xuggle进行一些基本的编码，但没有成功。