Untested merge of master.
[dcpomatic.git] / src / lib / ffmpeg_decoder.cc
index 8e09810cb2cc75c3a6109139e0a0db8427f4eb8e..82c7cafd1b8ec629b1473402ed089b06efad0f16 100644 (file)
@@ -41,7 +41,6 @@ extern "C" {
 #include "transcoder.h"
 #include "job.h"
 #include "filter.h"
-#include "options.h"
 #include "exceptions.h"
 #include "image.h"
 #include "util.h"
@@ -62,10 +61,13 @@ using boost::optional;
 using boost::dynamic_pointer_cast;
 using libdcp::Size;
 
-FFmpegDecoder::FFmpegDecoder (shared_ptr<Film> f, DecodeOptions o)
-       : Decoder (f, o)
-       , VideoDecoder (f, o)
-       , AudioDecoder (f, o)
+boost::mutex FFmpegDecoder::_mutex;
+
+FFmpegDecoder::FFmpegDecoder (shared_ptr<const Film> f, shared_ptr<const FFmpegContent> c, bool video, bool audio, bool subtitles)
+       : Decoder (f)
+       , VideoDecoder (f)
+       , AudioDecoder (f)
+       , _ffmpeg_content (c)
        , _format_context (0)
        , _video_stream (-1)
        , _frame (0)
@@ -75,6 +77,9 @@ FFmpegDecoder::FFmpegDecoder (shared_ptr<Film> f, DecodeOptions o)
        , _audio_codec (0)
        , _subtitle_codec_context (0)
        , _subtitle_codec (0)
+       , _decode_video (video)
+       , _decode_audio (audio)
+       , _decode_subtitles (subtitles)
 {
        setup_general ();
        setup_video ();
@@ -84,10 +89,12 @@ FFmpegDecoder::FFmpegDecoder (shared_ptr<Film> f, DecodeOptions o)
 
 FFmpegDecoder::~FFmpegDecoder ()
 {
+       boost::mutex::scoped_lock lm (_mutex);
+       
        if (_audio_codec_context) {
                avcodec_close (_audio_codec_context);
        }
-       
+
        if (_video_codec_context) {
                avcodec_close (_video_codec_context);
        }
@@ -106,15 +113,15 @@ FFmpegDecoder::setup_general ()
 {
        av_register_all ();
 
-       if (avformat_open_input (&_format_context, _film->content_path().c_str(), 0, 0) < 0) {
-               throw OpenFileError (_film->content_path ());
+       if (avformat_open_input (&_format_context, _ffmpeg_content->file().string().c_str(), 0, 0) < 0) {
+               throw OpenFileError (_ffmpeg_content->file().string ());
        }
 
        if (avformat_find_stream_info (_format_context, 0) < 0) {
                throw DecodeError (_("could not find stream information"));
        }
 
-       /* Find video, audio and subtitle streams and choose the first of each */
+       /* Find video, audio and subtitle streams */
 
        for (uint32_t i = 0; i < _format_context->nb_streams; ++i) {
                AVStream* s = _format_context->streams[i];
@@ -131,17 +138,11 @@ FFmpegDecoder::setup_general ()
                        }
                        
                        _audio_streams.push_back (
-                               shared_ptr<AudioStream> (
-                                       new FFmpegAudioStream (stream_name (s), i, s->codec->sample_rate, s->codec->channel_layout)
-                                       )
+                               FFmpegAudioStream (stream_name (s), i, s->codec->sample_rate, s->codec->channels)
                                );
                        
                } else if (s->codec->codec_type == AVMEDIA_TYPE_SUBTITLE) {
-                       _subtitle_streams.push_back (
-                               shared_ptr<SubtitleStream> (
-                                       new SubtitleStream (stream_name (s), i)
-                                       )
-                               );
+                       _subtitle_streams.push_back (FFmpegSubtitleStream (stream_name (s), i));
                }
        }
 
@@ -158,6 +159,8 @@ FFmpegDecoder::setup_general ()
 void
 FFmpegDecoder::setup_video ()
 {
+       boost::mutex::scoped_lock lm (_mutex);
+       
        _video_codec_context = _format_context->streams[_video_stream]->codec;
        _video_codec = avcodec_find_decoder (_video_codec_context->codec_id);
 
@@ -173,14 +176,13 @@ FFmpegDecoder::setup_video ()
 void
 FFmpegDecoder::setup_audio ()
 {
-       if (!_audio_stream) {
+       boost::mutex::scoped_lock lm (_mutex);
+       
+       if (!_ffmpeg_content->audio_stream ()) {
                return;
        }
 
-       shared_ptr<FFmpegAudioStream> ffa = dynamic_pointer_cast<FFmpegAudioStream> (_audio_stream);
-       assert (ffa);
-       
-       _audio_codec_context = _format_context->streams[ffa->id()]->codec;
+       _audio_codec_context = _format_context->streams[_ffmpeg_content->audio_stream()->id]->codec;
        _audio_codec = avcodec_find_decoder (_audio_codec_context->codec_id);
 
        if (_audio_codec == 0) {
@@ -195,11 +197,13 @@ FFmpegDecoder::setup_audio ()
 void
 FFmpegDecoder::setup_subtitle ()
 {
-       if (!_subtitle_stream || _subtitle_stream->id() >= int (_format_context->nb_streams)) {
+       boost::mutex::scoped_lock lm (_mutex);
+       
+       if (!_ffmpeg_content->subtitle_stream() || _ffmpeg_content->subtitle_stream()->id >= int (_format_context->nb_streams)) {
                return;
        }
 
-       _subtitle_codec_context = _format_context->streams[_subtitle_stream->id()]->codec;
+       _subtitle_codec_context = _format_context->streams[_ffmpeg_content->subtitle_stream()->id]->codec;
        _subtitle_codec = avcodec_find_decoder (_subtitle_codec_context->codec_id);
 
        if (_subtitle_codec == 0) {
@@ -233,14 +237,14 @@ FFmpegDecoder::pass ()
                /* XXX: should we reset _packet.data and size after each *_decode_* call? */
                
                int frame_finished;
-               
-               if (_opt.decode_video) {
+
+               if (_decode_video) {
                        while (avcodec_decode_video2 (_video_codec_context, _frame, &frame_finished, &_packet) >= 0 && frame_finished) {
                                filter_and_emit_video ();
                        }
                }
-               
-               if (_audio_stream && _opt.decode_audio) {
+
+               if (_ffmpeg_content->audio_stream() && _decode_audio) {
                        decode_audio_packet ();
                }
                        
@@ -249,9 +253,7 @@ FFmpegDecoder::pass ()
 
        avcodec_get_frame_defaults (_frame);
 
-       shared_ptr<FFmpegAudioStream> ffa = dynamic_pointer_cast<FFmpegAudioStream> (_audio_stream);
-
-       if (_packet.stream_index == _video_stream && _opt.decode_video) {
+       if (_packet.stream_index == _video_stream && _decode_video) {
 
                int frame_finished;
                int const r = avcodec_decode_video2 (_video_codec_context, _frame, &frame_finished, &_packet);
@@ -264,9 +266,9 @@ FFmpegDecoder::pass ()
                        filter_and_emit_video ();
                }
 
-       } else if (ffa && _packet.stream_index == ffa->id() && _opt.decode_audio) {
+       } else if (_ffmpeg_content->audio_stream() && _packet.stream_index == _ffmpeg_content->audio_stream()->id && _decode_audio) {
                decode_audio_packet ();
-       } else if (_subtitle_stream && _packet.stream_index == _subtitle_stream->id() && _opt.decode_subtitles) {
+       } else if (_ffmpeg_content->subtitle_stream() && _packet.stream_index == _ffmpeg_content->subtitle_stream()->id && _decode_subtitles) {
 
                int got_subtitle;
                AVSubtitle sub;
@@ -298,19 +300,16 @@ FFmpegDecoder::pass ()
 shared_ptr<AudioBuffers>
 FFmpegDecoder::deinterleave_audio (uint8_t** data, int size)
 {
-       assert (_film->audio_channels());
+       assert (_ffmpeg_content->audio_channels());
        assert (bytes_per_audio_sample());
 
-       shared_ptr<FFmpegAudioStream> ffa = dynamic_pointer_cast<FFmpegAudioStream> (_audio_stream);
-       assert (ffa);
-       
        /* Deinterleave and convert to float */
 
-       assert ((size % (bytes_per_audio_sample() * ffa->channels())) == 0);
+       assert ((size % (bytes_per_audio_sample() * _ffmpeg_content->audio_channels())) == 0);
 
        int const total_samples = size / bytes_per_audio_sample();
-       int const frames = total_samples / _film->audio_channels();
-       shared_ptr<AudioBuffers> audio (new AudioBuffers (ffa->channels(), frames));
+       int const frames = total_samples / _ffmpeg_content->audio_channels();
+       shared_ptr<AudioBuffers> audio (new AudioBuffers (_ffmpeg_content->audio_channels(), frames));
 
        switch (audio_sample_format()) {
        case AV_SAMPLE_FMT_S16:
@@ -322,7 +321,7 @@ FFmpegDecoder::deinterleave_audio (uint8_t** data, int size)
                        audio->data(channel)[sample] = float(*p++) / (1 << 15);
 
                        ++channel;
-                       if (channel == _film->audio_channels()) {
+                       if (channel == _ffmpeg_content->audio_channels()) {
                                channel = 0;
                                ++sample;
                        }
@@ -333,7 +332,7 @@ FFmpegDecoder::deinterleave_audio (uint8_t** data, int size)
        case AV_SAMPLE_FMT_S16P:
        {
                int16_t** p = reinterpret_cast<int16_t **> (data);
-               for (int i = 0; i < _film->audio_channels(); ++i) {
+               for (int i = 0; i < _ffmpeg_content->audio_channels(); ++i) {
                        for (int j = 0; j < frames; ++j) {
                                audio->data(i)[j] = static_cast<float>(p[i][j]) / (1 << 15);
                        }
@@ -350,7 +349,7 @@ FFmpegDecoder::deinterleave_audio (uint8_t** data, int size)
                        audio->data(channel)[sample] = static_cast<float>(*p++) / (1 << 31);
 
                        ++channel;
-                       if (channel == _film->audio_channels()) {
+                       if (channel == _ffmpeg_content->audio_channels()) {
                                channel = 0;
                                ++sample;
                        }
@@ -367,7 +366,7 @@ FFmpegDecoder::deinterleave_audio (uint8_t** data, int size)
                        audio->data(channel)[sample] = *p++;
 
                        ++channel;
-                       if (channel == _film->audio_channels()) {
+                       if (channel == _ffmpeg_content->audio_channels()) {
                                channel = 0;
                                ++sample;
                        }
@@ -378,7 +377,7 @@ FFmpegDecoder::deinterleave_audio (uint8_t** data, int size)
        case AV_SAMPLE_FMT_FLTP:
        {
                float** p = reinterpret_cast<float**> (data);
-               for (int i = 0; i < _film->audio_channels(); ++i) {
+               for (int i = 0; i < _ffmpeg_content->audio_channels(); ++i) {
                        memcpy (audio->data(i), p[i], frames * sizeof(float));
                }
        }
@@ -392,7 +391,7 @@ FFmpegDecoder::deinterleave_audio (uint8_t** data, int size)
 }
 
 float
-FFmpegDecoder::frames_per_second () const
+FFmpegDecoder::video_frame_rate () const
 {
        AVStream* s = _format_context->streams[_video_stream];
 
@@ -482,21 +481,6 @@ FFmpegDecoder::bytes_per_audio_sample () const
        return av_get_bytes_per_sample (audio_sample_format ());
 }
 
-void
-FFmpegDecoder::set_audio_stream (shared_ptr<AudioStream> s)
-{
-       AudioDecoder::set_audio_stream (s);
-       setup_audio ();
-}
-
-void
-FFmpegDecoder::set_subtitle_stream (shared_ptr<SubtitleStream> s)
-{
-       VideoDecoder::set_subtitle_stream (s);
-       setup_subtitle ();
-       OutputChanged ();
-}
-
 void
 FFmpegDecoder::filter_and_emit_video ()
 {
@@ -535,26 +519,16 @@ FFmpegDecoder::seek (double p)
        return do_seek (p, false, false);
 }
 
-bool
-FFmpegDecoder::seek_to_last ()
-{
-       /* This AVSEEK_FLAG_BACKWARD in do_seek is a bit of a hack; without it, if we ask for a seek to the same place as last time
-          (used when we change decoder parameters and want to re-fetch the frame) we end up going forwards rather than
-          staying in the same place.
-       */
-       return do_seek (last_source_time(), true, false);
-}
-
 void
 FFmpegDecoder::seek_back ()
 {
-       do_seek (last_source_time() - 2.5 / frames_per_second (), true, true);
+       do_seek (last_content_time() - 2.5 / video_frame_rate(), true, true);
 }
 
 void
 FFmpegDecoder::seek_forward ()
 {
-       do_seek (last_source_time() - 0.5 / frames_per_second(), true, true);
+       do_seek (last_content_time() - 0.5 / video_frame_rate(), true, true);
 }
 
 bool
@@ -596,58 +570,6 @@ FFmpegDecoder::do_seek (double p, bool backwards, bool accurate)
        return r < 0;
 }
 
-shared_ptr<FFmpegAudioStream>
-FFmpegAudioStream::create (string t, optional<int> v)
-{
-       if (!v) {
-               /* version < 1; no type in the string, and there's only FFmpeg streams anyway */
-               return shared_ptr<FFmpegAudioStream> (new FFmpegAudioStream (t, v));
-       }
-
-       stringstream s (t);
-       string type;
-       s >> type;
-       if (type != N_("ffmpeg")) {
-               return shared_ptr<FFmpegAudioStream> ();
-       }
-
-       return shared_ptr<FFmpegAudioStream> (new FFmpegAudioStream (t, v));
-}
-
-FFmpegAudioStream::FFmpegAudioStream (string t, optional<int> version)
-{
-       stringstream n (t);
-       
-       int name_index = 4;
-       if (!version) {
-               name_index = 2;
-               int channels;
-               n >> _id >> channels;
-               _channel_layout = av_get_default_channel_layout (channels);
-               _sample_rate = 0;
-       } else {
-               string type;
-               /* Current (marked version 1) */
-               n >> type >> _id >> _sample_rate >> _channel_layout;
-               assert (type == N_("ffmpeg"));
-       }
-
-       for (int i = 0; i < name_index; ++i) {
-               size_t const s = t.find (' ');
-               if (s != string::npos) {
-                       t = t.substr (s + 1);
-               }
-       }
-
-       _name = t;
-}
-
-string
-FFmpegAudioStream::to_string () const
-{
-       return String::compose (N_("ffmpeg %1 %2 %3 %4"), _id, _sample_rate, _channel_layout, _name);
-}
-
 void
 FFmpegDecoder::film_changed (Film::Property p)
 {
@@ -658,7 +580,6 @@ FFmpegDecoder::film_changed (Film::Property p)
                boost::mutex::scoped_lock lm (_filter_graphs_mutex);
                _filter_graphs.clear ();
        }
-       OutputChanged ();
        break;
 
        default:
@@ -667,18 +588,15 @@ FFmpegDecoder::film_changed (Film::Property p)
 }
 
 /** @return Length (in video frames) according to our content's header */
-SourceFrame
-FFmpegDecoder::length () const
+ContentVideoFrame
+FFmpegDecoder::video_length () const
 {
-       return (double(_format_context->duration) / AV_TIME_BASE) * frames_per_second();
+       return (double(_format_context->duration) / AV_TIME_BASE) * video_frame_rate();
 }
 
 void
 FFmpegDecoder::decode_audio_packet ()
 {
-       shared_ptr<FFmpegAudioStream> ffa = dynamic_pointer_cast<FFmpegAudioStream> (_audio_stream);
-       assert (ffa);
-
        /* Audio packets can contain multiple frames, so we may have to call avcodec_decode_audio4
           several times.
        */
@@ -700,7 +618,7 @@ FFmpegDecoder::decode_audio_packet ()
                                        0, _audio_codec_context->channels, _frame->nb_samples, audio_sample_format (), 1
                                        );
                                
-                               assert (_audio_codec_context->channels == _film->audio_channels());
+                               assert (_audio_codec_context->channels == _ffmpeg_content->audio_channels());
                                Audio (deinterleave_audio (_frame->data, data_size), source_pts_seconds);
                        }