Basic frame index and timecode (part of #68).
[dcpomatic.git] / src / wx / film_viewer.cc
1 /*
2     Copyright (C) 2012 Carl Hetherington <cth@carlh.net>
3
4     This program is free software; you can redistribute it and/or modify
5     it under the terms of the GNU General Public License as published by
6     the Free Software Foundation; either version 2 of the License, or
7     (at your option) any later version.
8
9     This program is distributed in the hope that it will be useful,
10     but WITHOUT ANY WARRANTY; without even the implied warranty of
11     MERCHANTABILITY or FITNESS FOR A PARTICULAR PURPOSE.  See the
12     GNU General Public License for more details.
13
14     You should have received a copy of the GNU General Public License
15     along with this program; if not, write to the Free Software
16     Foundation, Inc., 675 Mass Ave, Cambridge, MA 02139, USA.
17
18 */
19
20 /** @file  src/film_viewer.cc
21  *  @brief A wx widget to view a preview of a Film.
22  */
23
24 #include <iostream>
25 #include <iomanip>
26 #include <wx/tglbtn.h>
27 #include "lib/film.h"
28 #include "lib/format.h"
29 #include "lib/util.h"
30 #include "lib/job_manager.h"
31 #include "lib/options.h"
32 #include "lib/subtitle.h"
33 #include "lib/image.h"
34 #include "lib/scaler.h"
35 #include "lib/exceptions.h"
36 #include "lib/examine_content_job.h"
37 #include "lib/filter.h"
38 #include "film_viewer.h"
39 #include "wx_util.h"
40 #include "video_decoder.h"
41
42 using std::string;
43 using std::pair;
44 using std::max;
45 using std::cout;
46 using std::list;
47 using boost::shared_ptr;
48 using libdcp::Size;
49
50 FilmViewer::FilmViewer (shared_ptr<Film> f, wxWindow* p)
51         : wxPanel (p)
52         , _panel (new wxPanel (this))
53         , _slider (new wxSlider (this, wxID_ANY, 0, 0, 4096))
54         , _frame (new wxStaticText (this, wxID_ANY, wxT("")))
55         , _timecode (new wxStaticText (this, wxID_ANY, wxT("")))
56         , _play_button (new wxToggleButton (this, wxID_ANY, _("Play")))
57         , _display_frame_x (0)
58         , _got_frame (false)
59 {
60         _panel->SetDoubleBuffered (true);
61 #if wxMAJOR_VERSION == 2 && wxMINOR_VERSION >= 9
62         _panel->SetBackgroundStyle (wxBG_STYLE_PAINT);
63 #endif  
64         
65         _v_sizer = new wxBoxSizer (wxVERTICAL);
66         SetSizer (_v_sizer);
67
68         _v_sizer->Add (_panel, 1, wxEXPAND);
69
70         wxBoxSizer* h_sizer = new wxBoxSizer (wxHORIZONTAL);
71
72         wxBoxSizer* time_sizer = new wxBoxSizer (wxVERTICAL);
73         time_sizer->Add (_frame, 0, wxEXPAND);
74         time_sizer->Add (_timecode, 0, wxEXPAND);
75         
76         h_sizer->Add (time_sizer, 0, wxEXPAND);
77         h_sizer->Add (_play_button, 0, wxEXPAND);
78         h_sizer->Add (_slider, 1, wxEXPAND);
79
80         _v_sizer->Add (h_sizer, 0, wxEXPAND | wxALL, 6);
81
82         _frame->SetMinSize (wxSize (84, -1));
83
84         _panel->Connect (wxID_ANY, wxEVT_PAINT, wxPaintEventHandler (FilmViewer::paint_panel), 0, this);
85         _panel->Connect (wxID_ANY, wxEVT_SIZE, wxSizeEventHandler (FilmViewer::panel_sized), 0, this);
86         _slider->Connect (wxID_ANY, wxEVT_SCROLL_THUMBTRACK, wxScrollEventHandler (FilmViewer::slider_moved), 0, this);
87         _slider->Connect (wxID_ANY, wxEVT_SCROLL_PAGEUP, wxScrollEventHandler (FilmViewer::slider_moved), 0, this);
88         _slider->Connect (wxID_ANY, wxEVT_SCROLL_PAGEDOWN, wxScrollEventHandler (FilmViewer::slider_moved), 0, this);
89         _play_button->Connect (wxID_ANY, wxEVT_COMMAND_TOGGLEBUTTON_CLICKED, wxCommandEventHandler (FilmViewer::play_clicked), 0, this);
90         _timer.Connect (wxID_ANY, wxEVT_TIMER, wxTimerEventHandler (FilmViewer::timer), 0, this);
91
92         set_film (f);
93
94         JobManager::instance()->ActiveJobsChanged.connect (
95                 bind (&FilmViewer::active_jobs_changed, this, _1)
96                 );
97 }
98
99 void
100 FilmViewer::film_changed (Film::Property p)
101 {
102         switch (p) {
103         case Film::FORMAT:
104                 calculate_sizes ();
105                 update_from_raw ();
106                 break;
107         case Film::CONTENT:
108         {
109                 DecodeOptions o;
110                 o.decode_audio = false;
111                 o.decode_subtitles = true;
112                 o.video_sync = false;
113
114                 try {
115                         _decoders = decoder_factory (_film, o);
116                 } catch (StringError& e) {
117                         error_dialog (this, wxString::Format (_("Could not open content file (%s)"), std_to_wx(e.what()).data()));
118                         return;
119                 }
120                 
121                 if (_decoders.video == 0) {
122                         break;
123                 }
124                 _decoders.video->Video.connect (bind (&FilmViewer::process_video, this, _1, _2, _3));
125                 _decoders.video->OutputChanged.connect (boost::bind (&FilmViewer::decoder_changed, this));
126                 _decoders.video->set_subtitle_stream (_film->subtitle_stream());
127                 calculate_sizes ();
128                 get_frame ();
129                 _panel->Refresh ();
130                 _slider->Show (_film->content_type() == VIDEO);
131                 _play_button->Show (_film->content_type() == VIDEO);
132                 _v_sizer->Layout ();
133                 break;
134         }
135         case Film::WITH_SUBTITLES:
136         case Film::SUBTITLE_OFFSET:
137         case Film::SUBTITLE_SCALE:
138         case Film::SCALER:
139         case Film::FILTERS:
140                 update_from_raw ();
141                 break;
142         case Film::SUBTITLE_STREAM:
143                 if (_decoders.video) {
144                         _decoders.video->set_subtitle_stream (_film->subtitle_stream ());
145                 }
146                 break;
147         default:
148                 break;
149         }
150 }
151
152 void
153 FilmViewer::set_film (shared_ptr<Film> f)
154 {
155         if (_film == f) {
156                 return;
157         }
158         
159         _film = f;
160
161         _raw_frame.reset ();
162         _display_frame.reset ();
163         _panel->Refresh ();
164         _panel->Update ();
165
166         if (!_film) {
167                 return;
168         }
169
170         _film->Changed.connect (boost::bind (&FilmViewer::film_changed, this, _1));
171
172         film_changed (Film::CONTENT);
173         film_changed (Film::FORMAT);
174         film_changed (Film::WITH_SUBTITLES);
175         film_changed (Film::SUBTITLE_OFFSET);
176         film_changed (Film::SUBTITLE_SCALE);
177         film_changed (Film::SUBTITLE_STREAM);
178 }
179
180 void
181 FilmViewer::decoder_changed ()
182 {
183         if (_decoders.video == 0 || _decoders.video->seek_to_last ()) {
184                 return;
185         }
186
187         get_frame ();
188         _panel->Refresh ();
189         _panel->Update ();
190 }
191
192 void
193 FilmViewer::timer (wxTimerEvent &)
194 {
195         if (!_film || !_decoders.video) {
196                 return;
197         }
198         
199         _panel->Refresh ();
200         _panel->Update ();
201
202         get_frame ();
203
204         if (_film->length()) {
205                 int const new_slider_position = 4096 * _decoders.video->last_source_time() / (_film->length().get() / _film->source_frame_rate());
206                 if (new_slider_position != _slider->GetValue()) {
207                         _slider->SetValue (new_slider_position);
208                 }
209         }
210 }
211
212
213 void
214 FilmViewer::paint_panel (wxPaintEvent &)
215 {
216         wxPaintDC dc (_panel);
217
218         if (!_display_frame || !_film || !_out_size.width || !_out_size.height) {
219                 dc.Clear ();
220                 return;
221         }
222
223         if (_display_frame_x) {
224                 dc.SetPen(*wxBLACK_PEN);
225                 dc.SetBrush(*wxBLACK_BRUSH);
226                 dc.DrawRectangle (0, 0, _display_frame_x, _film_size.height);
227                 dc.DrawRectangle (_display_frame_x + _film_size.width, 0, _display_frame_x, _film_size.height);
228         }
229
230         wxImage frame (_film_size.width, _film_size.height, _display_frame->data()[0], true);
231         wxBitmap frame_bitmap (frame);
232         dc.DrawBitmap (frame_bitmap, _display_frame_x, 0);
233
234         if (_film->with_subtitles() && _display_sub) {
235                 wxImage sub (_display_sub->size().width, _display_sub->size().height, _display_sub->data()[0], _display_sub->alpha(), true);
236                 wxBitmap sub_bitmap (sub);
237                 dc.DrawBitmap (sub_bitmap, _display_sub_position.x, _display_sub_position.y);
238         }
239
240         if (_out_size.width < _panel_size.width) {
241                 wxPen p (GetBackgroundColour ());
242                 wxBrush b (GetBackgroundColour ());
243                 dc.SetPen (p);
244                 dc.SetBrush (b);
245                 dc.DrawRectangle (_out_size.width, 0, _panel_size.width - _out_size.width, _panel_size.height);
246         }
247
248         if (_out_size.height < _panel_size.height) {
249                 wxPen p (GetBackgroundColour ());
250                 wxBrush b (GetBackgroundColour ());
251                 dc.SetPen (p);
252                 dc.SetBrush (b);
253                 dc.DrawRectangle (0, _out_size.height, _panel_size.width, _panel_size.height - _out_size.height);
254         }               
255 }
256
257
258 void
259 FilmViewer::slider_moved (wxScrollEvent &)
260 {
261         if (!_film || !_film->length() || !_decoders.video) {
262                 return;
263         }
264         
265         if (_decoders.video->seek (_slider->GetValue() * _film->length().get() / (4096 * _film->source_frame_rate()))) {
266                 return;
267         }
268         
269         get_frame ();
270         _panel->Refresh ();
271         _panel->Update ();
272 }
273
274 void
275 FilmViewer::panel_sized (wxSizeEvent& ev)
276 {
277         _panel_size.width = ev.GetSize().GetWidth();
278         _panel_size.height = ev.GetSize().GetHeight();
279         calculate_sizes ();
280         update_from_raw ();
281 }
282
283 void
284 FilmViewer::update_from_raw ()
285 {
286         if (!_raw_frame) {
287                 return;
288         }
289
290         raw_to_display ();
291         
292         _panel->Refresh ();
293         _panel->Update ();
294 }
295
296 void
297 FilmViewer::raw_to_display ()
298 {
299         if (!_raw_frame || _out_size.width < 64 || _out_size.height < 64 || !_film) {
300                 return;
301         }
302
303         boost::shared_ptr<Image> input = _raw_frame;
304
305         pair<string, string> const s = Filter::ffmpeg_strings (_film->filters());
306         if (!s.second.empty ()) {
307                 input = input->post_process (s.second, true);
308         }
309         
310         /* Get a compacted image as we have to feed it to wxWidgets */
311         _display_frame = input->scale_and_convert_to_rgb (_film_size, 0, _film->scaler(), false);
312
313         if (_raw_sub) {
314
315                 /* Our output is already cropped by the decoder, so we need to account for that
316                    when working out the scale that we are applying.
317                 */
318
319                 Size const cropped_size = _film->cropped_size (_film->size ());
320
321                 Rect tx = subtitle_transformed_area (
322                         float (_film_size.width) / cropped_size.width,
323                         float (_film_size.height) / cropped_size.height,
324                         _raw_sub->area(), _film->subtitle_offset(), _film->subtitle_scale()
325                         );
326                 
327                 _display_sub.reset (new RGBPlusAlphaImage (_raw_sub->image()->scale (tx.size(), _film->scaler(), false)));
328                 _display_sub_position = tx.position();
329                 _display_sub_position.x += _display_frame_x;
330         } else {
331                 _display_sub.reset ();
332         }
333 }       
334
335 void
336 FilmViewer::calculate_sizes ()
337 {
338         if (!_film) {
339                 return;
340         }
341
342         Format const * format = _film->format ();
343         
344         float const panel_ratio = static_cast<float> (_panel_size.width) / _panel_size.height;
345         float const film_ratio = format ? format->container_ratio () : 1.78;
346                         
347         if (panel_ratio < film_ratio) {
348                 /* panel is less widscreen than the film; clamp width */
349                 _out_size.width = _panel_size.width;
350                 _out_size.height = _out_size.width / film_ratio;
351         } else {
352                 /* panel is more widescreen than the film; clamp height */
353                 _out_size.height = _panel_size.height;
354                 _out_size.width = _out_size.height * film_ratio;
355         }
356
357         /* Work out how much padding there is in terms of our display; this will be the x position
358            of our _display_frame.
359         */
360         _display_frame_x = 0;
361         if (format) {
362                 _display_frame_x = static_cast<float> (format->dcp_padding (_film)) * _out_size.width / format->dcp_size().width;
363         }
364
365         _film_size = _out_size;
366         _film_size.width -= _display_frame_x * 2;
367
368         /* Catch silly values */
369         if (_out_size.width < 64) {
370                 _out_size.width = 64;
371         }
372 }
373
374 void
375 FilmViewer::play_clicked (wxCommandEvent &)
376 {
377         check_play_state ();
378 }
379
380 void
381 FilmViewer::check_play_state ()
382 {
383         if (!_film) {
384                 return;
385         }
386         
387         if (_play_button->GetValue()) {
388                 _timer.Start (1000 / _film->source_frame_rate());
389         } else {
390                 _timer.Stop ();
391         }
392 }
393
394 void
395 FilmViewer::process_video (shared_ptr<Image> image, bool, shared_ptr<Subtitle> sub)
396 {
397         _raw_frame = image;
398         _raw_sub = sub;
399
400         raw_to_display ();
401
402         _got_frame = true;
403
404         double const t = _decoders.video->last_source_time ();
405         double const fps = _decoders.video->frames_per_second ();
406         _frame->SetLabel (wxString::Format ("%d", int (rint (t * fps))));
407
408         double w = t;
409         int const h = (w / 3600);
410         w -= h * 3600;
411         int const m = (w / 60);
412         w -= m * 60;
413         int const s = floor (w);
414         w -= s;
415         int const f = rint (w * fps);
416         _timecode->SetLabel (wxString::Format ("%02d:%02d:%02d:%02d", h, m, s, f));
417 }
418
419 void
420 FilmViewer::get_frame ()
421 {
422         /* Clear our raw frame in case we don't get a new one */
423         _raw_frame.reset ();
424
425         if (_decoders.video == 0) {
426                 _display_frame.reset ();
427                 return;
428         }
429         
430         try {
431                 _got_frame = false;
432                 while (!_got_frame) {
433                         if (_decoders.video->pass ()) {
434                                 /* We didn't get a frame before the decoder gave up,
435                                    so clear our display frame.
436                                 */
437                                 _display_frame.reset ();
438                                 break;
439                         }
440                 }
441         } catch (DecodeError& e) {
442                 _play_button->SetValue (false);
443                 check_play_state ();
444                 error_dialog (this, wxString::Format (_("Could not decode video for view (%s)"), std_to_wx(e.what()).data()));
445         }
446 }
447
448 void
449 FilmViewer::active_jobs_changed (bool a)
450 {
451         if (a) {
452                 list<shared_ptr<Job> > jobs = JobManager::instance()->get ();
453                 list<shared_ptr<Job> >::iterator i = jobs.begin ();             
454                 while (i != jobs.end() && boost::dynamic_pointer_cast<ExamineContentJob> (*i) == 0) {
455                         ++i;
456                 }
457                 
458                 if (i == jobs.end() || (*i)->finished()) {
459                         /* no examine content job running, so we're ok to use the viewer */
460                         a = false;
461                 }
462         }
463                         
464         _slider->Enable (!a);
465         _play_button->Enable (!a);
466 }
467