source/src/qt/avio/movie_saver.h

   1 /*
   2  * Common Source Code Project for Qt : movie saver.
   3  * (C) 2016 K.Ohta <whatisthis.sowhat _at_ gmail.com>
   4  *  License: GPLv2
   5  *  History: May 27, 2016 : Initial. This refer from avidemux 2.5.6 .
   6  */
   7
   8 #ifndef _QT_OSD_MOVIE_SAVER_H
   9 #define _QT_OSD_MOVIE_SAVER_H
  10
  11 #include <QByteArray>
  12 #include <QQueue>
  13 #include <QString>
  14 #include <QStringList>
  15 #include <QThread>
  16 #include <QSize>
  17 #include <QImage>
  18 #include "config.h"
  19
  20 #if defined(USE_LIBAV)
  21 extern "C" {
  22         #include "libavutil/channel_layout.h"
  23         #include "libavutil/opt.h"
  24         #include "libavutil/mathematics.h"
  25         #include "libavutil/timestamp.h"
  26         #include "libavformat/avformat.h"
  27         #include "libswscale/swscale.h"
  28         #include "libswresample/swresample.h"
  29 }
  30 #endif
  31 // Copy from FFMPEG-3.0.2; doc/example/muxing.c .
  32
  33 #define STREAM_PIX_FMT  AV_PIX_FMT_YUV420P /* default pix_fmt */
  34
  35 //#define SCALE_FLAGS SWS_BICUBLIN
  36 #define SCALE_FLAGS SWS_POINT
  37
  38 enum {
  39         VIDEO_CODEC_MPEG4 = 0,
  40         VIDEO_CODEC_H264,
  41         VIDEO_CODEC_END,
  42 };
  43
  44 enum {
  45         AUDIO_CODEC_MP3 = 0,
  46         AUDIO_CODEC_AAC,
  47         AUDIO_CODEC_VORBIS,
  48         AUDIO_CODEC_END,
  49 };
  50
  51 enum {
  52         VIDEO_CONTAINER_TYPE_MP4 = 0,
  53         VIDEO_CONTAINER_TYPE_MKV,
  54         VIDEO_CONTAINER_TYPE_END,
  55
  56 };
  57
  58 // a wrapper around a single output AVStream
  59 typedef struct OutputStream {
  60         AVStream *st;
  61
  62         /* pts of the next frame that will be generated */
  63         int64_t next_pts;
  64         int samples_count;
  65
  66         AVFrame *frame;
  67         AVFrame *tmp_frame;
  68
  69         float t, tincr, tincr2;
  70
  71         struct SwsContext *sws_ctx;
  72         struct SwrContext *swr_ctx;
  73 } OutputStream;
  74
  75 class OSD;
  76 class QMutex;
  77 class CSP_Logger;
  78 QT_BEGIN_NAMESPACE
  79 class DLL_PREFIX VIDEO_DATA {
  80
  81 public:
  82         int frames;
  83         int _width;
  84         int _height;
  85         QImage frame_data;
  86         VIDEO_DATA(int n_frames, int width, int height, QImage *pp) {
  87                 frame_data = QImage(*pp);
  88                 frames = n_frames;
  89                 _width = width;
  90                 _height = height;
  91         };
  92         ~VIDEO_DATA() {};
  93 };
  94
  95 class DLL_PREFIX MOVIE_SAVER: public QThread
  96 {
  97         Q_OBJECT
  98 private:
  99         int n_encode_audio;
 100         int n_encode_video;
 101         //QMutex *video_queue_mutex;
 102 protected:
 103         OSD *p_osd;
 104         config_t *p_config;
 105         CSP_Logger *p_logger;
 106
 107         bool req_close;
 108         bool req_stop;
 109
 110         bool have_video;
 111         bool have_audio;
 112         bool encode_video;
 113         bool encode_audio;
 114         int64_t audio_count;
 115         int64_t video_count;
 116         QStringList encode_opt_keys;
 117         QStringList encode_options;
 118 #if defined(USE_LIBAV)
 119         AVOutputFormat *stream_format;
 120         AVFormatContext *output_context;
 121         AVCodec *audio_codec, *video_codec;
 122         AVDictionary *raw_options_list;
 123
 124         OutputStream video_st;
 125         OutputStream audio_st;
 126 #endif
 127         QString _filename;
 128         bool bRunThread;
 129         bool debug_timestamp;
 130
 131         uint min_rate;
 132         uint max_rate;
 133         uint buffer_size;
 134         int audio_sample_rate;
 135         int _width;
 136         int _height;
 137         int old_width;
 138         int old_height;
 139
 140         bool recording;
 141         int rec_fps;
 142
 143
 144         uint64_t audio_size;
 145         uint64_t video_size;
 146         uint32_t ptsFrame;
 147
 148         uint64_t totalSrcFrame;
 149         uint64_t totalDstFrame;
 150         uint64_t totalAudioFrame;
 151         int left_frames;
 152
 153         int16_t audio_frame_buf[2 * 48000 * sizeof(int16_t)]; // 1Sec
 154         uint32_t video_frame_buf[1280 * 1024 * sizeof(uint32_t)]; // 1 frame : right?
 155
 156         QQueue<VIDEO_DATA *> video_data_queue;
 157         QQueue<QByteArray *> audio_data_queue;
 158         int64_t audio_remain;
 159         int64_t video_remain;
 160         uint32_t audio_offset;
 161         uint32_t audio_frame_offset;
 162         uint32_t video_offset;
 163         uint64_t audio_frame_number;
 164         uint64_t audio_frame_max;
 165         uint64_t video_frame_number;
 166         uint64_t video_frame_max;
 167
 168         int audio_bit_rate;
 169         int video_bit_rate;
 170         QSize video_geometry;
 171         int video_encode_threads;
 172
 173         bool dequeue_audio(int16_t *);
 174         bool dequeue_video(uint32_t *);
 175
 176         QString create_date_file_name(void);
 177
 178         // Got from FFMPEG 3.0.2, doc/examples/muxer.c
 179         //void log_packet(const AVFormatContext *fmt_ctx, const AVPacket *pkt)
 180         void log_packet(const void *_fmt_ctx, const void *_pkt);
 181         //int write_frame(AVFormatContext *fmt_ctx, const AVRational *time_base, AVStream *st, AVPacket *pkt)
 182         int write_frame(void *_fmt_ctx, const void *_time_base, void *_st, void *_pkt);
 183         //void add_stream(OutputStream *ost, AVFormatContext *oc, AVCodec **codec, enum AVCodecID codec_id)
 184         bool add_stream(void *_ost, void *_oc, void **_codec, uint64_t codec_id);
 185         //AVFrame *alloc_audio_frame(enum AVSampleFormat sample_fmt, uint64_t channel_layout, int sample_rate, int nb_samples)
 186         void *alloc_audio_frame(uint64_t _sample_fmt, uint64_t channel_layout,
 187                                                         int sample_rate, int nb_samples);
 188         //static void open_audio(AVFormatContext *oc, AVCodec *codec, OutputStream *ost, AVDictionary *opt_arg)
 189         bool open_audio(void);
 190         //static AVFrame *get_audio_frame(OutputStream *ost)
 191         void *get_audio_frame();
 192         //static int write_audio_frame(AVFormatContext *oc, OutputStream *ost)
 193         int write_audio_frame();
 194         //static AVFrame *alloc_picture(enum AVPixelFormat pix_fmt, int width, int height)
 195         void *alloc_picture(uint64_t _pix_fmt, int width, int height);
 196         //void open_video(OutputStream *_ost, AVDictionary *_opt_arg)
 197         bool open_video();
 198         //AVFrame *get_video_frame(OutputStream *ost)
 199         void *get_video_frame(void);
 200         //static int write_video_frame(AVFormatContext *oc, OutputStream *ost)
 201         int write_video_frame();
 202         //void MOVIE_SAVER::close_stream(AVFormatContext *oc, OutputStream *ost)
 203         void close_stream(void *_oc, void *_ost);
 204         //void MOVIE_SAVER::setup_h264(AVCodecContext *_codec)
 205         void setup_h264(void *_codec);
 206         //void MOVIE_SAVER::setup_mpeg4(AVCodecContext *_codec)
 207         void setup_mpeg4(void *_codec);
 208         //void MOVIE_SAVER::setup_audio(AVCodecContext *_codec_context, AVCodec **_codec)
 209         void setup_audio(void *_codec_context, void **_codec);
 210
 211         QString ts2str(int64_t ts);
 212         QString ts2timestr(int64_t ts, void *timebase);
 213         QString err2str(int errnum);
 214         void do_close_main();
 215         bool do_open_main();
 216
 217 public:
 218         MOVIE_SAVER(int width, int height, int fps, OSD *osd, config_t *cfg);
 219         ~MOVIE_SAVER();
 220         bool is_recording(void);
 221         QString get_avio_version();
 222
 223 public slots:
 224         void run();
 225         void enqueue_video(int frames, int width, int height, QImage *p);
 226         void enqueue_audio(int16_t *p, int size);
 227         void do_close();
 228         void do_open(QString filename, int _fps, int sample_rate);
 229         void do_set_width(int width);
 230         void do_set_height(int height);
 231         void do_set_record_fps(int fps);
 232
 233         void do_set_video_bitrate(int kbps);
 234         void do_set_audio_bitrate(int kbps);
 235         void do_set_video_geometry(QSize geometry);
 236         void do_set_video_threads(int threads);
 237
 238         void do_clear_options_list(void);
 239         void do_add_option(QString key, QString value);
 240         void do_reset_encoder_options(void);
 241
 242         void do_exit();
 243 signals:
 244         int sig_ready_to_record();
 245         int sig_set_state_saving_movie(bool);
 246 };
 247 QT_END_NAMESPACE
 248
 249 #endif