Added audioconvert for supporting 16bit pcm when running audio encoder
[platform/core/api/mediacodec.git] / include / media_codec_port_gst.h
1
2 /*
3 * Copyright (c) 2011 Samsung Electronics Co., Ltd All Rights Reserved
4 *
5 * Licensed under the Apache License, Version 2.0 (the "License");
6 * you may not use this file except in compliance with the License.
7 * You may obtain a copy of the License at
8 *
9 * http://www.apache.org/licenses/LICENSE-2.0
10 *
11 * Unless required by applicable law or agreed to in writing, software
12 * distributed under the License is distributed on an "AS IS" BASIS,
13 * WITHOUT WARRANTIES OR CONDITIONS OF ANY KIND, either express or implied.
14 * See the License for the specific language governing permissions and
15 * limitations under the License.
16 */
17
18 #ifndef __TIZEN_MEDIA_CODEC_PORT_GST_H__
19 #define __TIZEN_MEDIA_CODEC_PORT_GST_H__
20
21 #include <unistd.h>
22 #include <tizen.h>
23 #include <media_codec.h>
24 #include <media_codec_private.h>
25 #include <media_codec_port.h>
26 #include <media_codec_bitstream.h>
27
28 #include <tbm_type.h>
29 #include <tbm_surface.h>
30 #include <tbm_bufmgr.h>
31 #include <tbm_surface_internal.h>
32 #include <gst/video/video-format.h>
33
34 #ifdef __cplusplus
35 extern "C" {
36 #endif
37
38 #define GST_INIT_STRUCTURE(param) \
39         memset(&(param), 0, sizeof(param));
40
41 #define MEDIACODEC_ELEMENT_SET_STATE(x_element, x_state)                                          \
42         do {                                                                                            \
43                 LOGD("setting state [%s:%d] to [%s]\n", #x_state, x_state, GST_ELEMENT_NAME(x_element)); \
44                 if (GST_STATE_CHANGE_FAILURE == gst_element_set_state(x_element, x_state)) {                    \
45                         LOGE("failed to set state %s to %s\n", #x_state, GST_ELEMENT_NAME(x_element));        \
46                         goto STATE_CHANGE_FAILED;                                                               \
47                 }                                                                                           \
48         } while (0)
49
50 #define SCMN_IMGB_MAX_PLANE 4
51 #define TBM_API_CHANGE
52 #define DEFAULT_DEC_POOL_SIZE 20
53 #define DEFAULT_ENC_POOL_SIZE 13
54 #define CODECDATA_NOT_USE       0x7FFFFFFF
55 #define AAC_CODECDATA_SIZE      16
56 #define WMA_CODECDATA_SIZE      64
57 #define VORBIS_CODECDATA_SIZE   4096
58 #define MAXINUM_QNUM    15
59 #define THRESHOLD_QNUM  5
60
61 /* gst port layer */
62 typedef struct _mc_gst_port_t mc_gst_port_t;
63 typedef struct _mc_gst_core_t mc_gst_core_t;
64 typedef struct _GstMCBuffer GstMCBuffer;
65 typedef struct _ion_mmu_data_t ion_mmu_data_t;
66
67 typedef enum {
68         BUF_SHARE_METHOD_PADDR = 0,
69         BUF_SHARE_METHOD_FD,
70         BUF_SHARE_METHOD_TIZEN_BUFFER,
71         BUF_SHARE_METHOD_FLUSH_BUFFER
72 } buf_share_method_t;
73
74 #ifdef TIZEN_PROFILE_LITE
75 struct _ion_mmu_data_t {
76         int master_id;
77         int fd_buffer;
78         unsigned long iova_addr;
79         size_t iova_size;
80 };
81 #endif
82
83 struct _mc_gst_port_t {
84         mc_gst_core_t *core;
85         unsigned int num_buffers;
86         unsigned int buffer_size;
87         unsigned int index;
88         bool is_allocated;
89         media_packet_h *buffers;
90         GQueue *queue;
91         GMutex mutex;
92         GCond buffer_cond;
93 };
94
95 struct _mc_gst_core_t {
96         int(**vtable)();
97         const char *mime;
98         gchar *format;
99         GstElement *pipeline;
100         GstElement *appsrc;
101         GstElement *audioconvert;
102         GstElement *capsfilter;
103         GstElement *parser;
104         GstElement *fakesink;
105         GstElement *codec;
106         GstCaps *caps;
107         tbm_bufmgr bufmgr;
108         int drm_fd;
109
110         GMainContext *thread_default;
111         gulong signal_handoff;
112         gint bus_whatch_id;
113         gint probe_id;
114
115         GMutex eos_mutex;
116         GMutex eos_wait_mutex;
117         GMutex prepare_lock;
118         GMutex drain_lock;
119         GCond buffer_cond;
120         GCond out_buffer_cond;
121         GCond eos_cond;
122         GCond eos_waiting_cond;
123
124         bool output_allocated;
125         bool encoder;
126         bool video;
127         bool is_hw;
128         bool eos;
129         bool eos_waiting;
130         bool codec_config;
131         bool need_drain;
132         bool need_feed;
133         bool need_codec_data;
134         bool need_sync_flag;
135         bool unprepare_flag;
136         unsigned int prepare_count;
137         unsigned int num_live_buffers;
138         unsigned int etb_count;
139         unsigned int ftb_count;
140
141         mediacodec_codec_type_e codec_id;
142         media_format_mimetype_e out_mime;
143         media_format_h output_fmt;
144         mc_gst_port_t *ports[2];
145         mc_bitstream_t bits;
146
147         mc_aqueue_t *available_queue;
148         GQueue *output_queue;
149
150         void *codec_info;
151         GstBuffer *codec_data;
152
153         void* user_cb[_MEDIACODEC_EVENT_TYPE_NUM];
154         void* user_data[_MEDIACODEC_EVENT_TYPE_NUM];
155 };
156
157 struct _GstMCBuffer {
158         GstBuffer *buffer;
159         int buf_size;
160         mc_gst_core_t* core;
161         media_packet_h packet;
162         bool has_imgb;
163 };
164
165 enum { fill_inbuf, fill_outbuf };
166
167 int __mc_fill_input_buffer(mc_gst_core_t *core, media_packet_h packet, GstMCBuffer *mcbuffer);
168 int __mc_fill_output_buffer(mc_gst_core_t *core, void *data, int size, media_packet_h *out_packet);
169
170 int __mc_fill_input_buffer_with_packet(mc_gst_core_t *core, media_packet_h packet, GstMCBuffer *mcbuffer);
171 int __mc_fill_input_buffer_with_adec_packet(mc_gst_core_t *core, media_packet_h packet, GstMCBuffer *mcbuffer);
172 int __mc_fill_input_buffer_with_venc_packet(mc_gst_core_t *core, media_packet_h packet, GstMCBuffer *mcbuffer);
173
174 int __mc_fill_packet_with_output_buffer(mc_gst_core_t *core, void *data, int size, media_packet_h *out_packet);
175 int __mc_fill_aenc_packet_with_output_buffer(mc_gst_core_t *core, void *data, int size, media_packet_h *out_packet);
176 int __mc_fill_venc_packet_with_output_buffer(mc_gst_core_t *core, void *data, int size, media_packet_h *out_packet);
177 int __mc_fill_vdec_packet_with_output_buffer(mc_gst_core_t *core, void *data, int size, media_packet_h *packet);
178
179 mc_gst_core_t *mc_gst_core_new();
180 void mc_gst_core_free(mc_gst_core_t *core);
181
182 mc_gst_port_t *mc_gst_port_new(mc_gst_core_t *core);
183 void mc_gst_port_free(mc_gst_port_t *port);
184
185 mc_ret_e mc_gst_prepare(mc_handle_t *mc_handle);
186 mc_ret_e mc_gst_unprepare(mc_handle_t *mc_handle);
187
188 mc_ret_e mc_gst_process_input(mc_handle_t *mc_handle, media_packet_h inbuf, uint64_t timeOutUs);
189 mc_ret_e mc_gst_get_output(mc_handle_t *mc_handle, media_packet_h *outbuf, uint64_t timeOutUs);
190
191 mc_ret_e mc_gst_flush_buffers(mc_handle_t *mc_handle);
192
193 mc_ret_e mc_gst_get_packet_pool(mc_handle_t *mc_handle, media_packet_pool_h *packet_pool);
194
195 #ifdef __cplusplus
196 }
197 #endif
198
199 #endif /* __TIZEN_MEDIA_CODEC_PORT_GST_H__ */