dvbsuboverlay: Improve selection of current to be displayed subpictures

Drop all subpictures that are too old anyway and clear the currently
displayed subpictures if num_rects==0 happens.

dvbsuboverlay: Implement clipping of video buffers

Also don't clip subpicture buffers, they have no duration and
clipping them doesn't make much sense here.

dvbsuboverlay: Clean up locking some more

dvbsuboverlay: Flush subtitles and all internal state when needed

dvbsuboverlay: Set the global library log function exactly once

And don't use one of the possibly many renderer instances, this is only
calling for crashes.

dvbsuboverlay: Remove lots of commented out and unused code and clean up locking

dvbsuboverlay: Fix more of the blending, so it looks quite good now

* libdvbsub gives us alpha channel already, not transparency level, so
don't do another "alpha = 255 - alpha", this is done by libdvbsub.
* Fix alpha channel handling in interpolation - assrender had an additional
1bpp alpha bitmap as a possible mask, we don't. So don't use the palette
index array as alpha values; bug from quick code porting long ago to
changing pixel colors (assrender has a single pixel color for whole
regions or something, unlike dvbsub, which has indexed colors).
* Don't forget to reassign our YUV and other local pixel color variables
after shifting to work on the bottom part of a 2x2 subsample block, or
it's obviously very blocky.

Remaining issues in blending:

* Should probably be interpolating or doing something else useful with the
resulting U and V channels, so that most of the source pixel UV values would
actually be actually cared about, except for just one out of possibly four.

* Don't convert AYUV to ARGB in libdvbsub, and then back from ARGB to AYUV in
dvbsuboverlay for no reason

* Re-factor the whole thing to something more like textoverlay blending
* Related to that, perhaps cache the current spu in a good format for quick
blending on each frame, after which the more often called blending parts
might become more straightforward

dvbsuboverlay: Fix blending bug regarding color channel addressing.

libdvbsub gives us ARGB ordered pixels right now, not RGBA.

dvbsuboverlay: Do blending calls when appropriate

This gives us actually shown subtitles, however with bugs in the
current blitting code, resulting in very transparent subtitles.

dvbsuboverlay: Implement fallback page_time_out honoring

The spec has a page_time_out in the page composition segment to ensure
subtitles don't get stuck on screen for too much longer than intended,
when future page composition segments get lost on bad reception, or other
problems. Honor it in the gst plugin side.

dvbsuboverlay: Implement subtitle queueing and syncing with video

Push incoming subtitle pages in a FIFO queue (pending_subtitles)
and dequeue the head when it's time to show it (when video running
time reaches the subtitle page running time).
Keep the subtitle page, that is supposed to be blended on top of video
currently, in a separate object variable (current_subtitle). As a
next step we can then pre-render current_subtitle to a better to blend
format.

dvbsuboverlay: Make the new dvb_subtitles_free() accept NULL

Don't crash if dvb_subtitles_free(NULL) gets passed, like most other
*_free functions are happy with.

dvbsuboverlay: Pass page_time_out and pts with the DVBSubtitles structure

Eases holding onto the information in gst plugins side queue of
DVBSubtitles, so we won't need to create yet another temporary struct
to keep the pts and page_time_out too.
And this really logically belongs at the toplevel information set anyway
and in that struct...

dvbsuboverlay: Make the libdvbsub callback handler responsible for memory cleanup

We want to allow queueing of raw region image data in the gst plugin side,
and keep the data around until we pop the item from the queue. So make
the callback handler responsible for memory cleanup, if one is installed.

dvbsuboverlay: Work with GstClockTime instead of PTS for subtitle timing

Abuse libdvbsub PTS tracking to just store our running time in it, to get
it back in the callbacks. As GStreamer does its own PTS handling behind our
back (especially for video), we should just sync with video per running time,
not try to do it with PTS, which doesn't seem well accessible for video chain.
We can later relabel dvb-sub.c pts naming convention if wanted, it's just
passing along guint64 values, which GstClockTime fortunately is too.

The current idea is to collect the regions returned by the callback into
a FIFO buffer and pop and pre-render the top one into a separate
quick-to-blend cached format, which is then appropriately blended in the
video chain until the next one on top of the stack reaches the video chains
running time (or the fallback timer hits).

dvbsuboverlay: Add FIXME note about non-constant PTS for a display set handling.

dvbsuboverlay: Remove dvb_sub_feed() API

GStreamer will only use dvb_sub_feed_with_pts, as it has its own PES filter
to do the header parsing.

dvbsuboverlay: more TODO

gstmpegtsdemux: add temporary **HACK** for dvb subs testing so dvbsuboverlay gets whole packets

<tpm> leio, what's the mpegts demux hack about?
<leio> my libdvbsub code can't handle cut packets
<leio> so the hack instructs the demuxer to gather full packets before pushing down, but it applies that to more PES packet types than just dvbsub, but I'm not sure if that's a bad thing
<leio> either way, needs a cleaner solution, either in demuxer, or I need to handle cut packets
<tpm> ok, but really it should be fixed in the overlay, right?
<tpm> or a parser be inserted
<leio> the problem is that I don't know from the first packet beforehand if it is a cut one or no
<leio> not
<leio> err, first buffer
<leio> just when I receive the next one I see if it has a valid timestamp on it or not
<leio> so I can't very well queue it up in the chain either, I might be blocking the very last subtitle for no reason or something
<tpm> but you could just drop/ignore packets until you find one, right?
<leio> find what?
<tpm> a complete packet?
<leio> the problem isn't that they aren't complete
<leio> the problem is that they are cut across multiple GstBuffers by the demuxer without the hack
<tpm> sure, I understand that
<tpm> but you can't easily determine if a GstBuffer contains he start fragment of a packet or not?
<leio> I guess I could parse the packet and see if its length is enough, just like the libdvbsub code eventually does too
<leio> I can, it has a timestamp if it's the first chunk
<leio> I just never know if I need to wait for more, without some parsing
<tpm> ah ok
<leio> while the demuxer could just give me an uncut one in the first place
<leio> like it always does for program streams
<leio> that gather_pes is always set in gstmpegdemux, but not in gstmpegtsdemux

dvbsuboverlay: initial version, work in progress

audioparsers: update some documentation

mpegaudioparse: add to documentation

dcaparse: add to documentation

qtmux: add documentation

baseparse: increase keyframe awareness

... which is not particular relevant for audio parsing, but more so
in video cases.  In particular, auto-determine if dealing with video (caps).

sys: Add android audioflingersink

Add build system for Android

camerabin: smal api doc update

camerabin: Avoid assertion on image finishing

As imgbin_finished() is scheduled from g_idle_add, it might
be run a little later than expected, this can lead to the application
setting camerabin to ready before imgbin_finished() runs. In this case,
the processing counter goes to 0 and an assertion happens.

This patch relaxes the imgbin_finished() check on the processing
counter.

element-maker: Handle names with multiple underscores

chopmydata: Add new element

This element splits up a stream into randomly-sized buffers.
Useful (maybe) for testing parsers.

tests: Remove leftover comment

Remove comment that doesn't make sense anymore

applemedia: don't use the deprecated g_strcasecmp function.

Replace g_strcasecmp with g_ascii_strcasecmp.

Fix compiler warnings with gcc 4.2.1 on OSX.

ac3parse: use proper EAC-3 caps

qtmux: handle msvc ftruncate incompatibility

Fixes #636185.

Add a schroenc test

Fix pad template memleaks

Pad templates returned by gst_static_pad_template_get() were not
being unreffed.

vp8enc: Readd setting of granulepos

Revert parts of last patch that removed setting of granulepos.
oggmux still requires correct granulepos in incoming packet.

vp8enc: Don't override timestamps set by base class

Because the base class does it correctly.
Fixes: #635720, #625558.

baseparse: avoid unexpected stray metadata

baseparse: use proper _NONE output value when applicable

jp2kdecimator: Add a JPEG2000 decimator element

This element drops information from JPEG2000 images without reencoding.

jp2kenc: Emit SOP markers in every codestream packet

This makes parsing much easier, faster and more reliable.

qtmux: gst_qtmux_check_difference verify before subtract

Avoid negative overflow by checking the order of operands
on subtraction of unsigned integers.

https://bugzilla.gnome.org/show_bug.cgi?id=635878

mpegtsmux: Fix some memleaks

schroenc: minor memleak fix

signalprocessor: Remove dead assignments

videomeasure: Remove dead assignments

tta: Remove dead assignments and useless variable

stereo: Remove dead assignments

sdp: Remove useless variables

rtpmux: Remove dead assignments

real: Remove dead assignments

ivfparse: Remove dead assignments

freeze: Remove dead assignments

dvdspu: Remove dead assignments

dtmf: Remove dead assignments

dccp: Remove dead assignments

audioparsers: Remove dead assignments

vp8: Remove dead assignments

sdlaudiosink: Remove dead assignments

schroedinger: Remove dead assignments

mimenc: Remove dead assignment

cogdownsample: Remove dead assignment

opencv: Remove dead assignments

... and fix indentation

cogcolorspace: Remove dead assignment

cogframe: Remove dead assignments

celtenc: Initialize variable

In the case the tag_setter returns something, empty_tags would be
garbage value.

celtenc: Remove dead assignment

assrender: Remove dead assignments

audioparse: fix possible division-by-zero

https://bugzilla.gnome.org/show_bug.cgi?id=635786

shm: Don't pass the ShmPipe to the function closing the shm area

shm: Use the right counter when freeing buffers

shmalloc: Manually decide to use GLib or not in the shmalloc

So make it easier for embedders to use it with or without Glib

shm: Remove duplicated arguement

shm: Fix socket leak on connect() error

shm: sp_client_recv returns negative on error, so make the retval signed

shm: Rename confusingly named variable

shm: Change permissions on old shm areas too

Change the permissions on old shm areas

shm: Use the macro for the last error too

shm: Use "ablock" for all ShmAllocBlock variables

Use the ablock variable name for ShmAllocBlocks and block for
ShmBlock

shm: Add more comments

shm: stylist improvements

shm: Explain some fields

Explain what some of the fields in the allocator actually mean

interlace: Fix buffer timestamp and duration

The field rate is twice the frame rate of the src pad and so the duration of
one output buffer is src_fps_d / (2 * src_fps_n).

interlace: Rename pattern property to field-pattern

This is mostly for clarity of what the property means and, I believe, makes the
pattern-offset property more comprehensible.

interlace: Add pattern offset property

This property allows one to start at any point within the field pattern after
a discontinuity (whenever gst_interlace_reset () is called). Thus with the
2:3:3:2 pattern, for example, one can start at offset 2 and achieve 3:2:2:3
or offset 1 and achieve 3:3:2:2.

camerabin: Create imagebin elements when image mode is set in camerabin NULL state

This patch refactors imagebin element creation and linking into separate functions,
and adds re-using also for imagebin internally created elements.

So this refactoring allows creating imagebin elements already in NULL state when
application sets the image mode, and next state change from NULL to READY will be faster.
This reduces first capture latency.

Earlier the elements were both created and linked in NULL to READY state change.

mpegtsparse: Create a sub-buffer with the section length

opencv: fix caps issues and extend supported caps for some elements

Some elements had vague caps, such as "video/x-raw-rgb", which caused problems
at least with textwrite. For other elements, the underlying OpenCV functions
support more than just one image type, so I increased the number of supported
caps.

I created a utility function "gst_opencv_caps_from_cv_image_type", so each
element creates caps directly from OpenCV image types, such as CV_8UC1 for
8-bit grayscale. This function uses gstvideo to create uniform caps.

https://bugzilla.gnome.org/show_bug.cgi?id=635304

jpegparse: Small optimization on tags parsing

Optimize a little avoiding copying a taglist when parsing xmp/exif
data.

outputselector: Avoid losing the last_buffer when switching

This patch makes outputselector take an extra ref when pushing
the last_buffer to avoid it losing it during the switch function.

This makes resend-latest properly work if the active-pad is changed
during the switch function buffer pushing (on a pad probe, for example).

https://bugzilla.gnome.org/show_bug.cgi?id=629917

outputselector: Recheck pending switch after pushing buffer

This patch makes output-selector always recheck if there's a
pending pad switch after pushing a buffer, preventing that
it pushes a buffer on the 'wrong' pad.

https://bugzilla.gnome.org/show_bug.cgi?id=629917

rsvgoverlay: scalable and relative svg overlay with cairo

Add a cairo+librsvg based overlay element to the rsvg plugin.

make: remove traces or moved/removed plugins

make: add missinf trailing \ to fix the build

colorspace: remove incorrect check

qtmux: remove remnant of obsolete property

tests: qtmux: also unit test fragmented file cases