WIP: pad-monitor: Fix serialized event order check

pad-monitor: also track eos event that should be emitted after a seek

When seeking out of the media file length, the element should push an
EOS with the same seqnum of the seek event

scenario: add missing space

validate: prettify output of results

Makes the result a bit more readable than a compact multi-line list.

FIXME: Figure out how to print the description of the issues (which can
spawn multiple lines) in a nice way.

scenario: add missing line break after print

pad-monitor: avoid tracking tag events

Tag events are hard to track and check if properly serialized because
they mutate too much inside elements. There is no reliable way currently
to match a tag event pushed into an element and another tag event
leaving the element (other than if the pointers are actually the same).

pad-monitor: only do combined return checks for demuxers

Seems like the only place that gstreamer elements should really
care about it

pad-monitor: add two useful macros for readability

Avoids using long macros and having to check for pad-monitor parent
existance

media-info: add a track switching test

This test will find the first input selector with more than one
sink pad, and cycle through them till it gets back to the original
one. Five seconds between switches. The test checks that some data
was sent from the input selector when each of the sink pads was
selected.

scenario: Print on stdout when we seek

validate: Report an issue result of query state that position > duration

scenario: Execute action whenever we pass the expected position

We know are sequential so whenever the wanted position is passed we
should execute the action.

This avoid issue with the tolerance when we have high rate playback

validate: Dump pipeline for each state change

Ala gst-launch

transcoding: Print duration regularly

validate: Print state changes to help debugging

licenses: improving licensing info on all files

pad-monitor: fix typo when acessing parents data

pad-monitor: reset buffer timestamp data after a flush

As the pad/element also clears its internal state

pad-monitor: also track flush events on probes

tools: moving applications from gst/validate to tools

Keeps the CLI applications separate from the libs files

gst-validate-scenario: fix scenario listing missing installed ones

Only scenarii in the current directory or the user's home directory
were being listed.

gst-validate-transcoding: fix help text to refer to URIs as URIs

Referring to them as files is confusing, as you'll try to use files
and not URIs.

docs: minor spelling/grammar fixes

pad-monitor: Move repeated caps to test only on sinkpads

Testing on source pads can lead to false positives when pads are
unlinked. The caps event is sticky and will be pushed again later
when another buffer/event is pushed, leading to an acceptable
situation to push the caps twice.

pad-monitor: add another acceptable flow return combination scenarios

A demuxer knows when to return EOS after samples are over, so it is
ok for it to return even when all src pads returned OK

pad-monitor: improve serialized event checks

If the event was already found at the first position of the array, it
shouldn't be searched on the rest of it.

This removes lots of false positives.

pad-monitor: fix aggregate flow return check for error situations

Flow flushing must be returned upstream to indicate an error situation
downstream

gst-validate: print error message when starting the pipeline fails

Instead of just exiting silently

pad-monitor: New check for duplicate caps event

We shouldn't get/push twice caps that are identical

media-info: avoid glib assert

report: Avoid repeating long macros

Makes the code a bit more readable and compact

validate-report: Fix critical flag handling

criticals are warnings/issues also
warnings are issues also

data: Add a test that alternates (fast) backward and forward playback

data: Add a seek_backward/forward scenarios

scenario: Have GstClockTime as second (in double) inside scenario files

Making it easier to read

data: Add fast_forward/backward and simple_backward scenarios

data: Add a Backward and Forward seeking scenario

data: Add a Pause/Resume scenario

validate: Set return value of apps to -1 only if a critical issues was reported

Conflicts:

gst/validate/gst-validate-transcoding.c
gst/validate/gst-validate.c

transcoding: Make sure to initialize Gst before parsing options

Avoiding to break the help

transcoding: Connect to the bus signals watch as the main watch might already be connected

scenario: Start monitoring the position only when the pipeline starts playing

Otherwize seeking with a playback_time=0 won't work properly

scenario: Fix negative rate management

Properly parse the it has a gdouble and set the stop position of the seek as
seeked_position if the rate is negative

+ Add some debug

scenario: Actions order in xml file is the order in which they must be executed

When seeking we might want to execute seeks at a playback time inferior than previous
seek, so we need to be able to define the order in which actions have to be
executed, the simplest way is to just concider that actions are always
order in the XML files.

+ Add some more debugs

Conflicts:

gst/validate/gst-validate-scenario.c

scenario: Rename the seeks list to actions, and initialize action to 0 when allocating

scenario: Rename scenario xml files extension to .scenario

validate: Connect to the bus signals watch as the main watch might already be connected

validate: Add a way to list avalaible scenarios

Conflicts:

gst/validate/gst-validate-transcoding.c

gst-validate-transcoding: add signal handling and issues printing

Update to have the same features as gst-validate.

1) Handle interrupts properly, with the additional of having the
'eos-on-shutdown' argument that sends EOS to the pipeline. This is
very useful for transcoding processes to finish correctly.

2) Print issues on the end of application

gst-validate: add interrupt handler

Handle interrupt properly to still print issues when exiting

pad-monitor: Fix source pad probe handling

type is a bitmask and not an enum

gst-validate: fix documentation after debug category changes

validate-reporter: More comprehensive debug message

Some issues don't have any arguments, so put the full details in.

validate: Only use one debugging category: validate

There's no point in having a different debug category per file, you
can filter it by source filename if you *really* want that.

gst-validate: print issues at the end

And improve documentation about usage

media-check: add results file comparison

Adds a new expected-results argument to receive a file that is used
as a base for comparison with the new results. In case differences are
found, the application will print those issues.

reporter: do not print issues to stdout

media-info: fix playback tests

They weren't waiting for the pipeline to properly change state
before sending seek events, that would cause some events to
return TRUE even if they were not handled

media-check: return nonzero if a test failed

media-info: add playback and reverse-playback tests

The tests are very simple as they only write the first error they
found during playback. If no error is set, an empty string is
printed.

The playback pipeline isn't monitored with validate monitors for now

rename: gst-validate-file-check -> gst-validate-media-check

It not only validates files, takes any URI

media-info: add stream topology parsing

Currently it only saves/loads the main type, but all topology is
already being parsed for future use

media-info: add duration and seekable entries

Add duration entry in ns and seekable as a boolean to a new group
'media-info'

media-info: replacing file-checker with a simpler media-info struct

This struct stores information about a media and tests run on it. It
also has a few helper functions that allows storing the results to a
file and loading it back.

Instead of having the file-checker object that would compare the
extracted values from the file to expected results set to its properties,
the media-info will store the values and it will be possible to compare
old media-info with new media-info from the same file. This allows
tracking improvements and regressions on different gstreamer versions.

Right now, the media-info is very tiny and doesn't store much info, only
the uri and the file size in bytes, but it will receive more additions in
the upcoming commits for storing duration, media topology, seekability and
playback information.

.gitignore: Update for 1.0 and cleanup

all: Enable more C warnings at build time

And fix the issues:
* Proper forward declaration
* static functions marked properly
* absolute includes
* declaration order

reporter: Fix proper debug message output partially

In order for the special gstreamer print argument handler to be used
you can't use g_strdup_printf. You need to pass it the actual va_list.

pad-monitor: Handle case where internal pad iterator is NULL

Can happen with inputselector

pad-monitor: Don't use signal that doesn't exist

Note that we should just ensure we always get the pads from the parent

pad-monitor: Update raw audio caps checks

pad-monitor: Fix locking issues

We were taking locks twice.

Also add debugging info when taking/releasing locks to help further similar issues

file-checker: GstEncodingProfile is a GObject in 1.0

gst-validate: port to 1.0

po: missing po rename

validade: add missing config.h includes

validate: add init function

Adds an init() function that should be called before using the lib.
It takes care of calling all internal initializing functions in
gst-validete

tools: improve documentation

rename gst-qa -> gst-validate

pad-monitor: only do complete caps checks on setcaps

On get caps it is acceptable to have missing fields to simplify caps
negotiation

qa-preload: split to separate lib

It should only be used separately, otherwise it will wrap around any
pipeline from applications linking with gstqa

file-check: add reverse-playback test

Adds a test that checks if reverse playback works without errors

qa-reporter: Make debug message a bit more readable

By surrounding it with double quotes

pad-monitor: 0.10 uses "channel-positions" field in audio caps

And it's an array, not a string

Makefile: Clean up for make distcheck

Directories, headers, files weren't properly disted

Also clean up the various CFLAGS/HEADERS/SOURCES variables and remove
ones that aren't needed.

po: Add missing Makevars file

pad-monitor: use correct variable for segment comparisons

Use the expected versus the received instead of using the received
twice.

reporter: fix printf format type

docs: improve and update docs

qa-scenario: re add scenarios creation to bin-monitor

GstPipelines are monitored by bin monitors. Create scenarios if
requested from the bin monitors and store them there.

qa-monitor: remove reference to the runner

qa-monitor implements qa-reporter, and we already have a runner stored
there.

gitignore: ignore more binaries

qa-file-check: add new binary to run file checks easily

It creates a GstQaFileChecker and runs it on the passed URI with
the tests enabled as arguments

qa-runner: simplify runner to not hold refs to monitor/pipeline

The GstQaRunner is now a simple aggregator of reports that it receives
from monitors and filechecker. This allows it to be used in both
scenarios without  APIs that expect GstElement or Monitors, that are
only used on the pipeline monitoring QA tests.

file-checker: add file playback testing feature

Adds a property that triggers the file playback tests on
GstQaFileCheker. Also enable it in the gst-transcoding post file checks.

The implementation is simple, just create a playbin2 and use fakesinks
as sinks, set it to playing and wait for either EOS or ERROR messages.

qa-reporter: fix typo

file-checker: include restriction caps tests when checking for profiles

Also move the caps check earlier on the path, to error out sooner and
avoid iterating the sub streams without needing

file-checker: replace encoding profile comparison

Use our own custom comparison to allow to add more fine grained error
reporting. Also the encoding profile is_equal function is too strict as
it also compares profiles names, that doesn't matter to us.

This commit implementation is still initial and needs improvements as it
isn't using the restriction caps, which includes information that might not be
on the profile format caps.

qa-reporter: fix crash by avoiding unref an integer

makefile: fix build of gst-qa- tools

file-checker: add error report and new report types

Add a list of new report types and use them in the file-checker.
The errors are mostly related to testing file attributes against
expected values