validate:launcher: Print logfiles when printing test result

It was often annoying to check wrong logs because the result are
not printed near the reference to logs.

validate: Add a way to use config actions in GST_VALIDATE_CONFIG files

The synthax is:

core, action=action-name, param1=1, param2=param2

scenario: Fallback to using media_info to determine stream duration

In the case the query duration return CLOCK_TIME_NONE.

validate:launcher: Do not run scenarios that need prerolling on RTSP stream

validate: Do not print \r in actual files

validate: Implement RTSP support

validate: reporter: add doc entry for gst_validate_report()'s varargs

Avoids GTK-Doc parser warnings

validate: scenario: fix typo/grammar issues in function documentation

validate: actions: drop needless newline before feature-rank and wait

Stale new-lines messed the help output of gst-validate -t

validate: actions: add info on mandatory fields for set-property

Additionally, drop a comment that becomes redundant after adding this
info to the action description

validate: scenario: fix description for 'seek' and 'stop'

validate: fix documentation for gst_validate_init()

validate: Update win32 def file

validate: Make Reporter.runner a MT safe weak reference

It can be used in any thread!

validate:launcher: Add missing is_live implementation for FakeMediaDescriptor

validate: Fix json serialized object leaks

validate:launcher: Handle not redirecting valgrind output

validate:launcher: Add a way to pass arguments to the leak tracer

validate: Use GWeakRefs on monitor target and pipeline

Making it thread safe and more future proof (though having them point
to NULL might not be handled all around).

https://bugzilla.gnome.org/show_bug.cgi?id=782784

validate: monitor: Unref our weak reference to the pipeline

validate: Make accessing Scenario.pipeline thread safe

The fact that Scenario.pipeline was not accessible in a thread way lead
to the fact that all users had to take the unref the last pipeline ref
in the main thread, otherwise we were crying. This was an ugly
restriction which lead to issue when using scenario on gst-rtsp-server.

This break the API as this commit remove the GstValidateScenario.pipeline
field but it is worth it.

scenarios: Add/Update scenarios for live contents

validate: Implement Scenario.__repr__

Allows better debugging when looking at logs

validate: Add live-related features to scenarios and medias

Note: The notion of "live" here is in the *content* sense and not in the
GStreamer sense.
Ex:
  * A rtsp stream is always "live" in the GStreamer sense but might not always
    provide live content.
  * HLS/DASH streams are not "live" in the GStreamer sense but might
    provide "live" content.

Some scenarios might:
* require live content
* not be compatible with live content

This patch adds two new properties for scenarios:
* live_content_required (default False) for scenarios that can only work with
  live content.
* live_content_compatible (default False) for scenarios that can work with
  both live and non-live content.
This patch adds support for reading a "live" property from stream_info

validate: g_object_newv() is deprecated

Since glib version 2.54, g_object_newv() is deprecated.

This patch changes that function with a simpler g_object_new(),
since no properties are set.

https://bugzilla.gnome.org/show_bug.cgi?id=782860

validate-report: Don't leak GError

validate-scenario: Don't end up with invalid action name

When replacing an action structure, also update the action name with
the (new) name from the new structure. Otherwise we end up with
a bogus name from the previous (deleted) structure.

validate-scenario: Avoid invalid memory access

The name of the action comes directly (i.e. not copied) from the
contained GstStructure field. Therefore make sure to take that
name from the proper structure field (copied just before) and
not from an outside one.

validate: drop superfluous whitespace from cmd description

validate: remove const from outfolder

GOptionEntry's arg_data is of type gpointer which differs in
constness from const gchar*, so remove constness from outfolder.
This fixes a build issue with msvc.

https://bugzilla.gnome.org/show_bug.cgi?id=782031

Back to development

Back to development

Release 1.12.0

launcher: Allow using the base launcher as a test manager

No reason to force people to subclass it in simple cases.

tools: Fix dotfile name

Release 1.11.91

validate: Fix update_stop.scenario seek property naming

launcher:check: Ensure to set build dir before rebuilding

baseclasses: Add method to set a specific list of scenarios

https://bugzilla.gnome.org/show_bug.cgi?id=781314

validate: drop unneeded break+concat in some string literals

Perform other related improvements while at it.

validate: Do not expect track switch to be synchronous for playbin3

And let following actions to be executed (setting the action as
INTERLACED) which will make sure the track switch happened at some
point. It means the user has to set the pipeline to PLAYING so we can
make it works but we do not have choice here I think

https://bugzilla.gnome.org/show_bug.cgi?id=781213

Update meson.build version to 1.11.90 too

validate-pad-monitor: Fix previous commit

Post-send handling was only meant for seek events

pad-monitor: Safely store expected seek values

Protect the expected seek values with the same lock as the one
that will be used to read/validate the resulting segments and flush
values.

Avoids races with duplicated seeks (i.e. a seek that was already
sent and handled via another pad, such as in demuxers).

https://bugzilla.gnome.org/show_bug.cgi?id=781112

Release 1.11.90

validate: scenario: fix error message on scenario parsing failure

validate: report: avoid pointless var & associated dup/free

Just pass the replacement string literal to _regex_replace().

validate: report: avoid _strdup_printf() if not needed

g_strdup() is enough for this string literal.

validate: report: fix description for timestamp out of range

Additionally: Fix nits in the descriptions for
SCENARIO_ACTION_EXECUTION_ISSUE and CONFIG_ACTION_TYPE

validate: Improve video fakesink properties

Try to emulate a bit better a real video sink by making the video
fakesink handle/calculate/report QoS.

Also use the same lateness value as default videosink

validate: scenario: improve description blurb for execute-on-idle

Additionally: Fix issues in _register_action_type() documentation.

validate: scenario: fix msg on _lookup_feature() failure

validate: scenario: fix documentation for GstValidateAction

Additionally:
 Improve GstValidatePrepareAction documentation
 Correct one-off use of 'eos' instead of EOS.

validate: scenario: fix type field in description parameter

Nothing wrong with Sting though :)

Additionally: Fix typo in need-clock-sync's description

validate: do not check for NULL before g_free()

g_free() is NULL-safe.

validate: fix issues with a couple of string constants

Fix missing and/or dupplicated separators, bogus breaks, typos, etc.

validate: fix whitespace separators in multi-line string constants

Drop dupplicated & add missing ones

Additionally: typo fixes

Rename plugin filenames to match plugin names

- libgstvalidateplugin.so -> libgstvalidatetracer.so
- faultinjection -> validatefaultinjection
- gstvalidategtk -> validategtk
- ssim -> validatessim

https://bugzilla.gnome.org/show_bug.cgi?id=779344

tracer: tsplot: tune the plot style a bit

Tweak the styles and spacing. Make the title multi-line and add more info.

validate: report: avoid unnecessary calls to _append_printf

Additionally: simplify %format magic used for padding

validate: report: clarify misleading message on skipped actions

Intention is to notify that not all actions were
executed but previous message suggested none were.

Additionally: fix problems in two others

validate: report: fix _issue_new()'s parameter description

tracer: tsplot: ensure multiplots use same xrange

Only this way one can visually align events with buffer graphs.

tracer: tsplot: add a 3rd plot showing cycle vs. durations

This is helpful to spot time-segments where we processes slower than required
for real-time playback.

validate: Make the HTTP server multi-threaded

Avoids having one test blocking all other tests

validate:launcher: Add information on media info files parsing failures

validate: Ignore more parser related fields when comparing media caps

validate: launcher: Fix the way we retrieve command name

We are now using a list of args for subprocess so just using it is simple now

validate:launcher: Fix typo in meson build definitions

validate: Fix call to decode() on a string

validate: fix mention to nonexistent option

validate: improve set-config option description

validate:launcher: Fix setting meson build dir

meson: Update version

Back to development

Release 1.11.2

validate:launcher: Various fixes to make the Test class directly usable

And the launcher installed with meson usable

validate: launcher: Do not force using current module dir to run check tests

validate: fix multiple occurrences of 'parametter'

validate: fix unbalanced quotation mark in set-subtitle description

+ Remove pointless split in string literal

validate:launcher: Take ValidateAction execution as a marker of test update

validate:scenario: Report action done with the execution duration

validate: runner: fix error msg for duplicated runner

- Add trailing whitespace to avoid accidental concatenation
- Fix bunch of typos and some grammar while at it

validate: fix message on runner errors

- Add newline char to avoid accidental concatenation with
  actual error message
- Fix grammar while at it

meson: Fix Gir *_prefix value to be the sames as with autotools

We want to be able to do GstValidate.Monitor and not
GstValidate.ValidateMonitor.

And do not pass header to the list of sources to build libraries as
it is not needed.

meson: Do not forget to install headers

validate: pkgconfig: fix libtool-ism in uninstalled .pc file

validate:scenario: Do not switch relative track when no track of type avalaible

This case was not handled and leaded to a division by zero.

validate: meson: Add a way to disable documentation generation

validate:meson: Build gst-validate-image-check if possible

validate:launcher: Add a way to specify a set of tests to run under the leak tracer

https://bugzilla.gnome.org/show_bug.cgi?id=767856

tracer: tsplot: separate the event section

Place the events below the buffer-ts. This makes it more readable in many cases.

tracer: tools: add a brief tool description

tracer: tsplot: a new tool to draw buffer-ts vs. clock time graphs

This tool helps to inspect data flow on each pad. It shows buffer timestamps
and events in relation to wall clock.

tracer: REAME: planning update

tracer: stats: python style cleanup

valdate: fix element leak in overide-registry

The elements were never released once created.

https://bugzilla.gnome.org/show_bug.cgi?id=778279

validate: fix leak in overrides test

The runner was never released.

https://bugzilla.gnome.org/show_bug.cgi?id=778279

validate: fix leaks in pad monitor test

- monitors were never released
- reports were leaked
- GstValidateMediaDescriptor was leaked
- caps were leaked: gst_check_setup_events_with_stream_id() and
  gst_event_new_caps() don't consume the caps
- srcpad were never released

https://bugzilla.gnome.org/show_bug.cgi?id=778279

validate: pad-monitor: fix caps leaks

These caps were not released when disposing the pad monitor.

https://bugzilla.gnome.org/show_bug.cgi?id=778279