gitlab: Do not pass --force-sync in the launcher

We let subproject handle it for us now

docker: Install hotdoc and required packages to build the doc

Fedora docker: Bump to f30

Needed to get an upgraded ffmpeg.
Also required to have a new enough version of gobject-introspection
and remove all warnings

gitlab: ORC_CODE=backup is now set in validate GstCheck application

gitlab: Blacklist moved to the check testsuite directly

gitlab: Run valgrind on ges tests

blacklisting python tests for now as those are still leaky/need some python suppressions

gitlab: Dump launcher logs on failures

fedora: Install temrinal markdown viewer

To enhance the launcher output

gitlab: Disable integration test in cerbero repository

This is minimal fix for this job, we don't build the required
dependency.

gitlab/ci_template: skip cerbero builds and integration tests for gst-omx

and the integration test for gstreamer-vaapi (we explicitly
remove the vaapi plugin when running integration tests).

gitlab/ci_template: Build gst-omx as well

gitlab: The launcher now generate the right suppression files list

See https://gitlab.freedesktop.org/gstreamer/gst-devtools/commit/787939f7505407949a104539688905bc4057d2d4

gitlab: fix gst-integration-testuite exceptions

Fixes error introduced in
https://gitlab.freedesktop.org/gstreamer/gst-ci/commit/9d32304eb378483e2382739b050876349a98e5fd
https://gitlab.freedesktop.org/gstreamer/gst-ci/merge_requests/94

gitlab: Do not run check and apps job on gst-integration-testsuites

ci: Run 'validate' and 'ges' integration testsuites

And use new validate feature to print debug logs URL directly
in the logs instead of dumping the whole files.

Update to latest fedora 64 image

gitlab: don't build cerbero jobs in gst-build

Fixes https://gitlab.freedesktop.org/gstreamer/gst-ci/issues/17

gitlab/android-examples: only output the resulting apks

The full build directory while useful for debugging is rather large
(almost 1GB per app depending on plugins used).

gitlab: also build-test the android tutorials from gst-docs

gitlab/ci_template: shorten name for gstreamer nodebug build

Shorter and nicer to read with spaces than underscores.

gitlab: disable check target in gst-examples

Not particularly useful there

add CI for gst-examples android build

gitlab: add a script to clone a repository using manifest details

registry: Change the way in which images are tagged

Previously we tried using the git commit ref as a UID for the
images. This does not work though cause multiple jobs that rebuild
the image can be triggered and override the same image tag. Instead
use the CI_JOB_ID to provide better semantics wrt naming conflicts.

Additionally add the date as part of the tag to better indicate
the age of the image. Gitlab WEBGUI doens't indicate the age
in a good way nor makes it easy to short the images.

gitlab/ci_template: disable another test in check

close #12

docker: add android-specific image

pre-includes the NDK/SDK

gitab/ci_template: Update cerbero image

gitlab/ci_template: run valgrind tests automatically

Don't valgrind everything for all changes though,
but only those modules most likely to be affected
by changes in the current ci project. So, valgrind

 - gstreamer only for gstreamer core changes
 - gst-plugins-base for core/base changes
 - gst-plugins-good for core/base/good changes
 - gst-plugins-ugly for core/base/ugly changes
 - gst-plugins-bad for core/base/good changes

In other words: don't valgrind core/base if it's
good/bad/ugly that's being changed, for example.
Don't valgrind -good or -ugly for changes in -bad,
etc.

Meaning:

 - for changes in core, valgrind core/base/good/ugly/bad
 - for changes in base, valgrind base/good/ugly/bad
 - for changes in good, valgrind good/bad
 - for changes in ugly, valgrind ugly
 - for changes in bad, valgrind bad

More modules to be added later once they're valgrind
clean on the CI.

https://gitlab.freedesktop.org/gstreamer/gst-ci/merge_requests/80

gitlab/ci_template: add manual valgrind jobs

Always print timestamps when running Cerbero

This is useful when doing performance improvements or comparisons.

docker/cerbero: Always install lbzip2 for use in packaging

See: https://gitlab.freedesktop.org/gstreamer/cerbero/issues/132

Needed for https://gitlab.freedesktop.org/gstreamer/cerbero/merge_requests/139

Do not run indent on gst-integration-testsuites

gitlab/ci_template: blacklist curlhttpsrc test_multiple_http_requests

Too flaky.

https://gitlab.freedesktop.org/gstreamer/gst-plugins-bad/issues/932

docker:fedora: Remove Qt5 devel packages

as we haven't tested building it and it leads to build issues in
examples.

gitlab/ci_template: add a build that disabled debug logs

docker:fedora: No need to add site-packages to PATH

fedora: Install meson 0.49.2

Working around https://github.com/mesonbuild/meson/issues/5087

Revert "docker/fedora: use meson from fedora repos"

This reverts commit a116f19eeb1d6cc40b2b9310c50c404ce407fcdd.

Track gst-integration-testsuites

fedora: Install git-lfs

gitlab/ci_template: refresh the image builds

docker/fedora: use the meson subprojects cmd to download subprojects

Introduced in 0.49.0 so we can avoid the need to configure in
order to cache the subproejct repos.

docker/fedora: use upstream registry to retch the base image

Fedora is now hosting its official docker images at
https://registry.fedoraproject.org

docker/fedora: use git-core instead of git

We don't need the full blown git pakcage and we can avoid
a couple of perl deps that way

docker/fedora: use meson from fedora repos

Fedora is still on version 0.49.2 while pip is on 0.50.
With the version from pip we can no longer run some gst-sharp tests
so we essentially revert back to 0.49

https://github.com/mesonbuild/meson/issues/5087

gitlab: remove the android gst-build target

android is now being tested using cerbero for the binaries we produce.

gitlab/cerbero-android: build without werror

CI: Add Android universal builds

gitlab: Move cerbero jobs in gst-ci

This will allow extending the CI at one place.

docker/fedora: Include common debug symbols in the image

Part of #14

cerbero: enable the werror variant by default

docker/fedora/prepare.sh: add valgrind

gitlab: update cerbero-fedora image to the latest

Blacklist check.gstreamer-sharp.SdpTests

gitlab/ci_template: skip cerbero builds for gst-build changes

Enable GstSharp

Add depencencies to build gstreamer-sharp in our image

ci_template: unblacklist test

Should be fixed by the following MR
https://gitlab.freedesktop.org/gstreamer/gst-rtsp-server/merge_requests/20

gitlab/ci_template: blacklist ges test_auto_transition test

Fails too often.

Reported as https://gitlab.freedesktop.org/gstreamer/gst-editing-services/issues/63

Blacklist racy audiomixer.test_flush_start_flush_stop test

See https://gitlab.freedesktop.org/gstreamer/gst-plugins-base/issues/555

gitlab: Blacklist another ges test

python.test_timeline.TestTransitions.test_transition_type fails as reported in
https://gitlab.freedesktop.org/gstreamer/gst-editing-services/issues/62

gitlab: Blacklist the rtsp-server test_shared_udp test

This test sometimes fails, as reported in
https://gitlab.freedesktop.org/gstreamer/gst-rtsp-server/issues/61

docker: cerbero: Add Android cross toolchain

This runs the cross-android-universal bootstrap. Note that we remove the
Android NDK source as it is no longer needed during builds.

Update docker hash

While cleaning up, I got confused since some docker were rebuilt without
but unused. So I broke the build, this should fix it.

gitlab/ci_template: blacklist multisocketsink test_add_client test

Unexpected critical/warning: gsignal.c:2641: instance '0x144a770' has no handler with id '2'

Stack trace:
gst_debug_get_stack_trace (gstinfo.c:2788)
gst_check_log_critical_func (gstcheck.c:281)
g_logv (/usr/lib64/libglib-2.0.so.0.5800.2:0x7f40d144e4fb)
g_log (/usr/lib64/libglib-2.0.so.0.5800.2:0x7f40d144e6ef)
g_signal_handler_disconnect (/usr/lib64/libgobject-2.0.so.0.5800.2:0x7f40d13c5a03)
g_cancellable_disconnect (/usr/lib64/libgio-2.0.so.0.5800.2:0x7f40d1238dae)
?? (/usr/lib64/libgio-2.0.so.0.5800.2:0x7f40d1238df8)
?? (/usr/lib64/libglib-2.0.so.0.5800.2:0x7f40d1444045)
?? (/usr/lib64/libglib-2.0.so.0.5800.2:0x7f40d1445407)
ensure_condition (gstmultisocketsink.c:999)
gst_multi_handle_sink_remove_client_link (gstmultihandlesink.c:971)
gst_multi_handle_sink_clear (gstmultihandlesink.c:847)
gst_multi_handle_sink_change_state (gstmultihandlesink.c:2200)
gst_element_change_state (gstelement.c:2952)
gst_element_change_state (gstelement.c:2991)
gst_element_change_state (gstelement.c:2991)
gst_element_set_state_func (gstelement.c:2906)
test_add_client (multisocketsink.c:230)

Likely same root cause as:
https://gitlab.freedesktop.org/gstreamer/gst-plugins-base/issues/516
https://gitlab.freedesktop.org/gstreamer/gst-plugins-base/issues/534

gitlab/ci_template: blacklist extra tests

rtpsession.test_multiple_senders_roundrobin_rbs:
https://gitlab.freedesktop.org/gstreamer/gst-plugins-good/issues/548

elements_audiotestsrc.test_layout:
https://gitlab.freedesktop.org/gstreamer/gst-plugins-base/issues/535

gitlab/ci_template: blacklist even more tests!

gstreamer.gst_gstsystemclock.test_periodic_shot:
https://gitlab.freedesktop.org/gstreamer/gstreamer/issues/348

splitmux.test_splitmuxsrc_caps_change:
https://gitlab.freedesktop.org/gstreamer/gst-plugins-good/issues/547

nle_simple.test_simplest:
https://gitlab.freedesktop.org/gstreamer/gst-editing-services/issues/57

ges_basic.test_ges_pipeline_change_stat:
https://gitlab.freedesktop.org/gstreamer/gst-editing-services/issues/58

camerabin.test_single_video_recording:
https://gitlab.freedesktop.org/gstreamer/gst-plugins-bad/issues/864#note_101558

camerabin.test_multiple_video_recordings:
https://gitlab.freedesktop.org/gstreamer/gst-plugins-bad/issues/864#note_101646

gitlab/ci_template: Blacklist some more problematic tests

These tests are somewhat hard to reproduce and don't have an issue
associated with them yet, but they seem to fail quite often in
scenarios where they are run as part of a bigger group of tests

See !61 for more

ci_template: Remove the j = 1 restriction from check

Previously we were forcing tests to run with j 1 to avoid random
failures/races that occurred due to tests being racy. Majority
of those tests have been blacklisted and this should no longer be
needed.

gitlab: Update to latest cerbero docker image

docker: Use a local config for cerbero local_source and home_dir

Ohterwise the cerbero.cbc seems to take precendence on the localconf.cbc
during builds, which cause caching issues, since data does not get stored
at the right place.

gitlab: Remove uneeded mkdir

The cerbero_home is already part of the /cerbero folder that we rsync
at start.

gitlab/ci_template: blacklist another test

camerabin.test_image_video_cycle seems racy:
https://gitlab.freedesktop.org/gstreamer/gst-plugins-bad/issues/864

gitlab/ci_template: Blacklist more tests

pipelines_parse_launch.delayed_link:
https://gitlab.freedesktop.org/gstreamer/gstreamer/issues/345

gst_gstsystemclock.test_async_sync_interaction:
https://gitlab.freedesktop.org/gstreamer/gstreamer/issues/346

gst_gstsystemclock.test_periodic_multi:
https://gitlab.freedesktop.org/gstreamer/gstreamer/issues/347

rtpbin.test_cleanup_recv:
https://gitlab.freedesktop.org/gstreamer/gst-plugins-good/issues/546

gitlab/ci_template: blacklist another splitmux test

https://gitlab.freedesktop.org/gstreamer/gst-plugins-good/issues/544

gitlab/ci_template: Blacklist another flvmux test

See https://gitlab.freedesktop.org/gstreamer/gst-plugins-good/issues/543

gitlab: Re-add ARCH parameter to cerbero deps jobs

This is required and was removed without proper testing.

CI: Add Win32 and Win64 cross builds

gitlab/ci_template: update the sha of the images

gitlab/ci_template: Factor out the image uris to variables

This avoids duplication and makes them easier to update and keep
in sync.

docker: cerbero: Add MingW cross toolchains

This runs the cross-win32 and cross-win64 bootstrap.

gitlab: Unblacklist check.gst-plugins-good.elements_splitmux.test_splitmuxsrc_sparse_streams

Was caused by a bug in a MR.

gitlab: Blacklist 4 more tests

check.gst-plugins-base.pipelines_tcp.test_that_tcpserversink_and_tcpclientsrc_are_symmetrical:
  https://gitlab.freedesktop.org/gstreamer/gst-plugins-base/issues/221

check.gstreamer.elements_capsfilter.test_unfixed_downstream_caps:
  https://gitlab.freedesktop.org/gstreamer/gstreamer/issues/335

check.gst-rtsp-server.gst_rtspclientsink.test_record:
  https://gitlab.freedesktop.org/gstreamer/gst-rtsp-server/issues/55

check.gst-plugins-good.elements_splitmux.test_splitmuxsrc_sparse_streams:
  https://gitlab.freedesktop.org/gstreamer/gst-plugins-good/issues/542

gitlab: Stop blacklisting check.gst-devtools.validate_padmonitor.buffer

https://gitlab.freedesktop.org/gstreamer/gst-devtools/issues/34 has been closed

ci: Update cerbero docker image

This new image contains source cache, which should speed first fork and
cold cache cases.

ci_template.yml: blacklist one more tests in check

check.gst-editing-services.nle_complex.test_one_expandable_another occasionally fails.

https://gitlab.freedesktop.org/gstreamer/gst-editing-services/issues/55

docker: cerbero: Add in-docker sources caching

As our runner cache in most of the time cold, and is always cold for new
contributors, which should greatly speedup the build.

ci_template: blacklist flaky gst-devtools.validate_padmonitor.buffer test

https://gitlab.freedesktop.org/gstreamer/gst-devtools/issues/34

ci_template.yml: blacklist one more tests in check

check.gst-plugins-bad.elements_netsim.netsim_stress occasionally fails.

https://gitlab.freedesktop.org/gstreamer/gst-plugins-bad/issues/849

ci_template.yml: Unblacklist test in check

gstpad.test_pad_probe_block_add_remove does not fail anymore.

https://gitlab.freedesktop.org/gstreamer/gstreamer/issues/339

ci_template: bump the expiration time of artifacts

build job artifacts are the ones that consume much space, and
thus only set to 5 days, might lower it if space is an issue.

Otherwise rest job artifacts are just logs, text and xml files.

Revert "ci_template.yml: blacklist another test in check"

This reverts commit d922144894e136b5237a20094411e15dd03be17e.

This was duplicate of 7f03e972eec5e94c66467b1e45e2ba9761f7bcc6

ci_template.yml: blacklist another test in check

check.gstreamer.gst_gstpad.test_pad_probe_block_add_remove
occasianlly fails.

https://gitlab.freedesktop.org/gstreamer/gstreamer/issues/339

ci_template.yml: blacklist two more tests in check

check.gst-plugins-bad.elements_shm.test_shm_live
check.gst-plugins-good.elements_splitmux.test_splitmuxsink_async
occasionally fail.

https://gitlab.freedesktop.org/gstreamer/gst-plugins-good/issues/531
https://gitlab.freedesktop.org/gstreamer/gst-plugins-bad/issues/847

ci_template.yml: blacklist another test in check

gstpad.test_pad_probe_block_add_remove occasionally fails.

https://gitlab.freedesktop.org/gstreamer/gstreamer/issues/339

ci_template.yml: blacklist another test in check

check.gst-plugins-good.elements_flvmux.test_incrementing_timestamps
occasianlly fails.

https://gitlab.freedesktop.org/gstreamer/gst-plugins-good/issues/530

android: Use the new docker image

android: Use cross file shipped by gst-build

We want to test that cross files shipped by gst-build are working,
instead of a generating our own.

Rename 'android' docker image back to 'ubuntu'

There is no point in doing a different docker image for each build we
are going to do inside an Ubuntu distro. We can later use the same image
for native ubuntu builds, or other cross builds (e.g. android API 21,
etc).

Move Android NDK to /opt

It was installed in '/' which doesn't feel right. Installing it in /root
is also not correct because we want to run the build as user instead of
root in the future and cleanup.sh removes everything in /root. /opt
seems the best place because that's also the default location when
installing Android Studio.