gitlab: update fedora image

Update to meson 0.53.1

docker: fedora: update to meson 0.53.1

Needed to build Tizonia (gst-omx backend).

ci_template: update the docker image versions

docker/fedora: upgrade base images to f31

All the images except the gst-build fedora image,
due to further changes being needed

docker/fedora: add libappstream-glib to the image

Needed to validate the appstream files of GstDebugViewer
in gst-devtools.

https://gitlab.freedesktop.org/gstreamer/gst-devtools/merge_requests/155

gitlab: use libsodium from system

The Rust crate can either build its own libsodium or use the one from
the system. Do the latter to reduce build time.

gitlab: update fedora image

gitlab/cerbero: Run gst-inspect on the built binaries

Using the latest cerbero image to get Wine for cross-win32|64.

docker/cerbero: Install wine in system setup

This is now an optional runtime dependency that cerbero can make use
of for doing runtime testing of the built binaries. Needed for
building a new image so that !227 can be merged.

docker: fedora: install Tizonia dep

Need to build gst-omx with Tizonia as target (#20).

ci_template.yml: Update the windows image version

docker/windows: work around a python ssl issue

Python fails to validate github.com SSL certificate, unless we first
run a dummy download to force refreshing Windows' CA database.
See: https://bugs.python.org/issue36137

Adapted from patches by Xavier Claessens!

docker/windows: install cmake with choco as well

docker/windows: copy the install scripts just before running them

This results into more docker layers, but it avoid invalidating
the previous layers when changing anything in the script, making
build times faster.

Adapted from patches by Xavier Claessens!

docker/windows: install git, gitlfs, 7zip and python3 with choco

Move them into a seperate script to avoid needing to refresh the
env, and make it simpler.

Adapted from patches by Xavier Claessens!

docker/windows: use direct download links from mirrors

Else Invoke-WebRequest gets redirected and ends up downloading
html page. Possibly due to an unkown user-agent? who knows.

docker/windows: Download and install MSYS for Cerbero

docker/windows: Install CMake for Cerbero

docker/windows: Fix 7zip extract command for MSYS2

-Wait is only needed for Start-Process. Also, explicitly extract the
tar file into C:\ -- don't assume the current directory is C:\

docker/windows: Clarify some MSYS2 install steps

docker/windows: Update python, git, and MSYS2

The git update is particularly important because of security
vulnerabilities on Windows related to NTFS.

docker/windows: Use load-balancing for sourceforge URLs

Instead of using a specific mirror, which may be slow or might
disappear.

docker/windows: Install Python to a path without spaces

This is needed for Cerbero since Autotools cannot handle paths to
binaries that have spaces in them.

docker/windows: Download Python installer as python3-installer

Having a binary called 'python3' anywhere that might accidentally end
up in PATH is asking for trouble.

docker/fedora: Install libdav1d

This library is required for the gst-plugins-rs rsdav1d plugin build.

gitlab: run gst-plugins-rs tests

Fix #46

gitlab: override 'except' on build rust job

The parent job has an except rule on gst-plugins-rs which was inherited
preventing the job to be run on gst-plugins-rs updates.

Fix #51

docker: fedora: install libsodium

Used by a Rust plugin.

gitlab: move gst-plugins-rs to its own job

Building Rust code is significantly slowing down ci so do it only for
projects which could make gst-plugins-rs regress.

CI: integration: Split this test in 4 jobs

That job was the slowest, now each jobs takes about 12 minutes, which
makes it slightly faster then msys2 jobs, and sometime iOS due to low
bandwidth and low availibility of OSX runners.

gitlab: cache CARGO_HOME in shared cache

gitlab: enable gst-plugins-rs in build fedora jobs

gitlab: don't run gst-plugins-rs tests

They are not working with CI atm, see #46

gitlab-ci: Fix docker tag when pushing image

Missed in https://gitlab.freedesktop.org/gstreamer/gst-ci/merge_requests/213

gitlab: build gst-omx with zynq as target

Build just the minimum to be able to build gst-omx with this specific
target.

gitlab-ci.yml: Allow tagging images built on upstream branches

If we're on the gstreamer namespace, we should push all images built
on that namespace to the registry. This is needed to, f.ex., update
the docker image used in stable builds. This is needed for:
https://gitlab.freedesktop.org/gstreamer/cerbero/merge_requests/367

docker/cerbero: Do not manually install nasm when building image

This is pulled in correctly via cerbero's bootstrap deps now.

gitlab: disable most jobs for gst-plugins-rs

No need to run jobs which are not building gst-plugins-rs.

gitlab/gst-build: Disable building rust plugins

gst-build now includes gst-plugins-rs, but gst-plugins-rs CI does not
run the gst-build CI jobs, so MRs can easily break gst-build CI.

F.ex: https://gitlab.freedesktop.org/gstreamer/gst-plugins-rs/merge_requests/186#note_371696

Disable this till that's resolved.

gitlab: update Fedora image

Include Rust environnement fix.

docker: export RUSTUP/CARGO_HOME in container

The rust binaries (rustc) needs those variables to be defined to work
properly.

gitlab: update fedora image

Use image with Rust.

docker/fedora: install Rust

Needed to build gst-plugins-rs, see gst-plugins-rs!205

Update fedora image

docker/fedora: Update meson to 0.52.1

docker/fedora: Install libcaca and aalib

Add libcaca-devel and aalib-devel to dependencies so that cacasink and
aasink can be built.

ci_template: limit cerbero jobs to the GStreamer tagged runners

CCache tends to consume a lot of space which taxes heavily some
of the shared runners. Limit the mahcines the job can run
to those were we can ensure they will not have issues with
the storage.

gitlab: enable ios builds by default

They are small enough now to not impact the overall running time of a CI
pipeline.

ci_template: bump timeout for msys2 job

windows: fix invalid powershell syntax

```
At line:1 char:34
+ cd $env:CI_PROJECT_DIR/gst-build && python git-update --no-interactio ...
+                                  ~~
The token '&&' is not a valid statement separator in this version.
    + CategoryInfo          : ParserError: (:) [], ParentContainsErrorRecordEx
   ception
    + FullyQualifiedErrorId : InvalidEndOfLine
```

This is not bash, but powershell, hue hue hue

ci_template: make sure powershell hard exists on errors

We set the env var as the shell of the image, but looks like
the gitlab runner is overriding that.

windows: Migrate to windows 1809 base

Rebuild the windows docker image against the current ltsc [1]
of server 2019. This requires moving some of the msys setup
to the runner job cause it causes docker build to hang

Switch the job tags so they now use the 1809 runner, instead
of 1607.

Tweak the PATHs in the msys job so bash doesn't complain about
slashes..

Lastly, increase the timeout of the windows jobs, as msys2
installs its deps at runtime

[1] https://docs.microsoft.com/en-us/windows-server/get-started-19/servicing-channels-19

gitlab: build cerbero android/ios for gst-docs examples

ci_template: Increase the timeout of gst-builds more

Need to take into account I/O needed to upload artficats
and download docker images.

ci_template: Bump the timeout limit from 10 to 15min for windows

ci_template: set per-job timeouts for builds

In case a build gets stuck for whatever reason,
happens from time to time on windows,
try to baild out quickly.

For cerbero builds, set the timeout to 3h which
according to the docs should also be able to
override the project defined timeout
Fix #19

https://docs.gitlab.com/ce/ci/yaml/README.html#timeout

ci_template: Use a host-mapped volume for the ccache directory

Use hardcoded path for the cache, so it will be shared by
all jobs of all gstreamer projects running on the same runner host. This
should increase the hit rate and decrease the worst case storage used.

Adaptation of https://gitlab.freedesktop.org/mesa/mesa/merge_requests/2818

See https://gitlab.freedesktop.org/freedesktop/freedesktop/issues/120

update for macos 10.15 making / read-only

We've moved the host cached cerbero directory to /Users/gst-ci/cerbero
instead now.

ci_template.yml: Update the windows image used

docker/windows: update the version of various deps we install

ci_template: skip unnecessary jobs for gst-integration-testsuites

Close #42

ci_template: set the TIMEOUT_FACTOR of gst-validate-launcher to 2

We have lots of tests that timeout on the CI due to a high load
of jobs on the CI runners. Let's try giving them a bit more time
and see how its going.

ci_template.yml: Use the new docker cerbero-fedora image

This has nasm temporarily added in it using
https://gitlab.freedesktop.org/gstreamer/gst-ci/merge_requests/179

docker/cerbero: Temporarily add nasm to the system setup

We will later install it as part of the cerbero bootstrap step when
generating the image after
https://gitlab.freedesktop.org/gstreamer/cerbero/merge_requests/320 is
merged.

citemplate: Tag test jobs to only run on the dedicated runners

Avoid spreading the jobs on lower power runners which ends
up trippling the execution time of the testsuites and/or timing out.

docker: Stop using mdv and use bat to colorize markdown

Revert "gitlab: Set COLUMNS and width variable to make terminal_markdown_view happy"

This reverts commit 157f94fb62da7582fce90c85bf2338999d83b7cc.

ci_template: remove gstreamer-vaapi control in test tag

Since now gstreamer-vaapi is blacklisted in
validate (https://gitlab.freedesktop.org/gstreamer/gst-devtools/merge_requests/134)
there is no need to make exceptions in the CI. This patch removes
those exceptions.

ci_template: refresh the docker images used for the CI

ci_template: update the fedora image to a newer build

Among other things, it includes the wpe dependencies !148 and
glslc !145

ci_template: avoid check.gstreamer-vaapi

Check tests are being added to gstreamer/gstreamer-vaapi!181.
However, gstreamer-vaapi inherently requires specific hardware
drivers and platforms to function.  The CI does not provide this
level of driver/platform selection.  Thus, avoid running any
check tests in gstreamer-vaapi.

ci_template: Add an auto-retry policy

Its common that docker will throw transient errors, especially
on the windows runner. If such the case, automatically retry
the job.

Revert "docker/cerbero/fedora install openssl-devel libraries"

This reverts commit 4a8beec41044e21ffeec73b7e58d0afaf112e689.

gitlab: update cerbero docker image used

docker/cerbero/fedora install openssl-devel libraries

Temporary workaround until cerbero installs the library itself

docker: improve logging of the setup scripts

docker/fedora: install debuginfo for python3-libs as well

.gitlab-ci.yml: Rename the UID variable in the docker build job

UID is a read-only protected variable in bash 5.0+

.gitlab-ci.yml: export artifacts for the fedora build job

20f5d7d646e7c941d71bb7264a9ba6b868982be3 stopped exporting artifacts
from the .build template which broke the local jobs since they
no longer exported the builddir.

fedora/docker: remove the fedora openh264 package

The cisco repository has been problematic for a while causing
dnf to error due to some gpg issue and break the pipe in non-interactive
ttys.

```
Importing GPG key 0xCFC659B9:
 Userid     : "Fedora (30) <fedora-30-primary@fedoraproject.org>"
 Fingerprint: F1D8 EC98 F241 AAF2 0DF6 9420 EF3C 111F CFC6 59B9
 From       : /etc/pki/rpm-gpg/RPM-GPG-KEY-fedora-30-x86_64
The command '/bin/sh -c /usr/bin/sh /root/prepare.sh &&     /usr/bin/sh /root/cleanup.sh' returned a non-zero code: 141
```

https://gitlab.freedesktop.org/gstreamer/gst-ci/-/jobs/573870

We do have a meson subproject for openh264 nowdays in gst-build
and it will get enabled automatically once the distro package
is no longer there.

gitlab: build the ios examples in the cerbero repository

gitlab: Rename all cross jobs to have a cross- prefix

For consistency, and to differentiate, f.ex., cross-windows jobs from
native windows jobs.

gitlab: Windows Cerbero jobs are cross

Change the name to avoid confusion.

gitlab: remove needs from ios examples job

needs and manual jobs do not really get along
https://gitlab.com/gitlab-org/gitlab-ce/issues/66602

gitlab: add ios app build testing

docker: Upgrade cerbero image to use fedora 30

ci_template: Only export artifacts for the main fedora build job

We are only using the builddir of the main fedora job to run
tests, the rest where exported by accident. Its especially
problematic cause static build eat a bunch of space and take
an eternity to be uploaded.

Part of #32

ci: Cleanup gst-docs build

Make sure to build against the plain fedora build and avoid
building useless things when inside gst-docs

gitlab: no need of vaapi nor omx on windows builds

gitlab: enable werror for macos builds

gitlab: enable werror for android universal builds

gitlab: add a clang gst-build job

gitlab: use the new needs yaml key

Allows implementing a DAG where a dependant job can be built before the
entirety of the previous stage has completed.

gitlab: renable gst-build werror after msvc CI merge

31cec0a2459b38ae64d8bbb3f2060d2d86f8f86f removed --werror from the
default meson args but did not add it back in all the correct places

docker/windows: refactorings to get it to work with the new runner

* Install git-lfs as its required now by gst-integration-suites
* Clone gst-build eache time to avoid dated gst-build checkouts
and overwritting .wrap files. Similar to !137
* Split the dockerfile and add a second run stage refresh the
powershell env inbetween calls
* Remove the msys2 workaround as its not needed anymore

Add Windows MSVC and MSYS2 builds

This adds 3 new jobs that build against msys2 x86_64, msvc 2017 x86
and msvc 2017 x86_64. For the msvc build, some subprojects (like libnice)
don't satisfy all their deps, and are getting automatically disabled.

This doesn't add jobs that run the test suite also. Will hopefully
get implemented later on.

Do not specify the compiler to use

Meson will autodetect ccache when available, and we don't always have
gcc available (upcoming MSVC job).

gitlab: Set COLUMNS and width variable to make terminal_markdown_view happy

docker/fedora: Enable WPEWebKit support

These dependencies should enable the WPE plugin build in -bad.

See https://gitlab.freedesktop.org/gstreamer/gst-plugins-bad/issues/839

Move to Fedora 30