Merge pull request #12863 from 1848/if_xfrm

Added support for xfrm interfaces

Fixed condition checked twice

Added support for xfrm interfaces

Merge pull request #12939 from yuwata/lgtm-fixes

make LGTM quiet

systemctl: allow "cat" on units with bad settings

That's precisely the state where 'cat' is particularly useful ;).

network: fix memleak

set_put() does not return -EEXIST.

Fixes #12995 and oss-fuzz#15678.

fuzzbuzz: rename fuzz.yaml to fuzzbuzz.yaml

fuzz.yaml will stop working in a week

importd: Avoid need for fd translation table

Make use of curl_multi_assign to associate each IO sd_event_source with
a CURL object. This means we always get passed the right event source
and don't need to worry about looking up the associated CURL object,
particularly in the case where the FD has been closed on a REMOVE event.

network: read sysctl value only once (#12990)

Follow-up for bafa9641446852f7fa15ca12d08a223d345c78ea.

When the value is changed, networkd needs to be restarted.

util: fix sign-compare warning

test/udev-test.pl: cleanup if skipping test

In Ubuntu CI, udev-test.pl is run from the debian/test/udev script,
in a test dir created for it; but udev-test.pl setup mounts a
dir, so if it doesn't cleanup/unmount before exiting, the test dir
autopkgtest created for it can't be removed, and autopkgtest
aborts the entire test suite, for example this output (from a
test run inside an armhf container):

autopkgtest [12:45:36]: test udev: [-----------------------
umount: test/tmpfs: no mount point specified.
mknod: test/tmpfs/dev/null: Operation not permitted
unable to create test/tmpfs/dev/null at ./udev-test.pl line 1611.
Failed to set up the environment, skipping the test at ./udev-test.pl line 1731.
autopkgtest [12:45:41]: test udev: -----------------------]
autopkgtest [12:45:44]: test udev:  - - - - - - - - - - results - - - - - - - - - -
udev                 FAIL non-zero exit status 77
rm: cannot remove '/tmp/autopkgtest.ocPFA6/autopkgtest_tmp/test/tmpfs': Device or resource busy
autopkgtest [12:46:22]: ERROR: "rm -rf /tmp/autopkgtest.ocPFA6/udev-artifacts /tmp/autopkgtest.ocPFA6/autopkgtest_tmp" failed with stderr "rm:

Merge pull request #12992 from mrc0mmand/test-functions-fixes

Various test/test-functions fixes/improvements

pid1: fix serialization/deserialization of commmands with spaces

Fixes #12258.

This is enough to reproduce:
$ systemd-run bash -c 'sleep 10' && systemctl daemon-reload
would result in
Current command vanished from the unit file.

We would serialize as:
ExecStart 0 /usr/bin/bash /usr/bin/bash -c sleep 10000
which of course can't work.
Now we serialize as
ExecStart 0 /usr/bin/bash "/usr/bin/bash" "-c" "sleep 10".

nspawn: fix abort when we cannot execve

If execve failed, we would die in safe_close(), because master was already
closed by fdset_close_others() on line 3123. IIUC, we don't need to keep the
fd open after sending it, so let's just close it immediately.

Reproducer:
sudo build/systemd-nspawn -M rawhide fooooooo

Fixup for 3acc84ebd9aebe8cf1771b42644ebbfbecdfaa37.

Merge pull request #12972 from intelfx/cryptsetup-enable-libcryptsetup-debug

cryptsetup: properly handle libcryptsetup debug logging

test: install missing dependencies for CIs

test: drop || return 1 expression which is incompatible with set -e

The `set -e` option is incompatible with a subshell/compound command,
which is followed by || <EXPR>. In such case, the -e option is ignored
in all affected subshells/functions (see man bash(1) for command `set`).

test: be a little bit more verbose when installing service binaries

test: correctly handle installation of newly introduced binaries

In certain cases we might attempt to install a binary which is already
present in the test image, yet it's missing from the host system.
In such cases, let's check if the binary indeed exists in the image
before doing any other chcecks. If it does, immediately return with
success.

This was discovered during installation of
/usr/lib/systemd/systemd-bless-boot, which was not present in Ubuntu CI
(as the installed systemd was from the Ubuntu repositories), and the
binary itself was already in the image thanks to `ninja install`.
However, during extraction of binaries from the systemd service files,
another attempt to install this binary was made, which failed due to
`find_binary` being unable to find it.

test: make ASAN/UBSAN_OPTIONS overridable from the outside

This should allow us to tweak the ASAN_OPTIONS and UBSAN_OPTIONS env
variables for integration tests as well

FUNDING: this needs to be yaml

Create FUNDING.yml

growfs: call crypt_set_debug_level() correctly, skip if not needed

cryptsetup: enable libcryptsetup debug logging if we want it

Even if we set a log callback that would accept debug messages, libcryptsetup
needs debug logging enabled explicitly for it to happen.

Merge pull request #12970 from ddstreet/gh12969

src/network/networkd-dhcp4.c: set prefsrc for classless or static routes

Add accel mount matrix for Irbis TW90

units: add SystemCallErrorNumber=EPERM to systemd-portabled.service

We use that on all other services, and hence should here too. Otherwise
the service will be killed with SIGSYS when doing something not
whitelisted, which is a bit crass.

semaphore: pass allow-releaseinfo-change to apt-get

https://bugs.debian.org/cgi-bin/bugreport.cgi?bug=929248

cryptsetup: set libcryptsetup global log callback too

basic/log: fix SYSTEMD_LOG_* parsing error messages

(likely a copy-paste gone wrong)

test-network: add tests for DHCP.UseRoutes=no with custom route settings

This adds test for b5799eeb0787deacb30d5984f6ac78f88f23b97e.

Closes #12951.

test-network: add testcase for DHCP client with static address

Testcase for #12969.

src/network/networkd-dhcp4.c: set prefsrc for classless or static routes

When a DHCP server provides only a gateway, the networkd-dhcp4 code adds a
default route using that gateway, and sets the just-provided address as
the route's prefsrc; this was added in commit
46b0c76e2c355c0d0cc4792abb98cde07b28bc53

However, if the DHCP server has also provided classless route(s), these
are used instead of a default route using the provided gateway; the
networkd-dhcp4 code sets up the classless routes, but does not use the
just-provided dhcp address as the prefsrc of the route(s).  Note that
it also doesn't set the prefsrc for static routes, though it should.

If the interface has only the dhcp-provided address, this is not usually
a problem, but if it has another address (e.g. a static address), then
traffic sent through the dhcp-provided gateway might not use the
dhcp-provided source address.  If the gateway router only will route
traffic from the dhcp-provided address, then the dhcp client system's
networking through the router will not work.

Fixes: #12969

login: move file definitions outside of the conditionalization

Merge pull request #12964 from yuwata/network-bridge-vlan-issue-12958

network: fix BridgeVLAN issue

Merge pull request #12963 from keszybz/analyze-timestamp

systemd-analyze dump fixup

test-network: add tests for BridgeVLAN

network: fix issue found by UBSan

network: fix the initial value of the counter for brvlan

Fixes #12958.

network: re-implement parse_vid_range()

network: minor coding-style update

varlink: add varlink server to event loop only if there is one

pid1: use monotonic timestamp in dump if realtime is not available

$ systemd-analyze dump | head -3
Timestamp firmware: (null)
Timestamp loader: (null)
Timestamp kernel: Mon 2019-07-01 17:21:02 CEST

Since this is a debugging interface, it is OK to change the output format.
The user can infer what "Timestamp firmware: 123.456ms" means.

test-network: show debug logs of networkd

portabled: Make use of SYNTHETIC_ERRNO()

firewall-util: use fixed size array for chain name

xt_chainlabel is defined as
```
typedef char xt_chainlabel[32];
```

tree-wide: introduce strerror_safe()

dhcp: replace strerror() with %m

sd-event: replace snprintf() with strpcpyf()

fsck: split out fsck return code definitions into a header file of its own

This way we can make use of it from other components too, such as
systemd-homed.

dissect: split out DM deferred remove into src/shared/dm-util.c

The function is generally useful, let's split it out so that we can make
use of it later on in systemd-homed.

basic/time-util: add helper function to check if timestamp is set

No functional change.

man: Add some notes about variable $prefix for StateDirectory=

tl;dr: It isn’t supported.

Wording by Zbigniew Jędrzejewski-Szmek.

See https://twitter.com/pid_eins/status/1102639279614906369 and
https://gitlab.freedesktop.org/libfprint/fprintd/merge_requests/5#note_125536
onwards.

Signed-off-by: Philip Withnall <withnall@endlessm.com>

Merge pull request #12949 from yuwata/sd-netlink-sd-netlink-message-enter-array

sd-netlink: introduce sd_netlink_message_enter_array()

Merge pull request #12954 from keszybz/var-log-dir

/var/log-related cleanups

test: add test for sd_netlink_message_enter_array()

meson: drop varlogdir variable

It was only used for exactly one thing: to substitute in the text in
/var/log/README. But it's use there was completely wrong, because the text
talks about "missing" log files from syslog, so even if we configured systemd
to log to a different directory, the "missing" log files would still be
"missing" from the old location.

meson: create /var/log/journal/{,remote/} conditionally

Not everybody has those dirs in the filesystem (and they don't need to).
When creating an installation package using $DESTDIR, it is easy enough to
remove or ignore those directories, but if installing into a real root, it
is ugly to create and remove them. Let's add an option so people can skip
it if they want.

Inspired by #12930.

sd-netlink: add CTRL_ATTR_MCAST_GROUPS

sd-netlink: drop unnecessary 'else'

sd-netlink: introduce sd_netlink_message_enter_array()

sd-netlink: fix inverted log message

Merge pull request #12946 from poettering/blockdev-tweaks

three small blockdev-util.[ch] tweaks

varlink: allow using varlink_wait() even with a server

This call can be useful even if a server object is declared.

(Originally this was not supported, because a server typically needs to
handle multiple connections, and thus a synchronous wait on one would
starve the others out. But in some cases it might make sense to have
varlink point-to-point connections — i.e. where the server only handles
a single connection ever — and there it makes sense to synchronously
wait on the one connection).

json: use JSON_VARIANT_ARRAY_FOREACH() where we can

logind: drop old-style header from .sym file in favour of SPDX

Added ACCEL_MOUNT_MATRIX for Asus Q551LN in hwdb/60-sensor.hwdb

blockdev-util: let us know if block_get_whole_disk() did anything

blockdev: filter out invalid block devices early

blockdev-util: propagate actual error

man: document tmpfiles.d/ user/group resolvability needs

debug-generator: enable custom systemd.debug_shell tty

Merge pull request #12912 from yuwata/network-move-functions

network: move functions

test-network: add udev related tests for networkctl

Merge pull request #12888 from yuwata/network-udev-property-support

network,udev: add Property= setting in [Match] section

udev: accept lines which have only PROGRAM=

As PROGRAM= may cause side effect, and users may expect that.

Merge pull request #12916 from yuwata/meson-drop-duplicated-line

meson: drop duplicated source

test-network: add test for Property= in [Match] section

meson: drop duplicated source

test: add tests for config_parse_match_{strv,ifnames}()

man: fix wrong udev property name

network,udev: add Property= setting in [Match] section

Closes #5665.

network,udev: make net_match_config() take sd_device

network,udev: fix multiple invert matching lines

Previously,
```
[Match]
Name=!aaa
Name=!bbb
```
does not work. This fixes the issue.

networkctl: do not show '(null)' in HW Address entry

This also fixes indentation.

network: move prototypes related to network Network bus objects to networkd-network-bus.h

Merge pull request #12910 from keszybz/udev-kvm

Fix permissions on /dev/kvm

network: move DHCP server related functions to networkd-dhcp-server.c

network: move DHCP6 related code from networkd-manager.c to networkd-dhcp6.c

network: move conf parsers and function prototypes

Merge pull request #12903 from keszybz/condition-quoting

Condition quoting

test-condition: do not accidentally treat error as passing condition

condition_test returns 0, 1, or error.

Treat kernel version condition as a list of quoted checks

Before only one comparison was allowed. Let's make this more flexible:
ConditionKernelVersion = ">=4.0" "<=4.5"

Fixes #12881.

This also fixes expressions like "ConditionKernelVersion=>" which would
evaluate as true.

test-execute: add test for ConditionKernelVersion= with quotation

Merge pull request #12907 from yuwata/meson-default-libidn2

meson: use libidn2 and drop udev debug option

udev: fix wrong event source to set description

Merge pull request #12908 from yuwata/udevadm-completion-action

udevadm: support special value 'help' for --action option

udev: don't force device ownership and mode on every event

This partially reverts 25de7aa7b90c23d33ea50ada1e50c5834a414237. I don't think the
change was intended there.

The problem I'm trying to solve: for /dev/kvm we get first an ADD uevent, and
then CHANGE whenever something connects or disconnects to the character device.
The rules in 50-default-udev.rules set UID, GID, and MODE on ADD, but not on
CHANGE. When the change event happens, we would reset the ownership and
permissions.

This happens because node_permissions_apply() would (after 25de7aa7b90c23d33)
set uid=gid=0 if they weren't set by the rules.

So let's only pass uid/gid/mode to node_permissions_apply() if appropriately
configured. Also let node_permissions_apply() do the skip of uid/gid/mode if
not set, and rename "always_apply" to more closely reflect its meaning.

udev: tiny fix to debug message

bash-completion: udevadm: list all possible values for --action option