Clear up confusion wrt. ENTRY_SIZE_MAX and DATA_SIZE_MAX

Define DATA_SIZE_MAX to mean the maximum size of a single
field, and ENTRY_SIZE_MAX to mean the size of the whole
entry, with some rough calculation of overhead over the payload.

Check if entries are not too big when processing native journal
messages.

µhttp-util: fix compilation without gnutls

man: describe new filename rules for journal-remote

man: document systemd-journal-upload

journal-upload: add config file

journal-remote: let user specify just the main part of the url

We can append /upload ourselves.

journal-remote: rework fd and writer reference handling

journal-remote: improve some messages

Fix problem with allocating large buffers and log leftovers

Constify ConfigTableItem tables

journal-remote: allow splitting incoming logs by source host

Previously existing scheme where the file name would be based on
the source was just too ugly and unpredicatable. Now there are
only two options:
  1. just one file (until rotation),
  2. one file per source host, using the hostname as filename part.
For the cases where the source is specified by the user, only
option one is allowed, and the full of the file must be specified.

Allow addresses to be specified for --listen-... args

Hostnames still aren't accepted.

Add simple generator of fake journal export stream

shared/socket-label: fix error message

Was: Failed to listen on [::]:2000: Success

shared/socket-util: add function to query remote address

journal-remote: add units and read certs from default locations

journal-upload: add watchdog support

journal-upload: make state persistent

journal-upload: use journal as the source

journal-upload: HTTPS support

journal-upload: a tool to push messages to systemd-journal-remote

journal-remote: reject fields above maximum size

Also fix an infinite loop on E2BIG.

Remember what range we already scanned for '\n', to avoid
quadratic behaviour on long "text" fields.

journal-remote: small fixes

build-sys: add check for libcurl

Move network-related journal programs to src/journal-remote/

Directory src/journal has become one of the largest directories,
and since systemd-journal-gatewayd, systemd-journal-remote, and
forthcoming systemd-journal-upload are all closely related, create
a separate directory for them.

microhttp-util: rework gnutls logging

journal: allow files with no data whatsoever

If a file was opened for writing, and then closed immediately without
actually writing any entries, on subsequent opening, it would be
considered "corrupted". This should be totally fine, and even in
read mode, an empty file can become non-empty later on.

resolved: add busname unit file

resolved: add legacy dbus service and policy files

update TODO

resolved: add small NSS module that uses resolved to resolve DNS names

nss: various minor fixes to nss-myhostname + nss-mymachines

dns-domain: never allow labels that are larger than 63 chars

dns-domain: fix generation of reverse IP address lookup name

resolve: add distinct bus error code for hosts that exist but lack A or AAAA records

update TODO

resolved: add a DNS client stub resolver

Let's turn resolved into a something truly useful: a fully asynchronous
DNS stub resolver that subscribes to network changes.

(More to come: caching, LLMNR, mDNS/DNS-SD, DNSSEC, IDN, NSS module)

networkd: remove unused variable

networkd: netdev - set mac for bond/bridge devicse

Suggested by poma.

sd-dhcp-client: make request broadcasts opt-in

It appears there is no good way to decide whether or not broadcasts should be enabled,
there is hardware that must have broadcast, and there are networks that only allow
unicast. So we give up and make this configurable.

By default, unicast is used, but if the kernel were to inform us abotu certain
interfaces requiring broadcast, we could change this to opt-in by default in
those cases.

rules: uaccess - add ID_SOFTWARE_RADIO

On Tue, Jul 15, 2014 at 1:52 PM, Alick Zhao <alick9188@gmail.com> wrote:
>>>
>>> So maybe ID_SOFTWARE_RADIO ?
>>
>> Hmm, SDR is more a term for a generic technology than for a device
>> class. To me it does not really sound like an administrator would know
>> what this is.
>>
>> What exactly is the device or subsystem you want to make accessible to
>> locally logged-in users only?
>
> Initially it is bladeRF, but many more are of interest: USRP, rtl-sdr,
> HackRF, ... [1]
>
> I agree an administrator might not know what SDR is, since it is
> currently still not widely known, and makes sense only for amateurs
> and researchers. But as a SDR fan, I see many new SDR peripherals
> are created recently, and expect to see more. So a generic ID seems
> reasonable to me.
>
> [1] http://en.wikipedia.org/wiki/List_of_software-defined_radios

core: fix oneshot service resource control

Oneshot services's cgroup is removed when the service
exits. An assert is hit otherwise.

shell-completion: restore completion for -p

It was broken since systemd was moved out of /bin.

For zsh it was never there.

timesyncd: add sockaddr_pretty wrapper

timesyncd: only listen to clock changes when connected

This reverts previous commit and applies a different fix.

manager_clock_watch() callback calls manager_send_request() to kick
off a resync. We can only do that when we're actually connected to
something. It is not useful to setup the callback from manager_new().

Now the callback will be dropped in manager_connect() and requested
in manager_begin().

https://bugs.freedesktop.org/show_bug.cgi?id=80932

timesyncd: suppress resync at system time change when not connected

Jul 04 17:46:03 orchid systemd[1]: Starting Network Time Synchronization...
Jul 04 17:46:03 orchid systemd[1]: Started Network Time Synchronization.
Jul 04 17:46:22 orchid systemd-timesyncd[301]: System time changed. Resyncing.
Jul 04 17:46:22 orchid systemd-timesyncd[301]: Assertion 'm->current_server_name'

https://bugs.freedesktop.org/show_bug.cgi?id=80932

rules: consistently use "?*" instead of "*?"

TODO

networkd: link - fix memory leak

Make link_initialized() idempotent to avoid taking refs on several udev_device
objects.

test: network - skip if we don't have permissions to create netdevs

sd-dhcp-server: make gcc happy

It complains about optoffset possibly being uninitialized. It is wrong,
but let's just initialize it.

sd-dhcp6-client: make gcc happy

It complains about {max,init}_retransmit_time possibly being
uninitialized. It is wrong, but let's just initialize it.

networkd: netdev - introduce vtable for netdev kinds

Split each netdev kind into its own .h/.c.

networkd: netdev - rework load_one

We now:
 - parse config
 - match on environment
 - verify and complement config
 - create netdev

networkd: netdev - split out bridge creation

networkd: netdev - rename 'enslave' to 'join'

Enslave only really makes sense when referring to bridges and bonds, so try to be
a bit more neutral.

man: systemd.netdev - make it clear that we do not touch preexisting netdevs

We will happily use bridges/bonds as master devices, but we will not change their settings if they were created by
someone else.

networkd: add back route destination support

This was accidentally dropped when adding metric support.

networkd: bond - explicitly map to kernel mode values

networkd: dhcp add vendor class indentifier option 60

Vendor Class Identifier be used by DHCP clients to identify
their vendor type and configuration. When using this option,
vendors can define their own specific identifier values, such
as to convey a particular hardware or operating system
configuration or other identifying information.

Vendor-specified DHCP options—features that let administrators assign
separate options to clients with similar configuration requirements.
For example, if DHCP-aware clients for example we want to separate
different gateway and option for different set of people
(dev/test/hr/finance) in a org or devices for example web/database
servers or let's say in a embedded device etc and require a different
default gateway or DNS server than the rest of clients.

networkd: make metric of routes configurable

Now route metric can be configuted via conf file:

example conf:

[Match]
Name=em1

[Route]
Gateway=192.168.1.12
Metric=10

Test:
ip route output
default via 192.168.1.12 dev em1 metric 10

[tomegun: squash TODO update and reword man page a bit]

networkd: return 1 from successful event handlers

TODO: update networkd

fileio: quote more shell characters in envfiles

Turns out, making strings shell-proof is harder than expected:

    # machinectl set-hostname "foo|poweroff" && . /etc/machine-info

(This could be simplified by quoting *and* escaping all characters,
which is harmless in shell but unnecessary.)

path-lookup: don't make ~/.local/share/systemd/user a symlink

We already encourage upstreams to keep the default configuration
separate from user customizations for software that is installed in
the system location. Let's allow that separation also for software
that is installed in the home directory.

Some discussion:
http://thread.gmane.org/gmane.comp.sysutils.systemd.devel/19627

man: mention XDG_DATA_HOME in systemd.unit

man: sysusers.d correct default user shell

For the non-root user sysusers uses nologin as the default shell, not
login. Correct the documentation to match the code.

man: add systemd-coredump(8) and a bunch of links

Add function to open temp files in selinux mode

sysusers: preserve label of /etc/{passwd, group}

These files are specially labeled on SELinux systems, and we need to
preserve that label.

build-sys: Do not distribute generated emergency.service

It is already in nodist_systemunit_DATA and if it is
shipped, it contains the hardcoded path to systemctl
which will cause it to fail to start when
rootprefix != prefix and rootbindir != bindir.

Revert "build-sys: include PolicyKit files as part of distribution"

This reverts commit 0c26bfc3d21fdb3963f1248c237e2f1a33b5566d.

src/core/org.freedesktop.systemd1.policy.in.in depends on values which
are specified at configure time, so we cannot ship the corresponding
policy file in the tarball.

Since we need to regenerate one policy file, we might as well generate
them all.

sd-event: don't require a signal event source to be enabled for the child event source to work

gitignore: ignore .swp files

vim places them in the source-tree while editing files. Ignore them.

sd-event: always call epoll_ctl() on mask-updates if edge-triggered

A call to sd_event_source_set_io_events() skipps calling into the kernel
if the new event-mask matches the old one. This is safe for
level-triggered sources as the kernel moves them onto the ready-list
automatically if events change. However, edge-triggered sources might not
be on the ready-list even though events are present.

A call to sd_event_source_set_io_events() with EPOLLET set might thus be
used to just move the io-source onto the ready-list so the next poll
will return it again. This is very useful to avoid starvation in
priority-based event queues.

Imagine a read() loop on an edge-triggered fd. If we cannot read data fast
enough to drain the receive queue, we might decide to skip reading for now
and schedule it for later. On edge-triggered io-sources we have to make
sure it's put on the ready-list so the next dispatch-round will return it
again if it's still the highest priority task. We could make sd-event
handle edge-triggered sources directly and allow marking them ready again.
However, it's much simpler to let the kernel do that for now via
EPOLL_CTL_MOD.

shared: fix coding-style for ring-buffer implementation

We use "typedef struct Ring Ring" with camel-case for internal objects.
So rename "struct ring" to "Ring".

shared: add MIN3 macro

This is like MIN but evaluates 3 arguments. We already have MAX3, so add
the equivalent for MIN.

Fix build without any compression enabled

endian: explicitly include endian.h wherever we want to use __BYTE_ORDER

always check for __BYTE_ORDER == __BIG_ENDIAN when checking for endianess

Let's always stick to glibc's way to determine byte order, and not mix
autoconf-specific checks with gcc checks.

hostnamed: introduce new location machin-info field, too

hostnamed: drop nss-myhostname check

The check only cares about whether the module is installed, not enabled.
But installation we should know anyway, after all we ship the module
with systemd these days...

hostnamed: make use of in_charset() to verify charset

nss-myhostname: simplify array building a bit

hostnamed: minor modernization

journald: turn ForwardToSyslog= off by default

After all, rsyslog and friends nowadays read their data directly from
the journal, hence the forwarding is unnecessary in most cases.

util: fix has cc check and add test

shell-completion: add hostnamectl set-deployment

Add DEPLOYMENT to hostnamectl

[zj: remove the check against a fixed list of environments.]

shell-completion,man: beef up chassis completions and description

Parameters to hostnamectl command are not optional and should not be marked
as such in the man page.

man: document x-systemd.device-timeout for crypttab

https://bugs.freedesktop.org/show_bug.cgi?id=54210

man: proper link for dmesg

sysusers: allow overrides in /etc and /run

An administrator might want to block a certain sysusers config file from
being executed, e.g. to block the creation of a certain user.

Only a relatively short description is added in the man page, since
overrides should be relatively rare.

nss-mymachines: add new NSS module for automatically resolving addresses of all local containers

build-sys: export sd_path APIs

nss-myhostname: move NSS boilerplate to nss-util.h

machinectl: show network interface name for containers

Also, append the if indexes as scope field to the addresses we show.
That way they may be used for connecting to the containers directly.

nspawn: register external network interface with machined

machined: allow registering host-side network interfaces for communication with containers

networkd: always prefer dhcp routes over ipv4ll routes