implement fs-lib, squash a few bugs that were part of det_fs/wrap_fsck

To not pollute dracut-lib.sh, all the fsck related functions were moved
to fs-lib.sh. The functions available are as follows:

- fsck_single

this will detect/verify filesystem, check if it has necessary tools and
check the filesystem respecting additional flags (if any), using
specific "driver" (or falling back to generic one). Currently
available: fsck_drv_{com,xfs,std}. 'com' is used for tools following
typical subset of options/return codes (e.g. ext, jfs), 'std' is used
for "unknown" fs and doesn't assume it can be run non-interactively.

Please see comments around the code for more info.

- fsck_batch

this will check provided list of the devices;

Both of the above functions will fake empty fstab, to make generic fsck
not complain too much (excact devices are always provided on the command
line).

"Known" filesystems currently: ext234, reiser, jfs, xfs

- det_fs

Small bug fixed - as this function is meant to be called in $(), it may
not be verbose.
Current behaviour is:
 - if detection is successful, use its result
 - if detection is not successful, and filesystem is provided, return
   the provided one; otherwise use auto

95rootfs-block/mount-root.sh: '-a' for ext? is handled in fs-lib now

Previously, '-a' was added for ext[234] filesystems if other
conflicting flag were not present. It's being done automatically
in fsck_drv_com() now (also for jfs and reiser).

livenet: module for fetching live images from the network

The livenet module allows you to use a root arg like:

    root=live:http://server.name/path/to/live.img ip=dhcp

The named live image will be downloaded with wget and then set up as the
root device.

It currently supports FTP, HTTP, and HTTPS. dracut will try to install
the CA bundle (/etc/ssl/certs/ca-bundle.crt) into the initramfs so that
SSL certificate checking will work properly.

If an HTTPS URL is given and the site fails the certificate check, the
file will be rejected and the system will not boot into it.

Signed-off-by: Will Woods <wwoods@redhat.com>

modules.d/90mdraid/65-md-incremental-imsm.rules: fix md_finished install

test/TEST-13-ENC-RAID-LVM/create-root.sh: wait before disassembling lvm

initqueue: exit with 0

dracut-lib.sh: fixed getargs() for empty arguments

dracut-lib.sh: getarg() echo with "" to prevent wildcard subst

if a value of a key on the kernel command line includes wildcards, these
would be expanded.
E.g., if you have "key=/dev/sd*" the value would be substituted with
"/dev/sda /dev/sda1 /dev/sda2" instead of returning "/dev/sd*"

99base/init: use udevadm control to set the logging priority

due to a bad revert commit, "udevadm control" was converted to
"udevproperty", which is the wrong command to set the logging priority.

dracut-functions: create relative symlinks for libraries

dracut.spec: add 97masterkey 98ecryptfs 98integrity

git2spec.pl: make rename diffs

parse-lvm.sh: fix for generated initqueue/finished script

The script that was generated always returned the status of the last test
condition, potentially missing any earlier non-existing devices.

The change assures, that the script returns 0 only if all expected
devices are found.

Signed-off-by: Michal Soltys <soltys@ziu.info>

dracut: added new module ecryptfs

This module mounts an eCryptfs filesystem from the initial ramdisk using an
encrypted key.

Signed-off-by: Roberto Sassu <roberto.sassu@polito.it>
Acked-by: Gianluca Ramunno <ramunno@polito.it>

dracut: added new module integrity

This module initializes the EVM software and permits to load a custom IMA
policy.

Signed-off-by: Roberto Sassu <roberto.sassu@polito.it>
Acked-by: Gianluca Ramunno <ramunno@polito.it>

dracut: added new module masterkey

This module initializes a trusted/user kernel master key that will be used
to decrypt other encrypted keys.

Signed-off-by: Roberto Sassu <roberto.sassu@polito.it>
Acked-by: Gianluca Ramunno <ramunno@polito.it>

base/init: mount the securityfs filesystem

Mount the securityfs filesystem and make available its location through the
exported variable SECURITYFSDIR.

Signed-off-by: Roberto Sassu <roberto.sassu@polito.it>
Acked-by: Gianluca Ramunno <ramunno@polito.it>

dracut-update-initramfs: removed on request of the debian maintainer

dracut-functions: remove double slashes, for symlink conversion

remove double slashes for symlink conversion from absolute to relative

dracut: install /lib* for kernel images

removed debian.template

dracut-functions: resolve relative path and recursively install destination

move "debian" to debian.template on request of debian maintainer

dracut-functions: convert absolute symlinks to relative

dracut-logger: initialize basic vars

fixed typos

99base/init: try to mount /usr, if init lives on /usr

dracut-functions: only "dinfo" about missing optioal dracut_install

99base/dracut-lib.sh: don't be quiet on rd.debug

dracut.kernel.7.xml: beautified doc

dracut.kernel.7.xml: s/voonsole.keymap/vconsole.keymap

busybox module: parse busybox defined functions dynamically

Currently in dracut busybox module, we hard-code the list of binaries
available in busybox. Actually we can get this list by running busybox
without any arguments.

Also, if find_binary() finds nothing, we would symlink $initdir/
which is not we expect.

Signed-off-by: WANG Cong <xiyou.wangcong@gmail.com>

TEST-10-RAID/test-init: add comment for rd.break=shutdown

99base/dracut-lib.sh: fix previous getargs patch

patch 9e7f4955895c1064e3bdd03f5f781efc9b98d5d6 ignored
"getargs key=value"

dracut-lib.sh: fixed getargs()

if $1 has a "=<value>", we want the exact match
if cmdline argument has no "=<value>", we assume "=1"

shutdown: fixed check_shutdown loop

TEST-10-RAID/test-init: turn off debug for shutdown

TEST-10-RAID: extend test case to shutdown

90mdraid/md-shutdown.sh: put shutdown in function

90dm/dm-shutdown.sh: put shutdown in function

enable shutdown module by default

90dmsquash-live: optionally install eject

dracut-logger: create logfile with 0600 permissions

dracut.logrotate: remove "yearly"

logrotate would only rotate yearly with it

add  TEST-15-BTRFSRAID

dracut.spec: remove noreplace for 01-dist.conf

Makefile: inc version

TODO, NEWS: update

Makefile: copy created rpms from rpmbuild in "rpm" target

dracut.spec: fixed logrotate

90kernel-modules: fixed handling rd.driver.post=

crypt: dropped plymouth --has-active-vt check on passwd prompt

As Ray Strode explains, plymouth --has-active-vt may fail if the user
passes console=ttyS0 or something other not corresponding to
console=tty0, because plymouth is outputing to the serial console and
not a VT in this case.

dmsquash-live: install eject with dracut_install

the new search path does the right thing

selinux/selinux-loadpolicy.sh: set LANG=C for load_policy and restorecon

set LANG=C for chroot execed tools, because the terminal might not be
able to display the messages and the rest is not translated anyway.

base/init: do not mount devtmpfs with "noexec"

https://bugzilla.redhat.com/show_bug.cgi?id=710711

mmap /dev/zero: Operation not permitted

crypt/crypt-lib.sh: s/.console.lock/.console_lock/g

In the initrd, the init script and the sbin/cryptroot-ask script use
flock with different lock files for the console: /.console_lock and
/.console.lock respectively

base/init: mount virtual filesystems with the filesystem type as source

Makefile: simplify "make rpm"

shut

mdraid: add shutdown script

dm: add shutdown script

base: add shutdown script to be called from systemd

dracut: use pigz, if available and no compress defined

mount-root.sh: fixed fsck and "-a" only for "ext*"

dracut-functions: do not redirect modprobe error output to /dev/null

filter modprobe error messages and log them. Very useful if modules.dep
is missing.

dracut-functions: make created directories writable

dracut: add --keep option, to inspect the initramfs directory

95rootfs-block/block-genrules.sh: Use > instead of >>

trivial, blocksymlink.sh shouldn't exist at this point.

Signed-off-by: Michal Soltys <soltys@ziu.info>

95rootfs-block/mount-root.sh: Rely on det_fs and wrap_fsck

Use common fsck and det_fs code. Verify filesystem type more
aggressively, which has a chance to be more resistant to
accidental mistakes.

Also, there's no need to generate custom fstab for the sake of fsck
anymore.

Signed-off-by: Michal Soltys <soltys@ziu.info>

95fstab-sys: use det_fs and wrap_fsck

This patch mainly adds fsck functionality to fstab-sys, with additional
sanity checks (checking for device existence, verifying fstype via
det_fs).

Signed-off-by: Michal Soltys <soltys@ziu.info>

dracut-lib.sh: Add det_fs() and wrap_fsck()

Both functions will be used by rootfs-block and fstab-sys modules.

Both are based on code present in mount-root.sh, though few changes are
present.

det_fs:

will try to determine filesystem type for supplied device, even if it's
not auto. If fs cannot be detected, or if the detected one differs from
the supplied one - a warning is issued (so user can fix its stuff later)

wrap_fsck:

will call fsck for specific device with optionally additional
fsckoptions. The function returns fsck return value.

Signed-off-by: Michal Soltys <soltys@ziu.info>

dracut-lib.sh: add vwarn() function

Similary to vinfo()

Signed-off-by: Michal Soltys <soltys@ziu.info>

dracut.spec: build require dash and bash

base/init: do not lazy umount /run

base/init: mkdir non-existant dirs

base/init: save timestamp earlier and remove /sys mount duplicate

base/init: mkdir $NEWROOT, if it does not exist

base/module-setup.sh: only mkdir /lib, if it does not exist

i18n: disable systemd-vconsole-setup, until the tool is fixed

busybox: install busybox to /usr/bin

lsinitrd: handle new output of "file" for XZ compressed images

dracut-functions: change search path for find_binary

dracut-functions: handle symlinked directories

dracut: handle toplevel symlinks

dracut: s/bzip/bzip2

dracut: fix overlayfs paths

lvm/lvm_scan.sh: remove references to lvm-cleanup

lvm-cleanup was removed long time ago

Fix "can't shift that many" crash with empty /proc/cmdline

If /proc/cmdline is empty (like if root=... is set in /etc/cmdline),
modules.d/99base/init will crash with a message saying "can't shift that
many" right before switch_root. The problem is in the block of code that
tries to look for init args. It does something like:

read CMDLINE </proc/cmdline
    [...]
    set $CMDLINE
    shift

If CMDLINE="" then "set $CMDLINE" will dump all the variables to stdout.
(That should be "set -- $CMDLINE" instead.) Since there's no $1, the
"shift" causes an error, and dracut crashes.

The 'shift' was copy-and-pasted from the previous block. It doesn't
belong here; remove it.

[Harald Hoyer <harald@redhat.com>: corrected commit message]
[Harald Hoyer <harald@redhat.com>: fixed indention]

Signed-off-by: Will Woods <wwoods@redhat.com>

dracut: set TMPDIR to /var/tmp

we really don't want anything else than /var/tmp for our operations.
/tmp might be too small and any other location might not fit our needs.

dracut.spec: add crypt-gpg module

cut.conf.d/fedora.conf.example: removed filename in comment

dmsquash-live/dmsquash-live-root: add missing changes for /run

Change to /run/initramfs/squashfs/ was not complete.

dracut-functions: make local vars local and prefix with "_"

TODO: update

README: s/initrd/initramfs

dracut.conf: explain dracutmodules option better

dracut.kernel.7: crypto LUKS - info about gpg-encrypted keys

dracut-lib.sh: warn, even if "quiet" is set

dracut-functions: remove find_rule()

Not used anymore.

Signed-off-by: Michal Soltys <soltys@ziu.info>

dracut-functions: update inst_binary()

This update adds support for sort-of corner case - when explicitly
specified binary (e.g. through dracut_install or inst) is a library
itself.

In such case, we would expect the binary to undergo typical
library-related handling (symlinks and such).

Apart from that, the patch cleans indenting and a few unused variables
in inst_binary() (probably leftovers from the past ?)

Signed-off-by: Michal Soltys <soltys@ziu.info>