Merge branch 'upstream'

Change-Id: I17036143b5e644b1857e28b04d95fbd90fa2c112

Merge branch from toybox/master
Conflicts:
both modified:      lib/portability.c
both modified:      lib/portability.h
both modified:      scripts/genconfig.sh
both modified:      scripts/runtest.sh
both added:         tests/sed.test
both modified:      toys/other/acpi.c
both modified:      toys/other/ifconfig.c
deleted by them:    toys/other/unshare.c
both added:         toys/pending/hwclock.c
both modified:      toys/pending/ip.c
deleted by them:    toys/pending/sed.c
both modified:      toys/posix/chgrp.c
both modified:      toys/posix/cp.c
both modified:      toys/posix/id.c
both modified:      toys/posix/ls.c

Change-Id: Ib36c5267ec054a5683ca37da2383d83b3cb1b5b4
Signed-off-by: Hyejin Kim <hyejin0906.kim@samsung.com>

Produce an error message for "cat /mnt", not just return code.

Commit rss feed.

Fix 32-bit bionic toybox build.

https://android-review.googlesource.com/159035/

Add a basename_r() and use it in names_to_pid() to avoid basename() overwriting
itself on some inputs. (Which makes killall really impolite. Bug report
from Nicholas Noury via Elliott Hughes.)

More explanation of TOYBOX_DEBUG for option string checking.

Move comment about TOYBOX_DEBUG to start of file so it's more obvious.

ifconfig MAC addresses should be lowercase.

A minor nit, but for some reason this really stands out every time I
run ifconfig...

I added dhcpd -6 option.

It's for supporting ipv6, and I referred to RFC 3315 Specification
http://www.rfc-base.org/txt/rfc-3315.txt

There are some different kind of requests in dhcpd6,
but I inplemented only a basic protocol. (Solicit - Advertise - Request - Reply)
There's a sample packet as below. toybox dhcpd works in the same way.
http://packetlife.net/captures/DHCPv6.cap

find: add -inum option

-inum is a commonly implemented extension to search by inode number.

Linux's fs-layer tracepoints log many events in terms of inodes, so
"find -inum" is useful for mapping those events back to specific files.

Rename a function to be more obvious, and factor out a repeated calculation
the compiler was almost certainly retaining in a register anyway.

Promote hwclock.

Fix hwclock -w.

The gmtime_r/localtime_r error check was backwards, and the wrong argument
was being passed to the RTC_SET_TIME ioctl.

Also, the error reporting was misleading (showing errno for functions that
don't set errno) and too vague for the user to tell what failed.

There is a typo in mkfifo.c for __Z__  option.

Fix ionice.

ioprio_set takes a "prio" argument that combines class and level. Although
bionic (via the uapi headers) includes the appropriate constants and even
a convenience macro, glibc doesn't, so just hard-code the encoding.

Also fix the sense of a conditional so we actually execute the provided
command.

Avoid integer overflow with insane input data.

Save failure reason for each make change .bad file.

Kylie McClain pointed out that -z affects both input and output.

Can't say I'm happy with the API (-z and -Z to keep them independent would
be nice), but compatibility with what exists trumps having a good API...

Actually set time with touch -d and -t when you don't specify nanonseconds.

There's a nanoseconds field value that says use current time, which I set
but forgot to clear in the right places. (Oops.)

First pass on cp --preserve

Promote xxd to other.

Probe for fork() instead of relying on a distro-specific #define.

Added i option to use other interface on running dhcpd.

Cleanup xxd.

Minor cleanups on xxd.

The android guys sent in xxd. It doesn't share code with od and hexdump. Hmmm...

Fix segfault with "mount -o ro,remount".

Or any call to comma_scan where 'opt' appears as the last item in 'optlist'.

Improve -Z error reporting.

The most likely reason for setfscreatecon to fail is that you don't have permission, and that's reported by the write return EACCES. There isn't really a "bad" context; they're just strings.

Before:

  $ adb shell mkdir -Z x y
  mkdir: bad -Z 'x'

After:

  $ adb shell mkdir -Z x y
  mkdir: -Z 'x' failed: Permission denied

Other than this, the ToT mkdir works fine with SELinux.

Fix top.c build.

Broken by recent lib.h additions.

mkfifo -Z

Add ionice and iorenice.

Add undo buffer for 'u'.

Simplify hexedit logic by adjusting viewport all in one place up top.
(Easier to genericize logic and reuse later in less or vi...)

Factor out more not-curses infrastructure into lib.

Suggestion from Elliott Hughes: tweak test infrastructure to notice if
command exits with high errno and assume it segfaulted.

Fix version number in ifconfig cleanup reference.

Don't segfault if none of the file arguments to ls exists.

Don't depend on malloc(0) to return non-null.

Fix ls so spacing is right for ls -l, -o, -g, -og, -ogZ, -lZ, -gZ, and -oZ.

Fluff up explanation of why 0BSD license for SPDX submission.

Use lsm_set_create() to set security blanket context before mknod, avoiding
racy gap between create/label.

Add nproc.

Cosmetic tweak: no need for pages of text from "make defconfig" and friends.

Last grep commit broke non -r use of grep. Oops.

Make "printf --" and "printf ---" work.

Redo mkstatus.py to grep pending for pending data and trust toybox
defconfig output for ready command list, to reduce manual updating.

Move the magic list of commands needing cleanup from toys/pending/README
to greppable TODO annotations in the individual files. (grep -riw TODO)

On testing fold command, I found w option didnt check the range of value.

mknod: Add -Z option

Change-Id: I23174fb7b54d029784e6d7460368128113090079

Attempt to fix the mkdir LSM race.

Doing a world writeable mkdir and _then_ adding a label seems like a race
window, so set the global "create stuff with these labels" context, then
do the creates.

ls -lZ wasn't putting a space before the xattr output.

mkdir: Fix argument of option -Z

Make "grep -r regex" work on implicit "." if no files specified.

Add -Z support to mkdir, based on a patch from Jose Bollo.

I have no idea why -Z isn't showing up in mkdir --help when enabled, I
need to look at that...

Adapted patch from José Bollo to do the "tonight we're gonna api like
it's 1999 and every path ever is from cwd or root" api versions for sockets
and as a fallback of the open fails.

There are still some holes (symlink to socket with -L will give you info
about the symlink, not the socket, and symlink to a file you can't open will
give you info about the symlink, not the file) but the correct fix is
to make O_PATH work in the kernel for the LSM functions. (If we can read
this data by path, we should be able to read it by O_PATH. We should not
need two codepaths for this.)

Switch id over to new infrastructure, switch id to use FORCE_FLAGS, and
make lib/lsm.h auto-include from toys.h.

Fix "ls -Z . toys" segfaulting, because preprocessing skipped.

strwidth() got called on ->extra which was NULL. Had some other bad effects
ala "ls -sk file1 file2 file3" ignored the -k. This should fix that too.

Recent commit broke ls -R (test reversed), and "ls -R singledir" should
show label: at the start (yes, even "ls -R" in an empty dir).

More ls -Z upgrading. Move TOYBOX_SELINUX and TOYBOX_SMACK support from
portability.h to new lib/lsm.h. Update ls.c to use it.

Fix "ls . toys" (two directories when one is . or ..), which was filtering
out the . as something we shouldn't recurse into even though it was explicitly
listed on the command line. For some reason "ls -Z . toys" is still segfaulting
though (but "ls -Z ." isn't), need to figure out why...

stat: fix group name

Change-Id: I0ad65a40bf380d789c4396ebdc01be217901a2e3

Bugfix from Hyejin Kim: su should not prompt root user for new user's password.

Promote reset (actually write a new one using the simple man 4 console_codes
terminal reset escape sequence) and add gettty() function to lib so terminal
gets reset even when we redirect stdout/stderr. (This is apparently the
expected behavior.)

Print name of file at the bottom of the screen.

And yes, I tested $PWD/私はガラスを食べられま す。それは私を傷つけません。
as a name and made it work. If you throw newlines or ascii escapes in the
name it'll use the fancy printing logic for chars, otherwise it does the
full utf8 fontmetrics deal.

More hexedit cursor boundary tweaking.

Fix bug (len[7] wasn't zeroed if -Z off, thus -C overestimated entry lengths),
and some cleanups while I was there.

Set the executable bits on all the *.test files. (Wasn't consistent, is now.)

Git hates me.

Cleanups of dirtree_start() calls. (Don't need to feed in flag values, just
symfollow true/false.)

Add DIRTREE_SHUTUP to disable dirtree warnings if file vanishes out from
under traversal. Pass through full flag set in dirtree_add_node(), add
dirtree_start() wrapper to provide symlink-only behavior (avoiding a lot
of DIRTREE_SYMFOLLOW*!!(logic) repeated in callers).

Probe for -Wno-string-plus-int.

LLVM has its own nuts warnings about things that aren't wrong, but disabling
them with the relevant -Wno-* warning disabling command line option drives
gcc nuts because it's a command line option it doesn't recognize. (gcc 4.2.1
dies with an error. gcc 4.6 warns about it _only_ if it's warning about
something else. (PICK ONE, either you warn about this or you don't, distract
people from actual problems with noise about something clearly unrelated to
what just changed is extra-stupid.)

So just probe for it, and add the flag only if it doesn't complain about it
while we're producing an unrelated warning.

Move not-curses code into interstingtimes.c

Fix more with missing files.

Previously we'd go into an infinite loop because we weren't
incrementing optargs.

Also add a missing flush so an error on stderr won't overtake the
escape code that resets reverse video.

Disclaimer: the new behavior isn't exactly like the desktop version;
surprisingly they try to open the next file _before_ they prompt. That
feels weird to me as a user, and seems like it would lead to a more
awkward implementation, but if you're more concerned about
authenticity...

Re-enable catv command now that flag infrastructure is updated.

Implement SELinux ls -Z support.

This patch uses lgetfilecon rather than fgetfilecon because
dirtree_parentfd always seems to return -1 in this function. If/when
the SMACK code is fixed to work with dirtree_parentfd, I'll send a
matching patch for SELinux.

In the meantime, this works, and although ls -h is still on my to-do
list, I think this patch is sufficient to let us replace toolbox ls
with toybox ls.

Replace android-specific hack with just signal(SIGPIPE, SIG_IGN).

Yank smack from singleconfig.

Need to come up with a better solution to this, but the problem is that
single.sh's symbol enabling isn't dependency aware, and "silentoldconfig"
prompts. I suspect the better solution is "write a kconfig replacement".

Fix dmesg -c error output.

Use perror_exit to show the likely "Operation not permitted" if klogctl fails.

Move a prototype to the start of portability.h (suggested by Elliott Hughes)

dhcpd writes leases on "dhcpd.leases" file.
but, dumpleases read from "udhcpd.leases".

Fix getprop sorting and error reporting.

Use qstrcmp instead of alphasort (which expects struct dirent arguments).

Don't use perror_exit because property_list doesn't set errno.

Minor dmesg cleanup.

If a shortopt is configured out right before a bare longopt, the option parsing infrastructure segfaults because there's no next shortopt but the list isn't empty. (There was a test for this, but we're simultaneously traversing two lists and it was testing the wrong one.)

dmesg: add -t suppress timestamp flag

Portability bits for the recent ls smack changes.

More ls cleanups from squinting at Jose's most recent smack patch.

Behavior change in flags: allow -long to work together, and -l1 work like -l
not -1.

I didn't make ls -gCl remember the g, though. (Because -Cg and -gC take
the last one: I'll preserve explicit state but not implicit state. And if
-1Cl and -lC1 aren't going to behave the same, it wasn't consistent anyway.)

Add default sigpipe handler for android (as suggested by Elliott Hughes).

And remove the header part too.

Wild guess at cleaning up smack support. Don't have a test environment yet.

Remove redundant numlen.

ls: Add -Z (Smack) option

Option triggers printing security context,
for smack that is file's access smack label.

Change-Id: I9054d9bcfe4d149e8fbfa0831b6ab50165d2bd91
Signed-off-by: Jan Cybulski <j.cybulski@samsung.com>
Signed-off-by: José Bollo <jose.bollo@open.eurogiciel.org>

Fix truncate prefix bug and add truncate test suite entry.

Add prefix support Hyejin Kim asked about.

Fix ls -s and -i indentation in -C and -x modes. (Spotted by Jan Cybulski.)

Promote hexedit to other.

Some infrastructure hexedit needs. (Poor man's curses.)

Teach hexedit to actually edit. Add -r option for read only mode.

Fix display and cursor control (to respect bottom boundary).

No actual editing yet.

Too tired on the flight back from Japan to work on thinky stuff, so...

Bugfix from Hyejin Kim (count=1 shouldn't change name), plus a bounds check.

Test is 'echo "AAA c 1 0 0 2 5 0 0 1" | makedevs' makes AAA not AAA0.