toybox: Fix build

 * Don't reference hostid because we're not building it.

Change-Id: Ie98f3885729b31878556a5eed6695e0ae1c7c4fb

toybox: Update makefile, generated files, and configuration

 * Enable some of the new stuff and bring in line with AOSP.

Change-Id: I8b93e2b59390a6d5effe83e638a8751e6d80fd80

toybox: Fix build of static executable

 * Avoid duplicating a symbol in libselinux

Change-Id: I154793f7939aaa172153331313833290621efc50

Merge branch 'master' of https://android.googlesource.com/platform/external/toybox into cm-13.0

Change-Id: I02c3b9e1f4afd412b9eabaf76190de405f642b96

Remove switch_root.

...since it's never going to run as pid 1.

Change-Id: Idd21951c2966ce37049aa397c8c973b0e7202901

Add depends on TOYBOX_FORK for various commands that need nommu conversion.
(This should fix allyesconfig.)

Cleanup pass on the dirtree infrastructure, in preparation for making rm -r
handle infinite depth. Fix docs, tweak dirtree_handle_callback() semantics,
remove dirtree_start() and don't export dirtree_handle_callback(), instead
offer dirtree_flagread(). (dirtree_read() is a wrapper around dirtree_flagread
passing 0 for flags.)

Regenerate generated files.

Change-Id: Ib5698debdbee6b392d23e6114182e5030967a28d

Merge remote-tracking branch 'toybox/master' into HEAD

Fix warning (toys.optflags is a long long now).

wget: clean up

 - shorten error messages
 - replace mk_rq with sprintf
 - remove struct and defines
 - change unsigned int to unsigned

Another pass at file.c: move posix-required "executable" to front of output,
next few fields in the order the other implementation outputs, fewer commas,
fix a big where big endian executable type wasn't detected right,
and fix the filehandle leak.

Elliott pointed out that we output "unlimited" instead of "infinity", so
accept that as input. (And that I screwed up the test.)

Fix bzcat integer overflow reported by John Regehr.

Fix file for Java class files, improve script detection, and add tests.

More minor cleanup (inline a function, simplify name of another).

Minor cleanup.

Fix base64 so == wraps properly.

Factor out command name at the start of test name, have runtest.sh print it.

Print command name at start of each test.

Split lsattr/chattr tests.

Command name at start of each test.

Add fstype test.

Try to consistently print command name at the start of each test.

split pgrep/pkill tests.

For years the man pages have said to #include <sys/types.h> to get
major/minor/makedev, but glibc has vowed to break existing programs
(https://sourceware.org/ml/libc-alpha/2015-11/msg00253.html)
and replace it with _another_ non-standard header (not in posix or lsb),
so let's just add functions to lib/ that do the transform ourselves.

The last-ever release of uClibc hasn't got prlimit, so probe.

SYS_finit_module isn't there on Ubuntu 12.04 because it was only added to the
3.8 kernel in 2012. That's way too new to assume the build environment has
it, so #ifdef and simulate a failure if it's not there.

Use shell builtins instead of calling wc/awk/sed. (Fewer forks in build loop.)
Based on suggestions from Nicholas Boichat.

The last-ever release of uClibc didn't #define MS_RELATIME.

Use the correct types for recvfrom.

The clang FORITFY implementation doesn't like pointer signedness mismatch.
"What mismatch?", you say. "The historical bug in LP32 Android that left
it with a signed socklen_t".

Fix "make help" again.

Same missing quote at end of line as last time. The new additions to
the help are very useful though.

config2help: add missing ctype.h include

This file uses isspace which is defined in the ctype.h header.

do_regular_file() prints output line, don't fall through to print default.

Regenerate generated files.

Change-Id: I8a889ae35d7846555c3807c4179579e4c7286ac2

Merge remote-tracking branch 'toybox/master' into HEAD

Fix trailing spaces on ps -o cmdline.

Fix inverted test.

pending/file: add cpio, tar, zip formats.

Fix a typo from last time, and Isaac Dunham's todo list:

  - per POSIX, 'cannot open' must be in the 'type' string if open() fails
  (both EPERM and ENOENT); we only do that if open() succeeds and fstat(fd)
  fails.
  - symlink detection (as per POSIX) won't work: opening them O_RDONLY
  results in following the link, then we fstat() the fd.
  - file 'FIFO' causes a hang; open() won't return till there's a writer.

Second pass at the ELF type table.

Switch to $! for make.sh process enumeration.

Fix more warnings on 32 bit builds.

Fix bug where mount -o leftover string didn't get passed through to kernel
for 2-argument version.

Typecast a printf argument because wchar_t isn't a rigidly defined size.

Musl needs an extra #include.

implement simple 'wget' and port name can be specified in URL if default
port 80 is not used.

lsof cleanup

Accept multiple -p, inline filter_matches, convert misleading "char* a, b" to
"char *a, b", use readfile() to read a file, use DIRTREE_SHUTUP, don't need
{ } around a single line, don't modify command line environment space
(which changes what ps/pgrep sees).

Regenerate generated files.

Change-Id: I7c353a8c75fc6de1210e78b5729491e6dbfbe778

Merge remote-tracking branch 'toybox/master' into HEAD

Implement "insmod -".

Also use finit_module if available. Given that "insmod -" requires
init_module, maybe this isn't a worthwhile optimization. Given that
"insmod /actual/file.ko" is the common use case, maybe it is.

Fix a bug in readfileat where *plen would be corrupted if you didn't supply
your own buffer (because ibuf is 0 in that case, not a pointer to the start
of the allocated space).

Add test_COMMAND for each command, update "make help" to describe TEST_HOST
and VERBOSE=fail, and fix a quote mismatch.

Help text update from Isaac Dunham, tweaked slightly.

Add xxd -p and -r.

SELinux denials include hex-encoded paths in the log messages; xxd -r -p is
a convenient way to decode them.

The heuristics are a little weird to my mind, but match the documentation
and observed behavior.

RLIMIT_RTTIME was added to the kernel in 2008, you can't expect uClibc to have noticed yet.

The perl build's attempt to escape spaces and such in LD_LIBRARY_PATH is _SAD_.
It uses a sed expression that assumes you can escape - to use it as a literal
(you can't, it has to be first or last char of the range), and assumes
you have to escape delimiters in sed [] context (you don't), and/or that
non-printf escapes become the literal character (they don't, the backslash
is preserved as a literal), meaning it winds up doing "s/[\-\]//" which is
a length 1 range, which is officially undefined behavior according to posix,
and regcomp errors out.

But if we don't accept it (like other implementations do) the perl build
breaks. So collapse [A-A] into just [A].

Testcae taken from perl 5.22.0 file Makefile.SH line 8.

(While we're at it, remove an unused argument from a function.)

Add support for getprop -Z

Add support for a -Z option to getprop that will either print the
SELabel of a given property if one is provided or print all properties
that have been set along with their SELabel.

Also, correct a memory leak when freeing TT.nv.

Fix remounting /system on Android.

This adds the missing "relatime" option, fixes error handling logic (mount
returns 0/-1, not an errno value, and I at least get EACCES rather than
EROFS in the case where the underlying block device is read-only; we should
also probably only try again if the ioctl actually succeeded), and adds the
missing newline in case where we go around and try again read-only.

The test case was "mount -o rw,remount /system" on Android.

Testfile with the 3 different types of "not utf8 output" escaped chars in it.

Add dynamic/static checking to file (printing dynamic linker if found).

Add the sed invocations to convert tabs/spaces and back, plus some tweaks.

Cleanup pass on file.c, and add detection of different ELF architectures.

Add "make list", rename make working->list_working and pending->list_pending,
and filter out commands that aren't nofork but aren't installed either
(toyflags 0, I.E. recognized aliases like "-sh" called from login).

Implement file(1).

Unlike the POSIX file(1), there's no magic file here, just hard-coded
common (non-obsolete) file formats. Personally most of my use of file(1)
is as a one-line readelf(1) summarizer, so although I assume a full POSIX
file(1) is out of scope (because just the database would likely be larger
than all the rest of toybox), a subset that only supports in-use file types
actually covers most of the use cases I encounter personally.

Also fix peek_be/peek_le.

Fix wc -c optimization.

Check the fstat(2) return value rather than read uninitialized memory if
it failed, and add a special case for files that claim to be zero-length
but aren't (as is common in /proc on Linux).

Add ulimit.

Change-Id: I3f8bfcd76811a7719d24cb3a753452f9bc7ab99a

Regenerate generated files.

Change-Id: I3ce89d325c40621d33f5be3af4bb696d53ed5c44

Merge remote-tracking branch 'toybox/master' into HEAD

Change-Id: I8a0d8e892ca8aa9ec84c33ead812701ccf67f7bc

removed unread assignment in sed.c

clang scan-build flags up this line as being unread, so clearing from code.

Ignore .singlemake.

Wean scripts/install.c off toys.h so cross compiling less brittle.

Don't include toys.h from config2help.c (so cross-compiling from systems we
don't run on is easier), and use HELP_ instead of help_ for macro prefixes
to avoid name collisions (such as help_exit() the function).

toybox: tar: Fix support for long names

Pathnames may be longer than the name field in the header, so use
strncpy() instead of xstrncpy() to avoid bailing out.

Also add unit tests to ensure proper handling of short and long
pathnames.

Change-Id: Id025891993746889564b479e5185cf9721b54a55

toybox: tar: Fix tar tests

Don't rely on ordering of readdir for tests.

Change-Id: Ice24bb64ce453acb0006e3746677d619db933ab1

main.c: fix non-root usage when installed suid root

When toybox is installed suid root and invoked by a non-root user for
commands which do not require root privileges, it drops the root
privileges during initialization.

However, since commit afba5b8efd the result check of setuid() was
inverted such that it aborted on success, making toybox unusuable for
non-root users.

Signed-off-by: Patrick Ohly <patrick.ohly@intel.com>

Add seq -w, suggested by izabera.

Include the upstream toybox version in "toybox --version".

SHAs have their uses, but upstream version numbers are better for getting
a quick ballpark figure for the version.

Before:
  afc66714a4e3-android

After:
  0.7.0-afc66714a4e3-android

Change-Id: Id546ddd003bed995043719bd6e8c7b6c42cb498f

Factor out strnstr() since posix hasn't got it, and add a config option for
the deeply sad passwd heuristics that don't even check numbers and punctuation.

make wc -c faster

use unsigned long with factor

Although printf("%.*s", INT_MAX, s) works fine on ubuntu 12.04, it broke since.

implement env -u

toybox: tar: Fix support for long names

Pathnames may be longer than the name field in the header, so use
strncpy() instead of xstrncpy() to avoid bailing out.

Also add unit tests to ensure proper handling of short and long
pathnames.

Change-Id: Id025891993746889564b479e5185cf9721b54a55

toybox: tar: Fix tar tests

Don't rely on ordering of readdir for tests.

Change-Id: Ice24bb64ce453acb0006e3746677d619db933ab1

Add ulimit.

This isn't a shell builtin, it uses prlimit to target any pid (without -P
it defaults to $PPID, so acts like historical ulimit by default).

Fix xpipe. (thinko.)

Merge branch 'master' of https://android.googlesource.com/platform/external/toybox into cm-13.0

Add xpipe() to lib.

Dependencies for "make COMMAND"

Add "make ls" and friends targets, with "make working" and "make pending" lists.

Add a warning when building commands out of pending.

Regenerate generated files.

Change-Id: I16b793656a57d6f5bba43bc3cf9d9bcc7a5707f8

Merge remote-tracking branch 'toybox/master' into HEAD

Debian unstable is even more pedantic than previous debian.

Another fix from Josh Gao to avoid a null pointer dereference, and
minor cleanup of previous commit.

Fix segfault when `find -iname` gets no argument.

Fix -H and -n with -ABC, and add tests.

Merge branch 'master' of ssh://github.com/landley/toybox

Commit d20b9ff3ee0f fixed most of yocto building, but there was a leftover
(redundant) file built from the makefile (which _should_ just be a wrapper
for scripts/make.sh and scripts/install.sh).

Don't exit with failure code when cp ownership preservation fails

POSIX spec states that it is unspecified whether '-p' prints errors
to stderr when preserving ownership fails. GNU coreutils implementation
does not write anything to stderr when this fails.  Additionally,
'-a' is only specified in GNU coreutils & specifies nothing
is to be written to stderr in the case of failure. Switch the
implementation to align with GNU coreutils while still satisfying
POSIX.

OPO-358
Change-Id: Ibb7c94fbf553a178b3f88a724ef6f737275a4205