Merge remote-tracking branch 'toybox/master' into HEAD

Note posix mailing list posting correcting a bug in the web version of the standard.

Don't mount a filesystem over an existing one with the same /dev and /dir.

The OS mostly catches this for block devices, but calling "mount -a" twice
shouldn't overmount tmpfs entries with new tmpfs instances. (This needs a test
suite entry, and the test suite needs a root context to run in...)

Switching on fortify was not kind to the pending directory. Fix the actual build break (open(O_CREAT) without permissions).

Start of deflate compress-side code, mostly refactoring and stubs so far.

Ashwini Sharma pointed out that "mkdir sub; ln -s . sub/up; du -L sub" shouldn't loop endlessly.

Refactor expr and add another test entry that works with TEST_HOST=1 but not with the one in pending.

Tests for operator priority groupings.

Remove the strncpy from mountpoint, and make a lot of other changes while I'm here (to be described on the mailing list).

The "re-exec to regain root permissions" logic broke the error message when calling root-only commands through the multiplexer.

It would say "no such command" when it should say "not root".

Minor whitespace cleanups.

expr.c: Added '==' sign into list of operations. Also added support for regex pattern match.

Improve error reporting in parallel build. (On error, wait for all children to finish before exiting.)

Make sendfile use libbuf.

Tiny in-passing cleanups to more.c.

Check in most recent release notes.

When running a test, the diff is always an ascii diff, not binary.

Add "change" subdirectory to make clean.

Add "make change" target to build the big toybox binary as a bunch of little ones (in the "change" subdirectory), and tweak scripts/make.sh to avoid redundant work when rebuilding.

sed: c needs to trigger range logic like d, D works like d when there isn't anything left in the line, and more tests.

New ifconfig tests from Cynt Rynt.

(I added the "only run if root" stanza at the beginning.)

Switch to toybox readlink.

Change-Id: I9f777703bbd6444901dac58b330249e1f044e1cf

Switch to toybox dmesg.

Change-Id: I016c2f57545bcd82962e4c181a46121d69dadae0

Regenerate generated files after upstream sync.

Change-Id: I506f53563f132a54f400b3a0dcdb4945ff880b89

Merge remote-tracking branch 'toybox/master' into clean

Update dmesg, loosely based on a patch from Elliott Hughes.

Probe the default buffer size, replace the constants with FLAG_x macros, add -r,
replace the byte at a time output with a single xwrite(), more comments.

Switch to toybox nohup.

Change-Id: I11d837ba0d306d18e52823612bd5d136633cda64

Variant of a patch from Ashwini Sharma, making df /dev/node work and tweaking the spacing.

I didn't apply the POSIXLY_CORRECT gnuism because it's a can of worms (as would
be LSB_CORRECT), and you can presumably alias df="df -P" if you want that.

Possibly in future I should factor out the "readahead and align columns based
on measuring the largest value in each" code from ls and apply it here.

Switch to toybox mkswap, swapoff, swapon.

Change-Id: I2d539d29aae4767a2126a3bdd3a2ce2977d8e607

Switch printenv to toybox.

Change-Id: I53362a14b3c3ed290844c840e9d5523e8c042d22

Android-related roadmap.html updates.

most notably:

* Android switched to mksh several releases ago.

* system/core/reboot is Android's reboot(1) (and sdcard is how
emulated sdcards work in production, not a testing thing).

* I removed all the "apparently unused" tools from the tree, since
they were all actually unused with the exception of lsusb which people
would build as/when they needed it. (which may need resurrecting when
they come back and find there's no "lsusb -v" in toolbox.)

Tweak the "ignoring return value" fortify workaround for readlinkat.

We zero the buffer and if the link read fails that's left alone, so
it's ok for the symlink not to be there. Unfortunately, typecasting the
return value to (void) doesn't shut up gcc, and having an if(); with the
semicolon on the same line doesn't shut up llvm. (The semicolon on a new
line would, but C does not have significant whitespace and I'm not going
to humor llvm if it plans to start.)

So far, empty curly brackets consistently get the warning to shut up.

Switch to toybox sleep.

Change-Id: I1477527b1b8e09d9955e266a8194da790a9952b3

Switch sync to toybox.

Change-Id: Ib614187f2fcc8f769280d5ac26a8002ffb14e1d8

Remove halt/poweroff/reboot.

These commands call the reboot(2) system call. On Android rebooting is done
by asking init to reboot.

Change-Id: If859d61282a32e7aa20b58f42db9f91084235b7d

Use LOCAL_POST_LINK_CMD to install toybox symlinks

It's simpler; Also whenever toybox is updated the symlinks get
recreated.
Remove the dependency on Android.mk. (The build system has already
automatically added the dependency on Android.mk.)

Change-Id: I6f9b933bce699f2a7af181697cef08844fc77837

Switch insmod/lsmod/rmmod to toybox.

Change-Id: I01d751b4b4773bf6436a2078da3de2a28afc27a4

Move clear, false, and true over to toybox.

These are all identical to their toolbox counterparts.

Change-Id: I3fab6ed80ac6a90f6837983ed585eb8fb0262d04

Merge "As long as Android's going to require fortify, fixup the warnings it generates."

Merge "Whitespace/code style."

Merge "A patch against your current ToT that builds in AOSP "

As long as Android's going to require fortify, fixup the warnings it generates.

Whitespace/code style.

A patch against your current ToT that builds in AOSP 

Merge "Add usleep and note that inotifyd could replace notify."

Merge "Don't include asm/* files directly."

Merge "Patch from Elliott Hughes for Android/bionic build."

Add usleep and note that inotifyd could replace notify.

Change-Id: I73758b0c5b95f9e040640fa92ead804ad0fcca80

Don't include asm/* files directly.

Patch from Elliott Hughes for Android/bionic build.

Build toybox.

Change-Id: I2ae49ed68086fd9407f4e50636300d011c85d557

Make md5sum and sha1sum work on big endian systems.

Fixups for the android/bionic build probes patch.

The CFG_* symbols are always defined so if() can use them as compile-time
constants, so don't if defined() them.

Doing USE_BLAH() around variable definitions opens up the same potential for
config-dependent build breaks as #ifdefs do, just make the whole command
depend on the symbol for now, factor out the utmpx infrastructure later.

The PTY probe was always failing because it used NULL without #including
the header that defines it. Substitute 0 instead.

probe for getspnam(), forkpty(), utmpx, replace sethostname()

Android is missing all of these; we need to probe for some so we have
a config symbol to depend on.
sethostname() is easily replaced.
We got termios.h via pty.h; now it's not included in configure-step tools,
so we need termios.h to generate globals.

Fix "tail -c 10" segfault spotted by Lukasz Szpakowski.

Once we've read through the initial TT.bytes backlog we discard the extra data,
meaning we adjust the remaining amount each time so the overflow is zero bytes.
We were doing the adjustment right, but not zeroing out the overflow counter
after we did so.

More sed bugfixes.

sed: fix 'q', and { }, and } after s/// with no semicolon.

More sed corner cases. (Empty regex repeats previous regex, implement -i, etc.)

Fix more sed bugs.

Fix sed 'b' with no label and 'N' in general.

More sed bugfixes. (Did you know s/[/]// is a valid sed expression?)

Debugging pass on sed: make the existing test suite pass.

Add a few more sed tests.

Add color support for scripts/test.sh and new SKIP_HOST for tests expected to fail on non-toybox implementations.

sed: implement s & and \1 backrefs.

Implement more sed plumbing, including s/// (without \1 or & yet).

Remove unnecessary assignment spotted by Cynt Rynt.

Implement another largeish chunk of sed. Untested, unfinished, do not use yet.

First cleanup pass on hwclock.

hwclock: get and set the hwclock

ipcrm : remove msg que, sem or shared memory

Yet more sed tests.

Implement a few sed commands. Not done, and not tested yet.

More sed tests.

Next round of sed infrastructure, parses most commands now, doesn't implement them yet.

Attached are new toys TR and CRONTAB.

*tr.c*:  It translate, squezze and delete characters.
         Supported classes are alpha, alnum, digit, lower, upper
         space, blank, puct, cntrl and xdigit.

*crontab.c*: Companion of crond. It maintains crontab files.

Test for ls -d from Isaac Dunham, and he pointed out -F also disables symlink following.

Bug report from Isaac Dunham: ls -d shouldn't follow command line symlinks without -H or -L (just like ls -l).

First batch of sed tests.

Only good for TEST_HOST=1 at the moment because the test infrastructure itself
depends on sed, so if an unfinished sed is in the $PATH it goes boing. But
hey, corner cases!

I have... more.

Next drop of sed infrastructure, mostly argument parsing, doesn't do anything interesting yet.

Fill out rest of help text for sed.

Fix use after free error spotted by ?ukasz Szpakowski.

O_CLOEXEC was confusing the O_RDONLY test in loopfiles(), resulting in attempts to read from stdout instead of stdin for "-" or no arguments.

xexec() recursion limiter has to go after rebound or toy_init() zeroes it.

Cosmetic tweak: no trailing spaces when ./toybox lists command names.

Basic sed range support, enough for "sed -n 9,11p README" to work.

Teach ln -f to leave original target alone if link creation fails.

Suggested by Ashwini Sharma, I wound up implementing it by creating the new
link at a temporary name and renaming it over the old one instead of renaming
the old file out of the way and putting it back if it failed.

(Because "mkdir -p one/one/blah && ln -sf /bin/one one" would otherwise
rename one/one out of the way and only notice it can't delete it way at the
end when recovery's darn awkward, vs create new thing and if rename fails
(including EISDIR) that's the main error path. And yes the temporary name
is in the same directory as the destination so we never rename between mounts.)

link over the old one instead of renaming the old file and renaming it back.

Random in-progress snapshot of sed, not finished yet.

More static analysis fixes from Ashwini Sharma.

Add TOYBOX_NORECURSE so xexec() won't make internal function calls.

nsenter: A tool to use setns(2)

This implements all of the namespace parts of nsenter, but UID and GID
switching are missing, as are -r and -w (both because they're not strictly
necessary and because the nsenter manpage has an insufficient
description of how they work).

unshare: Fix help and option parsing

The help text was inconsistent, and option parsing was completely broken
(the options mostly did the wrong thing).

Factor out printf-style escape parsing logic from echo.c.

Even bigger ip.c, from Ashwini Sharma.

Use O_CLOEXEC instead of O_RDONLY to signal loopfiles_rw() to close filehandles.

Fix last night's mv commit (use dest, not source).

Implement mv -f and -i.

Started over on sed (by reading the posix spec).

acpi: implement -ctV, fix recursion, plug a small leak

* acpi_callback had blindly assumed that a path of 26 chars or more was
  the right depth; rely on depth from dirtree root

* acpi -c shows cooling device state
  some backlights are set up so that they will report dimmer as higher,
  but that's a hardware issue that can't be sanely worked around.

* acpi -t shows temperatures
  this implementation will pick up fan, battery temperatures, etc.
  (but currently not hwmon-type temperatures, or hdd temps;
  acpi 1.7 does not measure these either)
  we handle milli-C (typical) and deci-C (I've seen this on Qualcomm
  batteries, and not yet anywhere else)
  we do *not* handle deci-K yet

* acpi -V shows all sensors

* without saving the result of dirtree_path() to free later, we had
  a slow leak.
  all callbacks call this once, so save it in GLOBALS()
  acpi -t happens to need this anyhow, though using openat()/readall()
  instead of readfile() would work.

Various bugfixes (mostly resource leaks) from Ashwini Sharma's static analysis, plus occasional tweak by me while reviewing them.