Tweak permissions of toybox binary.

Update Android section of roadmap.

Change-Id: I5a0f49b17bc5866689608e73af94b31744fd3dc9

Note Debian abandoning LSB and our own decision not to worry about LSB 5.0 yet.

Fix sed bug reported by Isabella Parakiss, where sed -e "/x/c\" -e "y" added
an extra newline because the test for whether we have an existing string to
append a newline to was checking if struct step had data appended to it,
and the /x/ regex is data appended to it. Change test to check for null
terminator at ->arg1 offset.

Oops, forgot to check in the header file change for ps.c.

Promote ps to posix.

Free more stuff in debug cleanup.

Tempted to convert the struct arg_list and ptr_len stuff to arrays and
make the parsing table driven, but there's enough direct usages of each
field it's not a net win.

Implement -suUgG and -o majfl,minfl, move uid/ruid/gid/rgid into slots[31-34]
and vmlck into slot[18], pass error message to comma_args(), collate -stuUgG
callbacks into parse_rest().

Tweak build instructions in README/code.html.

Use the /proc/self/fd/%d workaround for O_PATH not letting you read xattrs,
inspired by:
https://android-review.googlesource.com/#/c/152663/4/libc/bionic/fgetxattr.cpp

Fix ls error message for chmod -r directories.

Also, if you mkdir "$(echo -e "one\ntwo"); chmod -r one*; ls -q one*
it honors -q.

Install without a mode should use 0755, and check FLAG_preserve instead of
the global so "install -g 0" doesn't alias to "cp --preserve 0" and error out.
through to --preserve 0"

Replace xcount_cpus() with a call to sysconf(_SC_NPROCESSORS_CONF)

Add xcount_cpus()

Add comma_args() and factor out parse_o(), parse_t(), and parse_p() to use it.
Fix FLAG_w.

Factor out parse_o() and make -l -f and default output work on strings
rather than bitfields.

More ps work, and fill out remaining help text.
Fix more l/r justification, implement uname vsz vsize and stat.

Fix netstat build warnings.

Fixes two instances of "warning: use of logical '&&' with constant operand".

Change-Id: I2bb1ba4e389f8a9e54af8ee3ab23d8849fc329f0

More ps work: move l/r justification to widths[], add RUID/RGID, implement PGID,
plus tty detection fix from Elliott Hughes.

fix dhcpd warning

Auto-size df columns.

On Android, the filesystem column is pretty wide. Actually measure the widths.

Make ps.c whitespace consistent.
(Assignment has spaces around operator, comparison doesn't.)

ps: implement -t, remove leading 0 from ETIME days, implement -o GROUP,GID,PCPU

Move d/h units from %d %D output to default format string.

More ps work, tested up through etime now.

Fix ps display padding (truncation) and adjust -o pri by one.

More ps work, implement -p, correct several -o fields and general alignment.

make.sh: missing cflags for config2help

config2help might require extra parameters to be passed to the compiler.
For example it might need an additional header path.

Cleanup pass on pgrep: remove flag_twiddle macros, use 0 constants,
unify some TT.signame tests checking constant value variable initialized to.

"stat -c %T" support (filesystem type names) based on patch from Hyejin Kim.

Decode netlink sockets in lsof.

Refactor the /proc/net parsing so this only adds 7 lines overall.

Also clear the DEVICE field for sockets and fix alignment for long
usernames (until someone implements the two-pass output that measures
columns).

New command: flock.

The brillo folks wanted this in a shell script they're porting over
(so I've only implemented the fd style they wanted, not the named file
style).

Fix bug in od that screwed up position indicator on arm and mips.

Fix allnoconfig. (Exporting HOSTCC before HOSTCC?=cc caused a problem.)

Export makefile variables so you can say "make CROSS_COMPILE=blah-" as well as "CROSS_COMPILE=blah- make".

Minor cleanup and add "MODALIAS" handler (suggested by Isaac Dunham).

Back to chipping away at ps...

Add uClinux analysis to roadmap, and a few other pending changes.

help_exit() tweak.

xvfork went away.

Make defconfig build for nommu.

Adds XVFORK() macro, teaches xpopen_both() to call /proc/self/exe with NULL
argv (and converts cpio -p to use that), adds TOYBOX_FORK guards to some
unconverted commands.

Another chunk of nommu support, replacing toys.recursion with toys.stacktop.

xexec() is noreturn.

Add xvfork() as a static inline and use it from various places.

Note: vfork(), like fork(), can return -1 if too many processes, and
we should notice and fail loudly.

The -o /dev/null trick in probing isn't compatible with elf2flt, so use tempfile.

Fix a couple things gcc is too dumb to figure out on its own.

Add find tests.

Fix a find segfault.

Elliott Hughes found a bug https://android-review.googlesource.com/#/c/170020/
and Daniel K. Levy worked out the problem: the user/group/newer arguments
to find weren't consuming their arguments when not checking the results of
their comparison (because an earlier test had already caused their
parenthetical group to fail). This confused the argument parsing logic
and could lead to segfaults.

I applied a different fix that reorganized the existing tests instead of
adding a new test. (Looks like a big commit but it's mostly whitespace
due to extra curly brackets changing indendentation levels.)

Replace toys.exithelp with help_exit() in lib.

Squish more warnings in pending.

Squish a warning in pending.

Fix netstat -e.

The -e flag should add "user" and "inode" columns to the TCP output.

Also truncate IP addresses in non-wide (no -W) mode.

This also removes a bit more of the duplication, though there's still
plenty left in this file!

i already did -l and -t, the positive side of -p, plus name filtering...

Fix netstat -p.

netstat -p was failing for any cmdline longer than 21 characters. (A
typical Chrome render process has about half a kilobyte of cmdline.)

There's still a lot of cleanup to be done later, but this is enough to
fix -p and remove a fair amount of unnecessary custom code into the
bargain.

increase the size of progname to avoid buffer overflow

Remove prompt argument from yesno(), caller can fprintf(stderr, "blah") itself.

This fixes the build break, the change to yesno() prototype accidentally got
checked in last commit. (Oops, sorry.)

Switch HR_SI to HR_1000, make binary the default, make HR_B only affect bytes,
and update the tests.

Two large thinkos in oneit: -3 was always enabled and signal numbers were
overwritten before we set up signal handlers.

Add seq -f tests, tweak help text, and catch one more error case.

ls -h support.

It turns out that people are anticipating the switch to toybox ls from
toolbox ls on the assumption that this will finally bring -h support.
Let's not disappoint.

I've merged two existing buffers in listfiles whose uses didn't
overlap into one. It may be possible to cram this into toybuf with the
other stuff, but it didn't seem worth the extra complexity for 64B of
stack, especially since we were already living with that for time
formatting anyway.

df -h and -H.

This doesn't address the lack of support for a variable-width
"Filesystems" column, but it doesn't make the current situation any
worse either.

This is the last of the missing -h options. The other commands with -h
also have --si, but only for df did it get a corresponding short
option (and I've never personally used --si on du or ls, so let's wait
until someone actually cares).

Implement lsof.

This is a superset of the current AOSP lsof (which is itself a
superset of the lsof in Android M). It fixes several bugs/misfeatures
and adds support for decoding IPv4/IPv6 tcp/udp/raw sockets and Unix
domain sockets.

Make human_readable() handle base 1024 units without floating point.

Rounds correctly via brute force, displayed digits are decimal even when
working with powers of 2, shows at most 3 significant (decimal) digits.
(So no "1023M" nonsense, that's 1.0G.)

seq -f %0-f is a valid pattern.

If you start a git commit and then edit the file more on the filesystem
before saving, the updates don't go in the commit. Behavior difference
between git and mercurial, that.

Good to know.

Sanitize seq -f string.

vmstat: fix units for bi and bo columns

pgpgin and pgpgout in /proc/vmstat are in kbytes, not pages.
(see http://lxr.free-electrons.com/source/mm/vmstat.c?v=4.2#L1310).
Remove the extra * page_kb for io_in and io_out.

Trivial code style tweak.

vmstat: reset header pointer when looping

Modifying the headers pointer when printing the headers causes
a buffer overrun the second time they are printed.  Use a local
header pointer that is reset to the beginning of the buffer for
each loop.

ls -l user/group/security context should be left-aligned.

Right-aligned looks pretty good to me, but it's not what anyone else does.

Work around bug in gcc 5.2.0 that miscompiles linux 2.6.12's kconfig.

Fix mv on overwrite.

We need to remove the destination, not the source, to be able to overwrite.

Add portability.h glue to let uptime build without TOYBOX_UTMPX.

Build updates: make change should use top level .config for global settings,
add NOSTRIP variable to force skipping strip, and save intermediate flag
data in generated/flags.raw and have mkflags.c error message point to that.

Menuconfig option for musl-libc pretending mmu is just pining for the fijords.

Static analysis from Hyejin Kim found possible pointer underflow.

Now that the kernel's 128k environment size has been lifted, it might be
possible to feed in a gigabyte of suffix so argv[2] is enough larger than
argv[1] that char *s decrements past NULL and points to arbitrary high
memory (I.E. strlen(suffix) > (long)base), at which point the base > s
test is defeated and we strcmp() against a wild pointer.

Which is read only anyway and on 64 bit you probably couldn't hit any
interesting addresses, but the fix is easy enough: compare strlen values
instead of pointers. So do that instead.

I discovered that the reason SIGINT causes a reboot on sysvinit is that
it's how the kernel signals that ctrl-alt-delete has been pressed;
thus, setting it as the signal for reboot prevents ctrlaltdel scripts
from working.
SIGTERM is what Busybox uses, so we might as well be compatible.

Test for human_readable()

Kylie McClain pointed out that env should clear variables with NAME= by itself.

Another Android roadmap update.

The three separate lists had got a bit out of sync. The genuinely new
changes are in the top list.

Fix ionice default class.

Fix more date bugs.

Correctly and portably check for non-normal dates, and explicitly show
the "before" and "after" dates (in the format of the user's choosing).
Clear the struct tm in date_main rather than parse_default because on
one path the struct tm is actually initialized. Explicitly clear the
tm_sec field in parse_default because -- experiment shows -- that
should not be preserved. Only do the "what does this 2-digit year
mean?" dance if we actually parsed a 2-digit year. Show the right
string in the error message if strptime fails.

Also add more tests, and use UTC in the tests to avoid flakiness.

Bugfixes from Elliott Hughes: debug code got checked in (oops) and
uninitialized trash in struct tm fields could segfault glibc's strftime().

Different tools have different ideas about what human-readable output
looks like. dd uses "7 MB" where du uses "7M", for example. this patch
adds flags, similar to the BSD humanize_number. most callers will pass 0.

First pass at proper bunzip2 command line handling.

Fix ls -l user/group field ordering.

It's user then group, not the other way round.

More Android roadmap updates.

mkbootimg was rewritten as a python script a while ago, and I just
deleted gpttool. (gptfdisk is in external/, but I'm assuming the
existing entry for fdisk is meant to cover that.)

login: execl() requires a path, not a file name

Isaac Dunham pointed out that SIGINT's handler was set twice in init.c.

scripts/mkflags.c: add missing unistd.h, ctype.h

modprobe: use -q to silence

modprobe: use basename_r()

modprobe: delete perror_exit() that makes no sense

Given modprobe -a, it's important to not exit early for a failure to
load a module; additionally, the rest of the code presumes that this
can fail without exiting.

Fix switch_root implementation.

Add the MS_MOVE of cwd to / and chroot into it. chdir is also
called to ensure cwd does not point outside the chroot.

The switch_root toy was also blocking any case where NEW_ROOT/init
did not exist, even though NEW_INIT was a required parameter and
did not have to be '/init'. Change it to handle any NEW_INIT
passed as either a relative or absolute path.

With this change, the switch_root toy actually works from initramfs.

Teach date @unixtime[.fraction], switch -s to be -D (matching busybox and
not stomping on gnu's "an extra argument tells it to set the time so let's
add -s to do the same thing" extension).

Nanoseconds aren't uniformly supported by these apis, so had to stick it in
GLOBALS() and pull it out later. Awkward, open to suggestions for a better way.
(Also, the setting API is microseconds, not nanoseconds. Collect nano, convert
to micro so we can switch APIs later without changing date's external UI again.)

Oh, and shrink really_long_name_mktime() with a for() loop (and rename it)
although I may go back and redo that for portability to hypothetical libraries
if I can convert this mess to struct timespec with proper nanoseconds support.
But that needs an extended strptime() which needs an extended struct tm,
and between us and that is convincing posix computers got fast enough to
care about fractions of a second.

(Yes, I'm aware gnu added %N to date without adding it to strptime, implying
they reimplemented strptime longhand inside date. I'm not doing that.)

Reject invalid dates in date(1).

Humans get upset when date(1) lets mktime(3) work out what the 99th day
of the 99th month would be rather than rejecting the invalid date. For
the subtly wrong cases, rather than get into the leap year business,
let's rely on localtime_r(3).

Detect swap partitions, inline loop_partitions(), various cleanups.

Initialize uninitialized variable. (Oops.)

Adjust xexec() exit code to be 127, and tweaks for nommu friendliness.

Make multiplexer's "command not found" exit 127.

Somebody (carsonh on freenode) objected that they were running something
like "toybox test 1 == 2" and couldn't distinguish the test failing from
toybox not having the test command. Why they were running toybox out of
the multiplexer instead of having a test symlink in the $PATH, I couldn't
tell you. (Is "I know toybox is on this system, but don't know how it was
configured" a problem people actually have?)

*shrug* They care about it more than I do, so now you can't distinguish between
the multiplexer not being found and the command the multiplexer tried to
run not being found. Progress!