Merge changes I626b8146,Ibdf1180e
am: 7e9bdd2a75

Change-Id: I698086434bda8c22369065149437a148b1dd9471

Merge changes I626b8146,Ibdf1180e

* changes:
  simpleperf: move GetCpusFromString() to utils.cpp
  simpleperf: Support event_source bus event types

simpleperf: move GetCpusFromString() to utils.cpp

Move the GetCpusFromString() to utils.cpp so that it can be used by
event parsing code in event_type.cpp.

No functional change intended.

Test: build test only
Change-Id: I626b8146f90bf8bb161ce8574bcf70f6600c8ad3

simpleperf: Support event_source bus event types

The perf_event subsystem exports available PMUs and their events under
/sys/bus/event_source/devices directory.  This patch supports those
events using 'pmu/event/' format like in the mainline perf tool.

The "event" part above might have multiple terms if supported by PMU.
In that case PMU would have "format" directory for available terms.
They would be seperated by comma, so the enclosing "/"s are needed to
group those terms for an event.

But currently all PMUs seem to support a single term only so I left
the parser to split events by comma and match the whole string
(including "/"s).

For example you can use cpu-cycles events like below:

  # simpleperf stat -a -e armv8_pmuv3/cpu_cycles/ sleep 1
  Performance counter statistics:

    986,481,766  armv8_pmuv3/cpu_cycles/   #   (100%)

  Total test time: 1.007272 seconds.

Test: build and run simpleperf_unit_test
Change-Id: Ibdf1180e58d190f8108cdc8d8a096e6323b2a6f3

Merge "simpleperf: move to llvm binutils."
am: 72f8dd3e98

Change-Id: I202016056b6a28f2436506807b657e605ce0222a

Merge "simpleperf: move to llvm binutils."

simpleperf: move to llvm binutils.

Bug: none
Test: run test.py TestTools*.
Change-Id: I9fcbb559ea4cb52e1ac79f3a7aa801a1d7e94dce

Merge changes Ie4aef1bd,I1bfc9323
am: 4516ec3d4f

Change-Id: I0c16075f308cb4d960f9a23bdad70263687e9ee2

Merge changes Ie4aef1bd,I1bfc9323

* changes:
  Add sha1 support for hashtree
  Add test to parse verity data

Add sha1 support for hashtree

AVB format uses sha1 as the hash algorithm when computing the hash of
each block. This cl adds the support to use either sha1 or sha256 in
the hashtree_info struct. It also moves some helper functions as the member
function of the struct.

Bug: 144388532
Test: unit tests pass
Change-Id: Ie4aef1bdd8fa89240f7c6f83fcb2e33f47a468cb

Add test to parse verity data

Add a unittest to load and verify a VB1.0 image.

Bug: 144388532
Test: unittest pass
Change-Id: I1bfc93239a6696c58e9220864009759a2468e136

Merge "partition_tools: Add support for the VIRTUAL_AB_DEVICE flag."
am: ca98e449a9

Change-Id: Id822e04a596ef5f84c954e2315aa82fbf193eec9

Merge "partition_tools: Add support for the VIRTUAL_AB_DEVICE flag."

Merge "libfscrypt: Use <linux/fscrypt.h> from Bionic"
am: b577ab32de

Change-Id: Ib47499363e48552148c8038a09f2d232506a2cf1

Merge "lpdump: Use unsigned value for shift"
am: 2fbd5d87b2

Change-Id: I911e9b35b991216c9aacf93901bf49a518ef0a1e

Merge "libfscrypt: Use <linux/fscrypt.h> from Bionic"

Merge "lpdump: Use unsigned value for shift"

lpdump: Use unsigned value for shift

Shifting a signed 32-bit value by 31 bits is implementation-defined
behavior.  While our toolchains are most probably doing the
expected thing, we make this an unsigned value out of paranoia.

Test: TreeHugger
Change-Id: I551fcf1ac7a27ebd7c1365cd6a9df7267f569c44

libfscrypt: Use <linux/fscrypt.h> from Bionic

aosp/1184798 has updated the kernel headers to android-mainline, so we
no longer need to manually declare the declarations for v2 policies, nor
do we need to manually declare FSCRYPT_POLICY_FLAG_IV_INO_LBLK_64.

Also replace the FS_* constants with their new FSCRYPT_* names.  This
doesn't change the numerical values; it just changes the names.

Test: build and 'atest libfscrypt_unit_test'
Bug: None
Change-Id: I03ce177923bfa9e0fecbbdbf1718fbf1c17176d9

Merge "lpmake: Use an enum class for option codes."
am: 35692b0400

Change-Id: I23a6b3243808ac6cae79b4b6af068bf0a4ce7799

Merge "lpmake: Use an enum class for option codes."

Merge "lpdump: Add support for the metadata flags field."
am: d2290d8d36

Change-Id: Ibf87f5727adb95f01a0b7370316758c1d43826a8

Merge "lpdump: Add support for the metadata flags field."

partition_tools: Add support for the VIRTUAL_AB_DEVICE flag.

Bug: 134949511
Test: manual test
Change-Id: If31234d9da0b15a3dbde7dcc835b2161c5dbba61

lpmake: Use an enum class for option codes.

There's no reason to have short-form option codes for everything, this
will make that more clear.

Bug: 134949511
Test: super.img builds
Change-Id: If60f6648ac311b77d68768bb39825d01c663c500

lpdump: Add support for the metadata flags field.

Bug: 134949511
Test: manual test
Change-Id: Iafc5193c71315b14f192fcc0ae42188a51b0d2cb

Merge "simpleperf: fix reading jit debug descriptors."
am: 018adfb818

Change-Id: I22b3ed631d4d89ae10844751a89f2a9f63193a4a

Merge "simpleperf: fix reading jit debug descriptors."

simpleperf: fix reading jit debug descriptors.

Clang may generate elf files with segments not starting from
page-aligned addresses. For these segments, dynamic linker
creates maps mapping to (segment.p_offset & PAGE_MASK). So
map.start is mapped to file vaddr (segment.p_vaddr & PAGE_MASK)
instead of segment.p_vaddr.

So add PAGE_MASK when calculating memory address of descriptors,
using below formula:
descriptor.vaddr_in_file - (segment.p_vaddr & PAGE_MASK) + map.start.

Bug: 145920143
Bug: 145930241
Test: run simpleperf_unit_test.

Change-Id: Id185a6d6b766ecaa30b5067664687e556f92ef27

Merge "Add no decay variants of benchmarks."
am: d2e2e2d875

Change-Id: I05a5bce97fc7af65f0a6b5a674d33cd3462507e2

Merge "Add no decay variants of benchmarks."

Add no decay variants of benchmarks.

This will help to tell what the performance impact is of turning
off the decay timer.

Test: Ran benchmarks and verified that times are slower for no decay.
Change-Id: Ia0d5aa879e92fb0790194c2efada6c2e407427a9

Merge "Factor out the hashtree info from the verity_info"
am: d4c448cb15

Change-Id: Icd9aade468c32d64a0482f2e050bd95f9e3ea25a

Merge "Factor out the hashtree info from the verity_info"

Merge "mkf2fsuserimg.sh: Make sparse mode optional"
am: 8b724d9075

Change-Id: Ic040444e05471954247abd688054c79544ac427c

Merge "mkf2fsuserimg.sh: Make sparse mode optional"

Factor out the hashtree info from the verity_info

Even though the format for the VB2.0(AVB) image is different from the VB1.0
image, the majority of the content is the same. In specific, they both
have a hashtree and ecc data. By factoring the hashtree info, fec_read
can later use only the hashtree for error correction and doesn't need to
have the knowledge of verity format.

VB 1.0:
Filesystem
hash_tree
metadata    <- assume 8 blocks
ecc_data

VB 2.0:
Filesystem
hash_tree
ecc_data
vbmeta
avb footer

Also switch the internal struct to use std containers so that we don't
need to worry about the memory management.

Bug: 144388532
Test: load a verity image, unit tests pass
Change-Id: I83c55464c3ac75ac41be9f507b674886ad298350

Merge "partition_tools: Add an "lpadd" tool for appending images to super.img."
am: cf9b34eccd

Change-Id: I4fc759fba2d489aee3bdf2870434d904f614e1e8

Merge "partition_tools: Add an "lpadd" tool for appending images to super.img."

Merge "simpleperf: fix flaky test TestApiProfiler."
am: 184821b4f0

Change-Id: Id953ebb3cfbebeaff09e837c1c084565820ad0fb

Merge "simpleperf: update simpleperf prebuilts to build 6021660."
am: b17755fb7d

Change-Id: Ib5f29fe15f21a8dadde3da69d2e6a2c680e6f151

Merge "simpleperf: fix flaky test TestApiProfiler."

Merge "simpleperf: update simpleperf prebuilts to build 6021660."

simpleperf: fix flaky test TestApiProfiler.

Bug: none
Test: run test.py TestApiProfiler* --repeat 10.
Change-Id: I5829aa9b2be8057b64130a6fb4b076958456c7ca

simpleperf: update simpleperf prebuilts to build 6021660.

Taken from branch aosp-simpleperf-release.

Bug: none
Test: run test.py on devices with different android versions.

Change-Id: I39c33e6f7c1d3776288db78554feafea0bff959f

Merge "lpdumpd: Do not use stack to store arguments."
am: 46038c2002

Change-Id: If7616927d6c970851458139906e0cbe9f9784dbd

Merge "lpdumpd: Do not use stack to store arguments."

Merge "lpdump: When using -h, print usage to stdout so lpdumpd prints it."
am: 2e61a7758c

Change-Id: I9698754f5f0379db8310fb7d2ad2fca6d07e83b7

Merge "lpdump: When using -h, print usage to stdout so lpdumpd prints it."

Merge "Revert "lpmake: Don't assume a device is retrofit if it has one block device for super.""
am: cafb6e9140

Change-Id: Iae536a2eaef715a899bd97ccf1645541a520376f

Merge "Revert "lpmake: Don't assume a device is retrofit if it has one block device for super.""

Revert "lpmake: Don't assume a device is retrofit if it has one block device for super."

This reverts commit 13945230d36282a0dd2ad7c240f2b88ffc506205.

Reason for revert: Potential culprit for Bug b/144809373 - verifying through Forrest before revert submission

Change-Id: Ic4ed750a5386f6f45a871ac7112142a6991dfd2c

lpdumpd: Do not use stack to store arguments.

Bug: 144052321
Test: manual test
Change-Id: I700e22ef5c6c0a0c6a5f05c5bb4ea29b0077b34e

partition_tools: Add an "lpadd" tool for appending images to super.img.

Syntax: lpadd [--readonly] SUPER_FILE PART_NAME GROUP_NAME [IMAGE_FILE]

The super file can be sparsed, unsparsed, or a "super_empty" image. The
source image can either be sparsed or unsparsed as well. The named
partition cannot already exist.

Usage is further described in README.md.

Bug: 144468779
Test: lpadd unsparsed super.img w/ sparsed partition
      lpadd unsparsed super.img w/ unsparsed partition
      lpadd sparsed super.img w/ sparsed partition
      lpadd sparsed super.img w/ unsparsed partition
      lpadd super_empty.img

Change-Id: I0cb5d4432c86689567f2a58a379be0f96b64a88d

lpdump: When using -h, print usage to stdout so lpdumpd prints it.

Bug: N/A
Test: lpdump -h
Change-Id: I7bad9f8b5d5c14b831e42d1f21fe8bfeccba3fb0

Merge "lpmake: Don't assume a device is retrofit if it has one block device for super."
am: c42dc84680

Change-Id: I405f154ba371488182a2dd5ca16923a694263e4a

Merge "lpmake: Don't assume a device is retrofit if it has one block device for super."

Merge "simpleperf: support libraries without build ids when recording."
am: 75381635bc

Change-Id: Ibbd16734fae30741a632780b0879b40e38c8e75c

Merge "simpleperf: support libraries without build ids when recording."

Merge "simpleperf: exclude undefined symbols."
am: fcdb95370b

Change-Id: If20762d78df6be06f2c5dee7ecd5e526da6c49c1

simpleperf: support libraries without build ids when recording.

Simpleperf can download unstripped libraries on device and use them
for unwinding during recording, through `app_profiler.py -lib` and
`simpleperf record --symfs` options. But it doesn't support libraries
without build ids.

To support them:
1. In app_profiler.py, download libraries without build ids in native
   lib dir.
2. In DebugElfFileFinder in dso.cpp, check path with the same basename
   in symfs_dir.

Also add document for downloading unstripped libraries on device.

Bug: none
Test: run simpleperf_unit_test.
Test: run test.py.
Change-Id: I5d9015e683f2ecb992d425a42f1f7303307b2cea

Merge "simpleperf: exclude undefined symbols."

simpleperf: exclude undefined symbols.

Bug: none
Test: run simpleperf_unit_test.
Change-Id: I13c1e926d21897090103741744a7613b3f844c6a

Merge "simpleperf:add MSM8909 into whitelist, omit tests requireing hw counters."
am: 3897583b73

Change-Id: I6d0ea969fd9892e5d0dc20da0385e62070d92b88

Merge "simpleperf: fix build_id checking."
am: 9fe57a62ae

Change-Id: I029e3ff597fcc29a337501a4aa342651b228e527

Merge "simpleperf:add MSM8909 into whitelist, omit tests requireing hw counters."

Merge "simpleperf: fix build_id checking."

simpleperf: fix build_id checking.

Native libraries in apks may not have build ids. So change to below
rules when looking for a debug elf file:
1) If having a build id, the build ids should match.
2) Otherwise, the debug elf file should exist and not have a build id.

Bug: none
Test: run simpleperf_unit_test.
Test: test.py.
Change-Id: I01332e3010a6df17e70c6c55e15874d43bfaeb86

simpleperf:add MSM8909 into whitelist, omit tests requireing hw counters.

Test: run cts -m CtsSimpleperfTestCases -t record_cmd#generate_samples_by_hw_counters
Test: hw counters.
Bug: 144472902
(cherry picked from commit 8a0a1ebb671bed0c910d35e71bbc083a031f7331)

Change-Id: I728ea2d83c9b89fc04d442971f76293fed9099ed

mkf2fsuserimg.sh: Make sparse mode optional

Bug: 142424832
Bug: 142803849
Test: Run mkf2fsuserimg.sh without the sparse option and check that the
      generated image is not sparse.
Co-authored-by: Satya Tangirala <satyat@google.com>
Change-Id: I8a079b30f63ddd13a94d73339501ed8ecb2c5049

Merge "simpleperf: fix failed python tests on Android O."
am: 5c96779dd0

Change-Id: I353afac69837281b59f241a7e6d0f4b9406cb604

Merge "simpleperf: fix failed python tests on Android O."

Merge "Fix build with new googletest"
am: 44bc03af44

Change-Id: Ieab89e84f36f9d54d11e759c49229405d56945ad

Merge "Fix build with new googletest"

simpleperf: fix failed python tests on Android O.

Fix *.test_pprof_proto_generator tests by allowing elf files
not having build id.

Fix TestExamplePureJavaTraceOffCpu.test_smoke by loosing check.

Bug: none
Test: run test.py on Android O.
Change-Id: I5a796f433a56735989b90a2339765d1e70e3939f

Merge "simpleperf: update simpleperf prebuilts to build 5991547."
am: 246163dac8

Change-Id: Idc4f8870c2e86f6d8a8113f99c733ebf6945ea4b

Merge "simpleperf: fix test due to llvm-symbolizer upgrade."
am: 89f04a0381

Change-Id: Idb1abbbce008290462b7d8631a59bc2b64b9381c

Merge "simpleperf: update simpleperf prebuilts to build 5991547."

Merge "simpleperf: fix test due to llvm-symbolizer upgrade."

simpleperf: fix test due to llvm-symbolizer upgrade.

Bug: none
Test: test.py *test_addr2nearestline
Change-Id: I1de1f55c25d7f9652e931a23416947ba63beb101

simpleperf: update simpleperf prebuilts to build 5991547.

Taken from branch aosp-simpleperf-release.

Bug: none
Test: run test.py on flame.

Change-Id: I4e0848a9006ec24cb7b17297ebfd5d993f1aa0fd

Fix build with new googletest

The new googletest requires prefix to be non-empty.

Change-Id: Iacd96a6e2fcfb2193c7627212e9e710fb655d6d9

Merge "simpleperf: fix test.py on x86/x86_64."
am: b74b2b5c11

Change-Id: I8bc33282f6eda38bccaf7e48dc25cba2000aac47

Merge "simpleperf: fix test.py on x86/x86_64."

simpleperf: fix test.py on x86/x86_64.

Find 32bit abi on device instead of hardcoding to arm.
Add x86/x86_64 libraries in test apks.

Bug: none
Test: run test.py on x86 emulator.

Change-Id: Ie19b8423c2dfb2260bdc4bae6313b54aaa2847ab

Merge "simpleperf: allow more than one pattern in test.py."
am: ab10d26e56

Change-Id: I982792f0fd7dea08e32b9825b3acb8c0ec07509b

Merge "simpleperf: allow more than one pattern in test.py."

simpleperf: allow more than one pattern in test.py.

Bug: none
Test: run test.py TestTools* TestExample*.
Change-Id: I26e0a37113044cb96c90ff8a02d7f3b34d356c19

Merge "simpleperf: add browser option in test.py."
am: ffb407b459

Change-Id: Id7fe4b61bdabaef90536443d9a57c1644c4910d6

Merge "simpleperf: add browser option in test.py."

Merge "simpleperf: add temporary work around for debug interface change."
am: b1907a385b

Change-Id: I94690b74c8a6226461ddc4a87785d716e909debb

simpleperf: add browser option in test.py.

To control whether generated html files should be shown in browser.

Bug: none
Test: test.py.
Change-Id: I58eeae716e42068bd5f278bb8006d8818e3fc63c

Merge "simpleperf: add temporary work around for debug interface change."

simpleperf: add temporary work around for debug interface change.

To fix a libunwindstack problem, ART appends new debug entries to the
end of the debug entry list, insteading prepending to it. This breaks
CtsSimpleperfTestCases.

This CL adds a temporary work around in simpleperf, so we have time
to try other fixes in ART.

Bug: 143375574
Test: run simpleperf_unit_test
Change-Id: I5d73792996fb89d22a664b982e667ba0a4ee8276

Merge "simpleperf: keep generated data of test.py."
am: a3ae531171

Change-Id: I522d0746f5da8fba11ffce524a1da8dfe271951d

Merge "simpleperf: keep generated data of test.py."

simpleperf: keep generated data of test.py.

Keep generated data of each test of test.py in a separate directory,
so we can:
1) check generated html after testing.
2) check profiling data for failed tests.
3) run tests for different devices in different dirs at the same time.

Also continue test when a test pass fails in run_tests().

Bug: 142972498
Test: run test.py.

Change-Id: If8468f0e180d441b74c070b978375b27c293a006

Merge "simpleperf: test profiling apps with the same abi."
am: 16f464c226

Change-Id: I33d4f7c58ac0ce4e04b88eb0732ebd0ff892be30

Merge "simpleperf: test profiling apps with the same abi."

simpleperf: test profiling apps with the same abi.

32-bit simpleperf can't profile 64-bit java app. Because simpleperf
uses process_vm_readv() to read jit debug interface of the app process.
If the jit debug info is at address >= 1<<32, then 32-bit simpleperf
can't read it.

So install apks in the same abi as the test to avoid test failure.

Bug: none
Test: run 32-bit simpleperf_unit_test.
Change-Id: Ie3b4db320389bf5acb30ff5ea1f071b5fc3e2736