Merge "Check IsModifiableClass earlier in redefineClasses and retransformClasses"

Merge "Pass driver to loop opt. Add new side_effects phase."

Check IsModifiableClass earlier in redefineClasses and retransformClasses

We were not checking this until we actually tried to install the
definition. This meant that we could send dex file data to agents even
if there is no chance of it being used. We would also try to get the
dex file name for non-existant dex files causing crashes.

Bug: 31455788
Test: ./test/testrunner/testrunner.py --host -t 921-hello-failure
Change-Id: I647a057fe916861d555ae142a2961f449f1bc3a5

Pass driver to loop opt. Add new side_effects phase.

Rationale:
Break-out CL of ART Vectorizer: number 3.
The purpose is making the original CL smaller
and easier to review.

Bug: 34083438
Test: test-art-host
Change-Id: I7cece807ee4f5fcaeae41f1deed33ac263447b77

Merge "Disable test 154 for JIT"

Merge "Array store/allocation elimination"

Disable test 154 for JIT

The compiler may cause too many GCs to occur.

Bug: 35917229

Test: test-art-host ART_TEST_JIT
Test: test/testrunner/testrunner.py  --host --jit

Change-Id: I1c1fbd01e815b1f9117b45ab9a419c5824c17dad

Array store/allocation elimination

Allow array store/allocation elimination if it's only accessed
by constant index, so that there is no index-aliasing.

Bug: 35634932
Test: m -j20 test-art-host-run-test
Change-Id: Ief6e27f5bdbb30988ff4f318a34b4251c93865fa

Merge "MIPS64: Refactor implicit null checks in array/field get/set"

Merge "Disable 115-native-bridge in Makefile."

Disable 115-native-bridge in Makefile.

bug:35984597
Change-Id: I26fc9db839ae5229c7f2d82603e1172bddd07470

Merge "Add GC critical section to GetObjectsAllocated"

Add GC critical section to GetObjectsAllocated

Prevent GC running during GetObjectsAllocated since we may get a
checkpoint request that tells us to suspend while we are doing
SuspendAll. This can cause a deadlock.

Bug: 35232978

Test: test-art-host

Change-Id: I9c02415df0a0b9fa787d7ce449ec06a40dfaf624

Merge "Extend profman to generate profiles with inline caches"

Merge "Fix OUT_DIR usage"

Extend profman to generate profiles with inline caches

Extend profman logic to generate profiles based on a simple textual
respresentation. This will help writing tests for profile guided
compilation.

Before this CL, profman was able to generate profiles based on a list of
classes like:
java.lang.Comparable
java.lang.Math
java.lang.Object

This CL, enables profman to understand methods and classes alike. The
new format is:

# Classes
Ljava/lang/Comparable;
Ljava/lang/Math;
# Methods with inline caches
LTestInline;->inlinePolymorhic(LSuper;)I+LSubA;,LSubB;,LSubC;
LTestInline;->noInlineCache(LSuper;)I

"LTestInline;->inlinePolymorhic(LSuper;)I+LSubA;,LSubB;,LSubC;"
means that method `int inlineMonomorphicSubA(Super)` from class Main
will be added to the profile with the inline cache (SubA,SubB) for its
one and only invoke virtual.

@Main#noInlineCache:(LSuper;)I+;
meaning that method `int noInlineCache' from class Main will be added
to the profile with no inline cache.

Note that the methods are allowed to have a single invoke virtual in
their dex bytecode. That is to keep the parsing the file format
simple and easy to use.

Also, add a few more tests for profiles and fix an issue caused by
writing the dex files in a possibly wrong order.

Test: m run-test-host-gtest-profile_assistant_test
Bug: 32434870
Change-Id: I6b7340cf613007117d9818be206ccb3a27b815bf

Merge "Fix dex location filtering in dex2oat"

Fix dex location filtering in dex2oat

Previously we were filtering dex location against profile keys,
this meant qualified ones like /system/.../app.apk would not match
the profile key app.apk in the profile. This CL fixes changes the
behavior to filter based on the profile key of the dex file location.

Fixed OatWriter checksum for raw data case (also found by regression
test).

Added missing FlushCloseOutputFiles to CompileImage causing DCHECK
failures for File destructor.

All the fixes are regression tested by dex2oat_test.

Test: test-art-host-gtest-dex2oat_test

Bug: 34929159
Bug: 35761072

Change-Id: I1bdc949bd644bfab1c8fea0b737a132b487a653b

Fix OUT_DIR usage

OUT_DIR is not guaranteed to end with a /

Test: m -j test-art-host-run-test ART_TEST_RUN_TEST_NO_RELOCATE=true
Change-Id: Ic11f4be106b3c67eb22f442f7afaea92bcf46817

Merge "Clean up ZygoteHooks stack walking slightly."

Merge "Misc cleanup for class redefinition."

Merge changes I5be41da8,Ifa4aac02

* changes:
  ART: Resolve <clinit> strings in compiler driver
  ART: Resolve static field strings in compiler driver

Merge "Add nullptr and size check for opening a mem mapped dex file."

Merge "Increase ulimit on host to fix test 103-string-append with art-debug-gc."

ART: Resolve <clinit> strings in compiler driver

Resolve strings for <clinit> in classes that fail initialization.
This will move the data from the zygote heap into the image heap,
creating clean memory.

Increases the image size by XXX. However, at the same time decreases
the zygote heap by the same amount.

Bug: 34956610
Test: m
Test: m test-art-host
Test: Device boots
Change-Id: I5be41da8424d5de65c02a2aed1ac4d6113741876

Misc cleanup for class redefinition.

Added an iterator to access the RedefinitionData through and replaced
some code with scopes.

Bug: 31455788
Test: ./test/testrunner/testrunner.py --host -j40

Change-Id: Id7a381ac2b942b47d67619cd1da11858f8c9b41b

ART: Resolve static field strings in compiler driver

Resolved strings for static final fields in classes that fail
initialization. This will move the data from the zygote heap into
the image heap, creating clean memory.

Increases the image size by ~100K. However, at the same time decreases
the zygote heap by the same amount.

Bug: 34956610
Test: m
Test: m test-art-host
Test: Device boots
Change-Id: Ifa4aac0209f2364488b164b04daa9539821bc12b

Clean up ZygoteHooks stack walking slightly.

Test: Build and run marlin with libartd.so
Change-Id: I4a67935c5c7270636085c3ee12db0ebc1798a89e

Increase ulimit on host to fix test 103-string-append with art-debug-gc.

Strace is turned on by default on the art-debug-gc configuration, and
was going over the file size limit for this test on host (x86).

Test: Run ART run-test 103-string-append on art-debug-gc configuration.
Change-Id: I5cf28f054468babcf4d9b614b8e64b365a5691c5

Merge "Fix date on devices in setup-buildbot-device.sh."

Merge "Clean up OatFileAssistant getting of image info."

MIPS64: Refactor implicit null checks in array/field get/set

Rationale: on MIPS64 64-bit loads and stores may be performed
as pairs of 32-bit loads/stores. Implicit null checks must be
associated with the first 32-bit load/store in a pair and not
the last. This change ensures proper association of said checks
(a few were done after the last 32-bit load/store in a pair)
and lays ground for further improvements in array/field get/set.

Additionally ported to MIPS32.

Test: mma test-art-target-run-test in QEMU
Test: mma test-art-host-gtest

Change-Id: If2612df62c21522959e69c637a36cc4ea962a32e

Add nullptr and size check for opening a mem mapped dex file.

The bug has an apk with 0 size classes.dex. When dex2oat tries to open
the file for layout, it crashes. This adds checks to ensure that the mem
map isn't null and has a sane size before opening it as a dex file.

Bug: 35892406
Test: mm test-art-host
Change-Id: I5f6b5a1e7bbccf4fe3483b68023d51436eb71805

Merge "Clear empty unevac regions in ClearFromSpace"

Merge "Fix dexlayout manual walking of 0 length catch handler."

Clear empty unevac regions in ClearFromSpace

The motivation is to release RAM for empty unevac regions at the end
of the current GC instead of next GC.

Results on RitzPerf:
This optimization accounts for 2.33GB out of 53GB of freed bytes ~4%.
This also means that the average heap size is probably 4% smaller,
though it may not translate to RAM savings for actual apps.

Bug: 35800768
Bug: 12687968

Test: test-art-host
Change-Id: I38fa8dcda1aa6b439060ff170941b3a53022846f

Merge "Don't fail for null dex elements in FlattenPathClassLoader"

Merge "Add missing FlushCloseOutputFiles to CompileImage"

Don't fail for null dex elements in FlattenPathClassLoader

Dex elements can be null for resource jars that do not contain any
dex files. This enables loading app images for the system server.

Bug: 34929159

Test: test-art-host

Change-Id: Iec663f8e19c9099e12902c9959b3a0ae32bb2ea7

Merge "Increase gcloop threshold to 15"

Merge "Fixed OatWriter checksum for raw data case"

Fix dexlayout manual walking of 0 length catch handler.

This fails for 0 length handlers that are unreferenced by any try
blocks. Unreferenced handlers are handled differently and walked
manually, and there was an error in the 0 size case, when there is only
a single catch all handler.

Bug: 35874292
Test: mm test-art-host-gtest-dexlayout_test
Change-Id: Ie061b4fd0e7e8be7e3e382b11d2606f5ffc0817a

Merge "Add dexlayout test where class data section precedes code items."

Increase gcloop threshold to 15

12 seems to be flaky for the JIT configuration.

Bug: 35917229

Test: test-art-host

Change-Id: Ia3bcd542d58f1dce16d2bc21cbee9f5d2650035f

Add missing FlushCloseOutputFiles to CompileImage

Was causing DCHECK failure for gtest that generate app image. Test
is in followup CL.

Test: clean-oat-host && test-art-host

Bug: 34929159
Change-Id: Ie5db008a71a6313ff7dc749f7cc1ac21255efdd7

Fixed OatWriter checksum for raw data case

The checksum from the dex file seems to be incorrect, use the one
from the OatDexFile since it matches the original dex checksum.

Regression test in follow up CL.

Test: test-art-host-gtest -j32

Bug: 35761072
Change-Id: I79f0e720c9a2fc33286c4d4c1ef4ab9d194533a9

Merge "New utilities for induction variables."

Clean up OatFileAssistant getting of image info.

* ImageInfo.oat_checksum is no longer unused.
* Don't abort if we can't read secondary isa images.

Test: m art-test-host
Bug: 34385298
Bug: 34800919
Change-Id: I4d1ad4e2435cc62d38cd7143bc71313e319e952d

Merge "Don't include patch information when generating images."

Merge "Add regression test for vdex + layout combination"

Add dexlayout test where class data section precedes code items.

Bug: 35855748
Test: mm test-art-host-gtest-dexlayout_test
Change-Id: I8365cb5699014d04dd7561758255802d811d58c6

Add regression test for vdex + layout combination

Test compiling with vdex + layout.

Test failure example:
dex2oatd F 03-01 15:19:22 68522 68522 oat_writer.cc:2269] Check failed: oat_dex_file->source_.IsRawFile()

Bug: 35761072

Test: test-art-host-gtest-dex2oat_test

Change-Id: Ieefda4b2992cfc4eaf77c7c61062e825e3c5456f

Merge "Prevent dexlayout from moving code items if preceded by class data."

Merge "Handle RawData case for DexLayout"

Prevent dexlayout from moving code items if preceded by class data.

Class data has uleb encoded offsets to the code item, and moving code
items will change the size of the class data, which would in turn affect
the code item offsets if they precede the code items.

For now, make it so that dexlayout does not move the code items at all
in this case. A better fix would be to swap the order of the sections in
dexlayout, but that can be done in a future CL.

Unit test to follow.

Bug: 35855748
Test: mm test-art-host
Change-Id: Ica6da1e5e951cf0003fc9793f13ad10b74004eb9

Handle RawData case for DexLayout

For vdex, the RawData dex file source is used. This was not
compatible with the existing LayoutAndWriteDexFile code. Added
handling to support RawData sources.

Without the handing, it was incorrectly using GetRawFile and casting
the dex file header to a File* causing a bogus fd number.

Test: adb shell cmd package compile -a --reset
Test: adb shell cmd package compile -a -m speed-profile
Test: test-art-host

Bug: 35761072
Change-Id: I74bdd17295479058e9245d1defb132df40fff474

New utilities for induction variables.

Rationale:
Break-out CL of ART Vectorizer: 2 OF many.
The purpose is making the original CL smaller
and easier to review.

Bug: 34083438
Test: test-art-host
Change-Id: I46d297eba504af3850a5998ee279ea9f7b38bed8

Merge "MIPS32: Do not use _MIPS_ARCH_MIPS64R6 in MIPS32 code"

Merge "ART: Add correct field index to reference visiting"

Fix date on devices in setup-buildbot-device.sh.

Update date on device if the difference with host is more than one hour.

Test: Set a bogus date on device, then run setup-buildbot-device.sh.
Change-Id: I9f5a3acdf699c1d04c838c8b156f59bf0f2c5550

Merge "MIPS: Implement heap poisoning in ART's Optimizing compiler."

Merge "Revert "Revert "Intrinsify Integer.valueOf."""

Merge "Update run-tests script/dependencies to use -testdex jars."

Update run-tests script/dependencies to use -testdex jars.

run-tests run with --no-image need the dex files in the
bootclasspath to be available. The -testdex jars are guaranteed
unstripped, so use them instead.

This was always broken, but vmarko@ just added a test that
forces --no-image.

bug:24535627
Test: test-art-target

Change-Id: I391573cffd0749d814fd81517e99dfc8f0fd59d5

Revert "Revert "Intrinsify Integer.valueOf.""

Fix heap poisoning.
LOG INFO instead of ERROR to avoid run-test failures with --no-image.

bug:30933338
Test: ART_HEAP_POISONING=true test-art-host test-art-target

This reverts commit db7b44ac3ea80a722aaed12e913ebc1661a57998.

Change-Id: I0b7d4f1eb11c62c9a3df8e0de0b1a5d8af760181

Merge "Blacklist libcore tests relying on libjavacoretests."

Merge "Fix mutex issue"

ART: Add correct field index to reference visiting

Use the created infrastructure to report references with the right
field indices.

Bug: 31385354
Test: m test-art-host-run-test-906-iterate-heap
Test: m test-art-host-run-test-913-heaps
Change-Id: I4647ea1bfe83dbce80c2fcb13ed1658527921f14

Merge "ART: Add primitive field reporting"

Merge "Disable test 152 for gcstress"

Blacklist libcore tests relying on libjavacoretests.

The new linker behavior breaks them.

bug:35417197
Change-Id: I914d385e386397fedf9b106797b3c06a898879f7

Fix mutex issue

We were having some issues with mutex locking order related to
upgrading local to global references when recording non-debuggable
classes. We refactored this code so there is no longer this issue.

Bug: 35838746
Test: Build and boot a marlin with libartd.so

Change-Id: I093b433d921478307130c49a07d0c7ec34dd070d

Merge "Change the region space region size to 256k."

Disable test 152 for gcstress

Bug: 35800768

Test: test-art-host-run-test ART_TEST_GC_STRESS=true

Change-Id: I6f5cdbb445b9cad6f57ffa5738c8c9e8ec3b9c98

ART: Add primitive field reporting

Add support for primitive_field_callback.

Bug: 31385354
Test: m test-art-host-run-test-906-iterate-heap
Test: m test-art-host-run-test-913-heaps
Change-Id: I4a700813ae11cc3ab49fd5738e0a2cce8a0002ba

Merge "ART/Mterp: eliminate unnecessary access checks"

Merge "Avoid visiting dead large objects in RegionSpace::Walk"

Merge "ART: Fix string reporting"

ART/Mterp: eliminate unnecessary access checks

This CL switches mterp from using the old quick entrypoints
for sget/sput to instead using an sget/sput access sequence
similar to that used by the reference interpreter.  This
results in a reduction of unnecessary access checks.

Benchmarks: 3% improvement on DeltaBlue

Bug: 30933338
Test: ART_TEST_INTERPRETER=true m test-art-host
Change-Id: Ib4e64d72b511c6a9ed537289bfeb393eff42c70f

Avoid visiting dead large objects in RegionSpace::Walk

The motivation is to prevent large objects from being visited by
RegionSpace::Walk if it is called before the next GC's SetFromSpace
marks the large object as from-space. This fixes possible dangling
pointer issues.

A follow up CL will clear the empty unevac regions.

Bug: 35800768
Bug: 12687968

Test: test-art-host

Change-Id: I6323959f0b7b2a357e6d6483cd1c33fb63c3d54a

Merge "Apply String.equals() optimizations on MIPS32 and MIPS64"

Don't include patch information when generating images.

Because we always compile pic, patch information is not needed.

Test: test-art-host, test-art-target
Bug: 33192586
Change-Id: Iaa4750117ecc464850daa50c32f80546fe716039

Merge "Revert "Intrinsify Integer.valueOf.""

Revert "Intrinsify Integer.valueOf."

Heap poisoning missing
jit-gcstress not optimizing it.

bug:30933338

This reverts commit cd0b27287843cfd904dd163056322579ab4bbf27.

Change-Id: I5ece1818afbca5214babb6803f62614a649aedeb

MIPS32: Do not use _MIPS_ARCH_MIPS64R6 in MIPS32 code

Test: booted MIPS32 and MIPS64 in QEMU

Change-Id: I413272c11ad00a0f77271302727b5860eaa7756b

Merge "Fix java.lang.Void.TYPE (void.class) initialization."

Merge "Intrinsify Integer.valueOf."

Merge "ARM: VIXL32: Use LoadLiteral for double constants."

Apply String.equals() optimizations on MIPS32 and MIPS64

Also extended test 536-checker-intrinsic-optimization.

Test: mma test-art-target-run-test in QEMU (MIPS64R6 and MIPS32R6)
Test: mma test-art-target-run-test on CI20 (MIPS32R2)

Change-Id: I6bff42f81dcb05094ac698181df16c56193bb4a8

Merge "Add hooks to avoid collecting code for run-tests."

ART: Fix string reporting

Correctly report zero-length strings.

Bug: 31385354
Test: m test-art-host-run-test-906-iterate-heap
Test: m test-art-host-run-test-913-heaps
Change-Id: Ic37d5c4b350cc8d04faebec54494ed6fe19eece8

Merge "Remove warning pragma from OpenJdkJvmTi.cc"

Change the region space region size to 256k.

Also add RegionSpace::non_free_region_index_limit_ to avoid the need
to scan the free end of the region table in SetFromSpace(), which
compensates (and more) the pause time increase due to the increasing
number of regions.

Ritz EAAC avg pause time (angler little core / -Xmx512m):
Before 186us
After  436us (without non_free_region_index_limit_)
After  103us

Partially revert aog/327342 and remove the temporary adjustment of
max/min-free. Changing the region size to 256k was enough to avoid the
GCE boot issue (b/34576638), but 154-gc-loop barely fails. Make
154-gc-loop failures less strict.

Allocation performance (angler little core / -Xmx512m)
Ritz EAAC
Before 939.6
After 937.8

BinaryTree
Before 603350
After 620200 (-3%)

Bug: 12687968
Test: test-art-host
Test: GCE boot
Change-Id: I1495ab4ced806e1c4d779d49b56cea618817a0d6

Merge "Revert "CHA for interface method.""

Merge "Make testrunner use an environment variable to control building."

Revert "CHA for interface method."

This reverts commit 7130fc769896a96573f55496444d87161e4b41e8.

There might be some race condition going on. 960-default-smali
fails sometimes.

Remove warning pragma from OpenJdkJvmTi.cc

Bug: 31455788
Test: ./test/testrunner/testrunner.py --host -j40 -b
Change-Id: Ia9343b5ff46f8921d6f1ed87bbf64016c581c450

Intrinsify Integer.valueOf.

Improves performance of ArrayListStress and Ritz by ~10% and ~3%.

Test: test-art-host test-art-target
bug: 30933338

Change-Id: I639046e3a18dae50069d3a7ecb538a900bb590a1

Add hooks to avoid collecting code for run-tests.

ensureJitCompiled ensures a method gets compiled, but does
not prevent it from being GC'ed. Add a hammer hook to avoid
doing any JIT code cache GC.

test: test-art-host with gcstress and jit.
Change-Id: I3881f10f454ded9c7a3b385d326c2e08932d39bf

Merge "proxy: Fix crash when creating proxies with dx-built libcore."