Bug 5287555 create StreamSourceAppProxy once

Create StreamSourceAppProxy once in the StreamPlayer constructor,
rather than dynamically in StreamPlayer::registerQueueCallback.
As StreamPlayer::registerQueueCallback can be called multiple times
(or even not at all), this guarantees we always have only one
StreamSourceAppProxy that never changes.

Also fix bug where we weren't using a stream protector for AudioPlayer
with MPEG-2 TS AndroidBufferQueue data source (we weren't calling
setCallbackProtector on it).

This has some unexpected side benefits of simplifying the code:
 - remove unused parameters and member variables
 - mAppProxyLock not needed since the callback protector is created early
 - remove GenericPlayer::setCallbackProtector
 - inline android_StreamPlayer_realize_l for the use case
   AUDIOPLAYER_FROM_TS_ANDROIDBUFFERQUEUE to be like MediaPlayer

Change-Id: I090c11cde9474285185481192dba2b5c01338a50

Merge "Bug 5287473 realize locks"

Bug 5287473 realize locks

Realize had inconsistent and partial locking.
Now realize runs completely locked by default.

Change-Id: If453cfc0ac874f32cf5a1fcfe7795d24bd2a48d4

Bug 5236913 Update sample app for PLAYEVENT_HEADATEND with MP2TS

Update the sample application to receive the PLAYEVENT_HEADATEND
 event after EOS has been processed.
Remove dead code in the corresponding implementation (in class
 StreamPlayer).

Change-Id: Ibe484a8c0e9605c05cd47b154d6c0aff1e70d49e

Bug 5236913 Callback for MP2TS when EOS was processed

When the buffer containing the EOS item in the Android Buffer Queue
 gets processed, make sure the application callback gets called.

Change-Id: I7476a908419ec99c52c3d3f3938de3f86ab926c6

Merge "Fix bug 5236913 EOS causes HEADATEND event in play callback"

Merge "Bug 5236913 Callback for AAC decode when EOS was processed"

Fix bug 5236913 EOS causes HEADATEND event in play callback

In AAC decode through an Android Buffer Queue, after receiving
 an EOS command, prevent reading from the queue by returning
 a size of 0, which causes the decoder to signal an end of
 stream. This will cause the SL_PLAYEVENT_HEADATEND to be
 fired (from the same thread that sends the decoded data)
 if the event was part of the play event mask, and a callback
 had been registered.

Change-Id: I435e8a66dbe9bc37f24c9e1f1c13f0dbd670b395

Merge "Optimize Backdropper mask generation"

Optimize Backdropper mask generation

Change-Id: I701e27928b9c729aeaee7eb83b0b6d99773f7acf

Merge "Bug 5280072 decode AAC ADTS fails for CRC content"

Bug 5280072 decode AAC ADTS fails for CRC content

Also copy in the length check from Stagefright.

Change-Id: I6758dbe370dd3a7178061183bbb83d289e5c00c5

Merge "Fixing disconnect issue within MFF encoding"

Bug 5236913 Callback for AAC decode when EOS was processed

When the buffer containing the EOS item in the Android Buffer Queue
 gets processed, make sure the application callback gets called.

Change-Id: I0c8dfb61404ea33322a5755afa7c44213e53ce02

Fixing disconnect issue within MFF encoding

1. No explicit calling of "disconnect" on the native window corresponding
to the SurfaceMediaSource. It is not done through the GL Calls. Thus,
removed the disconnect function altogether.

2. The activateSurfaceId(int) call from the Java layer now calls activate()
    explicitly in the jni along side swithToSurfaceId(int) and does not
    depend on the context to be current.

3. unregistering the surface correspoding to the SurfaceMediaSource
from the Java layer is enough to call disconnect.

Change-Id: Ibdd268b559a69b4de7620474017114ff6e74f237

Merge "Adjust backdropper acceptance thresholds to make foreground borders tighter."

Adjust backdropper acceptance thresholds to make foreground borders tighter.

Change-Id: Ie47cc87a0682e78e48412d3b97cb2c20bd28e6a9

Bugfixes in MediaSource SurfaceTexture management.

Regressions from fix to Bug: 5117570

Change-Id: Ic21dc37d2f99e167fad613ae7565d7b7aeba07e1

Merge "Fix bug 5150875: Remove handling of possibly leaking frames."

Merge "Fix 5249076 Don't let the shared memory buffer drain"

Merge "Bug 5262776 reliability of play event callbacks"

Fix bug 5150875: Remove handling of possibly leaking frames.

This removes the logging and releasing of possibly leaking frames. As
this may be triggered by false positives, this code should be removed.

Change-Id: I33084662f64b4a7f6173324f59caab4f0fb75388

Fix 5249076 Don't let the shared memory buffer drain

Whenever pushing data to the shared memory from the
 AndroidBufferQueue, post a message to do the same operation
 again if there is still room in the shared memory. This
 ensures the consumption of data will keep the
 shared memory buffer full, not the notification of space
 available in shared memory, which may happen while the
 Android Buffer Queue is empty (after a clear() for
 instance).

Change-Id: I397d70ebb927fa6a1d0fb97321a70db0440b96fe

Bug 5262776 reliability of play event callbacks

This makes HEADMOVING and HEADATMARKER work more reliably, especially
at the beginning of track and under heavy load.  Previously if an event
update was missed because update period is too small or mediaserver/client
is too busy to keep up with notifications, then subsequent events
were lost.  This happened more than you might expect; the first event
was often lost and things just got worse from there.

Cleanup in AudioSfDecoder:
 - Call up to superclass (GenericPlayer) onSeek and onLoop
   to make future maintenance easier.
 - Delete dead code in onMessageReceived.
 - Logic depends on mLastDecodedPositionUs not being ANDROID_UNKNOWN_TIME
 - Simplify getPositionUsec

Add more logging in GenericPlayer::updateOneShot.

Change-Id: Iacddafeb3a20b25bee6da602f6a783201d80be10

Bug 5244675 PCM sample rate metadata units

The current metadata key macro name ANDROID_KEY_INDEX_PCMFORMAT_SAMPLESPERSEC
is confusing.  This change renames it to ANDROID_KEY_INDEX_PCMFORMAT_SAMPLERATE,
and documents that it is in Hz rather than milliHz.  The key string is
renamed from AndroidPcmFormatSamplesPerSec to AndroidPcmFormatSampleRate.

Details:

OpenSL ES 1.0.1 PCM struct SLDataFormat_PCM field samplesPerSec
[sic] is in milliHz.  OpenSL ES 1.1 preserves that struct, but adds
struct SLDataFormat_PCM with field sampleRate also in milliHz.  If the
ANDROID_KEY_INDEX_PCMFORMAT_* metadata keys were intended to exactly
model the OpenSL ES PCM data format struct, the metadata sample rate
would also be in milliHz units.  However, the rest of Android operates
in Hz so we use Hz here also.

Backwards compatibility for the name should not be an issue,
as the initial beta developer has not yet started using this metadata.

Related change: delete a duplicate header file.

Change-Id: Ib8f620dfe7a328f621ddbb19f55e5691eb22d7b5

Merge "Replace pBuffer with a SurfaceTexture as default dummy surface."

Several SurfaceTexture usage fixes.

- Let SurfaceTextureSource timeouts result in filter closure, not abort.
  This simplifies shutting down a filter graph in a multithreaded
  scenario considerably.
- Add release() calls to SurfaceTextures when used in the client sense.

Bug: 5117570
Bug: 4510826

Change-Id: I2640a4cc93acce778c34a1101e132e139995c798

Merge "Backdropper: no-brainer optimizations"

Merge "Allocate correct frame sizes within back dropper."

Backdropper: no-brainer optimizations

Change-Id: Ib874e1c7e4bbbfa38367e2513008d880e0ad4dbd

Allocate correct frame sizes within back dropper.

Change-Id: I9e32edc4f7a1c138cf2c86e6f1dbfb8de78630b8

Merge "Bug 5244675 default channel mask based on count"

Merge "MediaPlayer GetPosition returns 0 before prefetch"

Require INTERNET permission for network-based content.
Bug #1870981

Change-Id: Ia7b9b75feb5b43fe9358bbbca6b619112984246c

Replace pBuffer with a SurfaceTexture as default dummy surface.

PBuffers may not support needed recording extensions, so the
dummy used to create a GL context needs to be replaced.

Bug: 4510826

Change-Id: I25f7ec8a8e24ff9feb3d6f5a5a998c6a56018a98

Bug 5244675 default channel mask based on count

Change-Id: Ica0b1bd5a23d9bbc318003509e2463a588d9bd39

MediaPlayer GetPosition returns 0 before prefetch

This makes MediaPlayer work the same way as AudioPlayer,
to return current position as zero before prefetch started.

Change-Id: I538919d05074002d46c3dc1632caa4d5a85e8fad

Merge "Bug 5249076 When starting to stream, have at least one buffer in shared mem"

Merge "Rename Android buffer queue GUID for future sink"

Merge "Bug 5244675 handle the switch cases of AAC decode"

Merge "Bug 5244675 miscellaenous AAC decode test"

Bug 5249076 When starting to stream, have at least one buffer in shared mem

StreamPlayer is receiving notifications from the MediaPlayer that
 a buffer in shared memory is available during playback, which
 causes StreamPlayer to consume data from the AndroidBufferQueue.
 If the shared memory is drained while the player is paused, there
 will be no new notification of a buffer in shared memory being
 available to start the cycle of consumption from the Android
 buffer queue.
This change causes StreamPlayer to consume from the buffer queue
 to fill one buffer in shared memory.
A subsequent change will change the logic to make sure the
 consumption from the buffer queue fills as much of the shared
 memory as possible.

Change-Id: I886832629dd5ef449719b77899ebdcc7ffc64330

Check callback result code and warn if non-success

The result code is currently unused, but reserved for future use.
This change will help make sure that developers do the right thing now,
so that they will not be impacted when we begin to act on the result.

Change-Id: I8c712882d41d09506defa77340676079bb34de6c

Rename Android buffer queue GUID for future sink

This change will make it easier to have Android buffer queue as a sink in
the future.  For backwards source code compatibility with beta developers,
retain the old name temporarily.  As soon as they have switched to the
new name, we will remove the old name.

Details:
 - rename XA_IID_ANDROIDBUFFERQUEUE to XA_IID_ANDROIDBUFFERQUEUESOURCE
 - rename SL_IID_ANDROIDBUFFERQUEUE to SL_IID_ANDROIDBUFFERQUEUESOURCE
 - rename MPH_ANDROIDBUFFERQUEUE to MPH_ANDROIDBUFFERQUEUESOURCE
 - did not rename the data locators and interface struct,
   as they can be shared across both source and sink
 - did not rename the member field mAndroidBufferQueue in
   CAudioPlayer / CMediaPlayer as that would be a huge change;
   can do that later if necessary
 - the SINK definition will be added later when needed

Change-Id: I36dc01050efb99d4d7802b2ca2b870f4d978ee21

Merge "Class name cleanup. (1/3)"

Add rewind (discontinuity) to native-media test

Change-Id: I0f32564d2a2937092436dd48fef877ed55b2d4f3

Bug 5244675 miscellaenous AAC decode test

Fix bug in counting encoded frames.
Test get play position and duration at various points.
Display all PCM metadata (in particular the channel mask).
Add example of expected output.

Change-Id: I0d0a629755a37b71a1540e79ae7a6f1ed7095a24

Merge "clean up in echo reference code"

clean up in echo reference code

Change-Id: Ie06ed382eee2f1d4d1289d9a49d8a93dcf103e4e

Merge "Added a FixedRotationFilter."

Merge "Make background replacement roughly independent of input size."

Added a FixedRotationFilter.

bug: 5221073
RotationFilter is used for dealing the 4 orientations of the device.
Fixed ToPackedGrayFilter to correctly resize the image
if aspect ratio needs to be kept.

Change-Id: Idd3c26ae2ec12b64f7d040a301a87c619fe146e3

Merge "rewrite lomo and documentary filters"

Class name cleanup. (1/3)

Addresses bug 5214502.

Change-Id: I82321ad516b93e98047fce361a97da020b7ac09e

Bug 5244675 handle the switch cases of AAC decode

Fix handling of AUDIOPLAYER_FROM_ADTS_ABQ_TO_PCM_BUFFERQUEUE decode use case:
  - Play::GetPosition: explicitly list decode case and return media
    player time; previously returned zero.
  - Seek::SetLoop for AudioPlayer or MediaPlayer: return
    SL_RESULT_FEATURE_UNSUPPORTED on non-URI data source.  This is
    correctly passed up to app.

The remaining have no immediate impact, but should make future maintenance easier:
  - Play::GetDuration: explicitly list decode case and return unknown time;
    no impact as already covered by default.
  - Seek::SetPosition: explicitly list decode case and handle as no-op; no
    impact as already covered by default.
  - Seek::SetPosition for AudioPlayer or MediaPlayer: return
    SL_RESULT_FEATURE_UNSUPPORTED with unsupported data source e.g. buffer
    queue.  No impact as the result is currently ignored, but added a
    FIXME to pass this up to app.
  - AndroidBufferQueue::Clear: explicitly list decode case as a no-op
    other than the partial clear of upper layer queue.
  - AndroidBufferQueue::onRefilled: explicitly list decode case as
    a no-op, but with a FIXME that this may need more work later.

Change-Id: I53c8a0b736f32cd265ee9c94a70127d4f80869b5

rewrite lomo and documentary filters

Change-Id: Ia88123992c4033d9d68c2e47ba22db4f6c911694

Make background replacement roughly independent of input size.

Change-Id: I1257718f4ba2ae72add6501d238ec78d0465861b

Fix recording resolution mismatch when using CamcorderProfile.

Did not use profile-provided resolution everywhere, resulting in
videos with tiny images in big black boxes.

Bug: 4510826
Change-Id: I845c436de091299fbd8a49eb3b8f70707aadc6f5

Merge "Updates to the MediaEncoderFilter."

Merge "Bug 5217144 AndroidBufferQueue::Enqueue error chks"

Merge "MediaSource: switch to MediaPlayer#setSurface"

Merge "Add fillblack option"

Updates to the MediaEncoderFilter.

- Support more of the MediaRecorder parameters
- Allow toggling recording on/off during filter graph execution.
- Pass timestamps on correctly

Bug: 4510826

Change-Id: I63c9c5e9554d8e8570f2051f08e81ef753069fa1

Merge "Example of AAC ADTS decoding with OpenSL ES"

MediaSource: switch to MediaPlayer#setSurface

This change updates MediaSource to use the new MediaPlayer#setSurface method, which
is replacing MediaPlayer#setTexture.

Change-Id: I4e4c5d1c5e481100db9265114bb285b766ae9877

Merge "Fix Grain filter and optimize other filters"

Merge "Fix b/issue?id=4882048"

Fix Grain filter and optimize other filters

bug: 5127871

Change-Id: I627a840906417891270aa2d93ea966c217d98b3c

Bug 5217144 AndroidBufferQueue::Enqueue error chks

Add more error checks to Enqueue:
 - check for a NULL data pointer with non-zero data size
 - check for a NULL item array with non-zero item array size

For the Enqueue item processing:
 - examine all items if there is more than one in the array
 - check for invalid combinations of items
 - check that total length of item array is large enough for each
   item's header and any optional data
 - check for an EOS with a non-empty item data
 - log if an unknown item key is found
 - added the EOS item handling code for AAC ADTS
   (the underlying implementation is still not yet done).

Fix copy/paste typo in initializeAndroidBufferQueueMembers.

AacBqToPcmCbRenderer::validateBufferStartEndOnFrameBoundaries:
 - now returns a more specific result code rather than bool
 - readAt return type ssize_t not size_t
 - readAt return 0 (EOS) is a LOGV not LOGE.

Fix race in Android buffer queue callback: replaced logic in
BufferQueueSource.cpp by safer code from android_StreamPlayer.cpp

Change-Id: I423ccbd6d76a736a486b49b5dfdb7898b52cdd02

Bug 5226085 miscellaneous metadata issues

The metadata keys are now exposed for AAC decode.

The metadata keys are now exposed at Realize. The keys were previously
only available after prefetching was complete. This made it more awkward
for an application to use them.

Fixed race condition in access to metadata values.

Change-Id: I3daed2da61f5ed0add6948f1558963cfe66795fc

Example of AAC ADTS decoding with OpenSL ES

Put AAC ADTS in an AndroidBufferQueue, retrieve PCM data through
 a BufferQueue.

Change-Id: I9718d7a9e030a2c3568de8579f3329b76f63d891

Fix b/issue?id=4882048

Change-Id: Ib26f4c9f1c64c70e779ac5533892a91cef23d1fe

Recording MFF Frames using MediaEncoder

Changed the GL native and jni to incorporate media encoding
This involves being able to call disconnect on the SurfaceMediaSource
and choosing the right egl config

Related to bug id: 5216763

Change-Id: I048bbbd2b308b6163fd380edd7575e52dee23ccf

Merge "Metadata keys for PCM decoding"

Add fillblack option

If quad box is outside of image, it will display black.

Change-Id: I4871e4bf495ec461a0923ea80cafd2566e07caeb

Merge "General code / documentation clean-up."

Merge "Change the OneShotScheduler to schedule only the source node once."

General code / documentation clean-up.

- Addresses API council's comments.
- Adds identity effect.
- Other clean-up.

Change-Id: Ib87ea95b8df44eef39be970971f436e46f0ade2d

Change the OneShotScheduler to schedule only the source node once.

Bug: 5214756
Change-Id: Ia14b57b618d875e71d0fd65909eb7aa69b867f95

Merge "xaplay command-line mediaplayer for MPEG-2 TS ABQ"

Metadata keys for PCM decoding

Declare in a public header the metadata keys an application which
 decodes audio data would use to figure out the output PCM format.

Make the SL ES Android header also include the configuration and
 metadata headers.
Update test apps to reflect this.

Change-Id: I298db4fdb800df2d48047691441aa7489aad4822

xaplay command-line mediaplayer for MPEG-2 TS ABQ

Change-Id: Id5ea3f478f45d4fa4b86772593ae831d9eade952

Bug 5193695 Fix crash after MediaPlayer destroyed

The StreamSource callback thread was continuing to run after the
MediaPlayer object was destroyed.  Fixed by adding a callback protector
and a pre-destroy hook. GenericMediaPlayer::preDestroy now also
calls MediaPlayer::stop just in case.

Change-Id: I5bd771d4d1936f433d2a8c9959593782c96daed9
Miscellaneous:
 - added an explicit destructor on CMediaPlayer::mAVPlayer for consistency
   (probably not a bug since there was a clear on it earlier)
 - updated comments for CallbackProtector
 - made some CallbackProtector fields private since no sub-classes yet

Merge "Bug 5153313 keep compatibility of local files URI"

Merge "Bug 5105712 synchronous callbacks"

Bug 5153313 keep compatibility of local files URI

Also fix a bug in decode from fd to PCM buffer queue, where
we were closing the application's fd.

Change-Id: I220cd1c242f2f5e240b4dd1b9e8d79c88878bdcd

Bug 5105712 synchronous callbacks

After GetPosition is made synchronous, it is safer to make client
callbacks synchronous also.

Change-Id: I2688f709ed672aaa62d046d5f95db1b81504c9e3

Merge "Converted libaudioutils implementation to C."

Merge "NEW_API: Make rest of the effect names public in EffectFactory."

NEW_API: Make rest of the effect names public in EffectFactory.

Bug: 4966161
Change-Id: If194ebb5d1c45e8826a53fe9a83a94a1690cc11d

Merge "Fix minor logging bug in core Filter code."

Merge "Bug 5198051 MediaPlayer prefetch status interface"

Merge "Assertion checks do LOGF not fprintf to stderr"

Fix minor logging bug in core Filter code.

Change-Id: Ic03692e2456d2ca2615b75c7da4672ae3fed60d9

Merge "Bug 5198051 MediaPlayer StreamInformation various"

Merge "Add reset function to Native Program."

Merge "Bug 5198051 Video sink on MediaPlayer is optional"

Merge "Bug 5198051 MediaPlayer PLAYEVENT_HEAD* callbacks"

Assertion checks do LOGF not fprintf to stderr

Also add comments to Android.mk, and add SL_LOGF not yet used.

Change-Id: I1e051c040b667e2e70b6df0c03648c309efef7d6

Bug 5198051 MediaPlayer prefetch status interface

Change-Id: I426c870f803df0a7052f17be955ba797a814b4cc