OpenCores框架

媒体播放引擎

v      在 opencore 中由 PVPlayerEngine 负责媒体播放功能的实现&＃xff1b;

v      在 PVPlayerEngine 中负责创建各个节点来完成媒体文件格式解析&＃xff08; SourceNode &＃xff09;、媒体数据编解码 (DecodeNode/EncNode) 以及媒体数据的输出 (MediaOutputNode) &＃xff1b;

v      由 PlayerDriver 负责 opencore 与 android 媒体框架的适配&＃xff1b;

v      由 AndroidAudioOutput 负责音频数据输出到 android-audioflinger 服务输出&＃xff0c;由 AndroidSurfaceOutput 来负责将视频数据输出到 android-surfaceflinger 服务输出&＃xff1b;

媒体播放引擎 - 驱动层

v      驱动层包括&＃xff1a; PVPlayer 和 PlayerDriver 组成&＃xff1b;

v      PVPlayer 负责将上层应用的命令转换成 PlayerDriver 可以内部命令加入到其命令队列中&＃xff0c;由 PlayerDriver 负责执行&＃xff0c;并负责将命令执行的结果回送给上层媒体框架以及 JAVA 程序&＃xff1b;

v      在 PlayerDriver 中有一个消息循环负责处理 PVPlayer 发送过来的命令&＃xff0c;调用 PVPlayerEngine 相应的接口来完成媒体控制&＃xff1b;

v      在创建 PlayerDriver 对象时会生成 opencore 主线程&＃xff0c;并调用 OsclExecScheduler.StartScheduler 来开始 opencore 主线程循环&＃xff1b;

v      源码文件&＃xff1a;

v      android/playerdriver.cpp

v      android/playerdriver.h

媒体播放引擎 - 文件格式识别

v      在 opencore 中由 PVPlayerRecognizerRegistry 负责文件格式识别&＃xff0c;并将结果返回给 PVPlayerEngine &＃xff1b;

v      PVPlayerEngine 根据类型来创建对应的文件解析节点 ParseNode &＃xff1b;

v      opencore 中对文件格式的识别时通过读取文件头的方式进行的&＃xff0c;而不是根据文件扩展名&＃xff1b;

v      opencore 中通过向系统中注册文件识别插件的方式来提供文件格式识别的功能&＃xff0c;系统通过循环调用每个注册插件的 Recognize() 函数来进行格式识别&＃xff1b;

v      在创建媒体播放引擎的时候会通过 PVPlayerRegistryPopulator::Populate() 函数来注册所有的文件识别插件到系统中

v      源码文件&＃xff1a;

v      pvmi/recognizer/src/pvmf_recognizer_registry.cpp

v      pvmi/recognizer/src/pvmf_recognizer_registry_impl.cpp

v      pvmi/recognizer/plugins/ 目录下所有的子目录中存放着文件识别插件的代码&＃xff1b;

媒体播放引擎 - 文件格式解析节点

v      在 opencore 中通过文件解析节点&＃xff08; ParseNode &＃xff09;来完成音视频文件格式的解析&＃xff0c;并将文件中的音频、视频数据送到对应的解码节点进行解码&＃xff1b;

v      PVPlayerEngine 通过 PVMFNodeInterface 接口来完成对 ParseNode 的操作&＃xff1b; ParseNode 通过提供扩展接口来实现通用 Node 接口不能实现的功能&＃xff1b;

v      常用的扩展接口如&＃xff1a; PvmiCapabilityAndConfig &＃xff1b;

v      opencore 中通过注册的方式向系统中注册文件格式解析节点

媒体播放引擎 - 节点注册

v      1 、每个节点都有一个对应的 PVMFXXXXFactrory 来负责创建&＃xff1b;

v      2 、系统中通过 PVPlayerRegistryPopulator. RegisterAllNodes() 来注册所有支持的节点&＃xff1b;

v      3 、 opencore 首先调用 PVPlayerNodeRegistry-> QueryRegistry() 函数查询对于指定的输入 & 输出格式的 Node 的 UUID &＃xff0c;然后通过 PVPlayerNodeRegistry-> CreateNode () 创建指定的 Node 。

v      4 、 PVPlayerEngine 就是通过文件格式识别插件返回的媒体类型来创建对应的文件解析节点的

void PVMFMP4FFParserNode::Run()

{

    //Process commands.

    if (!iInputCommands.empty())

    {

        ProcessCommand();

    }

    while (!iPortActivityQueue.empty() && (iInterfaceState &＃61;&＃61; EPVMFNodeStarted ||                            FlushPending()))

    {

        ProcessPortActivity();

    }

    if (iInterfaceState &＃61;&＃61; EPVMFNodeStarted && !FlushPending())

    {

        HandleTrackState();

    }

    //Check for completion of a flush command...

    if (FlushPending() && iPortActivityQueue.empty())

    {

        //Flush is complete.

         CommandComplete(iCurrentCommand, iCurrentCommand.front(), PVMFSuccess);

    }

}

 void PVMFMP4FFParserNode::HandleTrackState()

{

    for (uint32 i &＃61; 0; i

    {

        switch (iNodeTrackPortList[i].iState)

        {

             case PVMP4FFNodeTrackPortInfo::TRACKSTATE_UNINITIALIZED:

                ……

            case PVMP4FFNodeTrackPortInfo::TRACKSTATE_TRANSMITTING_GETDATA:

                ……

                if (!RetrieveTrackData(iNodeTrackPortList[i]))

                {

                    ……

                }

                ……

            case PVMP4FFNodeTrackPortInfo::TRACKSTATE_TRANSMITTING_SENDDATA:

                if (SendTrackData(iNodeTrackPortList[i]))

                {

                    ……

                 }

                break;

            ……

        }

    }

}

媒体播放引擎 - 解码节点

v      opencore 中由 DecNode 节点负责媒体数据的解码工作&＃xff1b;

v      DecNode 通过调用底层的 opencoreMAX 通用接口实现媒体数据的解码&＃xff1b;

v      对于一个普通的视频文件&＃xff0c;存在 2 个解码节点&＃xff1a;音频解码节点和视频解码节点&＃xff1b;

bool PVMFOMXBaseDecNode::SendInputBufferToOMXComponent()

{

    ……

    OMX_EmptyThisBuffer(iOMXDecoder, input_buf->pBufHdr);

    ……

}

PVMFOMXBaseDecNode::SendOutputBufferToOMXComponent()

{

    ……

    OMX_FillThisBuffer(iOMXDecoder, output_buf->pBufHdr);

    ……

}

OMX_ERRORTYPE PVMFOMXBaseDecNode::EmptyBufferDoneProcessing(OMX_OUT OMX_HANDLETYPE aComponent,

        OMX_OUT OMX_PTR aAppData,

        OMX_OUT OMX_BUFFERHEADERTYPE* aBuffer)

{

    ……

}

OMX_ERRORTYPE PVMFOMXBaseDecNode::FillBufferDoneProcessing(OMX_OUT OMX_HANDLETYPE aComponent,

        OMX_OUT OMX_PTR aAppData,

        OMX_OUT OMX_BUFFERHEADERTYPE* aBuffer)

{

    ……

}

v      源码文件&＃xff1a;

v      nodes/pvomxbasedecnode/

v      nodes/pvomxvideodecnode/

v      codecs_v2/omx/

媒体播放引擎 - 媒体输出节点

v      MediaOutputNode 负责接收 DecNode 的解码后数据&＃xff0c;并将数据输出到 MIO &＃xff1b;同时在输出前作视频的同步&＃xff1b;

v      MIO 负责将数据输出到 surfaceFlinger 和 AudioFlinger &＃xff1b;

v      视频数据在输出前需要做颜色空间的转换&＃xff08; YUV->RGB &＃xff09;和缩放&＃xff0c;这部分的工作也在 MIO 中完成&＃xff1b;

v      节点源码&＃xff1a;

v      nodes/pvmediaoutputnode/

v      MIO 源码&＃xff1a;

v      android/android_surface_output.cpp

v      android/android_audio_output.cpp

v      android/android_audio_mio.cpp

v      http://zhaixishan.cublog.cn

附录&＃xff1a;

具体的代码阅读&＃xff1a;

• static void android_media_MediaPlayer_setDataSource(JNIEnv *env, jobject thiz, jstring path)

    此函数中先得到当前的MediaPlayer实例&＃xff0c;然后调用其setDataSource函数&＃xff0c;传入路径

• status_t MediaPlayer::setDataSource(const char *url)

    此函数通过调getMediaPlayerService&＃xff08;&＃xff09;先得到当前的MediaPlayerService&＃xff0c;  const sp& service(getMediaPlayerService());
     然后新建一个IMediaPlayer变量&＃xff0c;  sp player(service->create(getpid(), this, fd, offset, length));
     在sp MediaPlayerService::create(pid_t pid, const sp& client, const char* url) 中
     调status_t MediaPlayerService::Client::setDataSource(const char *url) 函数&＃xff0c;Client 是MediaPlayerService 的一个内部类。
     在MediaPlayerService::Client::setDataSource中&＃xff0c;调sp MediaPlayerService::Client::createPlayer(player_type playerType)
     生成一个继承自MediaPlayerBase的PVPlayer实例&＃xff0c;
    PVPlayer的继承关系如下:
    PVPlayer -->MediaPlayerInterface -->MediaPlayerBase
    最后调PVPlayer的setDataSource ()函数

• status_t PVPlayer::setDataSource(const char *url)
• status_t PVPlayer::prepare()

    此函数开头执行ret &＃61; mPlayerDriver->enqueueCommand(new PlayerSetDataSource(mDataSourcePath,0,0));
     将PlayerSetDataSource 的command类加入到PlayerDriver的command处理队列中&＃xff0c;
     在void PlayerDriver::Run()函数中处理此command&＃xff0c;调用下面的handleSetDataSource函数。

• void PlayerDriver::handleSetDataSource(PlayerSetDataSource* ec)
• PVCommandId PVPlayerEngine::AddDataSource(PVPlayerDataSource& aDataSource, const OsclAny* aContextData)

        This function allows a player data source to be specified for playback. This function must be called

• PVMFStatus PVPlayerEngine::DoAddDataSource(PVPlayerEngineCommand& aCmd)
• PVMFStatus PVPlayerEngine::DoSetupSourceNode(PVCommandId aCmdId, OsclAny* aCmdContext)

http://www.cublog.cn/u3/112227/showart_2494787.html