前往小程序,Get更优阅读体验!
立即前往
首页
学习
活动
专区
工具
TVP
发布
社区首页 >专栏 >stagefright概述「建议收藏」

stagefright概述「建议收藏」

作者头像
全栈程序员站长
发布2022-11-01 14:11:25
7380
发布2022-11-01 14:11:25
举报
文章被收录于专栏:全栈程序员必看

大家好,又见面了,我是你们的朋友全栈君。

一、android结构图(上下文关系)

二、android目录结构

自从android4.2版本之后,媒体的相关代码都放到framework/av/的目录中,俗称”AV工作者”,呵呵(本地代码不是太健全,目录我手动敲,公司代码健全,直接导出目录树)

[plain] view plain copy print ?

  1. |—– media
  2. | |
  3. | |– libmedia_native //JNI交互部分,从名字可以看出来
  4. | |
  5. | |– libmedia //一个服务端的代理,对应用层提供相关的接口,和服务端交互
  6. | |
  7. | |– libmediaplayerservice //服务段 (分发器,交换机的作用,个人理解)
  8. | |
  9. | |– libstagefright //一个服务端的分支,支持工作
  10. | |
  11. | |– mediaserver //媒体进程,管理媒体一些相关信息,关注较少
  12. | |
  13. | |– mtp //文件夹操作媒体的相关东西
  14. | |

再进一步,我们看一下stagefright的里面包括什么东东

[plain] view plain copy print ?

  1. |– stagefright
  2. | |
  3. | |– codecs //提供解码器实现
  4. | |
  5. | |– colorconversion //颜色空间转换
  6. | |
  7. | |– foundation //基本数据结构的实现
  8. | |
  9. | |– httplive //m3u8解析
  10. | |
  11. | |– id3 // ID3 TAG解析(一般用于MP3格式的metadata容器)
  12. | |
  13. | |– include //基本头文件
  14. | |
  15. | |– matroska //matroska文件解析
  16. | |
  17. | |– mpeg2ts //mpeg2ts文件解析和数据获取一些处理
  18. | |
  19. | |– mp4 //MP4的格式解析
  20. | |
  21. | |– omx //IOMX接口实现
  22. | |
  23. | |– rtsp //rtsp文件解析
  24. | |
  25. | |– wifi-display //关于wifi的处理
  26. | |
  27. | |– yuv //YUV数据的处理
  28. | |

三、“演讲恐惧着”的接口事件

本地媒体的事件处理接口

stage fright 英文的意思就: 演讲恐惧者,AwesomePlayer 功能强大的播放器

在android中也是这个这样,“演讲恐惧者”有强大的接口和事件处理接口,但是,它不去实现,而是全部通过AwesomePlayer来完成的,在其初始化时,就直接实例化功能强大播放器并且对其设置监听。代码如下:

StageFrightPlayer.cpp

[cpp] view plain copy print ?

  1. StagefrightPlayer::StagefrightPlayer()
  2. : mPlayer(new AwesomePlayer) {
  3. ALOGV(“StagefrightPlayer”);
  4. mPlayer->setListener(this);
  5. }

接口基本调用流程:

1.Java层通过JNI调用C++侧的mediaplayer相关接口

2.mediaPlayerService中创建服务器端客户端,分别实例化相关播放器,这里会把接口事件调用到具体的播放器如:本地媒体调用stagefright,流媒体调用NuPlayerDriver

3.stagefright会调用AwesomePlayer相应接口,其实流媒体侧和本地媒体类似的,最后会调用Nuplayer

媒体事件类型

[cpp] view plain copy print ?

  1. enum media_event_type {
  2. MEDIA_NOP = 0, // interface test message
  3. MEDIA_PREPARED = 1, //媒体准备完毕
  4. MEDIA_PLAYBACK_COMPLETE = 2, //播放事件
  5. MEDIA_BUFFERING_UPDATE = 3, //Buffer更新事件,更新的值是百分比
  6. MEDIA_SEEK_COMPLETE = 4, //seek事件
  7. MEDIA_SET_VIDEO_SIZE = 5, //视频尺寸
  8. MEDIA_TIMED_TEXT = 99, //字幕相关的,基本不用
  9. MEDIA_ERROR = 100, //错误
  10. MEDIA_INFO = 200, //媒体详细信息
  11. };

stagefright模块结构

stagefright模块结构图

1.mediaPlayerservice调用Stagefright相应的接口

2.Stagefright调用AwesomePlayer相应的接口

3.AwesomePlayer调用OMXCode读取ES数据,并且进行解码的处理

4.OMXCodec调用MediaSource的read函数来获取音视频的数据

5.OMXCodec调用Android的IOMX接口,其实就是Stagefrightde中的 OMX实现

6. OMX调用OMXMaster,而OMXMaster调用OMXPluginBase的接口,这里也可以获取外部的Codec的插件,最终调用对应的解码组建来完成解码,不同解码组件不太相同,后面会做介绍

7.解码完成后,通过OMXcodec返回的裸码流数据会在Awesomeplayer中调用Render模块,实现渲染,从而给用户提供了画面

版权声明:本文内容由互联网用户自发贡献,该文观点仅代表作者本人。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如发现本站有涉嫌侵权/违法违规的内容, 请发送邮件至 举报,一经查实,本站将立刻删除。

发布者:全栈程序员栈长,转载请注明出处:https://javaforall.cn/203974.html原文链接:https://javaforall.cn

本文参与 腾讯云自媒体同步曝光计划,分享自作者个人站点/博客。
原始发表:2022年10月23日,如有侵权请联系 cloudcommunity@tencent.com 删除

本文分享自 作者个人站点/博客 前往查看

如有侵权,请联系 cloudcommunity@tencent.com 删除。

本文参与 腾讯云自媒体同步曝光计划  ,欢迎热爱写作的你一起参与!

评论
登录后参与评论
0 条评论
热度
最新
推荐阅读
相关产品与服务
容器服务
腾讯云容器服务(Tencent Kubernetes Engine, TKE)基于原生 kubernetes 提供以容器为核心的、高度可扩展的高性能容器管理服务,覆盖 Serverless、边缘计算、分布式云等多种业务部署场景,业内首创单个集群兼容多种计算节点的容器资源管理模式。同时产品作为云原生 Finops 领先布道者,主导开源项目Crane,全面助力客户实现资源优化、成本控制。
领券
问题归档专栏文章快讯文章归档关键词归档开发者手册归档开发者手册 Section 归档