腾讯云开发者社区-腾讯云

开发者社区

文档建议反馈控制台

文章/答案/技术大牛

发布

综合排序丨最热优先丨最新优先

【Android 音视频开发打怪升级：音视频硬解码篇】三、音视频播放：音视频同步

一、音视频数据流分离提取器上篇文章，多次提到音视频数据分离提取器，在实现音视频解码器子类之前，先把这个实现了。封装Android原生提取器之前提过，Android原生自带有一个MediaExtractor，用于音视频数据分离和提取，接来下就基于这个，做一个支持音视频提取的工具类MMExtractor： class 四、调用并播放以上，基本实现了音视频的播放流程，如无意外，在页面上调用以上音视频解码器，就可以实现播放了。简单看下页面和相关调用。 main_activity.xml <? 这就要引出下一个不可避免的问题了，那就是音视频同步。五、音视频同步同步信号来源由于视频和音频是两个独立的任务在运行，视频和音频的解码速度也不一样，解码出来的数据也不一定马上就可以显示出来。系统时间而系统时间作为统一信号源则非常适合，音视频彼此独立互不干扰，同时又可以保证基本一致。实现音视频同步要实现音视频之间的同步，这里需要考虑的有两个点： 1.

2020-04-01

3.1K0

标签:

「音视频专题」 音视频基础概念介绍

01 前言大家好，从本文开始我们将从 Android 音视频专题开始探索，并按照 iOS/Android 音视频开发专题介绍依次开始。 iOS 音视频专题将在 Android 音视频专题结束后进行。在进入实战之前，我们有必要了解下音视频相关术语。 02 音频视频编码什么是音视频编码？所谓音视频编码就是指通过特定的压缩技术，将某个音视频格式的文件转换成另一种音视频格式文件的格式。 音视频编码的意义？ 音视频编码的最终目的是对音视频进行压缩，未经编码（压缩）的音视频数据量大，存储困难，不利于网络传输。如果视频不经过编码压缩，在直播场景下做不到实时传输的需求。视频编码格式有哪些？最终 Android 专题结束后产出的 API 截图如下：往期内容： iOS/Android 音视频开发专题介绍

2022-01-20

1.8K0

标签:

iOS 音视频接入-音视频基础

，下面就是我个人的音视频基础学习记录。流：编码之后的数据） 音视频过程 音视频客户端实现过程采集：数据的来源。处理：数据进行加工处理。渲染：展示数据。传输：数据共享。大体流程图如下： [音视频的客户端实现过程] 音视频采集产生音视频数据的源头叫做输入设备，在输入设备中获取音视频原始数据的过程，称为采集。存放音视频内容的叫做封装容器，文件类型叫封装格式。文件封装与解封装是互逆的操作过程。 音视频传输网络协议 音视频数据在网络中的传输一般都使用特定的协议，称为流媒体协议。将音视频文件通过协议打包后，会走网络接口发送出去。对端接收网络包之后，需要解开协议包，才可以拿到音视频文件。

小明同学接音视频

2020-09-28

2.8K0

标签:

实时音视频

” 8月5日-6日，LiveVideoStackCon 2022 音视频技术大会上海站，和你一同开启通向未来的大门。 音视频+ 从音视频编解码到网络传输的进一步降低时延；从智能硬件的开发到内容生产端与消费端的升级；从客户端建设到服务质量与体验的提升……音视频领域内的方方面面都在不断向前推进，助力着一个又一个行业从初生到走向成熟「音视频+」给人们带来了多彩的生活，也给行业带来了无限可能。在本专题中，我们将探讨音视频技术与不同行业的高密度融合，会给行业带来怎样的技术新实践、新贡献呢？讲师与议题 HDR作为超高清音视频产业的关键技术之一，拥有更广的色彩容积和更高的动态范围。消费侧，通过智能理解和推荐，短视频重构了人们内容获取的方式，但生产侧，音视频生产依然停留在传统时代。

2022-07-26

8130

标签:

音视频技术(6)-iOS音视频同步

音视频同步播放流程网上绝大多数代码都是参照ffplay来实现的，下面按照接入流程一步步讲解如何实现iOS平台上音视频同步 iOS接入ffmpeg和SDL可以参考前面的文章，本文不做赘述。打开流并解析音视频帧注意几点 1.新版本ffmpeg里，新增api,avcodec_parameters_to_context(...)用来获取解码参数 2.新的解码方法，和渲染的api 视频解码需要将pts自然数转成秒值，以和音频同步，音视频同步有多种方法，基于人对声音比较敏感，一般采用视频同步到音频。可以参考前面音频和视频渲染讲解，没有复杂之处本篇文章花的时间较长，反复研读代码才基本明白是怎么回事，想要再进一步理解，还得去读ffmpeg的源码实现，当前阶段先不做深入了解，比这更重要的是把整个音视频处理大的流程和基本原理磕清楚 音视频处理确实涉及的技术比较深，与笔者当前的工作并不match，只能在不多的休息时间里再挤一点时间，日拱一卒去学习钻研，加油。

2020-03-27

2.7K2

标签:

实时音视频-腾讯云实时音视频(TRTC)

实时音视频支持跨终端、全平台之间互通，从零开始快速搭建实时音视频通信平台腾讯云实时音视频详情点击查看腾讯实时音视频（Tencent Real-Time Communication，TRTC）拥有QQ 十几年来在音视频技术上的积累，致力于帮助企业快速搭建低成本、高品质音视频通讯能力的完整解决方案。全平台互通可在微信、手机 QQ、QQ 浏览器通过 H5 页面或微信小程序发起/接受/断开音视频通话，也可直接在网页或通过 SDK 集成的方式在 PC、MAC、APP 中实现音视频通话，支持全平台互通美颜滤镜实时音视频产品免费提供基础美颜与滤镜功能；并支持与美颜特效（收费）产品配合使用，提供美颜美型、贴纸、手势识别等多种实时特效功能。网络通信稳定全球端到端延时小于300ms，抗丢包率超过40%，抗网络抖动超过1000ms，即使在弱网环境下仍然能够保证高质量的音视频通信，确保视频通话过程顺畅稳定。

2019-08-06

12.9K0

标签:

实时音视频

即时通信 IM

iOS音视频接入 - TRTC多人音视频通话

前一篇我们使用腾讯封装的TRTCCalling接入了1v1的音视频通话，今天还是使用此模块进行实现多人音视频通话及其常用TRTCSDK的API。

小明同学接音视频

2020-10-13

5.9K0

标签:

实时音视频

实时音视频开发学习1 - 音视频初体验

TRTC基本内容随着移动互联网速度越来越快的发展，实时音视频的发展也越来越收到重视。腾讯实时音视频（Tencent Real-Time Communication，TRTC）经过了10多年在网络音视频技术的发展与积累，并以多人音视频通话和低延时互动直播两大场景化方案，通过腾讯云服务向开发者开放产品架构实时音视频TRTC主打平台互通的多人音视频和低延时直播互动解决方案，提供了小程序端、web端以及终端的SDK用于快速集成，并与云服务后台连通。在音视频开发过程中，通过判断UserID的不同可以给房间添加成员。 RoomID 房间ID是一个音视频的空间，同一房间的用户可以互相接收对方的实时视频数据。推送推送只用户将本地音视频数据上传给TRTC服务端的操作，相当于主播，对应推流过程。订阅订阅只用户向TRTC服务端请求拉去指定用户音视频数据的操作，相当于粉丝观看，对应拉流过程。

金林学音视频

2020-08-25

5.3K0

标签:

实时音视频

音视频技术基础（一）--音视频技术概念基础

音视频技术介绍什么是音视频技术？音视频技术其实就是音频技术和视频技术的一个统称，在技术处理上，其实音频和视频是要分开处理的。存放音视频的容器叫封装容器，文件类型叫封装格式； 7. 网络协议打包。音视频文件在网络中传输的时候，一般都会有一个特定的协议，也就是流媒体协议。网络协议会将音视频数据文件打包成协议包，通过网络协议端口发送出去，接收方接收到网络包之后，要通过网络协议解开协议包，才能获得音视频数据文件。一般音视频同步的做法有三种：视频同步到音频、音频同步到视频、音视频同步的外部时钟。通常采用视频同步到音频的方法。 音视频同步的算法如下图所示： image.png 流媒体协议通常音视频数据体积比较大，所以在网络传输过程中都是连续不断的多媒体流量，在网络中传输音视频数据的技术叫流媒体技术，传输使用的协议就是流媒体协议

黑眼圈云豆

2020-07-07

6K0

标签:

音视频初探

视频直播类功能的技术上整体流程包括以下内容： 音视频采集 音视频处理 音视频编码和封装 () 推流流媒体服务器处理拉流 音视频解码 音视频播放 1.3. 接下来，主播共享端采集数据（音视频的采集、处理以及编码封装流程）形成RTMP流推送到CDN网络（推流）。目前主流的音视频编码格式主要是MPEG4、H.254 详细可参考主流的编码格式 2.5. 比如多主播直播时，观众客户吧以及混了几个主播的音频流拉下来,这叫拉流，前提是得有一个地方先混流(把几个主播的音视频流混合)成一个“单流”，然后在推流到服务器，这时广州才能从服务器上拉流下来。它提供了录制、转换以及流化音视频的完整解决方案。

2021-07-02

2.4K0

标签: