随着直播行业的快速发展，特别是在今年疫情的影响下，各种低延时的直播场景得到了爆发性发展。最典型的应用就是直播带货秒杀和在线教育答题。...这些应用场景的核心需求就是实时音视频互动，而传统直播技术基于HLS、FLV/RTMP协议具有秒级别的延时，高延时是制约互动效果的关键因素。...快直播正是采用WebRTC协议对标准直播的拉流侧进行低延时改造，以达到高兼容、低成本、大容量的低延时直播要求。...总之，客户可以从现有的标准直播平滑地迁移到快直播上来，快速实现低延时直播场景应用。 终端的生态环境也是快直播采用WebRTC进行低延时改造的重要考量。...CDN边缘节点进行WebRTC改造，使直播迈入了毫秒级的低延时时代。
低延时直播方案 适用场景 教育直播 大班课可以支持超大数量规模的同学同时在线低延时与老师互动。 电商直播 实时与买家互动答疑，交流商品信息。...体育直播 精彩竞技、电竞等赛事，让观众实时了解现场情况。 互动娱乐 及时反馈增强互动，极大优化了观众送礼时的嘉宾反馈互动体验。...阿里的低延迟直播：官方文档 低延时直播RTS（Real-time Streaming）在阿里云视频直播（ApsaraVideo Live）的基础上，进行全链路延时监控、CDN传输协议改造、UDP等底层技术优化...，通过集成直播播放端SDK，支持千万级并发场景下的毫秒级延时直播能力，弥补了传统直播3~6秒延时的问题，保障低延时、低卡顿、秒开流畅的极致直播观看体验。...说明 直播推流端继续沿用RTMP方式推流。 标准直播拉流（RTMP、FLV、HLS）使用原有rtmp://和http://格式。 低延时直播拉流（UDP）使用artc://格式。
但是，当前有很多对实时性和交互性要求高的应用场景，现有的直播云平台仍然无法满足用户需求，比如在线游戏（云游戏、在线博彩、互动游戏等），在线教学（互动课堂、VR直播课堂），手术直播（多地联动），应急指挥（...对于这类应用来说，它对于视频的延时是非常敏感的，往往差之毫厘，失之千里。所以，这些应用场景下必须采用低延时的直播解决方案。 然而，当前主流的直播云平台主要采用如下几种技术实现方式： 1....基于以上情况，我们经过多年研发完成了一套适用性更广的解决方案，该方案的实现方式如下： 源端： 采用H.264/AAC的视频编码技术，基于硬件编码器进行实时编码，然后基于UDP协议进行直播推流，最大程度降低编码延时...终端： 基于H5标准自主实现低延时播放器，有效控制缓冲区大小，通常只缓冲一帧的图像数据，并调用本地的硬件解码器进行视频解码，从而实现快速实时播放的目标。...在高带宽低延时的专网环境中（网络延时低于1ms）,该直播平台的端到端延时在300ms以内； 2. 在单一运营商的广域网环境中（网络延时低于10ms），该平台的端到端延时在500ms以内； 3.
越来越多的业务和应用将视频化，直播化。大量互动的内容将通过5G以低延时的方式以视频的形式传输。 5G将对视频分辨率和清晰度提出越来越高的要求。...淘宝直播高清低延时系统架构 在降码率上，我们自研高效编码器，升级播放架构，添加智能ROI，场景编码，智能码控等工具，有效地降低了视频码率带宽。...我们搭建了一套基于淘宝直播的全链路监控体系，从音频，视频，网络这三个方面入手去解决目前淘宝直播全链路的现有问题以及将来可能出现的问题。不断去优化整套高画质低延时系统。...通过此方法，我们在淘宝直播里面获得了7-10%的BDrate收益。在淘拍场景下获得了40%的BDrate收益。 ▐ 低延时编码 在直播中，低时延意味着高效率和优质体验。...更可能有更多有趣的玩法，例如：主播观众实时游戏互动，虚拟主播完全代替真人直播，观众沉浸式地通过VR或者AR进行直播购物。这些都会慢慢变成现实。淘宝直播的技术将来会为用户带来越来越丰富的直播购物体验。
腾讯云音视频基于超过20年的技术积累及海量服务经验，推出满足各类业务场景需求的实时互动直播解决方案，支持全平台多方音视频连麦，5000+终端完美适配，覆盖全球200+国家和地区，连麦用户全球端到端平均延时...<300ms；提供多样化丰富场景定制组件，降低接入门槛，快速集成包括美颜、动态贴纸、多人连麦、消息互动等多种能力，满足各大场景实时互动需求！...限时超值体验，低至9.9元~ 腾讯云音视频在音视频领域已有超过21年的技术积累，持续支持国内90%的音视频客户实现云上创新，独家具备 RT-ONE™ 全球网络，在此基础上，构建了业界最完整的
传统标准直播不断降低延时的内在需求，像电商直播、赛事直播、秀场直播等，都需要不断降低延时，提升直播的互动性和沉浸体验，从而带动平台的GMV增长；2....云渲染、虚拟直播、云游戏直播等创新业务场景也需要通过低延时直播来更快更好地向观众呈现画面。 1.2 技术背景 然后，我们再来看一下低延时直播的技术背景。...直播领域的各种传输协议本身也在不断向低延时方向发展，像低延时HLS、CMAF，还有被国内直播行业用到极致的RTMP/FLV。...总之，快直播可以根据客户需求提供不同层次的低延时直播服务。...低延时播放质量优化 下面我将向各位介绍腾讯云快直播在低延时播放质量优化上的一些实践工作。 在详细讲述之前，我先总体介绍下腾讯云快直播低延时播放的定制优化解决方案。
虽然今年低延时从第一降到了第二，成本控制成为当下最为关注焦点，但是低延时还是最受行业长期关注的发展方向之一。近些年来，特别是疫情以后，低延时直播需求得到了迅猛增长。...传统标准直播不断降低延时的内在需求，像电商直播、赛事直播、秀场直播等，都需要不断降低延时，提升直播的互动性和沉浸体验，从而带动平台的GMV增长；2....直播领域的各种传输协议本身也在不断向低延时方向发展，像低延时HLS、CMAF，还有被国内直播行业用到极致的RTMP/FLV。...总之，快直播可以根据客户需求提供不同层次的低延时直播服务。...2.低延时播放质量优化 下面介绍腾讯云快直播在低延时播放质量优化上的一些实践工作。 在详细讲述之前，先总体介绍下腾讯云快直播低延时播放的定制优化解决方案。
背景需求 对于摄像机直播，客户反馈的最多就是实现web直播、摆脱插件，可以自定义集成等问题， 对于熟悉EasyNVR已经完美的解决了这些问题。...然而对于web播放也存在一些问题，通常我们web播放RTMP流使用的是flash，在这个过程中就会出现一个问题，随着web一直播放直播时间的增加，视频直播的延时也会累积起来，延时也就越大。...经过我们实时的测试发现，编译出的低延时，追帧版本的播放器在实测过程中对网络有一定的要求，因为播放器在播放时为了保证实时性就会一直追帧，这样就不会存在累计延时的情况了，但是，当网络环境差的时候，我们的网络无法完全满足直播视频数据时就会在直播会面中出现类似掉帧的情况...EasyNVR的处理方式 EasyNVR是实时的进行直播视频流，因此在视频的web直播中我们也有遇到延时累计的问题。...我们将直播分为了实时直播和流畅直播，顾名思义，实时就是保证直播的实时性，保证播放器的低延时直播；流畅直播则为可以在网络环境不是特别理想的情况下依然可以 进行流畅的视频直播。 ?
国产操作系统|Linux下RTMP|RTSP直播播放 在发布国产操作系统|Linux平台的RTMP|RTSP直播播放SDK之前，大牛直播SDK（官方）的直播播放SDK无需赘述，采用自研内核框架...本次发布的可用于国产操作系统和Linux上的的RTMP|RTSP直播播放SDK, 视频绘制使用XLib相关库实现, 音频输出使用PulseAudio和Alsa Lib实现，除了常规功能如实时静音、快照、...播放器接口和调用都比较简单，集成复杂度低，且不依赖于QT。...相关DEMO 大牛直播SDK发布的Linux平台播放器SDK支持多实例播放，以单个窗体播放为例，相关代码如下： const char* player_url_ = "rtsp://admin...，经实际测试，延迟和Windows平台一样，毫秒级，随着国产操作系统在无纸化同屏等行业的推进，越来越多的场景需要这样一款稳定性高延迟低的RTMP|RTSP播放器，本文抛砖引玉，感兴趣的开发者可酌情参考。
微信直播,HTML5直播,主要方案有如下几种： 1,基于hls切片直播，前前是应用的主流,服务器可以选fms,wowza,nginx,srs之类 优点：集成方便，支持度高，兼容性好，主流手都支持，是目前直播技术主流...缺点：延时大，一般服务器可以控制切片时长（延时可以控制在15-30秒之间） 2,基于浏览器mse技术，目前端技术上有B站的flv解码器。后端技术srs之类。...优点：集成方便，兼容性一般，原有技术平台可以保留，延时可以控制在10秒内 缺点：（主要是部分浏览器不支持mse,），目前IOS微信内不支持，延时稍大。...4，基于WebSocket技术自建流服务直播， 优点：低延时，超低，可控在1秒内（测试在0.2秒左右），兼容好，所有html5手机平台通吃。...缺点：要自建流服务， 自建低延时娃娃机直播 测试了一下效果还不错：http://m.ovsyun.com:8082/play/ 方案：RTMP摄像机-->自建(流服务网关）-->h5和微信端(可以同时rtmp
本文由腾讯云资深架构师何书照在LiveVideoStack线上分享中的内容整理而成，详解了大规模、低延时电商直播系统架构设计以及电商直播的难点、技术挑战与突破。...本次主要为大家分享最近腾讯云在低延时电商直播系统架构的设计与弱网优化实践。...电商直播的难点、挑战与技术突破 大规模、低延时电商直播系统架构设计 低延时直播系统弱网优化与互动连麦实践 电商直播的难点、挑战与技术突破 电商直播主要分为两种：其一，当前直播或短视频公司正在拥抱电商...低延时直播系统弱网优化与互动连麦实践 如上图为腾讯云直播架构，主播端通过SDK推流到上行接入点的数据中心，在数据中心进行相关处理后，进行转码，再利用CDN三级回源架构，通过用户被动触发进行拉流。...在低延时直播领域，除了传统直播和WebRTC直播两个主要的优化方向之外，还有基于QUIC方式的优化。基于QUIC的模式，大部分应用于CDN下行。
目录 WebRTC 能否实现低延时目标 视频质量和延时之间的平衡 更好的解决方案——Segment Truncation Warp——基于 Segment Truncation 的视频协议 WebRTC...能否实现低延时目标 演讲者作为 Twitch 的工程师，主要负责降低视频观看延时方面的工作，从而使得视频观看过程中增加交互的可能。...，例如对话语音数据有较高的优先级，而视频观看体验却不是很好，经历了一年的努力，工程师团队放弃了利用 WebRTC 实现低延时目标的愿望。...WebRTC 不能提升视频观看体验 视频质量和延时之间的平衡 对失败项目进行评估后，工程师们觉得要实现高视频质量的同时降低延时是很困难的，如果单独对视频质量优化，必然会引起观看时延增加，同理，如果只考虑减低时延...Quality vs Latency 为了解决上述的平衡问题，对视频播放延时进行优化的同时保证服务质量，首先需要明确视频播放延时来自何处。通常而言，延时主要来自网络拥塞。
“互动” 的感觉，低延迟、高互动的音频处理 (包括采集和回放) 有多重要。...Oboe 是一个 C++ 库，用来为 Android 打造高性能的互动音频体验——而且覆盖 99% 的 Android 设备。...如果您的应用希望用尽可能接近 “实时” 规格的低延迟采集或者播放音频，Oboe 绝对是不二之选。...codelabs/mu… 如何为您的项目添加 C 和 C++ 语言: developer.android.google.cn/studio/proj… 现在就开始“造”声，为您的用户带来一段高品质的互动音乐之旅吧
音视频架构师戴建辉在LiveVideoStackCon2019深圳大会的演讲，详细介绍了如何基于Open WebRTC Toolkit (OWT)方案，结合SVT-HEVC tile-based编码等技术实现低延时的...8K全景直播系统。...基于Open WebRTC Toolkit (OWT) 8K全景视频低延时直播系统 基于Open WebRTC Toolkit的8K全景视频低延时直播系统，通过采用英特尔开源的SVT-HEVC进行HEVC...第三，实现了基于FoV（Field of View）反馈的HEVC Bitstream Rewriter的功能；第四，基于RTC本身实时低延时的传输效果，实施了用户FoV到Server的低延时反馈通道。...未来可以通过实现高、中、低多种分辨率和不同GOP的组合，优化FoV切换延时和Network Adaption。 多数浏览器对于HEVC编码标准兼容性存在缺陷。
官网：http://jsmpeg.com/ Github:https://github.com/phoboslab/jsmpeg
▲ 「互动仪式链」理论解析 低延迟高并发的流媒体技术实现了直播间画面、声音实时同步，为虚拟在场提供了天然际遇空间。...▲ QQ直播中的粉丝团权益 & 玩法 ▲ 映客中的家族权益 & 玩法 二、【互动】从围观到参与，促进关键行为转化 我们将直播间内的用户分为参与型和围观型，积极参与互动的用户通过点赞、评论、送礼等方式吸引主播和其他用户的注意...▲ QQ直播中的加团引导 & Look直播中的快捷评论 其次，当直播间其他用户产生关注、加团、分享甚至评论行为时，可通过“我也关注”、“我也分享”、“+1跟帖”等快速低门槛的功能，利用围观型用户的从众心理引导用户做出决策...▲ 淘宝直播中的一键分享和快速跟帖 此外，通常情况下围观型用户难以在直播间内找到合适的互动契机，产品设计上可以考虑寻找合适的场景帮助用户降低破冰门槛，这种方式相较于前两种更加友好，更能够刺激用户互动欲望...除了增强送礼者/收礼者的情感体验，还为直播间留足了话题性。 ▲ QQ直播中的互动礼物特效 五、【符号】建立统一的身份信息 成功的互动仪式可以创造符号，符号形成某种象征物，帮助体验具体化。
SkeyeLive是OpenSKEYE开源流媒体团队开发的一款功能丰富的开源PC端流媒体推流拉流直播软件项目，目前支持Windows、Android版本，后续将支持ios版本，其中Windows版本的SkeyeLive...摄像头、麦克风、扬声器、RTSP摄像机、屏幕桌面等，采集后经过264、265软硬件编码、推送到内置SkeyeLive流媒体服务进行转发；同时SkeyeLive还支持通过TCP/KCP/RDP等协议分发直播流...，进行显示、播放，非常稳定、易用，用户可以基于SkeyeLive项目，开发类似于课堂直播、商显同屏、视频对讲、远程控制、无纸化会议等项目！...功能接口讲解程序框架SkeyeLive主要包括三个模块：采集、推送和直播，主要功能封装管理类Class CSourceManager中实现，接口非常简单，各模块分别提供开始和结束接口函数，方便界面调用；.../** * @brief 设置直播视频参数 * @param width 画面宽度 * @param height 画面高度 * @param fps 每秒帧数
2月22日，腾讯云携手信通院联合发布《超低延时直播白皮书》，旨在为超低时延直播技术标准化奠定基础，促进超低延时直播技术创新化发展，推动各行各业借助超低延时音视频技术进行数字化转型和业务创新，从而为广大用户带来更优的线上互动体验...此外，超低延时直播在核心指标比如渲染卡顿、首帧耗时等指标均超过传统直播CDN，为用户打造更优的直播互动效果。...白皮书节选内容如下： WebRTC的初衷是用于低延时P2P(Peer-to-Peer)通信，在直播场景也面临挑战，具体体现为： 信令流程繁杂，难以满足直播首帧要求。...在通话场景，为保证低延时，重传较激进， 但在高码率、高画质的直播场景，激进的重传会带来大量的带宽浪费。...，在保持低延时的前提下依然能够取得不错的效果。
扫码入群参与直播互动 获取最新产品手册、技术干货、精美礼品 点击阅读原文了解更多腾讯云AI解决方案 回复【入群】可添加云AI助手，加入云AI产品、技术、认证等相关社群 回复【云梯计划】可了解更多TCA
领取专属 10元无门槛券
手把手带您无忧上云
云服务器
ICP备案
实时音视频
对象存储
即时通信 IM
