原文：https://mux.com/blog/streaming-video-on-the-internet-without-mpeg/
奇舞团是360集团最大的大前端团队，同样也是TC39和W3C会员，拥有Web前端、服务端、Android、iOS、设计、产品、运营等岗位人员，旗下的开源框架和技术品牌有SpriteJS、ThinkJS、MeshJS、Chimee、QiShare、声享、即视、奇字库、众成翻译、奇舞学院、奇舞周刊、泛前端分享等。
随着最近H.266标准的完成，其惊人的复杂度令人生畏，与此同时，新兴的AOM组织于2018年年中耗时3年完成的AV1标准吸引了不少业内人的眼球，不仅仅是其有竞争力的编码性能，还有其在流媒体方面的优异表现，最重要的是其免专利费（royalty-free）使用这一项就会吸引各大厂商跟进。
1，修复http://www.discuz.net/forum-plugin-1.html在hover用户名字时，只显示一条宽线条的bug，原因是这个线条其实是个div，在common.js和ajax.js里通过xhr请求生成的。 此请求会返回一个xml，然后给libxml解析。但由于xml是gbk编码，libxml没带解码库所以失败了。另外有个点是，libxml其实不需要真正的gbk解码器，因为blink在 third_party\WebKit\Source\core\xml\parser\XMLDocumentParser.cpp的parseChunk里会传已解码好的数据，并且强制切换到utf16编码，但libxml会自己检查数据带的
作者：Lydia Hallie 译者：前端小智 来源： dev JavaScript 很酷，但是 JS 引擎是如何才能理解我们编写的代码呢?作为 JS 开发人员，我们通常不需要自己处理编译器。然而，了
在Mozilla，我们一直在努力研究新一代AV1视频编解码器。AV1可比HEVC（H.265）和Google VP9提高25％的编码效率，并由AOM开放媒体联盟（ Mozilla & ATEME都是是其一部分）开发。
2020年，直播带货火爆全网。想一探淘宝直播背后的前端技术？本文将带你进入淘宝直播前端技术的世界。
Image crate是 Rust 最受欢迎的图像处理库，现已发布新版本！它为各种图像格式带来了加速和其他增强功能。
接触了前端这么久以来，你每天跟JS打交道，你肯定也和我一样认为JavaScript很酷。但机器怎么能真正理解你写的代码呢？
在这个 2022 年的编解码器进展中，我将介绍去年与 H.264、VP9、HEVC、AV1、多功能视频编码（VVC）、低复杂度增强型视频编码（LCEVC）和基本视频编码（EVC）有关的最重要的公告。编解码器有很多，但篇幅有限，所以本文只是简单介绍。
本文翻译自🚀⚙️ JavaScript Visualized: the JavaScript Engine 作为JavaScript开发者，我们不需要编译自己编写的代码。那么，JavaScript引擎到底怎么处理这些JS代码，转换成机器能懂的东西呢？🥳 注意：本文主要是基于Node.js的V8引擎和基于Chromium内核的浏览器。 正文 通过script标签，HTML解析器识别到javascript代码。 javascript代码要么来自网络，要么来自缓存，或者安装的service worker 请
点击上方蓝字，发现更多精彩 什么是AVIF AVIF是一种基于AV1视频编码的新图像格式，相对于JPEG，WEBP这类图片格式来说，它的压缩率更高，并且画面细节更好。而最关键的是，它是免费且开源的，没有任何授权费用。 The AV1 format is and will always be royalty-free with a permissive FOSS license. 同时，它是由开放媒体联盟推动的一个标准，这个联盟包括了谷歌，微软，苹果等巨头，可以说是未来可期。 截止到目前(2021/3)
编码结束后，调用函数speex_bits_destroy(&bits)，speex_encoder_destroy(enc_state)来销毁SpeexBits和编码器。
JS 实在是太酷了（认真脸），那你有没有想过机器是怎么解析 JS 代码的？作为一个 JS 开发者，一般我们不需要直接跟编译器打交道，但是如果可以了解其中的基本原理，相信会对以后的工作和学习都有帮助的！
蔡砚刚：大家好，我是蔡砚刚，来自深圳市优微视觉科技有限公司，也是一名在音视频领域摸爬滚打多年的老兵。目前主要负责优微视觉的前进方向以及主持公司的日常业务活动。在这里我更期望先介绍一下我们的团队，我们团队核心成员均出自北京大学数字视频编解码技术国家工程实验室：有在北大学习工作十六载并持续优化编解码器的王振宇，有在腾讯工作过的韩冰杰，有在人民银行工作过的李旭峰，我本人曾在阿里、快手等公司工作过。“十年磨一剑，霜刃未曾试。今日把示君，谁有不平事。”经过大家十年间的持续积累与摸索，我们拥有了自己的u264、u265、uavs、uavs+、uavs2、uavs3等编解码器，并且我们的内核也普遍应用到广电与互联网领域。
MPEG-4 Part 14（MP4）是最常用的容器格式之一，通常文件以.mp4结尾。它不仅能用于HTTP上的动态自适应流传输（DASH），还能用于Apple提出的的HLS流传输。MP4基于QuickTime文件格式标准下的ISO基础媒体文件格式（MPEG-4 Part 12）。MPEG代表Moving Pictures Experts Group，是国际标准化组织（ISO）和国际电工委员会（IEC）合作建立的组织。MPEG的设立是为了规范音频和视频压缩和传输的标准。MPEG-4则指的是对视频的编码。MP4支持多种编解码器。最常用的视频编解码器是H.264和HEVC。AAC是最常用的音频编解码器。AAC是著名的MP3音频编解码器的后继者。
自定义 或者说 定制 是本周 GitHub 热点的最佳写照。比如，lipgloss 这个项目，可以让你自己定义终端样式，五彩斑斓的黑终端来一个。接着，是 Apple 开源的 Swift Collections 让你更好的扩展定义数据结构。而 Node.js 样板文件——node-express-boilerplate 项目则集成了鉴权、CI、单测等功能，让你更快地使用它来定制一个 Node.js 应用。
JavaScript 很酷😎，但是机器是如何真正读懂你所写的代码？作为一名 JavaScript 开发者，我们通常是不需要自己处理编译的。然而，了解 JavaScript 引擎的基础知识，看看它是如何处理我们的对人类友好的 JavaScript 代码，并将其转化为机器能够理解的东西，绝对是一件好事！ 注意：这篇文章以 Node.js 和 Chromium 为核心使用的 V8 为基础来讲解的。 HTML 解析器在源码中遇到 script 标签，源码可能会从网络、缓存或者 service worker. 中
像 MP3、MP4、WebM 这些 视频格式，定义了构成媒体文件的音频轨道和视频轨道的储存结构，其中还包含描述这个媒体文件的元数据，以及用于编码的编码译码器等等。
首图来自 https://www.cablelabs.com/meet-connectivity-enabler-alberto-campos
随着近些年直播技术的不断更新迭代，高画质、低带宽、低成本成为直播行业追求的重要目标之一，在这种背景下，H.264 标准已成为行业主流，而新一代的 HEVC（H.265）标准也正在直播领域被越来越广泛地采用。花椒直播一直在对 HEVC（H.265）进行研究、应用以及不断优化。
随着音视频业务的快速发展，作为前端工程师，我们团队也逐步深入到音视频编解码领域，涉及到流媒体技术中的文本、图形、图像、音频和视频多种理论知识的学习，并有机会大规模应用到具体实践中。
策划、翻译：Alex 技术审校：赵志立 Jean-Baptiste Kempf 人物对话 #007# 如果你正在网上搜索最好用的免费视频播放器，VLC绝对会是你的头号选择。作为一款开源软件，它的下载量已超过40亿，并收获了无数赞誉。 然而，很少有人知道这个了不起的项目在15年前差点死掉。 当时虽然VLC获得了更多用户的青睐，但是团队的维护工作却变得愈加艰难。随后危机降临。 在此危难时刻，Jean-Baptiste Kempf（常被人们称为JB）挺身而出。作为一位拥有远见卓识的领导者，他将VLC从崩溃
Decoder++是一款专用于渗透测试的多数据格式编码解码工具，该工具是一款可扩展的工具，专为渗透测试人员和软件开发人员设计，可以将目标数据编码/解码为各种不同的数据格式。
| 导语 随着短视频兴起，音视频技术已经越来越火热，或许你之前有了解过如何在前端处理音视频，但随着视频文件的逐渐增大、用户体验要求的不断提高，纯前端处理音视频的技术也推成出新。下面将结合实际案例，讲解如何使用 FFmpeg 和 WebAssembly 实现前端视频截帧。文章较长，也非常硬核，建议先收藏再慢慢看。 背景 腾讯课堂涨知识创作者后台，目前主要通过邀请合作老师来平台上发布视频。上传视频的同时，需要对视频进行截帧生成推荐封面，生成规则比较简单，根据视频总时长，平均截取 8 帧。用户可以从其中选择一张
James Pearce 首先展示了基于 web 的视频编辑器。它遵循了编辑应用程序的普通的三窗口布局。在左上角有一个源视频查看器，用于加载视频源，然后将它们剪辑并添加到时间线中。在底部有一个时间轴，用以展示了各种轨迹，以及这些轨迹中的片段。在右上角有一个序列播放器，它可以播放正在构建的时间轴。最左边是所有视频源的列表，可以找到一个源，并将其加载到源查看器中，或者直接将其拖放到时间线中。
有的前端视频帧提取主要是基于浪canvas浪+ video一标签的方式，在用户本地选取视频文件后，将本地文件转为 ObjectUrl 后设置到 video 标签的 src 属性中，再通过 canvas 的 drawImage 接口提取出当前时刻的视频帧。
Stock Prediction Models - Gathers machine learning and deep learning models for Stock forecasting, included trading bots and simulations
春天的时候花椒做了一个创新项目， 这是一个直播综艺节目的项目，前端的工作主要是做出一个PC主站点，在这个站点中的首页需要一个播放器，既能播放FLV直播视频流，还要在用户点击视频回顾按钮的时候， 弹出窗口播放HLS视频流；我们开始开发这个播放器的时候也没有多想， 直接使用了大家都能想到的
http://www.streamingmedia.com/Articles/Editorial/Featured-Articles/Demuxed-18-Highlights-The-Future-of-Codecs-and-Compression-128609.aspx
作为HEVC比较热门的继承者，AOM推进的AV1在2018年进入了大家的视野。研究AV1的新编码工具离不开一个强大的码流分析工具。AOM 得益于开源社区的贡献，其码流分析工具也在同步的推出，给研究AV1新编码工具的小伙伴带来省去不少麻烦。
FFMPEG 编解码器获取流程 : 在获取音视频流 AVStream *stream 之后 , 执行以下流程 ;
随着短视频的流行，用户在碎片化场景下消费的视频内容越来越多。短视频本身时长较短，首帧体验尤为重要。随着预加载、预下载、IP直通车等传统优化手段使用，首帧体验有了明显提升。但经过进一步的数据分析，在手Q中长尾中低端机上，首帧表现依然不够理想。首帧优化已经进入深水区，受Google ExoPlayer切换清晰度方案（不用重启解码器）的启发，我们探索出一种适合短视频场景的，基于Android平台的跨播放器解码器复用方案，对中低端机首帧性能提升明显。本文是对整体方案的介绍，希望能帮助大家在首帧优化方向上提供新的思
Jonathan 首先介绍了视频编解码器产生的整数溢出失真，如下图所示。事实上，很难计算出编解码器中整数需要多大才能避免这个问题。设计的足够大的整数实际上并不够大，当然太大的整数也会造成实现成本上升。
Netty解码器也是非常重要的一个模块, 服务端接收到客户端发送过来的消息, 准确说是字节数组, Netty底层已经将它们读取成ByteBuf了, 但是这些ByteBuf是没有任何含义的, 就像一些'散兵游勇', 我们现在要把它们解码成我们认识的业务类.
会议由来自 videodeveloper.io 的 Andrea Fassina 主持。他首先回顾了上一期（6th Milan Meetup）中的内容：直播、数据质量、可交互体积视频以及智能编码，并简介了本场会议的其他三位嘉宾：来自 Evolution 的 Behnam Kakavand、来自 Akamai 的 Luca Moglia、来自 Elecard 的 Alexey Malikov。
在上篇工具| Burp Suite API学习思路文章中，斗哥介绍了BurpSuite扩展开发的一些准备工作与利用IHttpListener接口监听模块接收返回包，接下来斗哥会根据几个API来实现具体的功能需求，来开发个解码器，因面向接口开发扩展性较强，所以大家可以根据代码进行修改添加。
为流媒体服务添加新的编解码器是一个重大决定。似乎不可避免的是，H.264 将长期存在，新的编解码器不会取代它，而只是占据市场的份额。在短期内，这意味着流媒体服务可能还需要提供 H.264 和新编解码器，这将增加复杂性和 CDN 存储需求。证明迁移到新编解码器的步骤是什么，如今的情况如何？
研究人员在本研究中，通过对非人类灵长类动物的皮质内信号解码手指连续运动，将RNN与其他神经网络结构进行了实时比较。下面是实验过程。
最近，团队小组内部体验Web浏览器上课的音视频播放功能，除了对比同行产品，也对比了主流视频内容的网站平台。计划补齐和增强与播放体验相关的能力。 其中有一项能力在主流媒体视频网站都支持的，那就是进度条帧预览：在鼠标进度条停留，不必跳转进度，即可展示所指画面。 在简单分析了B站、腾讯视频后，发现都是采取在上架视频时，由后台生成专门用来帧预览的组合sprite图，然后前端拉取后再计算进度进行展示。 由于目前的我们后台云点播录制没有生成帧预览图功能。另一方面，即便升级可能大量的存量存储视频无法帧预览。于是我们决
【导读】近日，人工智能学者Ravindra Kompella发表一篇博客，介绍了作者实现的基于keras的机器翻译例子。作者通过一个seq2seq编码器-解码器网络实现英语到法语的自动翻译。作者在博文中详细介绍了自己的模型架构和训练数据，并使用代码片段分步骤对训练过程进行讲解。总之，这是一篇比较详尽的机器翻译应用示例教程，如果你有从事机器翻译或seq2seq模型相关的研究，可以详细阅读一下，相信一定对您的工程和理论都有所帮助。专知内容组编辑整理。 Neural Machine Translation——Us
① FFMPEG 初始化 : 参考博客 【Android FFMPEG 开发】FFMPEG 初始化 ( 网络初始化 | 打开音视频 | 查找音视频流 )
原文链接 / https://bloggeek.me/webrtc-video-codec/
ffplay 命令的 -codec:media_specifier 参数 用于 设置 多媒体解码器 , 通过该参数 可以 为 不同的媒体类型 ( 音频 / 视频 / 字幕 ) 指定解码器 ;
Matroska封装格式非常灵活、兼容性好，既适用于本地文件存储又可以进行实时流传输。本篇文章主要探讨Matroska的编解码器映射，如何封装视频流、音频流、字幕流。如果要Matroska的介绍、功能和基本结构，请查看上一篇文章：走进音视频的世界——Matroska封装格式的介绍(一)。
在基于transformer的自回归语言模型（LMs）中，生成令牌的成本很高，这是因为自注意力机制需要关注所有之前的令牌，通常通过在自回归解码过程中缓存所有令牌的键值（KV）状态来解决这个问题。但是，加载所有先前令牌的KV状态以计算自注意力分数则占据了LMs的推理的大部分成本。
在使用FFmpeg进行音视频编解码时，我们经常会遇到各种错误和异常情况。其中，一个常见的错误是avcodec_receive_packet返回AVERROR(EAGAIN)。本篇博客将围绕这个错误展开讨论，并提供解决方案。
就像很多标准的架构模式都被各种专用框架所支持一样，常见的数据处理模式往往也是目标实现的很好的候选对象，它可以节省开发人员大量的时间和精力。 当然这也适应于本文的主题:编码和解码，或者数据从一种特定协议的格式到另一种格式的转 换。这些任务将由通常称为编解码器的组件来处理 Netty 提供了多种组件，简化了为了支持广泛 的协议而创建自定义的编解码器的过程 例如，如果你正在构建一个基于 Netty 的邮件服务器，那 么你将会发现 Netty 对于编解码器的支持对于实现 POP3、IMAP 和 SMTP 协议来说是多么的宝贵
本文主题：编码和解码，或者说是数据从一种特定协议的格式到另一种的转换。这些任务通常由编解码器组件处理 Netty 提供了多种组件，简化了为支持广泛协议而创建自定义编解码器的过程。 若你正在构建一个基于 Netty 的邮件服务器，那就会发现 Netty 对于编解码器的支持对于实现 POP3、IMAP 和 SMTP 协议来说是多么宝贵！
领取专属 10元无门槛券
手把手带您无忧上云
云服务器
ICP备案
对象存储
腾讯会议
实时音视频
