球王梅西,还需要一座金杯来证明吗?

本文介绍了作者对足球赛事直播延时问题的探索,从技术角度解析了直播流从采集到播放的全过程,探讨了RTMP、HLS、WebRTC等协议的延时特性。腾讯云快直播通过技术创新实现了800ms以内的超低延时,并具备抗弱网和自适应码率的能力,提升了直播体验。此外,文章还提到了AV1编码的高效性和腾讯云快直播在业界的领先地位。

转眼间,世界杯又快要结束了!

阿根廷又一次杀入决赛,无限接近大力神杯了。

作为梅西的球迷,从2006年梅西第一次登上世界杯舞台,一直看到了2022年,虽然希望梅西这次能够圆梦,但是我也很清楚,在足球的世界里什么都可能发生。

即使这次没有金杯加持,在我心中,他早已经是球王了。

这次世界杯让我特别伤感,因为无论结果如何,这肯定是梅西的最后一届世界杯,看了十几年的梅西,梅西老了,我也老了。

如果从98年算起,我已经看了七届世界杯,曾经一起为足球呐喊的小伙伴们一个个地远离了世界杯,还在坚守的不多了。

这二十多年,看球体验可以说是天差地别。

98年的时候,家里只有一台老式彩电,画质不咋地,但是依然看得津津有味,印象深刻。

a722661218bfa8c0e20d291db4d8c896.png

互联网早期,出现了简陋的文字滚动直播,然后是图文直播,后来网络速度不断提升,终于可以看视频了,但是画质惨不忍睹。 

也就是这几年,随着光纤入户,网速有了飞跃,球赛终于脱离了电视机的束缚,随时随地都可以看高清网络直播。

像我在厨房做饭的时候,会支起一个平板,时不时搂一眼,客厅电视上有个第三方的app也在同步播放,这样我来回走动的时候就不会错过任何精彩镜头。

有一次小组赛正在看日本 vs 德国,无意中刷了一下朋友圈,赫然发现朋友圈都在发图庆祝日本队打入一球反超了,这是怎么回事,我的电视中日本队怎么还在进攻呢?

我立刻明白了:不同的直播观看平台延时不一样!直播技术相对落后的平台延时可以高达十几秒~

作为计算机行业人士,我知道本地网络是有延时,但是延时这么大是我不能忍的。

好奇心瞬间被激发出来,于是我开始研究直播背后的技术流程到底是怎么回事。

1

球赛直播流从赛场传递到手机/平板/电视上,大概需要经历这么一个过程:

384cd338e29a90b25f810c50cab1b4bd.png

1. 采集

这是第一个环节,它从系统的采集设备中获取原始视频数据,包括音频和视频。这一步耗时很小,十几毫秒就搞定。

2. 编码

音频和视频都需要进行编码压缩,常用的音频压缩编码算法有AAC、MP3、WMA等,视频压缩编码算法有H.264,H.265等。

通过调优,这一步也能降到几十毫秒。

3. 推流

将数据从推到云端直播中心,一般使用RTMP协议推流,基本耗时在十几毫秒到几十毫秒。

5. 转码

大家观看视频时一般都会有超清、高清、流畅等不同选择,一般需要在服务器端进行转码处理,形成不同的清晰度。如果采取高速转码,耗时也不高。

6. 分发

为了支持高并发,一般需要CDN来进行内容分发加速,这一步是耗时的,如果用户网络条件差,丢包多,延时就要达到几秒甚至几十秒!

7. 客户端播放

我们的客户端进行解码,渲染,最终呈现出来。目前像Flash播放器、hls、rtmp播放器缓存需要6-10秒,播放器的缓存是产生延时的关键原因。那为什么不在当前直播条件下把缓存调到0呢?这是由于调到0之后延时虽然小了,但卡顿会很高。

其实本质的原因就在于传统直播模型中,传输和播放是完全割裂的,没有对变化的网络进行适配,基于TCP的可靠传输也无法区分视频帧的优先级,而且其窗口确认机制在弱网下会导致较大的延时积累,就没法满足延时优先的需求。

其实流媒体技术经过了漫长的发展和迭代,早在2005年,Macromedia(后来被Adobe收购)就研发了RTMP协议,用于在RTMP服务器和Flash播放器之间传输数据,RTMP协议中的基本数据单元是消息(Message),传输的过程中消息会被拆分为更小的消息块(Chunk)单元。最后将分割后的消息块通过 TCP 协议传输,接收端再反解接收的消息块恢复成流媒体数据。

由于RTMP基于TCP传输,非公共端口,可能会被防火墙阻拦。后来Adobe又提出了HTTP-FLV,将流媒体数据封装成 FLV 格式,然后通过 HTTP 协议传输给客户端。

2009年,苹果公司提出了一个HTTP Live Streaming(HLS)协议,相比常见的流媒体协议,HLS会在服务器端将流媒体数据切割成短时长的ts小文件,并通过m3u8索引文件来按序访问ts文件,客户端只需要不停地按序播放就可以了。

HLS对HTML5非常友好,但是延时却比较大,2019年苹果推出LL-HLS(Low-Latency HLS),采用chunk编码,将延时降低到3秒左右。

但是无论怎么折腾,这些基于TCP方案的协议,都难以突破2~3秒的延时极限。

而基于UDP的WebRTC的出现,终于让大家看到了把延时降到1秒以内的曙光。

但是WebRTC的初衷是用于低延时P2P(Peer-to-Peer)通信,如果应用在直播场景下它表现如何呢?

我上网搜了一下,发现腾讯云快直播是业内首创将WebRTC技术引入直播领域,最早对外发布超低延时直播产品,目前,快直播的延时可降低到800ms以内,并同时兼顾延时、卡顿和首帧耗时,综合QoS远超传统直播。

76f7e46afc2d96f88d08b5af4ce0abcd.png

毫秒级延时!这样的技术如果看球赛直播岂不很爽, 但是它真能达到这个效果吗? 

2

我决定亲自体验一下,用腾讯云快直播(https://console.cloud.tencent.com/live/leb)搭建了一个快直播环境,然后找了几个1080P的足球视频片段,循环播放,用OBS做推流直播,然后对比快直播和普通直播的观看效果。

95efe33d9f893cec29bfa555097e278d.png

直播测试开始,效果果然很惊艳!

快直播(下方视频中右下角的WebRTC)几乎和原视频画面几乎保持一致,甚至感受不到差异。

标准直播FLV的画面要慢一些,延时在3秒左右。HLS就更慢了,延时高达10秒以上,别人都开始第二轮循环播放了,它在第一轮中还没出来。

(快直播 vs 普通直播)

不过这是正常网络下的表现,如果是网络很差,出现了丢包的问题,快直播表现如何呢?

想要模拟丢包,得弄个工具才行,有个叫Clumsy的软件可以专门干这件事,可以通过“Drop”的方式随机丢弃某些数据包。

可以看出,手工模拟丢包,形成弱网,快直播依然可以流畅的播放,相比标准直播,弱网丢包抗性提升50%:

(模拟弱网丢包测试)

快直播这种超低延时抗弱网的效果是怎么实现的呢? 

原来,快直播虽然是基于WebRTC的,但是对WebRTC做了很多创新性的改造:

信令改造,利用miniSDP和0-RTT的结合,大幅减少信令耗时、提升信令交互成功,进而降低首帧耗时和提升开播成功率。 

音视频改造,让WebRTC支持AAC,H.265,附加前向纠错,抗50%以上丢包。还引入了B帧,增强了画质,同时大幅减少了码率。

传输改造,采样柔性分级丢帧的传输策略来渐进式降低码率,以适应弱网情况。支持P2P分发网络,能够将看同一视频流的用户群就近地组织成网络,相互分享传输。

......

技术术语很多,简而言之,腾讯云快直播就是针对CDN传输和播放这两个痛点问题,将传输和播放控制实时反馈联动,形成闭环,通过感知网络状态来调整缓存和传输策略,根据实时网络进行最优匹配,这样用户在变动的网络中依然能获得非常低的平均延时(800毫秒左右)。

dfbacd224e37d2ebfac3e34a238e73e6.png

除了超低延时和抗弱网特性,腾讯云快直播还有两个业界领先的特性:自适应码率和AV1编码。

自适应码率:它可以根据播放端带宽自适应下发合适码率的视频,提升播放体验。这就厉害了,它不是我们在客户端手工去切换码率的,而是服务器端通过渐进式的超发来探测网络的承载能力,主动帮我们切换的。

下方的视频就展示出了随着网络情况的变化,当前视频的分辨率,码率都随之而变,视频依然非常流畅。

(自适应码率测试)

AV1视频编码:编码格式开源、免版权费,相比上一代H.265[HEVC]编码,在相同画质下可以再降低30%+码率,帮助企业节约带宽成本。

从我的测试中可以看出,AV1编码仅用1.5Mbps(仅为原始流的一半)就实现了同样的画质,这样不仅可以节省视频的存储空间,还能节省至少50%的传输带宽成本。

(AV1编码测试)

据我所知,超低延时直播产品领域,市面上也只有腾讯云、A厂商和Z厂商做了商用,相比而言,腾讯云快直播从各方面的指标测试表现来看,是处于市场领先地位的。


据了解今年2月份腾讯云音视频联合信通院对外独家发布了《超低延时直播(快直播)白皮书》,并首次对外公布超低延时直播技术标准,为直播技术发展提供了新思路,突破性的改善了直播观看体验。

3

说了这么多的直播技术,最终还是想看一场流畅、“实时”、高清的球赛直播,今年2022世界杯有转播权的平台好像是央视、咪咕、抖音这几家吧,我都去下载感受了一下,也和一些朋友聊了聊,普遍感觉抖音似乎延时最低而且画面体验最好,不知道是不是用了快直播技术?(个人猜测)

世界杯决赛虽然马上快要结束了,但是各类体育赛事直播一直都在进行中,并且已经融入到我们的生活和娱乐中。

同时,在电商带货、会展直播、娱乐秀场、在线教育、体育赛事等领域,超低延时直播技术的应用也将最大程度还原真实的直播互动场景,让作为观众的我们感受到更低延时更强互动的直播体验。

最后,我还是强烈推荐大家关注下腾讯云的快直播,亲身体验一下这款产品的唯”快“不破:

848b2d1e1edb73bf67ad359920966016.png

想了解快直播底层技术的同学,可以下载《超低延时直播白皮书》看一看,有不少干货。

3b706500c7f6c184aa2cea89f95cbad1.png

内容概要:本文围绕列车-轨道-桥梁交互仿真研究,基于Matlab平台构建数值模型,系统分析列车运行过程中轨道与桥梁结构间的动态相互作用机制。研究涵盖多体动力学建模、耦合系统运动方程求解、边界条件设定及仿真结果可视化等关键环节,重点揭示高速行车条件下基础设施的振动传递规律与力学响应特征。该仿真方法可有效评估结构安全性、舒适性指标及疲劳寿命,为轨道交通工程的设计优化与运维管理提供理论支撑和技术路径。文中配套提供了完整的Matlab代码实现方案及操作说明,便于用户复现、验证和拓展相关研究。; 适合人群:具备Matlab编程基础和结构动力学、车辆动力学等相关专业知识的研究生、科研人员及从事铁路工程、桥梁工程与交通系统安全评估的工程技术人才,尤其适合开展轨道交通耦合振动课题的研究者。; 使用场景及目标:①用于高校与科研机构进行列车-轨道-桥梁耦合系统动力学特性的教学演示与科学研究;②支撑高速铁路桥梁的设计优化、运营安全性评估与减振降噪方案验证;③为复杂交通基础设施的多物理场耦合仿真提供建模思路与代码参考。; 阅读建议:建议读者结合所提供的Matlab代码逐模块深入研读,重点关注系统建模假设、质量-刚度-阻尼矩阵构建方法及数值积分算法的实现细节,同时可通过调整参数进行敏感性分析,进一步掌握仿真模型的适用范围与优化方向。
内容概要:本文系统研究了非线性薛定谔方程的物理信息神经网络(PINN)求解方法,提出一种将物理规律嵌入深度学习模型的科学计算新范式。通过构建全连接神经网络架构,将非线性薛定谔方程及其初始/边界条件作为损失函数的核心组成部分,实现了在无须大量标注数据的前提下对复值偏微分方程的高精度数值求解。该方法充分利用自动微分技术精确计算方程残差,有效融合了数据驱动与模型驱动的优势,在光学孤子传播、量子系统演化等典型场景中展现出优异的逼近能力与泛化性能。文中配套提供了完整的Python实现代码,涵盖网络搭建、损失定义、训练优化与结果可视化全流程。; 适合人群:具备Python编程能力与深度学习基础知识,熟悉偏微分方程理论及科学计算的理工科研究生、科研人员,以及从事光学、量子物理、流体力学等领域建模与仿真的工程技术人员。; 使用场景及目标:① 掌握PINN方法的基本原理与实现技巧;② 学习如何将复杂物理方程转化为可训练的神经网络损失项;③ 应用于非线性光学、玻色-爱因斯坦凝聚、水波动力学等问题的仿真与预测;④ 为相关科研课题提供可复现的算法原型与代码参考。; 阅读建议:建议读者结合所提供的Python代码进行动手实践,重点理解神经网络对微分算子的近似机制、损失函数的多任务加权策略以及训练过程中的超参数调优方法,进而可迁移至其他非线性偏微分方程的求解任务,拓展其在交叉学科中的应用边界。
源码下载地址: https://pan.quark.cn/s/a4b39357ea24 微软推出的【AZ-900微软认证】是一项针对初学者的基础级云服务资格认证,其目的在于帮助学习者掌握云概念、微软Azure服务的运作机制以及云解决方案的核心知识。获得这一认证后,考生将能够清晰地理解云计算领域的基础术语、服务模式(包括IaaS、PaaS、SaaS等)以及这些服务在Azure平台上的实际应用方式。 在【必过考题】部分,我们可以观察到两个重点议题,它们分别聚焦于PaaS(平台即服务)的概念阐释和云成本的计算方式。 在第一个议题中,考生被要求辨别关于PaaS的正确性描述。PaaS平台提供了一个开发环境,但并不允许用户直接访问操作系统(Box 1: No)。比如,Azure Web Apps服务可以用来部署web应用,但用户无法直接管理虚拟机或IIS系统。另一方面,PaaS确实具备自动扩展的功能(Box 2: Yes),这表示可以根据实际需求自动增加负载均衡的虚拟机以支持web应用的运行。PaaS框架还为开发人员提供了构建和调整云端应用的工具,预置的应用组件能够有效缩短新应用的编程周期(Box 3: Yes)。 第二个议题同样关注云计算理念的理解,尤其强调IT支出从资本性支出(CapEx)向运营性支出(OpEx)的转型思想。传统的IT投资通常被视为CapEx,而云计算的按需付费机制使企业能够将这部分开支转化为OpEx,从而在财务规划上获得更大的自由度。 在为AZ-900考试做准备时,考生需要特别关注以下几个核心知识点: 1. **云服务模式**:深入理解IaaS(基础设施即服务)、PaaS和SaaS(软件即服务)之间的差异及其各自的应用情境。 2. **Azure服务*...
源码下载地址: https://pan.quark.cn/s/239a0d536a1e 依据所提供的文件资料,可以归纳出以下核心内容:由清华大学计算机系邓俊辉教授精心编纂的算法训练营题目合集,对于CSP(中国软件专业人才设计与创业大赛)及PAT(程序设计能力测试)这类编程竞赛具有极高的参考价值,堪称一份极具价值的参考资料。此类竞赛普遍对参赛者的算法功底和编程技巧提出严苛要求。该合集中的题目与算法领域紧密相连,其中包含了“最大红矩形”这一典型题目。所谓最大红矩形题目,其核心任务是针对一个由红色与绿色方格构成的棋盘,寻觅出最大的纯红矩形区域。要攻克这一问题,必须运用数据结构与算法的相关知识,特别是栈这一数据结构的应用。 “最大红矩形”问题能够被抽象转化为“直方图最大面积”问题。具体转化方法是将棋盘的每一列视为一个独立的直方图单元,其中红色方格的贡献体现为当前位置与前一个绿色方格所在行数的差值,从而保证每个直方图的基宽恒定为1。随后,借助扫描直方图的技术手段来探寻最大矩形面积。这一过程需要对每个直方图进行系统性遍历,并利用栈来记录各直方图的下标信息。一旦检测到当前直方图的高度小于栈顶元素所记录的高度,则意味着遭遇了一个“高点”,此时需计算以该“高点”为右边界条件的最大矩形面积。 在编程实践环节,必须高度关注栈的操作细节,以及如何精确地初始化和操纵栈来应对直方图问题。代码实现中,通常配置两个栈,一个用于储存直方图的高度值,另一个用于标记直方图的下标位置。当面对新高度时,需审慎判断当前高度与栈顶高度的相对关系,并据此抉择是执行入栈操作还是计算面积。针对“低点”(即当前高度小于栈顶),应直接将当前高度纳入栈中;而对于“高点”,则需执行弹出栈顶元素的操作,并基于该栈顶元素的高...
源码链接: https://pan.quark.cn/s/3af847fbbec7 在计算机科学与编程领域中,十六进制(Hexadecimal)以及二进制(Binary)是两种关键性的数值表示方法。十六进制属于一种基于16的计数系统,它运用0至9的数字以及字母A至F(分别象征10至15的数值)来呈现数值,与此同时,二进制则是一种基于2的计数系统,仅采用0和1两个符号。掌握这两种进制之间的相互转换对于深入理解计算机内部运作机制具有决定性意义,因为计算机在底层数据的存储与处理环节通常都是以二进制的形式来进行的。将十六进制转换成二进制的过程可以通过以下几个环节得以完成: 1. **单个十六进制符号的转换**:每一个十六进制符号对应着4位二进制序列。具体而言: - 十六进制中的`0`在二进制表达为`0000` - 十六进制中的`1`在二进制表达为`0001` - 十六进制中的`2`在二进制表达为`0010` - 依此类推 - 十六进制中的`9`在二进制表达为`1001` - 十六进制中的`A`或`a`在二进制表达为`1010` - 十六进制中的`B`或`b`在二进制表达为`1011` - 十六进制中的`C`或`c`在二进制表达为`1100` - 十六进制中的`D`或`d`在二进制表达为`1101` - 十六进制中的`E`或`e`在二进制表达为`1110` - 十六进制中的`F`或`f`在二进制表达为`1111` 2. **多位十六进制符号的转换**:针对一个由多个十六进制符号组成的数值,我们可以逐个符号进行转换,并将得到的二进制序列依次拼接。例如,十六进制数`3F`转换成二进制形式为`00111111`。 3. **编程实现方法**:在编程实践过程中,众多编程语言提...
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值