文摘
常见的直播联赛主要采用流媒体数据块的块的设计。流数据的二次加工是在服务器端执行。它导致更高的延迟在直播。较高的延迟在广播对延迟敏感应用程序有许多缺点。我们必须在直播解决延迟问题。因此,在这篇文章中,我们优化网球职业联赛的同步直播基于无线网络规划。方案,首先构造3 d检测目标模型,并从移动背景提取视频图像。提取使用消除帧间差分算法,执行和目标运动轨迹预测。然后的相位差特征图像前景轨迹进行了分析通过希尔伯特变换来检测目标缺失点。通过观察目标的顶点结构缺失点,傅里叶变换的相位构造框架。 Finally, the synchronization of the league live broadcast is encoded and decoded. Based on the timestamp, the synchronization optimization of the tennis professional league live broadcast is completed. The experimental results show that the synchronization optimization method has good synchronization, high resolution, short reaction time, and good detection effect.
1。介绍
随着科学技术的发展,知识积累的运营商和通信平台在现代社会变得越来越丰富。在现代社会,作为一个互动平台,高效、实时和广泛的传播范围,互联网已经逐渐成为促进经济发展和社会进步的重要力量经过40多年的快速发展(1]。作为媒介的丰富信息,直播是一种特殊的网络环境下衍生形式。由于其出色的网络适应性,给予更多的关注和网络应用程序中起着重要的作用和社会生活(2]。如今,职业联赛的直播流媒体技术的发展成为一个重要的应用领域。它已成为体育赛事不可或缺的一部分,因为它内容丰富和方便的获取信息3]。
目前,主要方法事件并不仅限于电视直播,直播现场文本图片,网络生活,工作室采访类别。在这些直播中,职业网球联赛直播最直观和清晰的视觉效果。电视直播配有非常专业评论员,为运动爱好者提供了一个有效的方法来理解事件和运动员。因此,它是非常受欢迎的体育观众。参考(4)提出了一个mini-league视角的影响英超在丹麦广播受众需求。多年来,广泛研究了足球直播节目对受众需求的影响在欧洲。然而,几乎没有实现在小联盟。本文有助于填补这一空缺采用一个健壮的面板数据回归模型在丹麦为2010/11到2015/16的水平。发现游戏在冲突与英超广播不影响观众。天气是一个重要的驱动程序的需求。参考(5)使用的影响视觉训练排球运动员的运动技能。它简单的认知训练的影响评估与体育运动有关的技能。峰值性能得到了改进后培训这样一个任务目标时显示峰值之前执行但不是当目标在执行期间表示。视觉任务训练一个月后,峰保留在一定程度上改善。基于上述研究,优化网球职业联赛广播同步提出了基于无线网络的规划。与中国国内经济水平的快速提高,人们对物质文化的追求和精神普遍改善。在各种各样的娱乐节目的公共生活,导致审美疲劳,体育赛事已经成为另一个主要的精神支柱,有更多的关注。网球职业联赛转播给公众带来娱乐和刺激,可以带一些其他的重要的作用。由于竞技体育的重要作用和公众的精神需求,我国越来越多的关注现场直播的体育活动;直播的水平是越来越高; and the accumulated live experience is more and more abundant.
剩下的纸是组织如下。节2、优化方法进行了讨论。节3、稳定和同步机制阐述了,紧随其后的是实验结果和讨论部分4。最后,部分5总结了论文,并提供未来的研究方向。
2。失去点特性的优化方法在网球职业联赛直播视频
本节讨论目标缺失点检测模型,目标缺失点检测方法,目标缺失点的特征优化方法。
2.1。目标缺失点检测模型
图1描述了网球职业联赛直播视频目标缺失点检测模型。模型是建立在三维坐标系。相机是用来收集网球运动员的运动图像。图像是平行的x- - -y设在和垂直于z设在。的z设在平面图像的最高点之间的距离和三维坐标系统的起源f。如果(x, y, z)作为三维图像的坐标点,(x,y)代表图像的坐标点上z设在平面,代表图像的三维矩阵点。
模型检测缺失点网球职业联赛直播视频对象的提取背景的网球运动员的体育形象。它预测的轨迹,然后进行实时跟踪,并删除背景留下前台包含目标(即,网球运动)。它还检测到目标的缺失点的情况。基于无线网络规划的过程一般分为三个阶段:初步准备计划的网球职业联赛的生活广播、网球职业联赛直播的前期规划和详细规划的网球职业联赛直播(6,7]。网球职业联赛转播pre-preparation阶段需要完成的分析规划的需要,用户的商业模式,建立无线电模型修正。网球职业联赛现场前期规划阶段的主要覆盖需要完成无线网络的估计,能力的估计,和场地规划。网球职业联赛转播的详细规划阶段主要完成覆盖规划、容量仿真和参数规划。它评估无线网络规划的总体性能通过无线网络系统仿真(8]。图2显示了仪表模型工作流。
如图2网球职业联赛直播视频的目标缺失点检测模型进行不同的功能,例如,纹理提取帧价值判断和匹配和运动轨迹预测先后处理的图像的背景。进行纹理提取图像中根据不同的颜色和形状(9]。价值判断帧和匹配需要获得背景图像中相邻帧之间的相似性。根据相似性水平,图像分为不同的帧块形成frame-block矩阵 。frame-block矩阵映射到平面的(x,y)和映射点(0,0,f)。首先,运动目标检测模型的位移和角度都假定为线性的。frame-block矩阵之间的关系和三维移动图像矩阵如下:
让frame-block映射矩阵的坐标点z设在平面( )。的和值可以得到的正交投影方程(1)。函数表达式如下:
在哪里一个1,一个2,一个3,一个4,一个5,一个6轨迹预测参数。
frame-block映射矩阵的最优解轨迹预测目标缺失点职业网球联赛的直播视频。因此,它是非常重要的解决轨迹准确预测参数。目标缺失点的检测方法提出职业网球联赛的直播视频使用frame-block匹配算法解决轨迹预测参数(10]。让frame-block矩阵序列k,k帧块匹配的范围内移动的图像矩阵。向量的匹配结果x- - -y设在的检测模型Uk和Vk分别的平面坐标frame-block由的中心点 如下:
通过计算 ,轨迹预测参数。
2.2。目标缺失点检测方法
移动图像的前景后获得的检测模型和去噪,该目标缺失点检测方法用于生活职业网球联赛的视频。它执行前景帧上的希尔伯特变换获得目标缺失点信号(11]。它实现了目标缺失点检测职业网球联赛的直播视频通过限制相区别。本文目标的缺失点信号包括网球的轨迹 点改变了希尔伯特变换。表达的结果R(t)如下。
在哪里t目标的缺失点信号设置,共轭的对数吗R(t),的对数t。通过分析信号R (t)目标丧失的时候,我们可以得到以下结果:
在哪里和代表了实时目标损失点信号的振幅和相位,分别。函数表达式如下:
假设初始阶段的目标缺失点信号 。在这种情况下,信号频率设置为问0,的采集频率检测模型问年代。有米一个网球周期中采样点; 。如果相位差的采样点之间的轨迹M / 2和M / 2+1不小于 ,采样值将会丢失,需要优化。
2.3。功能优化目标缺失点的方法
2.3.1。介绍优化方法的损失在网球职业联赛视频直播(1)当目标缺失的顶点点礼物 (的帧数的缺失点)线性结构,只能改变,目标缺失点局部稳定(12]。如果在前一节中检测结果表明,目标缺失点的时间 ,让前进不变矩阵是 ,列的帧点在哪里是和 ;线性变化的如下: 在哪里B优化参数,d1允许的最大优化误差的方法。目标缺失点优化的大小是确定优化参数 。的矩阵形式 是用来表达方程(7),这是进一步重写 形成促进理解和计算, , 。 和由最小二乘法预测如下: 在哪里代表弗罗贝尼乌斯规范,这是源自于希尔伯特变换。它的特点是简单计算和遵守法律的算术计算。方程(8分裂后)可以写成如下的每个坐标轴检测模型: 在哪里 , ,和代表的映射矩阵在每个坐标轴的检测模型。在e时间,目标的最优值损失点职业网球联赛的直播视频的方法 。(2)当目标缺失的顶点点没有局部稳定性,优化参数的误差B通过最小二乘法不满足的要求d1。在这个时候,所有线性相关的框架集的目标缺失点应该被发现和用米,非线性框架集l=决定物价,=axn。的参数一个由最小二乘法预测,预测方法是一样的吗B。目标缺失点的最优值。的优化价值目标缺失点了网球运动的前景图像。然后恢复图像的背景;整个运动图像滤波后得到。
3所示。稳定的同步性职业网球联赛的直播视频
在本节中,我们阐述了各方面稳定和同步操作的视频。
3.1。傅里叶变换相架
生活有一些抖动和噪音网球职业联赛比赛视频被移动高空摄像机。因此,使用稳定的框架稳定职业网球联赛直播视频为后续同步优化提供了基础。视频稳定包括以下步骤:(1)功能检测和匹配:快速角点检测算法找到要点视频帧的职业网球联赛。快速角点检测算法是一个时间,节约内存计算方法稳定的视频功能(13]。然后,快速视网膜在关键点提取关键描述符,以及每一帧中的要点与相应的关键点在下一帧。(2)单应性评估:特征匹配后,执行单应性估计两个对应点之间的帧。单应性变换,八参数编码估计翻译,旋转,缩放,倾斜和视角转换。设置点在坐标系,作为一个点在坐标系B,估计的单应性矩阵;它们之间的关系表示如下: 矩阵表示如下: 在哪里年代缩放因子,一个和b是倾斜的因素,和旋转因素,和是翻译的因素,和是角转换因素。(3)参数平滑:单例转换获得的上述步骤描述了相机运动在第一帧,可以获得相对于第一帧累积变换。随后,Savitzky-Golay平滑滤波器应用于光滑的运动参数(14]。Savitzky-Golay过滤器是一个数据集,在连续处理2米1数据点,及其拟合多项式如下: 最小均方误差 。的系数多项式可以通过最小化均方误差。然后安装曲线的值在数据窗口的中心作为过滤值。第一个中央点 。然后,宽度的2 m + 1,窗口移动,重复装配过程顺利的所有数据。最后,过滤后的序列是获得。(4)框架弯曲:最后,计算运动参数是弯曲成每一帧得到一个稳定的职业网球联赛的生活视频。
一旦一个稳定的职业网球比赛视频直播,可以从这些帧中提取的球形特性。选择以下两个功能:①黄色面强度特点:因为网球的颜色是黄色绿色,黄色的飞机上看起来是白色的黄色的对象。为此,可以使用这个颜色提示段框架的范围(15]。在这一步中,这三个颜色的飞机从图像中提取。创建一个矩阵代表黄色强度根据以下方程。一个阈值被设置为球面与背景分离。图1显示了一个示例提取一个黄色的飞机。 在哪里Y代表了黄色的平面上r,克,和b代表红、绿、蓝的飞机。如图3,黄色全彩视频帧的网球职业网球联赛看起来白的黄的飞机。发现,当阈值是11日,网球可以分开的黄色的飞机,和网球看起来就像一个明亮的物体。②阶段四元数傅里叶变换(PQFT)特点:每个像素的图像表示为四元数,也就是说,RG颜色通道,通过颜色通道,通道,强度和运动通道。突出区域的位置是通过使用傅里叶变换的相位谱。图4显示了一个阶段的显著图的傅里叶变换。最突出的对象是网球。因此,计算的突出图像帧后,球很容易分割。在这里设置一个阈值为0.5删除背景像素小于0.5。
(一)
(b)
(c)
(一)
(b)
(c)
3.2。编解码器处理流程
摘要FFmpeg libavcodec, libavformat图书馆,主要用于解码网球职业联赛直播视频。首先,视频源设备收集网球职业联赛通过摄像头实时视频信息和声音传感器模块,然后通过FFmpeg编码和压缩,然后包,也就是说,将一个连续和连续的数据流划分为小段,称为“包。”后的视频和音频流包装,包的头部添加在每个包有区别的。分和DTS应该印在包的头,分在哪里显示时间戳,DTS解码的时间戳。和数据传输的玩家通过网络回放。解码过程如下:通过TCP协议在网络媒体流读出分离并通过FFmpeg解码。最后,原始视频数据YUV和PCM音频数据。终于播放的视频。网球职业联赛直播视频数据采集和回放过程如图5。
摘要H264算法用于图像和AAC算法用于音频。数据流必须通读建立TCP连接;图像和音频数据必须分开的视频流。它存储图像和音频数据在各自分离缓冲队列。每个连接其独立处理线程开始,从队列中读取数据帧,并解码。然后根据时间节点,图像发送到显卡,声卡的音频发送给显示和播放。音频和视频帧的DTS和分可以获得通过调用图像和音频解码库函数。网球职业联赛直播视频的同步算法设计本文主要取决于DTS和分。
3.3。基于实时视频同步算法网球职业联赛
在手机方面,网球职业联赛直播视频解码到缓冲区。间的同步控制进行缓冲区和控制程序的网球职业联赛直播视频播放设备。本文使用一个采样率为44100 Hz。因为音频采样率是固定的,但是视频采样率是不固定的,所以音频采样率的基准。
主要音频、视频和音频同步使用固定音频采样率的特点。首先,音频的基本参考时钟同步是通过使用库函数。调用这个函数来解码图像和DTS解码期间将存储在相应的变量。DTS决定当图像解码,解码当前视频帧率平均基于音频的视频帧每秒的时间间隔。假设有一个错误,比如视频是早于音频。在这种情况下,平均帧速率降低,如果视频比音频后,平均帧速率增加,从而控制住网球职业联赛的同步视频,消磨时间。
当我们得到分职业网球联赛的直播视频帧的价值,我们可以知道时间显示帧。视频帧的帧率设置为当前时间应该固定,和视频的回放开始时间的计算框架所示如下方程:
在哪里P(我)的开始时间播放,PTS是显示时间戳,R“大酒店”帧速率。
然而,在大多数情况下,帧速率是不固定的,动态预测是用来解决帧速率。下一帧的开始时间是开始预测估计当前帧与前一帧的时间戳。帧率的倒数时间差异,和下一个帧的帧速率是动态更新的帧速率。的过程,计算下一帧的开始时间显示在以下方程:
在哪里 表示对应的时间戳值, 代表帧速率,不同的行代表帧不同的序列号。首先,当前帧的显示时间与前一帧的不同。显示下一帧的时间戳等于乘以区别与下一帧。
为了实时视频和音频同步的职业网球联赛,首先,设置刷新函数刷新视频并设置一个关键帧刷新下一帧,也就是说,Rgh设置刷新间隔。当前帧刷新后,有必要继续计算新的刷新间隔。函数get_clock()用于播放时间,也就是说,参考时钟的时间。函数get_audio_time()用于当前音频的播放时间,也就是说,把获得的样本数量的数据包解码回放时间当前音频的采样率,并将它添加到参考时钟得到当前音频的播放时间。同时,分计算视频帧的职业网球联盟使用。我们可以得到实时(nonpredicted)当前帧的开始时间。得到当前帧的延迟到达时间减去两倍的时间。如果延迟时间是积极的,这意味着当前帧是早期的,也就是说,它提前刷新当前帧。如果是负数,这意味着当前帧是早期,接下来刷新延迟值将会增加。如果晚了,下一个刷新延迟值将减少。 The following formula can be used to update the refresh delay of the refresh function:
在哪里T下一帧的表现时间,预计通过当前帧的显示时间和前一帧的显示时间。它表明了多长时间在当前参考时钟,它需要被刷新。它表明当前帧应该推迟多长时间刷新。的R时间应该推迟多久下一帧刷新。显示前一帧后,需要重新计算并更新刷新时间。因为网络传输速率限制移动直播系统,代码和帧速率是有限的。刷新时间应设置66毫秒到110毫秒之间。9至15帧每秒,它设置为100毫秒,等于0.1秒,也就是说,接近10帧每秒,完成同步优化网球职业联赛直播基于无线网络规划。
4所示。实验分析
网球是一个世界性的体育赛事。大多数的网球比赛直播职业联赛的外交事件。为了验证优化的效果和可行性的同步性网球职业联赛转播无线网络规划的基础上,进行了实验。为了使实验数据更加合理,选择的对象都是经验不足或缺乏经验的新手玩家。完全没有经验的网球选手分为第二组,和其他人分为第一组。
这个实验的主要目的是分析的有效性提出了基于无线网络规划优化方法,包括解决能力,反应时间,和优化措施。因为优化措施的有效性的定义是模糊的,实验描述了优化措施的有效性通过分析跟踪优化前后的相位差。的解决目标缺失点分辨率精度所取代。分辨率和反应时间也间接地表达方法的检测效果。
实验进行了三次。这种方法的实验方法,文献[4)方法和文献[5)方法和实验结果进行了总结和分析。E-PRIME 2.0软件用于收集数据网球运动员的运动行为。是一种软件,它依赖于心理学原理将体育行为的信息。精度高,可以构建复杂的实验项目在很短的时间内。它可以收集1 d文本数据和2 d和3 d同时多媒体数据(10]。该软件用于收集和分析收集到的数据进行SPSS 22.0。
评论员理解英语的数据所示在比赛中裁判的声音,在电视上直播。在最后阶段,评论员翻译期间采访运动员颁奖。因此,作为一个优秀的网球电视评论员在我们国家,我们必须有一些外国语言翻译能力。有两种模式的人员组成网球电视评论:双人和单人评论模式。大满贯决赛赛事直播央视中央5频道从2012年到2015年是如表所示1。
从表可以看出1,有九个双人的评论和七个单人评论的2012 - 2015赛季大满贯。二人评论的形式主要是评论员的客人。徐老板张生Chang通可馨和张圣评论员。大多数评论家的网球爱好者或退役运动员熟悉网球规则和具有多年经验的电视广播或主管沟通。单评论模式只是评论员的形式。在评论中,扮演的角色和任务,实时同步更好。
基于统计和分析,SPSS 22.0软件从网球运动员的行为数据分析结果中描述表1。表2总结了网球运动员的决议和反应时间下目标缺失点功能优化的方法,文献[4)方法,文献[5)方法。
表中的数据1可以了解分析三种方法的检测效果在目标丢失的网球运动员。网球运动员的一些经验比,没有经验,但并没有很大的差别。结果表明,这三种方法可以提高网球运动员的综合素质,其中本文方法的分辨率精度是最高的;反应时间最短;和检测效果是最好的。
因为两组之间没有显著差异的网球运动员,网球选手中只有第一组是测试分析优化措施的有效性。图6(一)显示了相位差的轨迹优化之前丢失的目标在一个网球职业联赛直播视频。图6 (b)是比较相位差的优化轨迹。
(一)
(b)
我们知道跟踪的相位差反映在网球运动员已经逐渐稳定分析结果。滴点的面积较小,证明了该方法显示最佳优化效果和最有效的。
5。结论和前景
在本节中,我们讨论的结论和研究的前景。
5.1。结论
(1)网球联赛直播的基于无线网络规划、同步结果优于现有方法。(2)优化分辨率的准确率直播同步的专业网球联赛较高。反应时间更小,检测效果快速和高效。(3)直播同步的优化效果的基于无线网络规划的职业网球联赛比现有的最好和最有效的方法。
5.2。前景
尽管取得了一些更好的结果在这篇文章中,有改进的空间由于直播系统的复杂性和一些其他因素。(1)领域的移动流媒体,必须有一个最小延迟直播系统通过动态降低帧率和图像质量的实时流媒体在无线网络。(2)生活的功能服务器的职业网球联赛仍然需要丰富。可以通过优化实时音频和视频数据的切片功能,现场服务器的分布式部署,和负载平衡集群。(3)在当今日益严重的网络和信息安全,有必要对职业网球联赛的生活广播加密数据。同时,多种安全保护、系统漏洞进行调查。
数据可用性
和/或使用的数据集分析在当前研究可从相应的作者以合理的要求。
信息披露
论文是一个关键项目的一部分2020年湖北教育科学规划:一个实证研究教学方法和提高网球教学质量在湖北大学(没有。2020 ga079)。
的利益冲突
作者宣称没有利益冲突。