技术赋能-混流编排功能,助力京东618直播重保 | 京东云技术团队

京东云开发者
• 阅读 478

每每到618、双11这样的大型活动的时候,每天都有几个重要的大v或者品牌直播需要保障。

以往的重点场次监播方式是这么造的:

对每路直播的源流、各档转码流分别起一个ffplay播放窗口,再手动调整尺寸在显示器桌面进行布局,排到一屏里来监播。

这样做的缺点:

  • 操作复杂,手动调整画面不美观

  • 不同的拉流时间点,起播时间有误差,画面无法协调一致

  • 当拉多路流的时候,带宽也受限制,基本上拉3-4个2m码率以上的流本机就会卡顿了,此时如果流有问题,就不能准确判断卡顿来源了,检查起来也比较费劲

展示方式是这样的:

ffplay 'rtmp://stream1' & ffplay 'rtmp://stream2' & ffplay 'rtmp://stream3' & ffplay 'rtmp:/stream4' & ffplay 'rtmp://stream5' & ffplay 'rtmp://stream6' & ffplay 'rtmp://stream7' & ffplay 'rtmp://stream8'

技术赋能-混流编排功能,助力京东618直播重保 | 京东云技术团队

技术赋能-混流编排功能,助力京东618直播重保 | 京东云技术团队

PS:这么多的窗口,点着是挺麻烦的😓

在我们混流生产层能力完备后,就开始琢磨怎么将它赋能在平常或者大促的直播间重保上,同时也为了更加专业、更高效的进行监播,经过了一段时间的打磨,提炼了一个简单的混流编排功能。

它的工作模式是这样的:

在这里你可以创建混流任务,并支持你在不断流的状态下做到更新任务输入信息。

将要监播的直播流地址,需要展示的文字内容、布局方式、混流输出的模板配置进行下发,就可以拉到自动编排好的直播流地址。

它现在长这个样子:

技术赋能-混流编排功能,助力京东618直播重保 | 京东云技术团队

技术赋能-混流编排功能,助力京东618直播重保 | 京东云技术团队

最终呈现出来的混流的效果是这样的😁:

技术赋能-混流编排功能,助力京东618直播重保 | 京东云技术团队

也可以是这样的:

技术赋能-混流编排功能,助力京东618直播重保 | 京东云技术团队

也可以呈现其他的布局方式,目前还没做的那么丰富,不过底层能力和api接口是都支持的,完全灵活布局。

在混流任务运行过程中,可以自由修改混流输入源的配置。

这种新型的监播方式,可以直观的区分源流、各档转码流的播放效果:画面内容是否正常,有无花屏、是否卡顿?

当出现问题时能够指导我们快速做出决策:

  • 转码流有问题,源没有问题,快速排查任务日志,定位是什么原因导致

  • 转码流有问题,源也有问题,迅速问题源流的流详细信息,定位问题并通知业务方进行操作

  • 主流都有问题,备流没问题,通知业务方迅速切备流

还有其他的一些有点:

  • 操作简单方便,还可以记忆配置,下次直接修改

  • 每个播放端只需拉一路流,节省本地带宽

  • 最多可以支持16路混流,一屏监播16路流的画面

  • 不断流,轻松切换各种布局

  • 不断流,随便操作流的添加、删除、修改

  • 方便分享给其他人进行播放

混流布局功能的底层实现框架:

技术赋能-混流编排功能,助力京东618直播重保 | 京东云技术团队

技术赋能-混流编排功能,助力京东618直播重保 | 京东云技术团队

  • 定义通用的layout布局结构-BasicClip
{
    ClipType string `json:"clipType"`
    LeftMargin int `json:"leftMargin"`
    PosX *int `json:"posX"`
    PosY *int `json:"posY"`
    Width int `json:"width"`
    Height int `json:"height"`
}

在此基础上扩展出更丰富的BorderClip, TextClip, ImageClip等类型,来满足不同的布局元素设计。

  • 定义通用的videoMask结构,它可以包含多个clip interface, 即各种clip元素,在videoMask中各个clip是同一个layer的,只允许在限定的尺寸中进行布局。
type VideoMask struct {
    Layer int `json:"layer"`
    Clips []interface{} `json:"clips"`
}
  • 每个输入的视频流,可以包含多个videoMask,多个videoMask在最终overlay的时候,按定义的layer先后顺序进行铺叠,以达到最终的预期视频布局效果。

应用场景拓展

  • 什么情况下使用混流?

◦当设备不支持同时拉多路流时使用混流,比如sip入会的场景。

◦需要多个视频画面、多个音频流合成一个直播流时使用混流,比如会议录制(rtc协议)场景、教育类场景(直播老师和学生的画面)、直播连麦的场景等。

总结:此次能在618重保期间发挥它的价值,也算是有所得。希望以后可以在日常直播、展会等其他重要直播活动中发挥作用。关于混流的产品介绍以及更多的使用场景也会在后续的文章中一一展开,敬请期待。

作者:京东科技 孟晓伟

来源:京东云开发者社区

点赞
收藏
评论区
推荐文章
Wesley13 Wesley13
3年前
PPDB:今晚老齐直播
【今晚老齐直播】今晚(本周三晚)20:0021:00小白开始“用”飞桨(https://www.oschina.net/action/visit/ad?id1185)由PPDE(飞桨(https://www.oschina.net/action/visit/ad?id1185)开发者专家计划)成员老齐,为深度学习小白指点迷津。
双十一预售活动分析
2022年双十一促销活动已经开始,大家应该都提前开始关注今年双十一活动的时间表了吧?2022年10月24日晚8:00天猫双11预售时间,第一波销售时间10月31日晚8:0,第二波销售时间11月10日晚8:00;天猫双11的优惠力度是跨店每满30050
Peter20 Peter20
3年前
mysql中like用法
like的通配符有两种%(百分号):代表零个、一个或者多个字符。\(下划线):代表一个数字或者字符。1\.name以"李"开头wherenamelike'李%'2\.name中包含"云",“云”可以在任何位置wherenamelike'%云%'3\.第二个和第三个字符是0的值wheresalarylike'\00%'4\
Wesley13 Wesley13
3年前
FLV文件格式
1.        FLV文件对齐方式FLV文件以大端对齐方式存放多字节整型。如存放数字无符号16位的数字300(0x012C),那么在FLV文件中存放的顺序是:|0x01|0x2C|。如果是无符号32位数字300(0x0000012C),那么在FLV文件中的存放顺序是:|0x00|0x00|0x00|0x01|0x2C。2.  
Wesley13 Wesley13
3年前
mysql设置时区
mysql设置时区mysql\_query("SETtime\_zone'8:00'")ordie('时区设置失败,请联系管理员!');中国在东8区所以加8方法二:selectcount(user\_id)asdevice,CONVERT\_TZ(FROM\_UNIXTIME(reg\_time),'08:00','0
Wesley13 Wesley13
3年前
Java日期时间API系列36
  十二时辰,古代劳动人民把一昼夜划分成十二个时段,每一个时段叫一个时辰。二十四小时和十二时辰对照表:时辰时间24时制子时深夜11:00凌晨01:0023:0001:00丑时上午01:00上午03:0001:0003:00寅时上午03:00上午0
Wesley13 Wesley13
3年前
MySQL部分从库上面因为大量的临时表tmp_table造成慢查询
背景描述Time:20190124T00:08:14.70572408:00User@Host:@Id:Schema:sentrymetaLast_errno:0Killed:0Query_time:0.315758Lock_
搜狗输入法双击输入框崩溃问题 | 京东云技术团队
每当到618、双11这样大促的时候,搜索作为整个App的核心功能,不仅担当着流量入口,还承载着用户感知到这个产品在导购场景中的服务与体验,所以保障搜索以便更好的助力618大卖。
直播预告 | 大模型时代 “应用变了”:看大模型如何跑进零售电商应用
走进零售电商,大模型能做什么?今年11.11,应用大模型带来成效显著今天下午2:00,京东云视频号准时直播看京东零售如何破题新解法,大小模型协同大模型将走向多模态,走向具身智能
京东云开发者 京东云开发者
5个月前
大模型再加速,保障京东618又便宜又好
在这背后,京东云作为京东618的技术基石,以技术创新降低数字基础设施成本,将大模型等智能技术贯穿业务全流程,实现自身和伙伴的降本增效,以真降本保障真低价。京东云言犀大模型助力京东618数字基础设施持续降本,混合多云操作系统云舰、分布式存储平台云海、软硬一体