虎牙实时释放黑色技术AI弹幕可以自动闪避肖像
浏览:127 时间:2022-11-16

今天,当我们观看电影,追逐电视剧和直播时,理发屏幕已成为大多数用户的习惯。传统的拦河坝实现了拦河坝和视频的分离。用户可以选择一个或两个,这是非常好的,以避免弹幕的混乱状态。然而,在直播,第二元素和许多其他场景中,用户更喜欢享受“看”,“说”等。没有压缩视频质量。

“(丹)”这个词来源于射击游戏,拦截网站也是由此衍生出来的。 Niconico视频网站是一个相对较早的网站,具有拦截功能。随后,拦截网站以其每个人都可以享受的共鸣,易于操作和重新创建的娱乐和对话权利而广受欢迎。

自动避免画像的抨击

最近,游戏直播平台Tiger Tooth发布了AI智能拦截功能,可以满足用户同时看到的需求。当用户在弹幕设置中选择此功能时,弹幕将自动避开纵向。换句话说,在直播期间,用户可以清楚地看到锚的整个面部和整个轮廓。

胡亚AI产品总监表示,在“大锚直播和电视剧”的场景中,总会出现高密度拦河坝的现象,高密度拦河坝将阻挡锚,对于那些想看的人来说锚点。用户是一种干扰,关闭弹幕使用户无法看到精彩的弹幕内容,无法与其他用户交互。为了改善这种状况,许多视频公司已经开发出各种手段,如简化弹幕,半屏显示和调整弹幕的透明度,但这些仍然不是完美的解决方案。

虎牙直播采用背景分割技术,可以更好地处理人与人的分离,实现智能拦截。这个功能已经在Huya娱乐类别中实现,并且在有效地分割主角和背景方面,Huya说这个功能将继续在游戏类别中进行探索。

AI智能拦截背后的技术

Huya人工智能技术负责人表示,AI智能拦截功能背后有两项核心技术,可以智能识别人像和人像面具的智能压缩。

智能识别实时肖像。实时动态肖像识别的技术原理是采用计算机图像分析,模型理论,人工智能和模式识别技术的非接触式高端模式识别技术,从复杂的图像场景中检测出特征面信息并进行匹配。 。确定了智能分析过程。

智能压缩人像面具。人工智能技术用于识别区域的“像素”掩模,并通过智能压缩技术将掩模压入视频流,然后观察者同步解压缩掩模和视频帧。框架逐个对应于蒙版,您可以知道画面在画面中的确切位置。

在采访中,Huya人工智能技术负责人还向我们介绍了AI智能拦截功能的特点:

1.处理拦河坝的传统方法是“离线”和“在云端”,唯一需要面对的是识别问题;虎牙是用于直播的实时处理;

2.有些网站使用类似PS的蒙版技术手动为特定视频添加蒙版以模糊弹幕;虎牙使用人工分离技术将物体与场景分开,因此弹幕是在人物背后和场景之前。 ;

3.与传统的直播屏幕相比,AI智能拦截器在不增加带宽的前提下,与视频流一起编码每帧的掩码。传统方法需要大量流量来支持视频点播中的拦截传输。

使用“黑色技术”&ndquo;创造最终的用户体验

当被问及识别,掩码压缩,帧和掩码通信等时,特别是在直播环境中,操作和维护方面不是很费力,也就是说,如何确保用户体验不受制于智能拦截功能。影响?

虎牙AI技术的负责人回答说,对AI体验的最大影响是计算量。在Tiger的牙齿中设计AI拦截功能时,考虑了计算能力有限的问题。因此,肖像识别和掩码编码被放置在锚端以进行实时计算,这不会影响用户体验。在用户侧,仅需要添加计算解码掩码和掩码掩码生成,并且计算量非常小。然而,当涉及到AI背景分割技术时,在游戏的直播中登陆的可能性仍有待研究。

目前,人工智能技术已经在生产,发行,消费和直播行业内容的商业实现等许多关键方面进行了尝试和落实。早期阶段的主要贡献是提高内容分发的效率。未来,它将进一步改变实况内容的生产方式,提高生产效率。 AI的核心技术包括语音识别,图像识别和自然语言处理。 Tiger的牙齿将进一步将这些技术扩展到现场视频的制作和发行。

直播行业已发展到现在,从“千人之战”到“大浪之沙”,再到“凶悍杀人”,现场平台签约主持人从未犹豫过。经过长时间的比赛,游戏直播市场格局逐渐趋于稳定,而AI智能拦截功能则是虎牙直播的锦上添花。