阿里妹导读:随着 5G 开启商用、机器智能愈发成熟,在技术发展的新阶段,我们在文娱的体验上将会有怎样的提升?本文将通过十个场景来分享技术革新下智慧文娱的新玩法。
一 修复版《士兵突击》,帧享 60 帧的《重生》,你看了吗?
![](https://image.jiqizhixin.com/uploads/editor/96ec4f52-2b42-47b6-8857-5b82ace20048/640.png)
![](https://image.jiqizhixin.com/uploads/editor/19729ebd-b128-4c9b-9750-04e6eca38538/640.png)
二 用优酷追剧为什么不卡?
![](https://image.jiqizhixin.com/uploads/editor/e586e00f-009b-4b1f-81fd-d6d184dbea15/640.png)
第一, 国内用户对这一功能很陌生,甚至觉得比较“傻”;
第二, 用户评判“体验好”的标准比较主观,流畅和高清的平衡点难把握;
第三, 公开的算法框架的实际效果不理想。原因是特征纬度单薄,对实际细节考虑少。
第一,抓住算法框架的核心点,不要太在乎结构性,要看算法解决的核心问题的切入点,和你要解决的是不是一个问题,是不是能借鉴;
第二,与大数据有关的算法,一定要关注好数据集的质和量,结合自身业务,积累高质量的大量数据;
第三,算法效果的度量标准,结合业务场景来看,尤其是那些非标准化、不好量化的场景,避免生硬的套用已有标准,毕竟你才是对问题最了解的人;
第四,像 AB 测试、大数据 Pipeline 等工程系统能力,确实对产品技术的迭代效率提升是非常大的。
三 前方高能!基于人脸识别的跟随弹幕来了
![](https://image.jiqizhixin.com/uploads/editor/eba1ca63-6344-4fff-b125-b9dfd37005e9/640.png)
![](https://image.jiqizhixin.com/uploads/editor/d0e5bedc-0e58-4fcc-a1b2-d5fbd2f0a7c7/640.png)
![](https://image.jiqizhixin.com/uploads/editor/b72a5f0f-0e36-4448-a374-fce7d8e1ba85/640.png)
![](https://image.jiqizhixin.com/uploads/editor/5e56aefd-25f3-41aa-bc24-708cbfa7ef7e/640.png)
![](https://image.jiqizhixin.com/uploads/editor/62383be3-9211-44d8-845a-2f4d3abdfb14/640.png)
首先,算法侧按每秒 25 帧的频率进行视频抽帧,对每一帧进行人脸识别,配合人脸跟踪和平滑处理,生成每一帧的人脸元数据; 其次,服务端将多个帧的人脸元数据通过降噪、防抖、合并后组合成一组组的人脸组数据,将该数据与跟随弹幕数据一起下发给客户端; 最后,客户端在互动 SDK 中将每组人脸数据生成一个脚本,脚本中完成弹幕跟随该人脸轨迹的移动而移动。
四 让你自然美的实时直播美颜技术
![](https://image.jiqizhixin.com/uploads/editor/a41d2ccd-c9be-427a-9b05-010db828fbbc/640.png)
其中,脸部美型处理主要包括脸型调整和脸部器官调整,核心步骤是基于人脸关键点通过图像形变的形式来实现脸部各器官的形状调整。图像形变算法主要是局部扭曲算法和三角剖分,局部扭曲算法一般包括局部缩放、局部平移、局部旋转等,如大眼功能即可通过局部缩放来实现。三角剖分的方法则是通过对三角网顶点进行平移,再将平移后的顶点更新到对应的纹理坐标,通过 openGL 或者 D3D 进行绘制渲染,从而实现整个关联三角网的变形。具体的脸部美型效果如下图所示:
![](https://image.jiqizhixin.com/uploads/editor/9c09b166-c5a2-4883-bed9-aa5f43851341/640.png)
![](https://image.jiqizhixin.com/uploads/editor/e9226f33-af87-4ca5-872a-c1c4045bb76d/640.png)
五 优酷酷看体验:你猜老胡是卧底吗?
六 不知道看什么?多模态搜索来帮忙
![](https://image.jiqizhixin.com/uploads/editor/2e182ca1-0781-4e03-b7b1-ef26f5950481/640.png)
![](https://image.jiqizhixin.com/uploads/editor/449b4ba7-a0d3-4ce0-90bd-55e003db72bc/640.png)
七 视频物体分割:在视频中随意“抠图”
![](https://image.jiqizhixin.com/uploads/editor/d5541a60-0efe-47d4-9941-1da43f523fe0/640.png)
八 数据反映的是真实的观看体验吗?
![](https://image.jiqizhixin.com/uploads/editor/250b5bce-0ffb-450f-b4a9-caf2db72e792/640.png)
九 竖屏看热剧如何实现?
![](https://image.jiqizhixin.com/uploads/editor/488dc7e0-1150-4d36-b116-bdb892960e3c/640.png)
十 推荐如何又好又准?
![](https://image.jiqizhixin.com/uploads/editor/5f432e8c-61f6-4b33-bed9-1c49d39b819c/640.png)
![](https://image.jiqizhixin.com/uploads/editor/df4888a1-5271-493a-98ea-ccf7a6f45473/640.png)