产业资讯方案大厅机构大厅

爱奇艺

iQIYI

深度学习计算机视觉
http://iQIYI.COM

机构介绍

2010年4月22日正式上线,推崇品质、青春、时尚的品牌内涵如今已深入人心,网罗了全球广大的年轻用户群体,积极推动产品、技术、内容、营销等全方位创新。企业愿景是做一家以科技创新为驱动的伟大娱乐公司。于2018年3月29日在纳斯达克上市。

  • 在爱奇艺的整个运营流程中,AI积极的发挥着作用贯穿视频内容的创作、生产、理解、分发、播放到变现以及客服整个流程中。

    首先以智能生产环节为例。爱奇艺的内容主要来自三个部分,一部分是传统的采买,另外一部分是其自制剧,以及爱奇艺号等原创用户产生的一些内容。对于自制部分,爱奇艺采用AI打造了一个爱创媒资系统,这个系统主要是针对导演、制作人的创作痛点。内容创作者在后期制作的过程中往往会被一些非原创性的工作所影响,以至于没有办法集中精力,而且拍摄素材繁多,导致1~2个小时的综艺后期制作的时间往往要花上8~10天才能最终看到成片。

    通过使用身份识别、表情识别、镜头识别等AI技术,类似工作可缩短至数分钟,剪辑师可以很方便地从繁杂的素材中挑选精彩片段,效率提高20%-30%。比如,导演想要成百上千个小时的素材里找到吴亦凡生气的特写,AI可能只需要三步就能解决:第一是身份识别,找出吴亦凡;第二是表情识别,识别出生气的表情;第三是镜头识别,识别特写镜头。这样就能很快把导演想要的片段找出来。

    此外,拍摄片场里往往有几十个摄像机在同时拍摄,这样就会产生非常多路的素材,原来把这些素材按照自然时间精准对齐费时费力,但是有了AI技术可以把时间缩短到分钟级别。此外,爱奇艺还通过语音识别技术辅助字幕输出,大大提高了后期字幕制作的效率。今年的《青春有你》、《我是唱作人》等都已经落地了爱奇艺爱创媒资系统。除了辅助后期制作,爱奇艺提供的AI技术还可以按照模板自动利用精彩的素材生成优质的短视频内容,甚至可以通过分析BGM的节拍,按照节拍自动切换画面。

    爱奇艺还打造了智能视频增强解决方案——ZoomAI。ZoomAI主要是针对影视作品进行画质修复和增强:首先,利用超分辨率技术解决分辨率低的问题;其次,利用去噪锐化解决有背景噪声和压缩噪声的问题;色彩增强则可以解决色彩灰暗的问题;针对帧率低的问题可以通过插帧的手段解决;由于胶片损伤导致的视频上有很多的划痕的问题则可以通过去划痕技术来解决。

    在广告领域,爱奇艺也做了很多创新和探索,以减少片头广告对用户观看体验带来的不利影响。爱奇艺推出创可贴广告,通过AI识别视频里适合投放的广告点位。比如AI可以自动识别视频里的做饭场景,然后自动投放厨具品牌的广告;也可以通过AI识别明星身份,投放他的代言广告。

    除了创可贴广告之外,爱奇艺还在探索非常多的新的广告形式,比如前情提要的广告,以及在精彩高能、集数播报的一些点位进行广告投放。比如在足球比赛直播时,AI能够实时分析画面,把进球的点位找出来,然后进行相应的广告投放。这些新的形式可以大幅提升广告效果和用户的观看体验。

    在个性化领域,爱奇艺做的工作的也非常多,比如信息流推荐,比如搜索场景,比如短视频展示等等。为了能够真正实现个性化,爱奇艺除了采用综合模型,还会把用户的观看行为、互动模型和留存模型全部考虑进去。当然,不只是内容推荐可以千人千面,利用AI技术,爱奇艺还实现了电视或电影海报的千人千面。

    此外,还有蒙版弹幕技术,能够实现“弹幕穿人过,爱豆心中坐”;HomeAI语音交互平台,通过智能搜索、智能跳转与百科问答等功能激活线上与线下场景之间的互动;AI雷达功能,可以智能识别人物、音乐、物品,用户还能即时扫码解锁产品信息并可实现购买行为等等。

    不过技术不只是技术,也不只是为了商业,技术也是有温度的。为了帮助听障人士,爱奇艺推出了AI手语主播,利用语义理解技术来推出适合不同场景的虚拟手语主播。2018年11月,爱奇艺发布了适合娱乐场景的虚拟主播,今年爱奇艺将与华夏出版社、中国聋人协会和凤凰云祥等机构合作,研发适合严肃场景的新闻主播,并通过AI手语主播让中国2790万的听障人士感受到AI技术带来的创新娱乐与交互体验。


产品及解决方案

爱奇艺大型节目制作系统

计算机视觉深度学习文体娱乐

爱奇艺开发了基于AI技术的大型节目制作系统,爱创媒资系统,解决从封面生成、集锦制作、视频拆条到综艺后期剪辑、动图生成等多样视频编辑需求。爱奇艺在广告和互动应用植入、蒙版弹幕等业务场景也有所建树。其中蒙版弹幕使用了基于深度学习的语义分割技术,引入镜头类型识别算法,识别出当前帧的场景类型,在特写等镜头中生成人体掩码蒙版,避免弹幕覆盖到主题。

爱奇艺·更多解决方案

基于智能分发的边缘计算CDN系统

文体娱乐

当前各类边缘网络场景中普遍存在因带宽不足、时延过高等导致视频体验不佳的问题,归其原因在于区域热度内容未能分发到更接近用户的位置。为解决以上问题,爱奇艺独立设计一套基于智能分发推荐算法的边缘计算CDN系统--奇速播,在提供边缘计算与存储能力的同时,采用了AI智能预分发推荐算法,通过特指监督/非监督学习、深度学习、时间序列等机器学习方法预测内容热度,并利用空闲时间段(凌晨)带宽同步更多的热内容至奇速播节点,错开网络高峰值,减少了回源带宽,有效的降低了骨干网负载。

智能虚拟伙伴

推荐系统自然语言处理语音识别文体娱乐

奇鹿是国内首款儿童智能虚拟伙伴,儿童用户可以通过语音输入的方式在爱奇艺平台找到喜欢的动画片,用户点击无敌小鹿形象后,还能触发智能虚拟伙伴有趣的动作与对话,小鹿可以为小朋友讲述百科知识,如果小朋友听到感兴趣的知识,还可点击观看相关动画片。 奇鹿,运用语音识别技术,语义理解技术和语音合成技术,把虚拟 IP 变成了陪伴小朋友成长的伙伴,让 IP 价值最大化。

AI弹幕蒙版

深度学习计算机视觉深度残差网络文体娱乐