7月4日,7000余位开发者齐聚北京,共同见证“Create 2018百度 AI 开发者大会”。会上不仅面向全球发布了百度大脑、智能小程序、DuerOS、Apollo 开放平台等最新进展;作为百度 AI 战略的重要一环,备受开发者和业界关注的百度 AR,也带来了全新的 DuMix AR 3.0版本。
DuMix AR 开放一周年
累计互动超十亿
自2017年7月正式开放以来,DuMix AR 平台协同开发者、行业合作伙伴生产多个场景内容,实现累计逾十亿次互动。随着 AR 技术的不断成熟,百度 AR 被应用于为越来越多的行业提供成熟的解决方案。
百度 AR 优化了视觉语义化能力,‘硬件+OS+算法’与移动智能终端的结合为用户带来卓越的使用体验;而 DuMix AR 3.0平台在交互能力方面的创新与开放,将为越来越多的 AR 开发者开启穿梭虚拟与现实的‘任意门’。
——百度视觉技术部、人脸技术部、增强现实技术部总监吴中勤
DuMix AR 3.0锋芒初试
全力赋能开发者
去年开放的 DuMix AR 平台以多维度资源输出,为开发者提供一站式 AR 解决方案,从技术上降低了 AR 开发门槛和成本,让即便没有 AR 相关专业知识的开发者也能快速上手。
而经过一年的实践总结,此次开放的 DuMix AR 3.0将升级为“技术+内容”双平台:技术开发者可以获得包括智能感知、虚实渲染、人机互动等创新技术能力和高效灵活的工程开发方式;而内容开发者将在平台之上实现从内容制作、管理到连接用户的完整通路。以更具针对性的高效能服务广纳更多开发者。
在7月5日的百度大脑论坛上,百度增强现实技术部高级经理李颖超详细拆解了全新的 DuMix AR 3.0:三大创新技术能力、四项集成方案和两大内容利器,赋能全球 AR 领域开发者与各行业的合作伙伴共建 AR 生态。
技术革新:三大创新能力全面开放
本次 DuMix AR 3.0 最具核心的亮点正是技术方面三大创新能力的全面开放:全新的人脸互动、肢体互动能力和更具兼容性的 SLAM 能力。
DuMix AR 3.0提供的最新人脸互动能力,基于三维姿态估计、人脸表情、人脸结构信息的精准识别,让人脸互动变得非常有趣;同时,DuMix AR 3.0支持人脸皮肤运动跟踪,能够精准捕捉人脸微表情的细微动作,从而实现特效与人脸皮肤的深度融合。
令人惊喜的是,从大会现场展示的视频样例来看,上述特性在不同环境光线、大角度和快速运动等极端条件下都表现出非常高的鲁棒性。
另一项值得关注的是 DuMix AR 3.0提供的肢体互动能力,突破性支持3D 关节点的识别,计算速度可达实时,大大拓展了肢体互动的应用空间;兼容性方面相当友好,支持苹果、安卓等主流移动硬件平台。
在此次发布的新平台中,作为移动 AR 基础能力的 SLAM 技术也有相当大提升。SLAM 技术在手机设备上的普及被认为是 AR 应用发展的关键,然而 ARKit 和 ARCore 等系统级解决方案非常依赖硬件升级,因此想要在移动终端,尤其是面对情况复杂的安卓设备,想要在系统层面建立统一化的行业标杆,情况并不乐观。
鉴于此,百度 AR 推出了跨平台、高覆盖、简单易用的应用级解决方案,不仅能够兼容 iOS 与 Android 平台,覆盖主流高中低端机型(甚至包括红米 Note 和 iPhone 5S 等存量设备),同时具备初始化快捷和交互简单的优势,其在常规场景中的表现与系统级解决方案几乎无差别。
有的放矢:划分四大集成方案
面对不同需求和层级的技术开发者,DuMix AR 3.0提供了 Easy 版、Pro 版、自由度级别最高的 Core 版,以及集成了 Unity DuMix 插件的 Unity 版本 AR SDK,四类方案相信可以满足不同开发者关于开发效率和灵活性的需求,在本次开发者大会之后,点击“阅读原文”登录百度 AR 官方网站即可抢先体验。
操作优化:发布两大内容利器
内容开放平台的上线对于长于内容制作的开发者来说无疑是重大利好。基于对生产效率的考虑,DuMix AR 3.0首次发布了 AR web 编辑器并开放百度 App-相机 AR 入口。
AR web 编辑器为开发者提供可视化的开发、调试功能和实时预览;联动手机编辑,所见即得。利用编辑器,开发者可以快速完成一个简单的 AR 场景创作,当然如果希望提升场景的丰富度和交互性,可以通过提供的扩展接口,可自行定制所需功能。让 AR 内容创作开发变得更加简单 、高效。
截至目前,DuMix AR 3.0内容开放平台已经建立起内容制作、管理、分发的完整服务流程。分发方面,此次百度 AR 也带来了另一大利器——全面开放百度 App-相机 AR 入口,可以借助相机入扫一扫进入 AR 互动,更加贴合用户的使用习惯、使用场景更加高频。
除此之外,百度 AR 已经与百度 App 所承载的多个产品入口实现了打通,包括本次会上重磅发布的小程序入口、Feed 入口、搜索 AR 入口以及百家号入口等,将帮助开发者更快速地连接千千万万的互联网用户。
尽管本次开发者大会上重点强调了全新平台在技术、内容方面的开放赋能,但作为百度 AI 生态扶持的重要部分,百度 AR 方面表示将面向 AR 合作伙伴、平台提供品牌、人才、客户、渠道、资金等一系列支持手段,开展广泛合作、多维度支持合作伙伴发展,共同促进国内 AR 生态的建立和成长。