在备受关注的视频领域，百度增强现实技术部技术架构师马晓新从技术层面全面诠释了百度AR与百度智能云的强大结合，为短视频创作者提供云功能，并激发内容创造力。可能性是无止境。根据第三方数据，2018年短视频行业每月独立设备的数量将近7亿，短视频已逐渐成为一种常见的营销传播手段，也是普通百姓录制和分享的一种常规方式。可以说，在短视频时代，每个人都可以成为内容制作人。在短片制作方面，百度智能云构建了从基础架构，平台工具到数据传输的全套解决方案，其功能全面，包括交互式拍摄，智能编辑，转码和上传过程，为创建UGC / PGC内容创造了武器。百度的AR和智能云平台已完全集成。在拍摄阶段，它引入了丰富的增强现实特效功能，使创作者可以通过叠加的人机交互游戏来获得更大的想象力；对于平台开发人员，DuMix AR 5.0提供了覆盖范围硬件层，组合层，功能层，技术平台，内容平台和业务场景的多层开放式体系结构将帮助他们灵活扩展并极大地提高生产效率。短视频中AR技术的应用场景是什么？从最常见的美容滤镜到手势控制雨，身体游戏，环境风格变化等，百度增强现实技术部门的技术架构师马晓新结合了不同的游戏示例来分析DuMix AR的集成交互5.0面部和身体手势环境。技术解决方案。通常，在谈到人脸特效的能力时，人们经常担心能否准确定位150个2D关键点，覆盖骨骼的78个关键点以及能够输出3D人脸姿势。实际上，基于基本功能，我们为两个最“玩”的游戏提供了更准确的分析。确保应用层可以实现更多的游戏玩法；另外，我们还对面部进行了三角剖分，分为264个三角形；和5210三角面三维划分。基于此面部网格，可以进行各种2D / 3D粘贴，变形或其他扩展。我们还预设了32种面部表情库和15种表情语义，包括一些常见的表情，例如微笑，大笑，睁开眼睛和闭上眼睛。通过内置的19套成型参数，五种基本的美容妆，三维3D妆等更高级的功能，它可以满足开发人员针对脸部特效游戏的各种需求，例如美容妆和身体，微塑手术等等。人们面对实时的面部变化和个性化的美容需求，并且在处理复杂的情况（例如照明的剧烈变化，大角度跟踪和抖动遮挡）时表现出强大的稳定性和鲁棒性。手势特效预设了8种手势语义，包括21个关键点，可以恢复3D手掌姿势；人体特效提供了59个轮廓点/ 18个关节点两种输出方式，其中18个关节点识别速度，全部模型测试最多不超过6.7毫秒；人像分割达到IOU的高指数93.76％。从人体跟踪到物理世界跟踪，依靠低成本地图收集和在线融合跟踪解决方案，百度AR推出了VPAS视觉定位和增强服务。用户在打开时省去了扫描平面的步骤，并且体验路径更加平滑。 。开发人员可以在现实世界中构建更多雄心勃勃的虚拟场景。我们提供的实时渲染功能可以在普通手机上为260,000个大型场景实现30fps的帧速率。为了降低开发人员使用的障碍，百度的DuMix AR平台封装了集成的人机交互功能。灵活的体系结构可确保开发人员可以独立有效地扩展其功能和游戏玩法。此外，对于具有不同需求的短视频内容制作者，百度的DuMix AR特效开放平台还提供了两种不同的工具：具有创造技术能力的平台开发者可以使用工具插件来进行内容制作，也可以通过生态合作伙伴来使用。定制生产；单个开发人员可以使用平台开放式编辑器DuMix AR Studio和移动终端预览工具DuMix AR Cam进行开发和实时调试。创意制作工具专业版