原标题:英伟达流媒体服务AR SDK开放公测实时3D追踪人脸,创建AR效果
(映维网 2020年04月27日)NVIDIA AR SDK为直播、视频会议和游戏开辟了创造性的新选择这个SDK允许开发者使用标准的网络摄像頭对人脸进行实时3D追踪,并创建各种有趣的的增强现实效果如为人脸叠加3D数字内容或为背景添加沉浸式效果。
NVIDIA AR SDK正以公测版本向社区开放并支持多项用例:
- 追踪摄像头视图的人脸,并识别图像中的一个或多个主体
- 将数字asset叠加于个人,如服饰和效果
- 通过脸部和头部运动控制动画角色或游戏角色。
NVIDIA AR SDK利用了NVIDIA RTX显卡的Tensor内核可通过AI网络实现快速和高质量的追踪性能。所述网络可以提供精确的人脸追踪;人脸形状、嘴唇、眼睛、眉毛和鼻子的三自由度五官追踪;以及六自由度的先进人脸网格(人脸和头部姿态的3D重建)
例如,用于OBS直播软件的热门插件StreamFX发布了一个全新的版本其利用NVIDIA AR SDK创建了一个可以自动裁剪和放大用户、并且在用户移动时保持帧居中的智能camera。