实时动画偶像SDK
实时动画偶像(Real-time anime idol)是AR人脸效果的高级组合,能够实时检测和跟踪人脸。以真实人脸为基础,叠加2.5D动画人脸素材,让用户实时模拟和装扮动画图像。该能力应用范围广,可应用于短视频、直播、社交网络等场景,为用户带来更有趣的互动体验
功能介绍
1、实时人脸检测与跟踪
基于人脸检测和人脸关键点的算法模型,在人脸进入镜像后,能够准确识别人脸并实时跟踪人脸的面部特征关键点,从而实现对用户人脸上动画人脸的精确识别和跟踪
2、贴合真实脸型五官
基于用户的真实面部,对用户的脸型和面部特征进行精细的动物化调整,如削下巴、扩眼等,使最终的动画图像不仅具有用户自身的特点,而且具有动画图像的特征
3、面部表情动作驱动
基于人脸190个关键点,对动画人脸的皮肤和人脸材料进行放置和拟合。因此,当用户做出面部表情或旋转头部角度时,动画人脸的面部特征可以很好地跟踪用户的真实面部
应用场景
1、短视频
在短视频拍摄中,可以实时检测和跟踪动画人脸,并将真实人脸与动画图像叠加,进行角色扮演。同时,用户还可以驱动动画人脸做出各种逼真的动作,使短视频作品更具创意和趣味性
2、直播
主播可以用动画脸进行直播。动画图像的叠加遮挡可以起到很好的保护主播隐私的作用,使主播能够释放个人形象的桎梏,展现自己的才华和魅力
3、社交
在陌生的社交场景中,用户可以使用动画脸来保护肖像的隐私,让双方更加关注对方有趣的灵魂。同时,搞笑可爱的卡通形象,也可以进一步缩短双方的距离,给对方留下好印象
4、在线教育
在网络教育场景中,师生进行在线视频交流时,可以利用动画人脸进行图像包装,增加师生之间的互动乐趣,使教学方法更加生动有趣
5、表情包/头像
在聊天交流场景中,用户可以使用动画人脸生成有趣的二次表情包/头像,增加聊天乐趣,调节聊天氛围