项目通过把多次定位变为一次定位的输入控制,机器反馈变为个性虚拟人表达的输出反馈,实现人体互动全链条技术闭环,让人机交互变得更简单、更直观,可有效解决元宇宙的底层技术需求。 技术优势: 1、全身肢体识别和控制:由相机获得34个全身关键点,实时生成3D人体控制约束逻辑; 2、手部3D关键点检测:由相机获得21个手部关键点,实时生成3D手掌控制约束逻辑,对手部进行识别跟踪; 3、脸部关键点:由摄像头获得476个3D人脸特征拓扑点,实时生成3D脸部控制逻辑,通过绑定约束的74个控制点,实现对脸部表情和唇动的控制; 4、手指可在物体表面交互。 实时合成虚拟人,输入文字或语音,就能驱动虚拟人的形象,包括脸部形象和身体随机动作。应用于直播、客服等场景。
