AI三维全息机器人是移动机器人和基于3D全息显示的智能交互的终端设备，满足行业智能化与精准化、个性化、敏捷性与自主性等需求，攻关意图理解、情感分析、内容自主生成等技术，创建基于大模型的AI多模态交互与内容生成平台。创新点：基于多模态信息的交互意图理解，跨模态情感分析方法，基于大模型的对话内容自主生成。项目在多模态情感领域领先于其他机构，成功构建了高质量的中文多模态情感细粒度标注数据集，进一步扩展了数据集规模，支持半监督任务，提供了更全面的多模态情感分析基准。在多模态意图识别领域，率先开发了创新的多模态意图识别数据集，并提出了新的层次化意图分类体系。采用先进的多模态特征表示和融合技术，研究不仅涵盖了在简单模态内容的生成（如图文、文图生成）等领域，还扩展到了更复杂的视频、音频等模态的语义理解和应用。