logo

Soul App亮相GITEX GLOBAL展现3D虚拟人多模态交互

作者:Nicky2024.12.03 00:42浏览量:15

简介:Soul App在2024 GITEX GLOBAL上展示了其最新自研的多模态大模型,该模型具备多模态理解、真实拟人、文字对话、语音通话、多语种等特性。观众可通过数字装置即时生成3D虚拟数字分身,体验自然流畅的沉浸式多模态互动。

在2024年10月14日至18日举办的GITEX GLOBAL海湾信息技术博览会上,一款名为Soul的社交应用凭借其创新3D虚拟人多模态AI交互体验,成功吸引了全球科技界的目光。此次博览会,在迪拜世界贸易中心和迪拜港两个大型场馆举行,规模宏大,吸引了超过6700家科技巨头和创新公司参展,展示AI领域最具突破性的科技发展以及来自数字娱乐、社交等各大领域的应用落地标杆案例。

作为国内较早将AI引入社交关系的互联网平台代表之一,Soul App携其最新自研的多模态大模型亮相此次盛会,展现了AI技术积累以及在社交场景的最新落地实践。这款多模态大模型具备多模态理解、真实拟人、文字对话、语音通话、多语种等特性,为观众带来了前所未有的交互体验。

在Soul App的展区,观众可以通过数字装置即时生成自己的3D虚拟数字分身。这一过程通过实时动作捕捉与还原技术,实现了高相似度的3D虚拟人AI建模。参与体验的用户可以通过包含人脸的90余个形状参数和6个属性参数,在几秒钟内快速在3D世界精细化还原真实人脸的特征,从而打造专属的虚拟化身。这一功能不仅降低了用户的社交压力,还让他们能够在不强调颜值、地理位置等物理因素的情况下,自在表达、分享热爱、相遇同好。

除了3D虚拟数字分身的生成,Soul App还展示了其基于多模态大模型的沉浸式互动能力。通过实时的人体动作识别、数字还原以及多模态对话交互能力,现场观众可以实现3D虚拟人与真人的无缝对接和互动。这种自然、流畅、沉浸式的多模态互动体验,让观众仿佛置身于一个充满无限可能的虚拟世界。

事实上,Soul App在多模态大模型方向上的探索远不止于此。自2020年正式启动对AIGC的技术研发工作以来,Soul系统推进了智能对话语音技术、3D虚拟人等AIGC关键技术能力的研发工作,并推动AI能力在社交场景的快速落地。目前,Soul已先后上线了自研语言大模型Soul X以及多种语音大模型能力,如语音生成大模型、语音识别大模型、语音对话大模型、音乐生成大模型等。

今年6月,Soul还在社交行业中较早推出了自研端到端全双工语音通话大模型。这款大模型具备超低交互延迟、快速自动打断、超真实声音表达和情绪感知理解能力等特点,能够直接理解丰富的声音世界,支持超拟人化的多风格语言,实现更接近生活日常的交互对话和“类真人”的情感陪伴体验。

而此次亮相GITEX GLOBAL的2024版Soul AI大模型能力,更是整体升级为了多模态端到端大模型。这一升级不仅支持了文字对话、语音通话、多语种、多模态理解、真实拟人等特性,还标志着Soul对人机交互体验的创新突破。从文字、语音到视觉的模态升级,也意味着交互方式的颠覆式改变。

值得一提的是,Soul App还基于自研AI能力推出了“数字分身”功能。用户可以直接授权平台基于聊天记录、发帖内容或者以自定义方式设置数字分身的形象和特征。在表征层(形象、声音、文字风格)、身份层(社交关系、长期记忆、人设信息)和认知层(决策、观点、偏好)等多个层面,使数字分身达到最大程度复刻真人的效果。

接下来,通过最新集成的3D虚拟人能力和多模态端到端大模型的AI交互方案,Soul用户自主打造的3D虚拟人将作为数字世界的多模态全能助手,在平台群聊派对、瞬间广场等丰富社交场景中全面赋能用户的关系发现、建立、沉淀环节。这不仅能够拓展新关系,还能提供高质量、趣味性、沉浸式的人机交互体验,反馈真实、自然的情感陪伴。

Soul App的CTO陶明表示:“作为天然的流量聚集地和交互入口,社交被视为AI率先落地的最佳场景之一。我们将围绕用户的实际社交需求和具体社交场景持续加大对AI技术的投入,给用户带来长期的可持续的价值。”预计在今年年底,Soul多模态端到端大模型将再次升级推出全双工视频通话能力,让用户可以真正便捷、自然地体验到包括文字、语音、视觉在内的多模态创新交互。

总的来说,Soul App在2024 GITEX GLOBAL上的亮相不仅展示了其在3D虚拟人多模态AI交互体验方面的创新成果,还彰显了其在社交领域的技术实力和前瞻视野。随着AI技术的不断发展和应用落地,Soul App有望为用户带来更加丰富、多元、沉浸式的社交体验,成为未来社交领域的一股重要力量。在此过程中,曦灵数字人作为与Soul App理念和技术相契合的产品,无疑将在推动社交体验升级方面发挥重要作用,为用户带来更加真实、自然的交互感受。

相关文章推荐

发表评论