基于Threejs的3D 互动虚拟展厅+ChatGPT 虚拟人聊天

前两天腾讯云媒体服务那边上线了一个基于web3D技术搭建的在线互动虚拟展厅，整体体验下来，信息量不小。展厅里各个区域的入口都设置了AI NPC（非玩家角色），这些智能助手内嵌了ChatGPT的能力，能够理解用户的意图并给出专业、准确的答复，帮助访客快速了解产品与技术细节。从实际效果看，它已经超出了单纯展示的层面，更像是一个能主动沟通的“数字导览”。

体验地址：https://trtc.io/showroom

其中有许多技术细节——正是早前元宇宙项目探索中最想实现的功能。这次借着这个演示场景，对元宇宙产品的发展逻辑又有了新的体会。腾讯云媒体在此基础上，还打包出了一个元宇宙SaaS平台，支持用户自行创建场景、实现多人实时互动。

1. 场景编辑平台：

   

2. 跟AI数字人互动聊天：

   

3. 实时语音和视频聊天：

   

4. 跨平台低消耗：

   

5. 案例演示：

   

实际落地案例很丰富，虚拟展厅、虚拟办公、虚拟会议室、虚拟校园、虚拟展馆、虚拟公园、技术展览、开放日、咖啡厅……覆盖面从企业活动到社交场景都有涉及。

案例演示链接包含：虚拟展厅、虚拟办公、虚拟会议室、虚拟校园、虚拟展馆、虚拟公园、技术展览、开放日、咖啡厅等场景。

另外还有一些其他场景的链接，这里也一并列出。

比较有启发的，是实时聊天功能部分。过去做类似项目，往往需要用开源代码自建一套，但这对服务器的要求相当高。腾讯这次直接把这部分做成了现成的平台——trtc.io/zh，省去了很多基础设施层面的烦恼。

值得关注和借鉴的地方有几个：

1. 跟虚拟人聊天：入口设计上单独开辟了一个场景，用户通过点击关闭控件再回到主场景，交互逻辑干净利落。

   

2. 3D人的编辑方式采用了SVG方案，这让编辑和渲染的灵活度大幅提升，也兼顾了跨平台兼容性。

   

3. 实时通信模块直接复用腾讯的成熟服务，不重复造轮子，这在资源有限的项目里是非常务实的路径。

   

基于前期准备的一些框架，也做了小范围的尝试。目前基于Threejs的元宇宙场景已经沉淀出5种交互方式，不同场景下可以按需组合选用。由于时间原因，元宇宙方向的研究暂时告一段落，数字人产品会推迟到下周再发布。后续会组建一个群组用于商务沟通与推进。