基于NVIDIA Nemotron构建万圣节互动鬼屋

英伟达Nemotron开源模型近日被用于打造万圣节互动投影“怪物之家”，让住宅车库门化身会说话的愤怒老宅。该项目基于Nemotron语音代理框架，串联语音识别、Bolt E4B 4GB小语言模型、Magpie零样本语音合成和Audio2Face三维面部动画，可在单台工作站本地运行。开发者为车库门设计木质裂口、火焰表情和海盗背景，使其能与讨糖儿童互动：对无礼者抱怨，对说“请”的用户缓和语气，并保留礼貌记录。为适配离线环境，项目选择Bolt E4B作为对话核心，通过系统提示、状态逻辑和低秩适配器塑造角色性格。系统还采用流式输出、预置台词与缓存语音，将端到端延迟压至约1.70秒，缓存回复约0.72秒。视觉与口型方面，三维动画模块驱动虚幻引擎中的角色，双图形处理器分别承担语言语音与图形计算。项目亦探索视觉模型识别访客服装，并用目标检测与追踪算法统计人数。尽管代码未发布，所用模型均可获取，项目展示了英伟达开源链路在本地、离线、有性格的交互式角色中的应用潜力。