Meta 开源 Unity 应用 Spatial Lingo:在真实环境中与虚拟角色练习语言

正文:

最近,Meta 在 GitHub 发布了一个名为 Spatial Lingo 的开源 Unity 应用,重点通过识别现实中的物体来辅助语言练习。该应用整合了 Meta 的多种软件开发工具包(SDK),为用户带来一种新颖、有趣的语言学习体验。

Spatial Lingo 的核心做法是引导用户用目标语言去认出并描述周围的物品,提升表达能力。名为 Golly Gosh 的虚拟角色将全程引导你,用身边熟悉的东西进行词汇训练。应用支持手势追踪和控制器操作,增强了沉浸感。

QQ20260108-100456.png

该项目同时为 Unity 开发者提供了理解 Meta 多项功能与开发实践的模板。通过使用透视相机 API(PCA)、语音 SDK、混合现实实用工具包(MRUK)等组件,开发者可以打造更丰富的混合现实体验。Spatial Lingo 的主场景与多个示例场景展示了具体实现方式,包括健身房场景、词云场景和相机画面场景。

要使用 Spatial Lingo,开发者需安装 Unity 6000.0.51f1 或更高版本,并配置相应的 Llama API 密钥。项目也特别提醒安全问题:不要把 API 密钥直接写进应用,以免被他人提取。

Spatial Lingo 的多项功能让它成为实用的语言学习工具。应用可以识别你所处环境中的物体,并据此生成动态课程。随着你不断完善语言树,系统会自动补充与这些物体相关的动词和形容词,使课程内容更充实。此外,应用支持语音合成与语音转写,兼容多种语言,互动性更强。

这一项目不仅是 Meta 在教育领域的探索,也为开发者提供了优秀的开源示例,展示了如何把混合现实技术与语言学习结合。开发者可在 GitHub 获取 Spatial Lingo 的源代码与文档,进一步挖掘其潜力。

地址:https://github.com/oculus-samples/Unity-SpatialLingo

爱智特-AI智能体一站式企业智能体交易学习发行平台|智能体教程|智能体社区
© 版权声明
THE END
喜欢就支持一下吧
点赞8 分享