IBM新成果:人工智能强力助推汉语学习
2018-08-28 11:39:30爱云资讯
伦斯勒理工学院的计算机科学系研究生 Rahul Divekar 演示 CISL 正在开发的 AI 辅助汉语学习工具
CISL 研究员们演示 AI 辅助汉语学习工具。
要学习一门新的语言,特别是像汉语这样高难度的语言,必须让学生获得大量实际练习对话技能的机会。通过沉浸式的文化氛围自然而然地掌握一门新语言,可能要比非沉浸式的练习有效得多。但是,大多数汉语初学者无法获得体验式学习的机会。这就是我们开发 CIR 的初衷。
沉浸式游戏化课堂环境
为了实现多种模式的自然沉浸式对话,CIR 综合了语音文本转换,自然语言理解和计算机视觉等多种先进技术。教室里放置了一套 360 度全景式显示系统、一套音频系统、多个摄像头、多部 Kinect 设备和多个话筒,当然还有用于支持 AI 技术的计算机系统,其中一部分放在教室里,还有一些位于云端。
我们的目标是将沉浸式的认知技术与游戏元素相结合,让学生体验到一种文化环境,练习日常对话任务,并且获得智能助手的帮助。我们通过汉语项目,在 CIR 中使用 IBM Watson 作为对话机器人,与学习汉语的学生进行交流。该项目采用了 IBM Watson 语音识别技术和针对英汉两种语言的自然语言理解技术。
在通过沉浸式氛围学习外语的过程中,学生遇到的最大障碍之一就是,害怕被母语使用者评判。但是在 CIR 中,学生可以借助虚拟的对话合作伙伴来练习词汇和发音,不必承受真实环境中的压力。
许多语言学习研究者都在使用虚拟现实或增强现实技术,但我们研究的是真人沉浸式游戏环境,学生不需要穿戴专门的设备,就可以在这样的环境中实际游览。这反映了人机交互领域的一个大趋势,那就是我们在日常生活中的信息交流将会有更强的沉浸感,而人们与智能机器的交互也会向深度融合的方向迈进。
2017 年晚秋时节,我们的系统已经在 RPI 校园里的中文 1 级课程中接受了测试。今年秋天,我们将继续在中文 1 级、2 级和 3 级课程中使用 AI 作为教学工具,目标是在 2019 年夏天推出综合中文 1-3 级内容的新课程。
课堂背后的研究 —— 不仅仅是研究课堂
认知与沉浸式系统实验室(CISL) 是 IBM 人工智能地平线网络(IBM AI Horizons Network) 的一部分,专门构建并运用各种先进的技术,包括上下文感知系统(context-aware systems)、语音声调轨迹分析(pitch tone contour analysis)、人类与 AI 机器人之间自然语言对话中的中英双语切换(language-switch between Chinese and English in a natural language conversation between people and AI agents)、多用户多模式交互(multi-user multimodal interaction)、决策过程中的推理和规划(reasoning and planning in the decision-making process),以及自动生成描述、视觉和听觉信息的多模式故事叙述(multimodal storytelling with automatic generation of narrative, visualization and sonification)。
认知沉浸室 (CIR) 是 CISL 的四个应用案例之一。该实验室还致力于增强群体智能,用于董事会等现实环境中的关键决策。在未来,这些新型认知与沉浸式系统将会从根本上改变人们的生活和工作方式。CIR 的早期原型已经提供了很多研究用户交互的机会,让我们能够发现并应对语言学习领域的新挑战。
- 腾讯云与腾权科技达成战略合作,推进青少年人工智能教育加速落地
- 东京大学医疗人工智能博士何勇赴重庆普瑞共话眼科AI新未来
- 光明日报专访:华胜天成打造应用场景,让人工智能走进“千行百业”
- 云知声荣登“2024福布斯中国人工智能科技企业TOP 50”榜单
- 从高山奔向大海,智慧眼迈向通用人工智能重要一步
- 人工智能热潮,像需要英伟达NVIDIA一样需要维谛技术Vertiv
- 新质力·新智造 |“2024福布斯中国人工智能科技企业评选”结果正式发布
- 超擎数智重磅发布擎天、锋锐、元景系列AI服务器,打造人工智能新质生产力强劲引擎
- 第四届中央企业熠星创新创意大赛“人工智能”赛道项目对接路演(成都站)圆满举办
- 《2024人工智能与职场研究报告》发布: AI已多领域渗透,就业模式将被重塑
- HID 2024年安防趋势报告:人工智能的应用日益增多
- AI FOR ENGINEERS研讨会:推动人工智能技术赋能工程仿真创新
- 思科重新构想人工智能时代的数据中心与云端安全
- AI赋能出版新质生产力发展 蜜度承办人工智能与出版新质生产力论坛
- 小影科技参编《生成式人工智能数据应用合规指南》团体标准正式发布
- 云天励飞助力深圳高级中学启用人工智能联合实验室,共绘智慧教育新篇章