VR陀螺|微软新项目:让AR眼镜HoloLens成为视障人士的眼睛( 三 )
Theo 参与到这项体验中 , 来帮助研究团队更好地让系统适配儿童的行为特征 。 比如孩子们总是喜欢坐在一起 , 但常常坐不了几分钟就起身跑来跑去 。 Theo 回忆起最初测试的场景 , “系统有时会同时报出两个名字 , 这让我很难听清 , 所以我说这一点需要改动 。 ”
研究人员还仔细观察了 Theo 自由使用系统的方式 。 比如在一次家庭用餐时 , Theo 开始巧妙地反复左右转动头部 , 让系统说出正在与他说话的人的名字 。
“Theo 在用这个技术保持对谈话者的空间注意力 , ” Morrison 当时感到很惊讶 , “我们之前并没有想到 , 这对他来说无疑是一种行之有效的保持注意力的方式 。 如果他能保持注意力 , 他就可以与谈话者将话题进行下去 。 ”
在实际测试中 , 更多的用途证实了这项技术对帮助视障儿童学习社会互动的潜能 。
和其他失明儿童一样 , Theo 在社交场合中也会将头搁在桌子上露出一只耳朵 。 研究人员和 Theo 玩了一系列游戏 , 来发掘他用身体和头部交流时可能产生的力量 。
在游戏中 , 研究人员和 Theo 要解决一个小组问题 。 Theo 知道问题的答案 , 研究员们只知道问题的主题 , 而且只有在 Theo 看着他们时 , 他们才能交谈 。 如果 Theo 移开视线 , 他们必须立刻停止讨论 。 “那一刻 , Theo 突然意识到自己能够掌控一段谈话 。 他开始理解‘看到’他人的力量 , 它不仅赋予了他交流的技能 , 更使他习得了一套全新的社会能力 。 ”
现在 Theo 很少把头放在桌子上说话了 。 无论是否带着特制的 HoloLens , Theo 都会将自己的身体和脸面向想要谈话的人 。 这是否会为 Theo 带来长期的变化还是一个未知数 , 研究团队也尚不能确定其他失明或弱视力儿童是否也会做出类似的反应 。 因此研究团队正在进入下一阶段 , 研究这项技术对更多儿童、年龄范围更广泛的人群的影响 。
本文插图
失明少年 Theo 正在厨房里参与用户测试
Project Tokyo 的未来
为了构建适用于更多人的智能个人代理系统 , 更广泛的研究工作正在进行中 , 包括让用户更自由地根据偏好调整系统的机器学习技术 。 例如 , 微软剑桥研究院机器学习研究员 Sebastian Tschiatschek 正在研究用户如何告知系统他们希望听到的信息的种类和数量 。
由于用户的视力水平不同 , 对信息的需求也不一样 。 个性化的需求让 Tschiatschek 必须采取非常规的机器学习方法 , “我们想以某种数学形式将问题形式化 , 但对这个问题来说并不容易 。 许多开发工作都是通过尝试 , 真正与人互动 , 了解他们的好恶 , 从而增强算法来实现 。 ”此外 , 用户在系统提供已知信息时会感到失望 , 还有很多这样的问题尚待研究团队解决 。
最终 , Project Tokyo 将构建可扩展所有用户能力的智能个人代理 。 研究团队将与视障社区中的更多儿童继续探索 , 包括 Morrison 先天失明的7岁儿子 Ronan 。
【VR陀螺|微软新项目:让AR眼镜HoloLens成为视障人士的眼睛】“我们在 Theo 身上看到的情况让人倍受鼓舞 , 他正在以前所未有的方式掌控自己的世界 , ” Morrison 充满期待 , “我认为我们将在 Ronan 和更多的人身上看到这一点 。 ”
推荐阅读
- |真全面屏手机要来了!微软给出新解决方案:提高屏下前摄效果
- |微软回归手机市场!Surface Duo砍掉3.5mm耳机孔
- 谷歌|谷歌正研发双屏 Chromebook 以回应微软 Surface Neo
- 电脑使用技巧|微软承认Windows 10新BUG:错误显示没有网络连接
- |HoloLens 2正式上架微软商城:售价2万7
- 鞭牛士|微软发警告:大规模Emotet正卷土重来,目标是银行
- 世代|微软:不强制跨世代,次世代独占是开发组自己的选择
- 行业互联网|胶州:大沽河度假区招强引智 科技创新项目实力入驻
- 3DMGAME|微软:不强制跨世代,次世代独占是开发组自己的选择
- windows系统|微软确认最新累积更新导致Win10 v2004版中文/日文输入法异常
