你的位置:首页 >> 产品展示 >> 表面肌电传感器系统 >> 运动测量系统  运动测量系统
多模态输入
来源:delsys表面肌电脑电分析系统_EMG_EEG_人因工程 | 发布时间:2020/2/21 12:49:02 | 浏览次数:
4.1减少问题 根据Bfihler的术语(1982),形式指示属于一种被称为“直接指示”的指示,因为所有指向的对象都是可见的。此外,它代表了“话语的规范情境”(Lyons 1977):所有参与者都在场,因此可以相互感知他们的(指向)手势等。形式指示相对精确,因为触觉指向总是可能的。精确地指向小物体(如单个单词)通常是用铅笔等,大面积地包围它们来完成的。由于指示空间仅为二维空间,因此相互之间的对象不会产生歧义。如果说话人和听话人并排在一起,他们的指示场是共向的。因此,这一立场使合作更容易,因而是最有利的立场。 4.2遗留问题 尽管形式指示意味着问题的减少,但参照物的识别并没有成为一项微不足道的任务。不能想当然地认为演示和参考是一样的。这可能是因为说话者由于不知道被指者的实际位置而错误地指向了一个错误的地方,或者由于意外而错过了目标。其他的分歧是有意出现的:演讲者不想覆盖参考文献,因此要低一点。 由于形状区域之间存在子集关系,也产生了其他一些本质问题。例如,演示可以是参考的一部分-这被称为“pars pro to to dexis”。在这些情况下,必须考虑到口头描述来解决歧义。 此外,指向一个形式区域(取决于语言上下文)可以指三个不同的实体: 表单区域本身:“在这里输入什么? 实际条目:“我想增加这个金额” 相关概念:“这些费用需要核实吗?” 5个。模拟瞄准 本节研究了在迄今为止开发的对话框系统中,可以在多大程度上模拟自然指向的某些特征。在第6节中,简要介绍了实现更精确模拟的一些步骤。 5.1模拟指点手势的不同方法 面对面交流是通过手势和言语并行进行的。在许多领域(如形式指示语),物体常常通过指向手势被有效地引用。因此,如果用户有可能“指向”屏幕上可见的对象,对话系统将变得更加自然。 “指点参照”的目标可以通过各种策略来实现。首先必须做出一个基本的决定:是要模拟自然指向(就像触觉的目的一样)还是提供功能等价物。在前一种情况下,有一种预先假定但值得怀疑的要求,即人与机器之间的通信应采用与人与人之间的通信相同的方式进行。 如果主要强调的是模拟,那么瞄准装置及其使用必须尽可能精确地对应于自然瞄准。在这种情况下,最充分的模拟将指向触摸屏(见第6节)。但其他设备(如通过鼠标点击输入)也可以部分模拟自然指向(见第5.3节)。 与自然指向等同的功能包括以下装置:框定参照物或放大参照物,以不同颜色突出显示参照物等(见Ffthnrich等人。1984年)。一方面,系统可以通过这些手段“指向”。另一方面,对于系统是否识别了预期的referent,用户会立即得到提示。这种优势是由“自然性”的丧失所弥补的。 5.2历史评论 多模态输入,特别是指向可见对象的可能性,提供了某些关键的优势。例如,在以下系统中已经可以使用简单的指向动作:SCHOLAR(Carbonell 1970)允许使用指向手势来指定地理地图的区域。指出在伍兹'(1979)系统,结合简单的描述,指的是子结构的分析树显示在屏幕上。在NLG(Brown等人。1979),用户可以通过描述性的NL命令和同时触摸屏幕来绘制简单的几何对象。SDMS(Bolt 1980)允许用户在一个叫做“媒体室”的屏幕布局上创建和操作几何对象。在所有这些系统中,指点手势与其演示图之间都存在预定义的关系。引用标识不依赖于上下文等。 目前,有几个项目正在研究指向动作和NL输入的集成问题,例如:在NLMENU(Thompson 1986)中,用户可以通过鼠标控制的橡皮筋技术选择街道地图的部分。Hayes(1986)Oudine将指示成分整合到语言工艺系统中,
 
TAG:
打印本页 || 关闭窗口
 上一篇:用于织物接缝自动质量控制的人工神经网络
 下一篇:模拟某些触觉指向手势