学位论文 > 优秀研究生学位论文题录展示

基于笔和语音的交互应用研究

作 者: 韩勇
导 师: 须德
学 校: 北京交通大学
专 业: 信号与信息处理
关键词: 语音用户界面 笔交互 人机交互 汉字切分 交互模型 界面隐喻
分类号: TN912.3
类 型: 博士论文
年 份: 2006年
下 载: 237次
引 用: 1次
阅 读: 论文下载
 

内容摘要


随着穿戴和手持等便携设备的发展和流行,基于键盘和鼠标的传统交互方式逐渐不适宜作为这些移动计算设备的主要交互手段,而笔和语音以其紧凑和便携性非常适用于这些设备。随着普适计算(Ubiquitous computing)的发展,笔和语音逐渐成为人机交互技术的一个主要研究内容。 本文对语音用户界面的特点、国内外研究情况、发展趋势和设计要素进行了介绍。剖析了语音用户界面的优缺点以及适用的交互环境。在此基础上,提出了语音用户界面的交互模型以及界面隐喻;根据语音用户界面的设计要素实现了原型系统HomeDoctor,并对该系统进行了用户评估实验。 本文还对笔式用户界面的发展历史、软硬件环境、国内外相关研究及应用系统进行了较详细的介绍,讨论了笔式界面基于纸—笔的界面隐喻和以用户为中心的设计指导思想,提出了基于笔设备的交互、输入事件描述。论文将人们日常生活中的交流方式引入到与计算机的交互当中,设计并实现了基于笔输入设备的文档输入编辑系统SketchEditor,在SketchEditor环境中,用户使用单一的笔设备就可以完成文本输入、修改的全部任务。SketchEditor捕捉用户的输入笔迹和手势,并进行识别处理,完成相应的功能,既保持了传统工作方式的自然、高效,又利用了计算资源实现对信息的再加工处理。 本文设计并实现了能够同时记录笔画和语音信息的会议笔录系统ASN。在系统实现过程中,研究了手势识别、手写文字切分、基于上下文的交互处理等内容,并对基于手势交互的文本编辑系统进行了用户评估实验。本系统中文本输入采用了联机手写体自由格式输入,在对笔迹信息的处理过程中,利用了笔画的空间信息和笔画间的位置关系,并且还利用最小生成树(MST)综合考虑了全体待切分笔画间的位置关系,从全局的观点对笔画进行切分,取得了较好的汉字切分效果,为汉字的正确识别奠定了基础,而且切分算法的使用也保持

全文目录


目录  5-8
基于笔和语音的交互应用研究  8-10
Research on pen and speech based HCI application  10-12
1 绪论  12-21
  1.1 引言  12-13
  1.2 人机界面的发展历史  13-15
  1.2 笔和语音用户界面的研究现状  15-17
  1.3 本文所作的工作  17-19
  1.4 本文组织  19-21
2 语音用户界面及其应用研究  21-33
  2.1 语音技术简介  21-25
    2.1.1 语音识别技术(Speech Recognition)  21-23
    2.1.2 语音合成技术(Speech Synthesis)  23-25
  2.2 国内外研究现状  25-27
    2.2.1 基于识别的应用  25-26
    2.2.2 Speech-as-data  26-27
  2.3 语音用户界面的特点分析  27-31
    2.3.1 语音用户界面的优点  28
    2.3.2 语音用户界面的缺点  28-29
    2.3.3 语音用户界面与传统界面的对比分析  29-30
    2.3.4 适宜和不适宜使用语音输入的情景  30
    2.3.5 适宜和不适宜使用语音输出的情景  30-31
  2.4 语音用户界面存在的问题及发展前景  31-32
  2.5 本章小结  32-33
3 语音用户界面设计和实现  33-49
  3.1 语音用户界面的心理模型  33-34
  3.2 语音用户界面的模型与隐喻  34-35
    3.2.1 语音用户界面的交互模型  34
    3.2.2 语音用户界面隐喻  34-35
  3.3 语音用户界面的特点  35-37
    3.3.1 语音用户界面中人的因素  35-36
    3.3.2 语音的自然性  36-37
  3.4 原型系统 HomeDoctor的实现  37-39
  3.5 语音用户界面设计中的关键问题  39-42
  3.6 XML语法  42-43
  3.7 系统实现及评估  43-47
    3.7.1 系统结构  43-44
    3.7.2 用户评估  44-47
  3.8 本章小结  47-49
4 笔交互设备和应用介绍  49-56
  4.1 笔交互设备的硬件介绍  49-51
  4.2 桌面交互笔设备  51-52
  4.3 手持计算设备  52-53
  4.4 电子白板  53-54
  4.5 室件(Room Ware)  54-55
  4.6 本章小结  55-56
5 笔式交互技术研究  56-65
  5.1 纸─笔的界面隐喻  56
  5.2 笔式界面的输入分析  56-58
    5.2.1 笔设备的输入事件描述  56-57
    5.2.2 基于笔设计的交互任务描述  57-58
  5.3 笔交互模型  58-60
    5.3.1 笔交互中的基本数据─笔画  58-59
    5.3.2 笔交互模型  59-60
  5.4 笔输入相关技术  60-64
  5.5 本章小结  64-65
6 基于手势的笔交互界面研究  65-81
  6.1 交互任务描述  66-67
  6.2 手势识别系统  67-73
    6.2.1 特征选择  67-69
    6.2.2 手势训练和识别  69-71
    6.2.3 结合规则的手势识别  71-72
    6.2.4 SketchEditor系统中手势定义  72-73
  6.3 改进的 Rubin算法与原 Rubin算法的比较  73-75
  6.4 SketchEditor系统结构及运行实例  75-77
  6.5 用户评估实验  77-79
  6.6 本章小结  79-81
7 ASN原型系统  81-111
  7.1 相关研究  81-82
  7.2 系统结构  82-84
  7.3 笔迹分类  84-87
  7.4 汉字切分  87-104
    7.4.1 行切分  87-88
    7.4.2 MST切分算法描述  88-96
    7.4.3 切分实验  96-98
    7.4.4 切分纠错  98-102
    7.4.5 相关研究及比较  102-104
  7.5 汉字识别及纠错  104-105
  7.7 文档管理  105-108
  7.8 笔迹和语音回放  108-109
  7.9 笔交互的其他考虑  109-110
  7.10 本章小结  110-111
总结  111-113
参考文献  113-119
就读博士期间发表论文目录  119-120
致谢  120

相似论文

  1. 数字电视互动应用交互系统设计与实现,TP311.52
  2. 全新的交互体验,TP11
  3. 基于DSP的双丝焊机及人机界面研究,TG409
  4. 家庭影视系统智能遥控器的设计及其交互方式研究,TP872
  5. 下一代广播电视网中有源EoC的人机交互系统的研究与实现,TP11
  6. 基于MTK平台双制式手机电视的研究与实现,TN929.53
  7. 界面隐喻理解的探索性研究,H05
  8. 基于深度图与彩色图像的跑步机游戏交互系统,TP391.41
  9. DALI住宅照明系统的工业设计,TM923
  10. 基于移动触摸屏的显示屏交互技术的研究与实现,TP334.3
  11. CADAL新型阅读体验研究,TP391.41
  12. 基于自然语言打印机人机交互方法研究与实现,TP11
  13. 图像及图像序列上的交互抠图技术研究,TP391.41
  14. 图像修复的关键技术研究,TP391.41
  15. 电动车充电装置的人机交互设计研究,U469.72
  16. 人机交互环境下学术搜索功能学习的心智模型动态改变研究,G350
  17. 基于多点触控的大屏幕人机交互技术研究与应用,TP11
  18. 城市旅游电子地图交互式设计研究,P208
  19. 基于虚拟现实的水电机组检修培训技术研究,TV738
  20. 感官代偿在产品设计中的应用,TB472
  21. 基于中医理论的多路脉诊系统研制,R241.1

中图分类: > 工业技术 > 无线电电子学、电信技术 > 通信 > 电声技术和语音信号处理 > 语音信号处理
© 2012 www.xueweilunwen.com