学位论文 > 优秀研究生学位论文题录展示

基于智慧家庭Smart Home可配置资源的多模态人机交互的研究与实现

作　者: 时小磊
导　师: 于亚新
学　校: 东北大学
专　业: 计算机软件与理论
关键词: 智慧家庭多模态人机交互资源配置 XML 界面元素
分类号: TP11
类　型: 硕士论文
年　份: 2012年
下　载: 1次
引　用: 0次
阅　读: 论文下载

内容摘要

随着计算机及其相关技术的发展和人们生活水平的不断提高,人们对计算机的要求不再是网上冲浪、办公、娱乐等,而是希望它能用于家庭生活的方方面面,例如：家电控制、室内环境控制等,因而家庭生活的智能化成为了家庭生活发展的必然趋势。目前,图形化界面人机交互方式是应用于人与计算机交互的主要方式,虽然这种方式已经达到对设备的有效控制,但是人们的感受作为评价交互方式优劣的重要因素没有考虑在内,对操作人员的素质要求也比较高,尤其是残障人士根本无法使用该系统,致使用户与计算机的交互过程中存在很大的局限。基于这些原因,本文提出了一种更适合用户与系统交互的方式,即多模态人机交互方式。针对智慧家庭系统,设计并实现了多模态的人机交互模块和智慧家庭系统的资源配置模块,其贡献点可以概括如下：(1)在配置界面显示上采用了XML技术,并扩展了XML和：XML Schema的传统用途,即在XML中增添界面显示元素,通过XML转换器把XML转换成界面元素,用于界面显示；通过：XML Schema转换器把XML Schema转换成XML元素模板,再通过XML转换器把XML元素模板转换成半界面元素。XML与XML Schema新的用途适用于智慧家庭资源配置,增加了界面显示的灵活性。(2)设计了具有扩展能力的人机交互输入接口,并对其进行了多种实现,如：语音输入实现、电话语音输入实现、MSN输入实现、Gtalk输入实现、Skype输入实现和Google日历输入实现。人机交互输入接口方便了输入方式的扩展,流行IM输入和日历输入实现充分考虑用户的行为习惯,方便用户对计算机的控制。(3)设计了具有扩展能力的人机交互输出接口,并对其进行了多种实现,如：文字转换语音输出实现、命令控制输出实现和视频输出实现。人机交互输出接口方便了输出方式的扩展。(4)设计实现了智慧家庭的配置模块,主要包括系统信息资源、家庭用户资源、硬件资源的配置和软件资源的配置,硬件资源包括：房间、设备的配置；软件资源包括：浏览器、鼠标、新闻播报和控制设备指令的配置。配置模块为资源变更提供了较强的伸缩空间,方便了用户对家中资源的管理。

全文目录

摘要  5-6
Abstract  6-8
目录  8-10
第1章绪论  10-16
  1.1 课题研究来源和背景  10-11
  1.2 智慧家庭概述  11-12
    1.2.1 智慧家庭概念  11
    1.2.2 智慧家庭现状  11-12
  1.3 多模态人机交互概述  12-14
    1.3.1 多模态人机交互概念  13-14
    1.3.2 多模态人机交互现状  14
  1.4 论文组织结构  14-16
第2章相关工作  16-26
  2.1 XML与其相关技术  16-19
    2.1.1 XML技术  16-17
    2.1.2 XPath  17-18
    2.1.3 XML Schema  18-19
  2.2 SOAP与REST WEB SERVICE  19-20
    2.2.1 SOAP  19-20
    2.2.2 REST  20
  2.3 GOOGLE相关技术与应用  20-22
    2.3.1 GWT与GXT  21
    2.3.2 Google Chrome浏览器扩展  21-22
    2.3.3 Google日历  22
  2.4 语音识别与语音合成  22-24
    2.4.1 语音识别  22-24
    2.4.2 语音合成  24
  2.5 电话语音查询与控制  24-25
  2.6 红外线学习与控制  25
  2.7 本章小结  25-26
第3章多模态人机交互  26-44
  3.1 交互接口的设计与实现  26-28
    3.1.1 输入接口的设计与实现  26-27
    3.1.2 输出接口的设计与实现  27-28
  3.2 输入方式的设计与实现  28-39
    3.2.1 本地语音输入方式  28-31
    3.2.2 电话输入方式  31-33
    3.2.3 MSN输入方式  33-38
    3.2.4 Google日历输入方式  38-39
  3.3 输出方式的设计与实现  39-43
    3.3.1 操作浏览器输出  40-41
    3.3.2 红外线指令输出  41-42
    3.3.3 电脑鼠标键盘指令输出  42-43
  3.4 本章小结  43-44
第4章基于XML的资源配置及界面显示技术  44-58
  4.1 基于XML的界面元素显示技术  44-49
    4.1.1 资源的存储  44-45
    4.1.2 界面显示  45-47
    4.1.3 基于XML Schema的半界面元素显示技术  47-49
  4.2 配置资源  49-56
    4.2.1 系统信息资源  49-51
    4.2.2 用户基础数据资源  51
    4.2.3 硬件资源  51-54
    4.2.4 软件资源  54-55
    4.2.5 检测与控制设备  55-56
  4.3 本章小结  56-58
第5章人机交互与资源配置功能测试  58-66
  5.1 系统总体架构  58-59
  5.2 人机交互测试  59-62
  5.3 资源配置测试  62-64
  5.4 系统评价  64-66
第6章结束语  66-68
  6.1 总结  66
  6.2 展望  66-68
参考文献  68-72
致谢  72

相似论文

基因调控网络模型描述语言研究,Q78
支持XML数据查询的F&B索引结构的研究,TP311.13
中国区域基础教育资源配置的均等化研究,G521
C++代码缺陷检测系统的研究与设计,TP311.53
基于Web的科学计算遗留应用共享技术研究,TP393.09
基于供需平衡的济宁市水资源优化配置研究,TV213.4
石羊河流域水资源优化配置的数学模型与决策研究,TV213.4
铅山河生态基流确定及生态调度模型初步研究,X171
基于关系数据库理论的面向对象数据库系统应用研究,TP311.52
支持Top-k查询的银行记账查询系统的设计与实现,TP311.52
基于B/S多层架构的特种文献系统设计与实现,TP311.52
基于SVG的数据分析图表系统的研究与实现,TP311.52
模糊XML Twig模式查询算法的研究,TP311.13
基于.NET的学生顶岗实习管理系统设计与实现,TP311.52
基于Multi-Agent的情报信息平台的设计与实现,TP311.52
概率XML文档中Holistic Twig查询处理算法的研究与实现,TP311.13
基于XML的矿图图形标记语言的研究与应用,TP391.72
基于观察者模式的银行主动服务系统的设计与实现,TP311.52
消费主义对我国高等教育资源配置制度的影响,G647
基于WebService的承德干部在线教育系统设计与实现,TP311.52
江北区企业信用信息系统设计与实现,TP311.52