学位论文 > 优秀研究生学位论文题录展示

跨语言词汇语义相似度计算研究

作　者: 赵涛涛
导　师: 姚建民
学　校: 苏州大学
专　业: 计算机应用技术
关键词: 跨语言词汇语义相似度 跨语言信息获取 HowNet 平行语料库
分类号: TP391.1
类　型: 硕士论文
年　份: 2011年
下　载: 25次
引　用: 0次
阅　读: 论文下载
 

内容摘要


跨语言词汇语义相似度反映的是来自不同语言的词语之间的语义相似程度,它是跨语言信息获取系统的一个基本组成部分。随着近年来网络上多语言资源的增多,跨语言词汇语义相似度计算的研究逐渐得到了重视。本文致力于中英文词汇语义相似度的研究,证明了HowNet可以用于跨语言词汇语义相似度计算,并且平行语料库中的共现信息对跨语言词汇语义相似度计算的性能有较好的提升作用。本文的跨语言词汇语义相似度计算方法以HowNet作为跨语言知识库,基于HowNet的跨语言词汇语义相似度计算方法与单语词汇语义相似度计算方法类似,以HowNet中的概念定义和义原的树形层次结构作为计算基础,通过把中英文词语转化为义原形式,之后计算义原以及词语之间的语义相似度。评测结果表明HowNet可用于跨语言词汇语义相似度计算,但是HowNet中的一些词语的定义不够准确,对算法的性能产生了不良影响。为进一步提高跨语言词汇语义相似度计算的准确性,本文引入平行语料库作为补充数据源,首先抽取词语在语料库中的上下文词语,之后根据词语的PMI信息对上下文词语进行排序,并采用多种算法计算上下文词语之间的语义相似度,在把基于HowNet的方法与基于平行语料库的方法进行融合之后,跨语言词汇语义相似度计算的准确率得到了较大的提升。实验结果表明通过增加平行语料库的规模,跨语言词汇语义相似度计算的性能还会进一步提高。跨语言词汇语义相似度计算的评测采用与人工判断结果进行比较的方法,但是目前还没有可用的标准评测集。通过对英文词汇语义相似度研究中普遍采用的Miller-Charles评测集进行扩展,本文得到了包含28组中英文词语的评测集,为中英文词汇语义相似度计算提供了标准的评测集。

全文目录


中文摘要  4-5
Abstract  5-9
第一章 引言  9-13
  1.1 研究背景与意义  9-10
  1.2 主要研究内容  10-12
  1.3 论文组织结构  12-13
第二章 相关技术与资源  13-28
  2.1 单语词汇语义相似度计算  13-25
    2.1.1 WordNet 介绍  13-15
    2.1.2 基于知识库的词汇语义相似度计算方法  15-19
    2.1.3 基于语料库的词汇语义相似度计算方法  19-25
  2.2 MC 评测集的扩展  25-26
  2.3 本章小结  26-28
第三章 基于HowNet 的跨语言词汇语义相似度计算  28-44
  3.1 HowNet 介绍  28-30
  3.2 基于HowNet 的单语词汇语义相似度计算  30-33
    3.2.1 词汇语义相似度与词汇语义距离  30-31
    3.2.2 基于HowNet 的词汇语义相似度计算  31-33
  3.3 基于HowNet 的跨语言词汇语义相似度计算  33-42
    3.3.1 义原语义相似度计算  33-34
    3.3.2 概念语义相似度计算  34-36
    3.3.3 词汇语义相似度计算  36-37
    3.3.4 实验结果  37-38
    3.3.5 实验结果偏高分析  38-40
    3.3.6 实验结果偏低分析  40-42
  3.4 本章小结  42-44
第四章 平行语料库与HowNet 相结合的跨语言词汇语义相似度计算  44-59
  4.1 基于平行语料库的词汇语义相似度计算方法  44-50
    4.1.1 词语与上下文词语之间的语义相似度计算  47-48
    4.1.2 上下文词语之间语义相似度计算  48-49
    4.1.3 参数估计  49-50
  4.2 实验结果及分析  50-57
    4.2.1 实验语料库介绍  51
    4.2.2 词语与词语的上下文词语的语义相似度实验  51-52
    4.2.3 上下文词语的语义相似度计算实验  52-53
    4.2.4 基于 How Net 的方法与结合平行语料库的方法的比较  53-55
    4.2.5 组合参数实验  55-56
    4.2.6 语料库规模实验  56-57
  4.3 本章小结  57-59
第五章 总结与展望  59-61
  5.1 本文总结  59-60
  5.2 展望  60-61
参考文献  61-66
攻读学位期间公开发表的论文  66-67
致谢  67-68

相似论文

  1. 基于本体的食品投诉文档文本聚类研究,TP391.1
  2. 结合本体HowNet的中文文本分类研究,TP391.1
  3. 基于语料库的莎士比亚戏剧汉译本中Lord人际意义显化研究,H315.9
  4. 基于概念集合的网页内容过滤方法的研究,TP393.092
  5. 英汉平行语料库句子级对齐研究及其在机器翻译中的应用,H315.9
  6. 基于潜在语义对偶空间的跨语言文本分类研究,TP391.1
  7. 交通术语与标准规范的符合性检测技术研究,TP391.1
  8. 基于平行语料库的翻译教学与翻译能力的提高,H059
  9. 基于文本挖掘的翻译知识自动获取研究,TP391.1
  10. 汉语词语语义相似度度量及其在跨语言信息检索中的应用研究,TP391.1
  11. VNC结构多词表达的抽取与分类,TP391.1
  12. 基于语料库的楚辞英译本对比研究,H315.9
  13. 基于语料库的情态动词英汉翻译研究,H315.9
  14. 基于语料库的军事装备术语的翻译研究,H315.9
  15. 《儒林外史》中带标记的被动句英译研究,H315.9
  16. 专用汉英平行语料库在新疆外宣翻译中的应用,H315.9
  17. 政论在句子和词汇层面的翻译特征研究,H059
  18. 基于NP树的英文专利文献术语自动翻译技术研究,TP391.2
  19. 基于语料库的莎士比亚戏剧汉译本逻辑关系显化研究,I046
  20. 基于语料库的莎士比亚戏剧汉译本中情态的人际意义再现研究,I046

中图分类: > 工业技术 > 自动化技术、计算机技术 > 计算技术、计算机技术 > 计算机的应用 > 信息处理（信息加工） > 文字信息处理
© 2012 www.xueweilunwen.com