文档名：基于转换表及上下文环境的汉语简繁文本双向翻译
现有的简繁转换技术在处理简繁一对多时效果不是很理想.为了解决这一问题,作者提出了基于转换表和上下文的汉语简繁文本双向翻译方法.作者之前的研究工作成果在教育部语信司所举行的简繁一对多转换评测中取得了95.6％的转换准确率.在此研究基础上,本文提出了使用规则加组合统计模型来解决这一问题,所组合的统计模型为SVM、最大熵和Bayes模型.同时作者还提出了一种提高文本分类准确度的新的特征选择方法ADMMR,该方法和ECE,卡方检验这两种特征选择方法具有相当的性能;同时还提出了最大熵模型的特征值使用tf-idf,而不使用0-1值.实验表明这一调整使准确度提高了约2％.此外,作者使用ADMMR、ECE和卡方检验作为文本的特征选择方法,使用tf-idf来量化每一个特征,经过实验表明组合模型在处理一简对多繁问题时具有更高的转换准确率和更稳定的性能.实验表明规则加组合模型的方法能够达到98.5％的准确率,较好地解决了简繁转换中的一对多转换的问题.
作者：庞祯军姚天昉
作者单位：上海交通大学计算机科学与工程系,上海200240
母体文献：中国中文信息学会2015学术年会(CIPS2015)暨第十四届全国计算语言学学术会议(CCL2015)、第三届基于自然标注大数据的自然语言处理国际学术研讨会(NLP-NABD2015)论文集
会议名称：中国中文信息学会2015学术年会(CIPS2015)暨第十四届全国计算语言学学术会议(CCL2015)、第三届基于自然标注大数据的自然语言处理国际学术研讨会(NLP-NABD2015)
会议时间：2015年11月13日
会议地点：广州
主办单位：中国中文信息学会
语种：chi
分类号：
关键词：汉语文本 简繁转换 特征选择 转换准确率
在线出版日期：2018年3月21日
基金项目：
相似文献
相关博文
- 文件大小:
- 600.75 KB
- 下载次数:
- 60
-
高速下载
|
|
