基于统计的汉语分词模型及实现方法

本文介绍了一种基于统计的汉语分词模型以及该模型在不同资源要求下的实现方法,并进一步讨论了这种方法的优缺点,最后,作者实现了这些方法,并给出相应的实验结果和结论。     

汉语句型自动分析与频度统计

汉语句型分析与频度统计的研究,是清华大学中文系承担的国家自然科学基金资助项目。完成后已通过了国家教委组织的专家鉴定。 课题分为实验模型和系统实现两个阶段进行。第一阶段对大约二十五万字的真实语科进行了第一次大规模的分析和统计,在国内     

汉语书面语分词连写是有关全社会信息化的大事

汉语的书面语是按句连写的,词间无间隙,因此在汉语书面语的处理中,例如统计、分析、理解等,我们首先遇到的问题是词的切分,把按句连写转换为按词连写。所以,词的正确切分是进行汉语书面语处理的必要条件,它的任何错误都将使处理结果受到影响,有时是严重的影响。     

汉语自动分词和词性标注一体化系统

作为高层次信息处理技术的一个重要方向,自然语言理解一直是人工智能界所关注的核心课题之一。“汉语分词”就成为中文信息处理的一个研究课题。国内外从事汉语自动分词系统研究已有十几年,迄今尚无真正成熟的实用系统面世。自动分词研究中的两个主要的困难:1未登录词的辨识,2歧义切分字段的处理。所谓未登录词就是分词系统的词典中没有收录的词。汉语词汇是一个开放的集合,无论建立多么庞大的词典,都不可能穷举所有的词。所谓歧义切分字段。就是指汉语句子中的某些字段,如果纯粹根据词表作机械的字符串匹配,则它可能存在多种切分的形式。关…     

汉语文本计算机校对的词库设计

词库是中文信息处理系统中的重要数据结构,汉语词汇处理在中文信息处理技术中有着重要的应用价值。词库也是校对工作使用的基础,词库的设计是否合理,直接关系到整个校对工作的性能。因此,本文阐述校对工作所使用词库的组织与设计。一、汉语字词的分布规律 一般人日常使用的汉字大约在五、六千个,尽管由这些字所组成的汉语词汇相当庞大,但经统计发现,人们使用频率相当高     

基于SWOT模型汉语国际推广战略分析

汉语国际推广在政策、宣传、资金、人力等内部资源方面,既存在着优势,也存在着劣势;在外部环境方面,机会和挑战并存。若对此赋予相应的分值进行SWOT分析,就可知其优势大于劣势、挑战大于机会。因而,我国应利用优势,抓住机遇,扭转劣势,关注威胁。     

论实现交通统计信息现代化的途径

本文简要介绍了交通事业发展面临的新形势和新挑战,通过总结交通统计信息工作中存在的问题,探讨交通统计信息化建设的重要支撑作用和实现交通统计信息现代化的途径。     

汉语分词规范对《信息处理用现代蒙古语切分规范》建立的启示

借鉴汉语分词规范,《信息处理用现代蒙古语切分规范》需遵循面向信息处理为主,面向语言学为辅,符合语言学理论,以人为本,定量及定性相结合等指导思想及科学性和严谨性、完整性、一致性、通用性等制订原则。其体例采用语法角度的分词法,切分范围包括14类基本词和10类非词单位。汉语分词规范概述部分的标点符号、习用语、缩略语、非汉字符号等内容,及具体说明部分的名词、数词等内容需加以深入研究;与《信息处理用现代蒙古语切分规范》有关的构词法可分为词法构词法、复合词缩略法、句法构词法、重叠法、仿叠法5种;蒙古语二字、三字复合词有多种类型,其切分比较复杂。     

韩国汉语教材存在的问题及改进措施研究

韩国汉语之热,在世界范围内是少有的。在我国的对外汉语推广战略中,韩国具有举足轻重的地位。然而韩国的汉语教材却存在许多问题和不足,既不能满足在韩国兴起的"汉语热"要求,也严重地制约着汉语在韩国的进一步推广。对韩国汉语教材市场进行调研,开发出具有针对性和本土化的汉语教材,对汉语国际推广无疑是十分重要的。     

汉语隐喻的三种英译方法

关于隐喻翻译方法,国外学者已经进行了系统化的研究,Toury、Nida和Kraszewsk三人各自提出了对隐喻翻译的指导原则;国内学者结合国外学者的研究,根据汉语本身的特点,对汉语中隐喻现象的翻译提出自己的方法。汉语隐喻译成英语有以下三种方法：字面直译法、意义对等目标语隐喻寻求法和纯粹的解释性翻译法。     

和谐社会的统计评价方法

根据和谐社会的内涵及经济学中对人类行为的主要评价方法,利用帕累托改善和激励相容原则来筛选统计指标,可以形成反映人与自然、社会关系、经济关系、对外交往等社会和谐情况的统计评价指标体系。而在评价方法上以各指标的离散程度为依据进行加权,则可以使统计评价方法建立在客观基础上,并能够对落后单位形成有效的促进作用。     

基于投入产出模型的旅游卫星账户研究

旅游卫星账户(TSA)作为测算旅游业产业贡献的统计工具,已经得到了世界旅游组织的肯定,但在具体方法上仍然没有形成一个通用的模式。我国的旅游卫星账户应用研究还处在积极探索阶段,针对我国旅游卫星账户研究存在的不足,提出了投入产出型旅游卫星账户的概念、构建原则、建立步骤和方法。同时以广东省为例,采用投入产出型旅游卫星账户研究方法对广东旅游业的产业贡献进行了测算,最后对这一研究方法的优点和局限性进行了探讨。