现代汉语自动分析--Visual C++实现.pdf

现代汉语自动分析--Visual C++实现 计算语言学是计算机科学和语言学相结合的一门学科。它也是研究自然语言的分析和生成，跟自然语言处理有相似的任务。自然语言处理属于人工智能科学，在总目标上是为建立智能计算机服务的，其学科性质更靠近计算机科学。顾名思义，计算语言学属于语言学，在总目标上是为研究人类语言的一般规律服务的，其学科性质更靠近语言学。诚然，计算语言学是要用计算机来研究语言的，但是不能说凡是用计算机来研究语言就是计算语言学。例如，仅仅用计算机检索例句写了一篇语言学论文，就不一定属于计算语言学。计算语言学是通过建立形式化的计算模型来处理自然语言的，例如，隐马乐科夫模型，概率上下文无关语法就是形式化的计算模型。在计算语言学中，计算模型占有中心的地位，它是 用计算机处理语言问题的基本思路。有了计算模型，人们才能研究实现模型的具体算法，编制出实现算法的程序代码。“模型-算法-程序”是本书叙述问题的一条基本线索。 现代汉语自动分析，是用计算机来分析现代汉语语料，这里主要是指分析现代汉语局面语料，而且特别强调把大规模的真实文本作为研究对象。词汇分析和句法分析是其基本内容。作为入门知识，本书将介绍自动分词、词性标注和句法分析等基础的自动分析技术。为了使读者掌握自动4分析的方法并能独立地研究问题，我们还将介绍有关语言统计模型的知识，建立实验平台的步骤和字词检索等实用技术。熟悉语言学的读者可能会奇怪，为什么不市场化语义，语用方面的自动分析问题？是不是在计算语言学中这两个问题不那么重要？不是的，自然语言理解，说

现代汉语自动分析--Visual C 实现.pdf