Web文本情感分类研究综述

论文

情报学报　

ＩＳＳＮ１０００－０１３５

第２９卷第５期９３１－９３８，２０１０年１０月

ＪＯＵＲＮＡＬＯＦＴＨＥＣＨＩＮＡＳＯＣＩＥＴＹＦＯＲＳＣＩＥＮＴＩＦＩＣ

ＡＮＤＴＥＣＨＮＩＣＡＬＩＮＦＯＲＭＡＴＩＯＮＩＳＳＮ１０００－０１３５ｄｏｉ：１０．３７７２桙ｊ．ｉｓｓｎ．１０００－０１３５．２０１０．０５．０２３

Ｗｅｂ文本情感分类研究综述

１

１

１

１）

王洪伟　刘　勰　尹　裴　廖雅国

２

（１畅同济大学经济与管理学院，上海２０００９２；２畅香港理工大学电子计算学系，香港）

能够识别出隐含在其中的情感信息，并发现用户情感的演变规摘要　　对用户发表在Ｗｅｂ上的评论进行分析，

律。为此，本文对Ｗｅｂ文本情感分类的研究进行综述。将情感分类划分为三类任务：主客观分类、极性判别和强度判别，对各自的研究进展进行总结。其中将情感极性判别的方法分为基于情感词汇语义特性的识别和基于统计自然语言处理的识别方法。分析了情感分类中的语料库选择和研究难点。最后总结了情感分类的应用现状，并指出今后的研究方向。

关键词　　Ｗｅｂ文本　情感分类　综述　主观性文本

ＬｉｔｅｒａｔｕｒｅＲｅｖｉｅｗｏｆＳｅｎｔｉｍｅｎｔＣｌａｓｓｉｆｉｃａｔｉｏｎｏｎＷｅｂＴｅｘｔ

ＷａｎｇＨｏｎｇｗｅｉ，ＬｉｕＸｉｅ，ＹｉｎＰｅｉａｎｄＬｉｕＮ．Ｋ．Ｊａｍｅｓ

１

１

１

２

（１畅ＳｃｈｏｏｌｏｆＥｃｏｎｏｍｉｃｓａｎｄＭａｎａｇｅｍｅｎｔ，ＴｏｎｇｊｉＵｎｉｖｅｒｓｉｔｙ，Ｓｈａｎｇｈａｉ２０００９２；２畅ＤｅｐａｒｔｍｅｎｔｏｆＣｏｍｐｕｔｉｎｇ，ＨｏｎｇＫｏｎｇＰｏｌｙｔｅｃｈｎｉｃＵｎｉｖｅｒｓｉｔｙ，ＨｏｎｇＫｏｎｇ）

Ａｂｓｔｒａｃｔ　　Ａｎａｌｙｚｉｎｇｔｈｅｕｓｅｒｓ’ｒｅｖｉｅｗｓｏｎｔｈｅＷｅｂｃａｎｈｅｌｐｕｓｔｏｉｄｅｎｔｉｆｙｕｓｅｒｓ’ｉｍｐｌｉｃｉｔｓｅｎｔｉｍｅｎｔｓａｎｄｆｉｎｄｔｈｅｅｖｏｌｕｔｉｏｎ

ｐｒｏｃｅｓｓｏｆｃｌａｓｓｉｆｉｃａｔｉｏｎｉｎｔｏｔｈｒｅｅｃａｔｅｇｏｒｉｅｓ：ｓｕｂｊｅｃｔｉｖｅａｎｄｏｂｊｅｃｔｉｖｅｃｌａｓｓｉｆｉｃａｔｉｏｎ，ｐｏｌａｒｉｔｙｉｄｅｎｔｉｆｉｃａｔｉｏｎａｎｄｉｎｔｅｎｓｉｔｙ

ｌａｗｓｏｆｔｈｅｉｒｅｍｏｔｉｏｎ．Ｔｏｔｈｉｓｅｎｄ，ｔｈｉｓｐａｐｅｒｉｓａｓｕｒｖｅｙａｂｏｕｔｔｈｅｓｅｎｔｉｍｅｎｔｃｌａｓｓｉｆｉｃａｔｉｏｎｏｎｔｈｅＷｅｂｔｅｘｔ．Ｗｅｄｉｖｉｄｅｄｔｈｅｉｄｅｎｔｉｆｉｃａｔｉｏｎａｎｄｒｅｓｐｅｃｔｉｖｅｌｙｓｕｍｍａｒｉｚｅｔｈｅｒｅｓｅｎｔｒｅｓｅａｒｃｈａｃｈｉｅｖｅｍｅｎｔｓｉｎｔｈｅｓｅｆｉｅｌｄｓ．Ｗｅａｌｓｏｓｏｒｔｅｄｔｈｅｍｅｔｈｏｄｓｏｆｐｏｌａｒｉｔｙｓｕｍｍａｒｉｚｅｄｔｈｅｓｔａｔｕｓｑｕｏｏｆａｐｐｌｉｃａｔｉｏｎａｎｄｐｏｉｎｔｅｄｏｕｔｔｈｅｄｉｒｅｃｔｉｏｎｏｆｆｕｔｕｒｅｒｅｓｅａｒｃｈ．

ｉｄｅｎｔｉｆｉｃａｔｉｏｎｉｎｔｏｔｗｏｔｙｐｅｓ：ｏｎｅｉｓｂａｓｅｄｏｎｔｈｅｅｍｏｔｉｏｎａｌｗｏｒｄｓｗｉｔｈｓｅｍａｎｔｉｃｃｈａｒａｃｔｅｒｉｓｔｉｃｓ，ｗｈｉｌｅｔｈｅｏｔｈｅｒｓｔａｔｉｓｔｉｃｍｅｔｈｏｄｓｏｆ

ｎａｔｕｒａｌｌａｎｇｕａｇｅｐｒｏｃｅｓｓｉｎｇ．Ｗｈａｔｉｓｍｏｒｅ，ｔｈｅｃｈｏｉｃｅｏｆｃｏｒｐｕｓａｎｄｐｏｔｅｎｔｉａｌｒｅｓｅａｒｃｈｐｒｏｂｌｅｍｓａｒｅｄｉｓｃｕｓｓｅｄ．Ａｔｌａｓｔ，ｔｈｉｓｐａｐｅｒ

Ｋｅｙｗｏｒｄｓ　　Ｗｅｂｔｅｘｔｓ，ｓｅｎｔｉｍｅｎｔｃｌａｓｓｉｆｉｃａｔｉｏｎ，ｓｕｒｖｅｙ，ｓｕｂｊｅｃｔｉｖｅｔｅｘｔ　　随着互联网的流行，Ｗｅｂ文本成为我们获取信

息、发表观点和交流情感的重要来源。特别是随着Ｗｅｂ２畅０技术的发展，网络社区、博客和论坛给网络用户提供了更宽广的平台来交流信息和表达意见。这些文章和言论往往包含有丰富的个人情感，比如

对某部大片的影评，对某款手机的用户体验等，其中

蕴含着巨大的商业价值。如何从这些Ｗｅｂ文本中进行情感挖掘，获取情感倾向已经成为当今商务智能领域关注的热点。所谓情感分析（ｓｅｎｔｉｍｅｎｔａｎａｌｙｓｉｓ），就是确定说话人或作者对某个特定主题的

收稿日期：２００９年６月２９日

作者简介：王洪伟，男，１９７３年生，博士，副教授桙博导，研究方向：本体建模和情感计算，Ｅ－ｍａｉｌ：ｈｗｗａｎｇ＠ｔｏｎｇｊｉ．ｅｄｕ．ｃｎ。刘勰，男，１９８５年生，硕士研究生，研究方向：数据挖掘与情感计算。尹裴，女，１９８６年生，硕士研究生，研究方向：商务智能。廖雅国，男，１９５４年生，博士，教授，研究方向：人工智能与电子商务。

１）　本文得到国家自然科学基金项目（７０５０１０２４，７０９７１０９９）；教育部人文社会科学资助项目（０５ＪＣ８７００１３）；上海市重点学科建设项目（Ｂ３１０）；香港研究资助局项目（ｐｏｌｙＵ５２３７桙０８Ｅ）资助。

—９３１—

论文

态度。其中，态度可以是他们的判断或者评估，他们（演说、写作时）的情绪状态，或者有意（向受众）传递的情感信息。因此，情感分析的一个重要问题就是情感倾向性的判断，即判断作者的观点是褒义的、积极的，还是贬义的、消极的。这类问题也被称为情感分类（ｓｅｎｔｉｍｅｎｔｃｌａｓｓｉｆｉｃａｔｉｏｎ）。

情报学报　第２９卷　第５期　２０１０年１０月

千摹瑚摹章溥藁千猫、晖覃章，隍瀑躺溯浔篥碍凿

在整个情感分类过程中，还涉及分类前的预处

理技术，包括分词、词性标注、平滑、停用词和缩词的处理等语言处理技术，这些技术相对成熟，不再赘述。下面从主客观文本分类和情感识别两个方面来总结情感分类的研究现状。

２　主客观文本分类现状

１　文本情感分类概述

所谓“主观性”是指在自然语言中用来表达意见

在已有的研究中，情感分类也被称为意见挖掘（ｏｐｉｎｉｏｎｍｉｎｉｎｇ）。为了表述一致，本文统称为情感分类。情感分类涉及多个领域，如自然语言处理、人工智能、自动文本分类、文本挖掘、心理学等。它不同于传统的基于主题自动文本分类，后者分类的依据是文本的主题，如属于军事类还是体育类，而情感分类主要用来判别自然语言文字中表达的观点、喜好以及与感受和态度等相关的信息

［３］

［１，２］

和评价的语言特性

［４］

。主观性文本表达的是说话者

对某人、某物或某事的态度和看法，包含个人的主观情感色彩。与之相对应的客观性文本则描述客观存

在的事实，说话者往往持有中立和客观的情感。在表述上，主客观文本也有明显的差异，客观性文本通常采用比较正式的陈述句，而主观性文本因为强调自我表达，表述上比较自由，偏口语化，比如“这款手机酷毙啦！”。

。由于Ｗｅｂ

＼Ｊ＼Ｏ＼。Ｊ＼一５

文本是以非结构化形式存在的，因此对文本进行情

感分类是一个复杂的过程，包括：主客观文本分类、情感极性判别、情感强度判别。前者是情感分类的预处理工作，后两者才是真正意义上的情感分类。为了避免混淆，我们将后两者统称为情感识别（见图１）。

图１描述了从原素材到得出情感结果的整个情感分类过程。其中，原素材中的文本可以是句子或者是整篇文章，它们所对应的分类任务分别为句子情感分类和文档情感分类。为了减少干扰，提高情感分类的精度，首先要对文本进行主观性识别，即主客观文本分类。只有带有主观色彩的文本才会蕴含着作者的情感，所以情感识别的对象是主观文本。情感识别分为极性判别和强度判别两个任务。极性分类是识别主观文本的情感是正面的赞赏和肯定还是负面的批评与否定。而强度判别则是判定主观文本情感倾向性强度，比如强烈贬抑、一般贬抑、客观、一般褒扬、强烈褒扬五个类别。

主客观文本分类研究已经展开，并应用在信息检索和信息抽取等领域。主客观文本分类与其他

文本分类类似，可以从篇章、句子和词语三个层面展开，用到的方法主要是机器学习算法。研究

［４～１１］

［５］

Ｗｉｅｂｅ等很早就对主客观文本分类问题进行了

。Ｗｉｅｂｅ和Ｂｒｕｃｅ将某些词类（代词、形容

［６］

词、基数词、情态动词和副词）、标点和句子的位置作为特征值，设计了针对句子级别的ＮＢ分类器

［５］

。

在此基础上，Ｗｉｅｂｅ又将某些词性和基于词典的语Ｗｉｅｂｅ和Ｗｉｌｓｏｎ还针对基于篇章层面的分类方法进

［７］

行了研究。通过计算每篇文档中出现的主观性词语数量，用ＫＮＮ分类器来判断篇章的主客观性，取得了较好效果。

义词作为特征项，显著提高了分类器的分类效果。

Ｙｕ等利用三种统计方法进行主客观句的识别研究，包括相似性方法、ＮＢ分类和多重ＮＢ分类。其中ＮＢ分类器在原有研究的基础上采用词、２－ｇｒａｍ、３－ｇｒａｍ和词类、具有情感倾向的词序列、主语

｜Ｄｌ＿√

图１　情感分类的主要过程

—

９３２—

论文

和其直接修饰成分等作为特征项，对主观句识别的查准率和查全率达到了８０％～９０％

［１２］

。

个重要因素Ｐａｎｇ和Ｌｉ，用最小图割将句子间的情感联系作为分类的一（Ｍｉｎｉｍｕｍｃｕｔｓ）的方法来寻找上下文语句的关系以提高分类精度。它的划分原理是是使成本公式最小：ｘ∈∑

Ｃ

ｉｎｄ２（ｘ）＋

１

ｘ∈∑

Ｃ

ｉｎｄ１（ｘ）

２

＋

ｘｘｋ），其中ｘ句子，Ｃｉ是类别，

ｉ

∈Ｃ∑

，ｘ∈ａｓｓｏｃ（ｘｉ，１

ｋ

Ｃ

２

ｉｎｄｊ（ｘｉ）指单根据ｘｉ的特征将其划分为ｊ类的偏好得分，ａｓｓｏｃ（ｘｉ，ｘｋ）指ｘｉ和ｘｋ属于同一类的得分

［１３］

。

中文语境下主客观文本分类具有一定的复杂性，而且对中文主观性文本的判别起步较晚，大多数情感分析研究都是人为抽取主观性文本。

林斌将影视内容介绍和影视评论分别视为客观文ｉｎｆｏｒｍａｔｉｏｎ本和主）计算影视评论中每个词语的互信息量观文本，采用互信息量（ＭＩ，ｍｕｔｕａｌ并由大到小排序，取最靠前的２７５个词语，并将它们，

两两组合，再计算每对组合在影视评论中的互信息量，最后得到“我想”“我应该”等具有主观倾向的７５个词语组合，并将其用于句子主客观性的判断，总体的准确率达到了７８畅４２％

［１４］

。

叶强和张紫琼等提出一种根据连续双词词类组合模式（２－ＰＯＳ）自动判别句子主客观性程度的方法。首先在Ｎ－ＰＯＳ语言模型的基础上，利用ＣＨＩ统计方法提取中文主观文本词类组合模式，利用这些组合模式给每个句子赋以主观性得分，将得分高于设定阈值的句子判定为主观性文本。实验表明，当阈值为０畅１２时，主观文本的分类查准率和查全率能达到７６％

［１５］

。

需要指出，由于中英文语言结构及中西方文化的差异，使得中文的情感流露方式具有特殊性和复杂性，这给中文文本的情感分析带来挑战。与英文文本多都应用机器学习不同，中文文本的主客观分类主要采取语义方法，而且分类效果也不够理想，相比于英文能达到９０％左右的精度，中文的研究分类精度还不够高。这主要由于影响中文文本主客观判断的因素远远比英文多而复杂，除了词义、词性之外，词语的用法也会影响到文本的主客观性质。因此在今后中文文本主观性判别研究中，除了引入机器学习算法外，还要注意考虑中文词法和句法的特殊功能。

另外，一些研究将主客观分类和褒贬情感分类

同时看作三分类问题，将文本分成为“褒义”、“贬

义”、“客观”。前两类归为主观文本，后者视为客观文本。王根和赵军指出这种观点忽略了两个任务所用特征的不同，即将主客观和褒贬极性的特征夹杂在一起，影响了分类效果

［１６］

。本文认为，主客观分

类中的“客观”类和情感分析中的“客观”类是两个不同概念。比较下面两句话：“这部电影耗资两亿，将于明天在上海万达影城上演首映”；“这部电影整体上还算四平八稳，跟我的预期有点差距，但也不算失望”。前一句是陈述客观事件，是客观文本。而后一句显然是作者的主观评价，却不带有明显的褒或贬。因此对它的分类过程是：首先将其归为主观性文本，然后通过情感分析再归为情感类别中的“客观”（或“中立”）类。所以，非褒非贬并不是作者没情感，而是情感倾向并不明显，持中立态度。如果将双分类任务看成一个多分类问题的话，会错误地把带有主观性但情感倾向不明显的文本分类为客观性文本，影响情感分类的科学性。为了避免混淆，在后面的表述中，本文将情感分类结果中的非褒非贬统称为“中立”类。

３　情感识别现状

３畅１　文本情感极性研究

３畅１畅１　基于情感词汇语义特性的识别　　基于情感词汇语义特性的识别是指利用词语的感情色彩来判断文本的情感极性，主要有两种研究方法：计算词语情感得分

［１７，１８］

和构造情感词

［１９～２１］

。

（１）计算词语情感得分的方法

方法

Ｔｕｒｎｅｙ［１７］

。该方法提取出符合一定模式的形容词或

提出基于情感词组的ＳＯ－ＰＭＩ语义分类

副词双词词组作为情感词组。并定义逐点互信息量（ＰＭＩ，ＰｏｉｎｔｗｉｓｅＭｕｔｕａｌＩｎｆｏｒｍａｔｉｏｎ）来计算词ｗ１和ｗ２之间的语义相关性：ＰＭＩ＝ｌｏｇ１，ｗ２）

２

１）ｐ（ｗ２）

。ｐ

（ｗ１，ｗ２）表示ｗ１和ｗ２同时出现的概率。计算抽取ＳＯ出的词组与情感词“ｅｘｃｅｌｌｅｎｔ”和“ｐｏｏｒ”的ＰＭＩ，并用

倾向性（ｓｅｍａｎｔｉｃ：ＳＯ（ｏｐｉｎｉｏｎｗ）＝ｏｒｉｅｎｔａｔｉｏｎＰＭＩ（ｗ，“）ｅｘｃｅｌｌｅｎｔ来计算该词组的语义”）－ＰＭＩ（ｗ，“ｐｏｏｒ”），这样就确定了每个情感词组的情感倾向。最后通过计算评论中所有提取出的情感词组的平均ＳＯ评值来区分情感极性，推荐该评论描述的对象。如果该值大于零，如果小于零则不推荐，表示好。

—

９３３—

论文

情报学报　第２９卷　第５期　２０１０年１０月

ｓｃｏｒｅＤａｖｅ（ｔ和ｉ）＝［

Ｌａｗｒｅｎｃｅ等对语料中的每个词打分：

ｉｉ］，ｔｉ是一个

词，Ｃ是一个情感类型。然后计算文档中所有词的得分总和，根据下式来识别新文档的类别：ｃｌａｓｓ（ｄｊ）＝

Ｃ

ｅｖａｌ（ｄｊ）＞０Ｃ′

ｏｔｈｅｒｗｉｓｅ

，其中文档ｄｊ＝

ｔ（ｄｊ）＝

∑［１８］

１…ｔｎ，ｅｖａｌｉ

ｓｃｏｒｅ（ｔ

ｉ

）

。

（２）构造情感词的方法

还有一些工作尝试建立情感词典来匹配文档的情感。Ｔｏｎｇ手工建立了一本针对影评分类的情感词典

［１９］

。首先人工抽取出影评相关的情感词汇（比

如ｅｄｉｔｉｎｇ“ｇｒｅａｔａｃｔｉｎｇ”，“ｗｏｎｄｅｒｆｕｌｖｉｓｕａｌｓ”，“感倾向”）（“。ｐｏｓｉｔｉｖｅ同时对每一个情感词汇按其所代表的情

ｕｎｅｖｅｎ”或“ｎｅｇａｔｉｖｅ”）进行人工标记，并加到专门的情感词典，最后利用这个词典去判断影评的情感态度。但是该方法建立的情感词典往往是面向特定领域的，每一个分析对象都需要构建一本词典ｎｅｇａｔｉｖｅ。而Ｈｕ的种和子Ｌｉｕ形在容手词工词建汇立表的的已基知础ｐｏｓｉｔｉｖｅ上，利和ＷｏｒｌｄＮｅｔ用

的语义倾向中词间的同义和近义关系来判断新情感词，并以此判断观点的情感极性

［２０］

。

建立情感词来判别文本情感的方法存在两个问题：①基于词典的识别方法以分析词汇情感为基础，但忽略了句子中否定词对情感的影响，造成句子级别和文档级别的分类精确度下降。②所选的情感词往往是情感特征比较强烈的词语（主要是形容词和副词），而还有一些词汇往往隐含着说话人正面或负面的情绪。比如“爆炸”、“车祸”隐含了较多负面情感，而“舞会”、“打折”往往表达了正面情感。为了克服单一靠人工建立的词汇在情感解释力上的缺乏性，Ｌｉｕ等使用ＯｐｅｎＭｉｎｄＣｏｍｍｏｎＳｅｎｓｅ对Ｃｏｍｍｏｎ人类通用情感进行学习和解释

［２１］

。ＯｐｅｎＭｉｎｄ

世界中的事件Ｓｅｎｓｅ是一个常识知识库、行为、对象进行通用的情感推理，可以用来对客观。首先从知识库中选出典型的六类情感词汇（高兴、悲伤、愤怒、恐惧、厌恶和惊奇），然后根据知识库中的概念关系对其他概念进行情感赋值。比如，知识库有这么两句话：“发霉的面包很恶心”，“新鲜的面包很美味”。那么，在“恶心”和“美味”分别被归类为厌Ｍｏｄｅｌ恶和高兴的基础上，修饰语言模型（ＭｏｄｉｆｉｅｒＵｎｉｇｒａｍ

为表示厌恶和高兴的概念）可以分别将发霉和新鲜这两个修饰语也判断。

—

９３４—

（３）中文文本研究现状在中文文本识别方面，用情感词汇来判断文本情感的方法相对较少。金聪等将Ｔｕｒｎｅｙ的ＰＭＩ－ＳＯ方法应用到对中文语料的情感判断上，同时用典型文档的语义倾向值的平均值作为阈值来代替零值作

为两级情感的分类界限，改善了分类效果［２２］

。李钝从语言学角度出发，分析词典中词对语义的特点，采用“情感倾向定义”权重优先的方法计算短语中各词的语义倾向度，然后分析短语中各词组合方式的特点，提出中心词概念来对各词的倾向性进行计算，以识别短语的倾向性和倾向强度。实验表明，该方法对短语的倾向分类识别效果较好，可为

更大粒度的文本倾向识别打好基础［２３］

。　　３畅１畅２　基于统计自然语言处理的识别方法基于统计自然语言处理的方法，是指利用机器学习算法对统计语言模型进行训练，最后用训练好的分类器对新文本进行识别。

一些研究将基于主题的机器分类算法用于情感极性识别。Ｐａｎｇ和Ｌｉ等采用不同的特征选择方法，应用了ＮＢ、ＭＥ（ＭａｘｉｍｕｍＥｎｔｒｏｐｙ）、ＳＶＭ对电影评论

进行分类［２４］

。在他们的另一项工作中，将文本极性分类问题转换成求取句子连接图的最小分割问题，

实现了一个基于ｍｉｎｉｍｕｍ－ｃｕｔ的分类器［１３］

。Ｎｉ等利用ＣＨＩ和信息增益进行特征选择，并采用ＮＢ、ＳＶＭ

和Ｒｏｃｃｈｉｏ’ｓ算法对情感分类［２５］

。Ｍｕｌｌｅｎ等和Ｗｈｉｔｅｌａｗ择和处理等都用到上不同ＳＶＭ［２６，２７］

算法。Ｃｕｉ，只是他们在特征的选

等利用ＰＡ（Ｐａｓｓｉｖｅ－Ａｇｇｒｅｓｓｉｖｅ器，并比较了它们的性能）、ＬＭ（Ｌａｎｇｕａｇｅ［２８］

Ｍｏｄｅｌｉｎｇ。下面从特征选择和算）和Ｗｉｎｎｏｗ分类

法性能两个方面对基于机器学习算法的情感识别进行小结：

（１）特征选择

ＵｎｉｇｒａｍｓＰａｎｇＵｎｉｇｒａｍｓ、等在实验中分别使用以词频作为权重的以布尔值作为权重的Ｕｎｉｇｒａｍｓ、Ｂｉｇｒａｍｓ、Ｕｎｉｇｒａｍｓ＋特征［２４］

。、形容词Ｂｉｇｒａｍｓ实验结果发现、Ｕｎｉｇｒａｍｓ、Ｕｎｉｇｒａｍｓ，使用布尔值＋＋词语的位置作为其语言

词性、最前面２６３３的Ｕｎｉｇｒａｍ作为特征的分类效果最好，使用Ｂｉｇｒａｍ、词性、形容词和词语的位置作为特征并不能达到预期的分类精度。而ｇｒａｍｓＣｕｉ２、３、４（等指出、ｎ５≥Ｐａｎｇ的研究语料较小，无法体现出ｎ－

［２８］

、６３）时的实验结果的优势。他们对比了ｎ分别等于１、，发现当ｎ＝６时，分类效果最好，特别是识别负面（ｎｅｇａｔｉｖｅ）文本的分类器的

论文

准确度有明显改善Ｔｕｒｎｅｙ，达到７０畅０３％。Ｍｕｌｌｅｎ价值词组的情感词五种组合模式提取出来的词组称为等将按（ｖａｌｕｅｐｈｒａｓｅｓ），然后利用ＷｏｒｌｄＮｅｔ计算出所有形容词的ＥＶＡ、ＰＯＴ和ＡＣＴ值，并将这三个值和价值词组的ＳＯ值一起作为特征，最后再用ＳＶＭ分类器进行分类，实验结果表明该方法的分类效果也是好于以前的方法［１７，２６］

。另外，Ｐａｎｇ等的实验结果还表明使用布尔值作为特征值权重的比使用词频

为权重的实验精度要高［２４］

。

（２）分类性能比较

分类器Ｃｕｉ，等的实验对比表明Ｗｉｎｎｏｗ次之，ＬＭ最差，平均表现最好的是［２８］

。Ｐａｎｇ等的研究表ＰＡ

明，基于机器学习的分类器要比手工分类效果好很多ＮＢ，而在三类分类器中分类效果还是远差于对文本主题的分类都好，但是实验结果同时还表明，ＳＶＭ分类器的表现比，对文本的情感

ＭＥ和［２４］

。

国内方面，徐军等用朴素贝叶斯和最大熵模型分别对新闻及评论语料进行了情感分类研究，发现选择具有语义倾向的词汇（特别是形容词和名词）对情感分类效果具有决定性作用，采用二值作为特征项权重相比采用词频作为权重的方法更能提高分类的准确率。并且最大熵模型比ＮＢ的分类效果明

显好［２９］

。

唐慧丰等对部分基于监督学习的中文情感分类技术做了比较研究，在文本特征方面，采用Ｎ－Ｇｒａｍ以及名词、动词、形容词、副词作为不同的文本表示特征；以互信息、信息增益、ＣＨＩ统计量和文档频率作为不同的特征选择方法Ｗｉｎｎｏｗ不同的特征数量和不同规模的训练集情况下、ＮＢ和ＳＶＭ作为不同的文本分类方法；以中心向量法、ＫＮＮ、，；并在分别

进行了中文情感分类实验［３０］

。实验结果表明：采用ＢｉｇｒａｍＳＶＭ征的情况下分类方法特征表示方法、信息增益特征选择方法和，情感分类能取得较好的效果，在足够大训练集和选择适当数量特。３畅２　文本情感强度研究

对于某些应用，单纯的褒贬分类是不够的，还需要区别褒贬情感的强弱。这种任务称为情感强度分类，它是一种特殊的分类问题，因为强弱分类的类别是离散且有等级的。文本情感强度分析主要有三类方法：多分类方法，回归方法，序列标注方法。

（１）多分类方法

多分类方法即将文本的每个强度等级当作一个类别，构造分类器对其分类。最常见的处理是将文

本强度分成强烈贬抑、一般贬抑、客观、一般褒扬、强

烈褒扬五个类别。Ｌｉｎ等在研究语料的观点问题时，采用ＬＳＰＭ（ＬａｔｅｎｔＳｅｎｔｅｎｃｅＰｅｒｓｐｅｃｔｉｖｅＭｏｄｅｌ）对未经

标注的语句的观点及其五类强度进行判断［３１］

。但是此类方法得到的结果往往忽略了情感渐变过程，

造成训练模型不够准确，影响了分类精度［１６］

。（２）回归方法

回归方法即用回归算法来对文本的强度进行拟合。Ｐａｎｇ和Ｌｉ就用了ＳＶＭ回归方法对文本情感强

度进行了回归评分［３２］

。此外，他们还根据相似度越高标记越相近的原理，提出一种基于度量标记（ｍｅｔｒｉｃｌａｂｅｌｉｎｇ）的元算法（ｍｅｔａ－ａｌｇｏｒｉｔｈｍ）对文本进行评分ＳＶＭ回归方法都好，实验表明此方法的效果比多分类方法和（３）序列标注方法

。

ＣＲＦｓ近年Ｃｈｕｎｋｉｎｇ）模型来大，条量件地随应机场用于（Ｃｏｎｄｉｔｉｏｎ序列标注Ｒａｄｏｍ任务Ｆｉｅｌｄｓ，比如，应用于文本倾向性分析任务，ＮＥＲ，Ｐａｒｓｉｎｇ等。同时，并以此产生出针对特

，ＣＲＦｓ模型也逐步定问题的基于ＣＲＦｓ模型的其他图模型方法［３３］

。Ｍａｏ感流问题和ＭｃＤｏｎａｌｄ，并利用序列等把句子的褒贬标记看作一个情ＣＲＦｓ回归模型来给篇章中

的每个句子进行打分［３４，３５］

。为了减轻褒贬度分析中信息冗余对强度分类的影响，刘康等在ＣＲＦｓ的框架下，考虑句子褒贬度与褒贬强度之间的层级关系，充分利用上下文的信息以及特征的层级特性，提出

了基于层叠ＣＲＦｓ模型的句子褒贬度分析模型［３３］

。

总体而言，对文本进行情感强度的研究还不多，但是在电子商务网站中，情感强度的识别对于个性化客户服务来说可能更有意义。

４　其他相关问题

４畅１　语料库的选择

不管是基于语义的方法还是机器算法都需要大规模的情感语料支撑，目前常用的语料库有以下几类：

（１）评论类语料

评论类语料库是目前最常用的语料数据，包括影评［１７，２４］、产品评论［１３，２８］、音乐评论［２６］

等。众多研究选择评论类语料是因为：一是评论类语料数量众多，方便获得。随着电子商务、网络社区的发展，到处都是关于电影、产品的评论，这些数据为文本分类研究提供了充足的素材；二是可近似地将评论类语

—

９３５—

论文

情报学报　第２９卷　第５期　２０１０年１０月

料视作主观性文本，无需主客观文本分类即可直接用来情感识别。

（２）词汇知识库

库，多种词汇关系和语义关系被用来表示词汇知识ＷｏｒｌｄＮｅｔ是一个按语义关系网络组织的英文词的组织方式。有许多研究就直接利用ＷｏｒｌｄＮｅｔ中词汇间的距离来揭示情感倾向的关系［３６，３７］

。Ｌｉｕ等使用的ＯｐｅｎＭｉｎｄＣｏｍｍｏｎＳｅｎｓｅ是常识知识库，它描述了世界上最基本的概念和相关的关系，以此来扩展

描述情感的“概念”［２１］

。作为最大的中文词汇知识库，ＨｏｗＮｅｔ为国内研究者提供了进行中文情感研究

的渠道［３８，３９］

，主要有基于语义相似度的方法和基于语义相关场的方法。

（３）其他语料库

徐琳宏等综合现有的各种情感词汇资源构造情感词汇本体，他们采用手工分类和自动的方法来获取本体的知识，包括词汇的情感类别、强度和极性［４０］

。在此基础上，对基于本体的情感分类方法进行了研究。路斌等利用中文同义词词林来计算词汇褒贬，该方法利用同义词词林中的同义词词群，将种

子词汇扩展得到更大的褒贬义词集合［４１］

。４畅２　研究难点

由于Ｗｅｂ文本的表述形式多样，没有统一的规范，给文本挖掘和情感分类带来了许多困难。另外，随着研究的细化，Ｗｅｂ文本挖掘和情感分析的任务也不仅仅限于判定情感的倾向和强度。本文将情感分析中的其中几个难点罗列如下：

（１）网络用词

主观性文本往往口语化，甚至会频繁出现时髦的网络用语，比如“做人不能太ＣＮＮ！”，在这里，“ＣＮＮ”无疑是识别这句话情感倾向的关键。不断涌现的网络用语给情感分类提出了更高的时效性要求。又如“太ＢＳ这部手机的性价比了。”ＢＳ是贬义词“鄙视”的缩写，这句话表达的是负面情感。可以看出，缩词的使用也给情感分析的准确度带来了很大影响。

（２）表达方式

除了情感词汇之外，句子的表达方式也会对句子的褒贬情感产生巨大影响。比较下面两句话：“这瓶洗发水，适合头发很干的人用。”“用了这瓶洗发水，头发会变得很干。”这两个句子的用词差不多，“洗发水”，“头发”，“很干”。但是第一句是褒义，第二句则很可能是贬义。还有一类和表达方式有关的

—

９３６—

问题是“反话”。很多褒义词受论坛文化的影响，有

往贬义发展的趋势，比如“您太有才了”等。让机器理解这些表达方式也是情感分析面临的一个挑战。

（３）关系抽取

识别情感和特定主题的关系是情感分析的又一任务。比如这样一条评论：“Ｓｏｎｙ笔记本的外观蛮好看，就是价格太贵了”。在面向电子商务的情感分析中，就需要识别顾客对Ｓｏｎｙ外观和价格所持有的不同情感。另外同样的词语由于描述的对象不同，表达的情感也会不同，比如在产品评论中，同样是“少”，在描述“价格少”时是一种褒义、积极的情感，而“种类少”却是是一种贬义、消极的情感。这些问题就涉及识别情感所描述的对象问题，即关系抽取。

５　研究展望

情感分类过程主要有上下承接的两个任务：主客观文本分来和情感识别。总体上，随着自然语言处理技术的发展，国内外的研究已经取得了不小的成果，在评论分析、个性化推荐和舆论监控等方面也得到了应用，如Ｄａｖｅ研发的ＲｅｖｉｅｗＳｅｅｒ是世界上第一个情感分析工具，也是第一个针对产品评论区别

其褒贬性的系统［４２］

。Ｇａｍｏｎ等开发的Ｐｕｌｓｅ系统可自动挖掘网上用户对汽车评价中的贬褒信息和强弱

程度［４３］

。Ｌｉｕ等开发的ＯｐｉｎｉｏｎＯｂｓｅｒｖｅｒ系统可以处理网上顾客对产品的评价，对涉及产品各种特征的优缺点进行统计，并采用可视化方式对产品特征的

综合质量进行比较［４４］

。但这些应用仍不尽如人意，今后还需在以下几方面展开深入研究：

１）相比于面向主题的文本分类，情感分类的精度还比较低，主要由用词习惯、表达方式等问题造成的。如何提高情感分类的准确率和召回率，是今后的研究重点。

２）利用文本的更多特征来提高情感分类效果。如标点符号对文本的情感表达有特殊作用，“！”号和“？”的情感强度明显强于其他标点，但目前的研究中还鲜有考虑。

３）将情感分析分成主客观文本分类和情感分类两个步骤，甚至在此基础上还要进行强度分类，这会造成冗余问题：前一步骤的误差同时会影响到后面步骤的准确度。考虑冗余问题的情感分析建模也是今后的研究方向之一。

４）除单纯地识别情感态度和强度，文本情感分类还需与其他文本挖掘技术结合，实现情感和情感

论文

对象的关系抽取，挖掘出比单独的褒或贬的情感倾向更有价值的信息，以提高情感分类的应用价值。

参考

文

献

［１］　ＰｅｋａｒＶ，ＯｕＳ．Ｄｉｓｃｏｖｅｒｙｏｆｓｕｂｊｅｃｔｉｖｅｅｖａｌｕａｔｉｏｎｓｏｆ

Ｍａｒｋｅｔｉｎｇｐｒｏｄｕｃｔｆｅａｔｕｒｅｓ，２００８ｉｎ，１４（２）ｈｏｔｅｌ：１４５－ｒｅｖｉｅｗｓ１５５［Ｊ］　姚天，程希文，徐飞玉，等．文本意见挖掘综述．

］．ＪｏｕｒｎａｌｏｆＶａｃａｔｉｏｎ

［２［Ｊ］．

中文信息学报，２００８，２２（５）：７１－８０．

［３］　陈博．Ｗｅｂ文本情感分类中关键问题的研究［Ｄ］．北

京：北京邮电大学博士论文，２００８．

［４］　ＷｉｅｂｅＪ．Ｔｒａｃｋｉｎｇｐｏｉｎｔｏｆｖｉｅｗｉｎｎａｒｒａｔｉｖｅ［Ｊ］．［５］　ＷｉｅｂｅＣｏｍｐｕｔａｔｉｏｎａｌＪ．ＬｅａｒｎｉｎｇＬｉｎｇｕｉｓｔｉｃｓｓｕｂｊｅｃｔｉｖｅ，１９９４ａｄｊｅｃｔｉｖｅｓ，２０（２）ｆｒｏｍ：２３３－ｃｏｒｐｏｒａ２８７．

［Ｃ］∥

Ｐｒｏｃ．ｏｆｔｈｅ１７ｔｈ

（ＡＡＡＩ－２０００）．ＴｅｘａｓＮａｔｉｏｎａｌ，ＵＳＡＣｏｎｆ，２０００．ｏｎ．

ＡｒｔｉｆｉｃｉａｌＩｎｔｅｌｌｉｇｅｎｃｅ

［６］　ＷｉｅｂｅＪ，ＢｒｕｃｅＲ，Ｏ’ＨａｒａＴ．Ｄｅｖｅｌｏｐｍｅｎｔａｎｄｕｓｅｏｆａ

ｇｏｌｄＰｒｏｃｓｔａｎｄａｒｄ．ｏｆｔｈｅｄａｔａｓｅｔ３７ｔｈ

ＡｎｎｕａｌｆｏｒｓｕｂｊｅｃｔｉｖｉｔｙＭｅｅｔｉｎｇｃｌａｓｓｉｆｉｃａｔｉｏｎｓ［Ｃ］∥

２４６－Ｃｏｍｐｕｔａｔｉｏｎａｌ２５３．

Ｌｉｎｇｕｉｓｔｉｃｓ（ＡＣＬ－９９），ｏｆＳｅａｔｔｌｅｔｈｅＡｓｓｏｃｉａｔｉｏｎ，ＵＳＡ，１９９９ｆｏｒ

：［７］　ＷｉｅｂｅＪ，ＷｉｌｓｏｎＴ，ＢｒｕｃｅＲ，ｅｔａｌ．Ｌｅａｒｎｉｎｇｓｕｂｊｅｃｔｉｖｅ

ｌａｎｇｕａｇｅ［８］　ＵＳＡＢｒｕｃｅ，２００２［Ｒ］．ＴｅｃｈｎｉｃａｌＲｅｐｏｒｔＴＲ－０２－１００，Ｐｅｎｎｓｙｌｖａｎｉａ，Ｒ，Ｗｉｅｂｅ．

Ｊ．Ｒｅｃｏｇｎｉｚｉｎｇｓｕｂｊｅｃｔｉｖｉｔｙ：Ａｃａｓｅｓｔｕｄｙ

ｉｎ１９９９ｍａｎｕａｌ，５（２）ｔａｇｇｉｎｇ：１８７－２０５［Ｊ］．

．ＮａｔｕｒａｌＬａｎｇｕａｇｅＥｎｇｉｎｅｅｒｉｎｇ，

［９］　ＷｉｌｓｏｎＴ，ＷｉｅｂｅＪ，ＨｏｆｆｍａｎｎＰ．Ｒｅｃｏｇｎｉｚｉｎｇｃｏｎｔｅｘｔｕａｌ

ＨｕｍａｎｐｏｌａｒｉｔｙｉｎＬａｎｇｕａｇｅｐｈｒａｓｅｌｅｖｅｌＴｅｃｈｎｏｌｏｇｉｅｓｓｅｎｔｉｍｅｎｔＣｏｎｆｅｒｅｎｃｅａｎａｌｙｓｉｓ［桙ＣＣｏｎｆｅｒｅｎｃｅ］∥Ｐｒｏｃ．ｏｎｏｆ

ＥＭＮＬＰＥｍｐｉｒｉｃａｌ２００５）Ｍｅｔｈｏｄｓ．ＶａｎｃｏｕｖｅｒｉｎＮａｔｕｒａｌ，ＣａｎａｄａＬａｎｇｕａｇｅ，２００５Ｐｒｏｃｅｓｓｉｎｇ：３４７－３５４（．ＨＬＴ桙［１０］　ＨａｔｚｉｖａｓｓｉｌｏｇｌｏｕＶ，ＷｉｅｂｅＪ．Ｅｆｆｅｃｔｓｏｆａｄｊｅｃｔｉｖｅｏｒｉｅｎｔａｔｉｏｎ

ａｎｄＩｎｔ’ｌｇｒａｄａｂｉｌｉｔｙＣｏｎｆ．ｏｎｏｎＣｏｍｐｕｔａｔｉｏｎａｌｓｅｎｔｅｎｃｅｓｕｂｊｅｃｔｉｖｉｔｙＬｉｎｇｕｉｓｔｉｃｓ［Ｃ（ＣＯＬ］∥ＰｒｏｃＩＮＧ－．２０００）ｏｆ１８

ｔｈ

．［１１］　ＷｉｅｂｅＮＪ，ＵＳＡＪ，，２０００Ｗｉｌｓｏｎ．

Ｔ，ＢｅｌｌＭ．Ｉｄｅｎｔｉｆｙｉｎｇｃｏｌｌｏｃａｔｉｏｎｓｆｏｒ

ｒｅｃｏｇｎｉｚｉｎｇｏｐｉｎｉｏｎｓ［Ｃ］∥Ｐｒｏｃ．ｏｆ［１２］　ＹｕｏｎＣｏｌｌｏｃａｔｉｏｎＨ，Ｈａｔｚｉｖａｓｓｉｌｏｇｌｏｕ．Ｔｏｕｌｏｕｓｅ，ＶＦｒａｎｃｅ．Ｔｏｗａｒｄｓ，２００１ｔｈｅＡＣＬａｎｓｗｅｒｉｎｇ．

－０１Ｗｏｒｋｓｈｏｐ

ｏｐｉｎｉｏｎ

ｑｕｅｓｔｉｏｎｓｐｏｌａｒｉｔｙｏｆ：ｏｐｉｎｉｏｎｓｅｐａｒａｔｉｎｇｆａｃｔｓｆｒｏｍｏｐｉｎｉｏｎｓａｎｄｉｄｅｎｔｉｆｙｉｎｇｔｈｅＳａｐｐｏｒｏｏｎＥｍｐｉｒｉｃａｌ，ＪａｐａｎＭｅｔｈｏｄｓｓｅｎｔｅｎｃｅｓ，２００３：１２９－ｉｎＮａｔｕｒａｌ［Ｃ］∥Ｐｒｏｃ１３６．

Ｌａｎｇｕａｇｅ．ｏｆｔｈｅＰｒｏｃｅｓｓｉｎｇ２００３Ｃｏｎｆ．．

［１３］　ＰａｎｇＢ，ＬｅｅＬ．Ａｓｅｎｔｉｍｅｎｔａｌｅｄｕｃａｔｉｏｎ：Ｓｅｎｔｉｍｅｎｔ

ａｎａｌｙｓｉｓｃｕｔｓｎｄ

Ｃｏｍｐｕｔａｔｉｏｎａｌ［Ｃ］ｕｓｉｎｇ∥ＰｒｏｃｓｕｂｊｅｃｔｉｖｉｔｙｓｕｍｍａｒｉｚａｔｉｏｎｂａｓｅｄｏｎｍｉｎｉｍｕｍＬａｎｇｕａｇｅｓ．ｏｆｔｈｅ４２．ＢａｒｃｅｌｏｎａＭｅｅｔｉｎｇｏｆ，ＳｐａｉｎｔｈｅＡｓｓｏｃｉａｔｉｏｎ，２００４：２７１－

ｆｏｒ

２７８．

［１４］　林斌．基于语义技术的中文信息情感分析方法研究

［Ｄ］．哈尔滨：哈尔滨工业大学硕士论文，２００７．

［１５］　叶强，张紫琼，罗振雄．面向互联网评论情感分析的

中文主观性自动判别方法［Ｊ］．信息系统学报，２００７，１（１）：７９－９１．

［１６］　王根，赵军．基于多重冗余标记ＣＲＦｓ的句子情感分

析研究［Ｊ］．中文信息学报，２００７，２１（５）：５１－５５．［１７］　ＴｕｒｎｅｙＰ．ＴｈｕｍｂｓＵｐｏｒＴｈｕｍｂｓｄｏｗｎ？Ｓｅｍａｎｔｉｃ

ｏｒｉｅｎｔａｔｉｏｎ［Ｃ］∥Ｐｒｏｃａｐｐｌｉｅｄ．ｏｆｔｈｅｔｏ４０ｕｎｓｕｐｅｒｖｉｓｅｄｔｈ

ＡｎｎｕａｌＭｅｅｔｉｎｇｃｌａｓｓｉｆｉｃａｔｉｏｎｏｆｔｈｅＡｓｓｏｃｉａｔｉｏｎ

ｏｆｒｅｖｉｅｗｓ［１８］　ＤａｖｅｆｏｒＣｏｍｐｕｔａｔｉｏｎａｌＫ，ＬａｗｒｅｎｃｅＬｉｎｇｕｉｓｔｉｃｓＳ，Ｐｅｎｎｏｃｋ．ＮＪ，ＵＳＡＤ．Ｍｉｎｉｎｇ，２００２：４１７－ｔｈｅ４１２ｐｅａｎｕｔ

．

ｇａｌｌｅｒｙｐｒｏｄｕｃｔ：ＷｅｂｒｅｖｉｅｗｓＯｐｉｎｉｏｎ［Ｃｅｘｔｒａｃｔｉｏｎａｎｄｓｅｍａｎｔｉｃｔｈ

ｃｌａｓｓｉｆｉｃａｔｉｏｎｏｆ５２８．

Ｃｏｎｆ．：ＡＣＭ］Ｐｒｅｓｓ∥Ｐｒｏｃ．Ｂｕｄａｐｅｓｔ．ｏｆｔｈｅ１２，ＨｕｎｇａｒｙＩｎｔ’ｌ，２００３Ｗｏｒｌｄ：５１９－Ｗｉｄｅ

［１９］　ＴｏｎｇＲＭ．Ａｎｏｐｅｒａｔｉｏｎａｌｓｙｓｔｅｍｆｏｒｄｅｔｅｃｔｉｎｇａｎｄｔｒａｃｋｉｎｇ

ＯｐｅｒａｔｉｏｎａｌｏｐｉｎｉｏｎｓｉｎＴｅｘｔｏｎ－ｌｉｎｅＣｌａｓｓｉｆｉｃａｔｉｏｎｄｉｓｃｕｓｓｉｏｎ．［ＮＹＣ］，∥ＵＳＡＳＩＧＩＲ，２００１Ｗｏｒｋｓｈｏｐ：１－６．ｏｎ

［２０］　ＨｕＭ，ＬｉｕＢ．Ｍｉｎｉｎｇａｎｄｓｕｍｍａｒｉｚｉｎｇｃｕｓｔｏｍｅｒｒｅｖｉｅｗｓ

［Ｃ］∥Ｐｒｏｃ．ｏｆＫｎｏｗｌｅｄｇｅＤｉｓｃｏｖｅｒｙａｎｄＤａｔａＭｉｎｉｎｇ，

［２１］　ＬｉｕＮＹＨ，ＵＳＡ，Ｌｉｅｂｅｒｍａｎ，２００４：１６８－Ｈ，１７７Ｓｅｌｋｅｒ．

Ｔ．Ａｍｏｄｅｌｏｆｔｅｘｔｕａｌａｆｆｅｃｔ

ｓｅｎｓｉｎｇＩｎｔ’ｌ．ｕｓｉｎｇｒｅａｌ－ｗｏｒｌｄｋｎｏｗｌｅｄｇｅ［Ｃ］∥Ｐｒｏｃ．ｏｆｔｈｅ１１

ｔｈ

［２１］　金聪，Ｃｏｎｆ金平．ｏｎ．网络环境下中文情感倾向的分类方法

ＩｎｔｅｌｌｉｇｅｎｔＵｓｅｒＩｎｔｅｒｆａｃｅ，２００３：１２５－１３２．

［Ｊ］．语言文字应用，２００８，５（２）：１３９－１４４．

［２３］　李钝．基于短语模式的文本情感分类研究［Ｊ］．计算

机科学，２００８，１３５（１４）：２３１－２３３．

［２４］　ＰａｎｇＢ，ＬｅｅＬ，ＶａｉｔｈｙａｎａｔｈａｎＳ．Ｔｈｕｍｂｓｕｐ？ｓｅｎｔｉｍｅｎｔ

ｏｆｃｌａｓｓｉｆｉｃａｔｉｏｎｔｈｅＣｏｎｆ．ｕｓｉｎｇｏｎＥｍｐｉｒｉｃａｌｍａｃｈｉｎｅｌｅａｒｎｉｎｇＭｅｔｈｏｄｓｔｅｃｈｎｉｑｕｅｓｉｎＮａｔｕｒａｌ［Ｃ］Ｌａｎｇｕａｇｅ∥Ｐｒｏｃ．

［２５］　ＮｉＰｒｏｃｅｓｓｉｎｇＸ，Ｘｕｅ．ＰｈｉｌａｄｅｌｐｈｉａＧ，ＬｉｎｇＸ，，ＵＳｅｔａｌ，２００２．Ｅｘｐｌｏｒｉｎｇ：７９－８６ｉｎ．

ｔｈｅＷｅｂｌｏｇ

Ｐｒｏｃｓｐａｃｅ．ｂｙｏｆｔｈｅｄｅｔｅｃｔｉｎｇ１６ｔｈ

Ｉｎｔｉｎｆｏｒｍａｔｉｖｅ’ｌ．Ｃｏｎｆ．ｏｎａｎｄＷｏｒｌｄａｆｆｅｃｔｉｖｅＷｉｄｅａｒｔｉｃｌｅｓＷｅｂ，２００７［Ｃ］∥

２８１－２９０．

：

［２６］　ＭｕｌｌｅｎＴ，ＣｏｌｌｉｅｒＮ．Ｓｅｎｔｉｍｅｎｔａｎａｌｙｓｉｓｕｓｉｎｇｓｕｐｐｏｒｔｖｅｃｔｏｒ

ｍａｃｈｉｎｅｓＥＭＮＬＰ－２００４ｗｉｔｈ，ｄｉｖｅｒｓｅＢａｒｃｅｌｏｎａｉｎｆｏｒｍａｔｉｏｎ，Ｓｐａｉｎ，２００４ｓｏｕｒｃｅｓ：４１２－［Ｃ４１８］∥Ｐｒｏｃ．

．ｏｆ［２７］　ＷｈｉｔｅｌａｗＣ，ＧａｒｇＮ，ＡｒｇａｍｏｎＳ．Ｕｓｉｎｇａｐｐｒａｉｓａｌｇｒｏｕｐｓ

ｆｏｒｓｅｎｔｉｍｅｎｔａｎａｌｙｓｉｓ［Ｃ］∥Ｐｒｏｃ．Ｏｆｔｈｅ１４ｔｈ

Ｃｏｎｆ．ｏｎＩｎｆｏｒｍａｔｉｏｎａｎｄＫｎｏｗｌｅｄｇｅＭａｎａｇｅｍｅｎｔＡＣＭ，２００５Ｉｎｔ’ｌ．

６２５－６３１．

：［２８］　ＣｕｉＨ，ＭｉｔｔａｌＶ，ＤａｔａｒＭ．Ｃｏｍｐａｒａｔｉｖｅｅｘｐｅｒｉｍｅｎｔｓｏｎ

ｓｅｎｔｉｍｅｎｔＰｒｏｃ．ｏｆｔｈｅｃｌａｓｓｉｆｉｃａｔｉｏｎ２１ｓｔ

ＮａｔｉｏｎａｌｆｏｒＣｏｎｆｏｎｌｉｎｅ．ｏｎｐｒｏｄｕｃｔＡｒｔｉｆｉｃｉａｌｒｅｖｉｅｗｓＩｎｔｅｌｌｉｇｅｎｃｅ

［Ｃ］∥

—

９３７—

论文

情报学报　第２９卷　第５期　２０１０年１０月

（ＡＡＡＩ－０６），Ｂｏｓｔｏｎ，ＵＳＡ，２００６．

［２９］　徐军，丁宇新，王晓龙．使用机器学习方法进行新闻

的情感自动分类［Ｊ］．中文信息学报，２００７，２１（６）：９５－１００．

［３０］　唐慧丰，谭松波，程学旗．基于监督学习的中文情感

分类技术比较研究［Ｊ］．中文信息学报，２００７，２１（６）：８８－９４．

［３１］　ＬｉｎＷＨ，ＷｉｌｓｏｎＴ，ＷｉｅｂｅＪ，ｅｔａｌ．Ｗｈｉｃｈｓｉｄｅａｒｅｙｏｕ

ｏｎｌｅｖｅｌｓ？Ｉｄｅｎｔｉｆｙｉｎｇ［Ｃ］∥Ｐｒｏｃｐｅｒｓｐｅｃｔｉｖｅｓ．ｏｆｔｈｅａｔ１０ｔｈｅｔｈ

Ｃｏｎｆｄｏｃｕｍｅｎｔ．ｏｎＣｏｍｐｕｔａｔｉｏｎａｌ

ａｎｄｓｅｎｔｅｎｃｅ

１０９－Ｎａｔｕｒａｌ１１６Ｌａｎｇｕａｇｅ．

Ｌｅａｒｎｉｎｇ（ＣｏＮＬＬ－Ｘ），ＮＹ，ＵＳＡ，２００６：［３２］　ＰａｎｇＢ，ＬｅｅＬ．Ｓｅｅｉｎｇｓｔａｒｓ：Ｅｘｐｌｏｉｔｉｎｇｃｌａｓｓｒｅｌａｔｉｏｎｓｈｉｐｓ

ｆｏｒ∥ｓｅｎｔｉｍｅｎｔＰｒｏｃ．ｏｆｔｈｅｃａｔｅｇｏｒｉｚａｔｉｏｎ４３ｒｄ

ＡｎｎｕａｌｗｉｔｈＭｅｅｔｉｎｇｒｅｓｐｅｃｔｏｆｔｏｔｈｅｒａｔｉｎｇＡｓｓｏｃｉａｔｉｏｎｓｃａｌｅｓ［Ｃｆｏｒ

］Ｃｏｍｐｕｔｅｒ１２４．

Ｌｉｎｇｕｉｓｔｉｃｓ．Ｍｏｒｒｉｓｔｏｗｎ，ＮＪ，ＵＳＡ，２００５：１１５－［３３］　刘康，刘军．基于层叠ＣＲＦｓ模型的句子褒贬度分析

研究［Ｊ］．中文信息学报，２００８，２２（１）：１２３－１２８．［３４］　ＭａｏＹ，ＬｅｂａｎｏｎＧ．ＩｓｏｔｏｎｉｃＣｏｎｄｉｔｉｏｎａｌＲａｎｄｏｍＦｉｅｌｄｓａｎｄ

ＬｏｃａｌＰｒｏｃｅｓｓｉｎｇＳｅｎｔｉｍｅｎｔＳｙｓｔｅｍｓＦｌｏｗ，２００７［Ｃ］∥．

Ｐｒｏｃ．ｏｆｔｈｅＮｅｕｒａｌＩｎｆｏｒｍａｔｉｏｎ［３５］　ＭｃＤｏｎａｌｄＲ，ＨａｎｎａｎＫ，ＮｅｙｌｏｎＴ，ｅｔａｌ．Ｓｔｒｕｃｔｕｒｅｄ

ｍｏｄｅｌｓＡＣＬ，２００７ｆｏｒｆｉｎｅ：４３２－－ｔｏ－４３９ｃｏａｒｓｅ．

ｓｅｎｔｉｍｅｎｔａｎａｌｙｓｉｓ［Ｃ］∥Ｐｒｏｃ．ｏｆ［３６］　ＫａｍｐｓＪ，ＭａｒｘＭ，ＭｏｋｋｅｎＲＪ，ｅｔａｌ．ＷｏｒｄｓｗｉｔｈＡｔｔｉｔｕｄｅ

［Ｃ］∥Ｐｒｏｃ．ｏｆｔｈｅ１ｓｔ

Ｉｎｔ’ｌＣｏｎｆ．ｏｎＧｌｏｂａｌＷｏｒｄＮｅｔ．

—９３８—

［３８］　朱嫣岚Ｍｙｓｏｒｅ，，Ｉｎｄｉａ闵锦，２００２，周雅倩．

，等．基于ＨｏｗＮｅｔ的词汇语义

倾向计算［Ｊ］．中文信息学报，２００６，２０（１）：１４－２０．［３９］　徐琳宏，林鸿飞，杨志豪．基于语义理解的文本倾向

性识别机制［Ｊ］．中文信息学报，２００７，２１（１）：９６－１００．

［４０］　徐琳宏，林鸿飞，潘宇，等．情感词汇本体的构造

［Ｊ］．中文信息学报，２００８，２２（２）：１８０－１８５．

［４１］　路斌，万小军，杨建武，等．基于同义词词林的词汇

褒贬计算［Ｃ］桙桙第七届中文信息处理国际会议，武汉，中国，２００７：１７－２３．

［４２］　ＤａｖｅＫ，ＬａｗｒｅｎｃｅＳ，ＰｅｎｎｏｃｋＤＭ．ＭｉｎｉｎｇｔｈｅＰｅａｎｕｔ

Ｇａｌｌｅｒｙ：ＯｐｉｎｉｏｎＥｘｔｒａｃｔｉｏｎａｎｄＳｅｍａｎｔｉｃｔｈ

Ｃｌａｓｓｉｆｉｃａｔｉｏｎｏｆ

［４３］　ＧａｍｏｎＢｕｄａｐｅｓｔＰｒｏｄｕｃｔＲｅｖｉｅｗｓｔｈｅ１２Ｉｎｔ’ｌ．ＷＷＷＣｏｎｆ．

Ｍ，，Ｈｕｎｇａｒｙ［Ｃ］ＡｕｅＡ．，２００３桙桙ＰｒｏｃＡｕｔｏｍａｔｉｃ．

．ｏｆＩｄｅｎｔｉｆｉｃａｔｉｏｎｏｆＳｅｎｔｉｍｅｎｔ

ＶｏｃａｂｕｌａｒｙＳｅｎｔｉｍｅｎｔＦｅａｔｕｒｅＥｎｇｉｎｅｅｒｉｎｇＴｅｒｍｓ：Ｅｘｐｌｏｉｔｉｎｇ［Ｃ］桙桙ＰｒｏｃＬｏｗｆｏｒ．ＭａｃｈｉｎｅｏｆｔｈｅＡｓｓｏｃｉａｔｉｏｎＡＣＬＬｅａｒｎｉｎｇ－２００５ｗｉｔｈＷｏｒｋｓｈｏｐＫｎｏｗｎｉｎＮＬＰｏｎ［４４］　ＭｉｃｈｉｇａｎＬｉｕＢ，Ｈｕ，ＵＳＡＭ，Ｃｈｅｎ，２００５Ｊ：５７－．Ｏｐｉｎｉｏｎ６４．

．

Ｏｂｓｅｒｖｅｒ：Ａｎａｌｙｚｉｎｇａｎｄ

Ｃｏｍｐａｒｉｎｇｔｈ

Ｃｏｎｆ．ｏｎＷｏｒｌｄＯｐｉｎｉｏｎＷｉｄｅｏｎｔｈｅＷｅｂＷｅｂ．［ＣｈｉｂａＣ］桙桙Ｐｒｏｃ，Ｊａｐａｎ．ｏｆｔｈｅ，２００５１４Ｉｎｔ：３４３－

’ｌ．３５１．

（责任编辑　芮国章）

论文

Web文本情感分类研究综述

作者：作者单位：刊名：英文刊名：年，卷(期)：被引用次数：

王洪伟， 刘勰， 尹裴， 廖雅国

王洪伟,刘勰,尹裴(同济大学经济与管理学院,上海,200092)， 廖雅国(香港理工大学电子计算学系,香港)

情报学报

JOURNAL OF THE CHINA SOCIETY FOR SCIENTIFIC ANDTECHNICAL INFORMATION2010，29(5)0次

参考文献(43条)

1.Pekar V,Ou S.Discovery of subjective evaluations of product features in hotel reviews[J].Journal ofVacation Marketing,2008,14(2):145-155.

2.姚天,程希文,徐飞玉,等.文本意见挖掘综述[J].中文信息学报,2008,22(5):71-80.3.陈博.Web文本情感分类中关键问题的研究[D].北京:北京邮电大学博士论文,2008.

4.Wiebe J.Tracking point of view in narrative[J].Computational Linguistics,1994,20(2):233-287.5.Wiebe J.Learning subjective adjectives from corpora[C]∥Proc.of the 17th National Conf.on ArtificialIntelligence (AAAI-2000).Texas,USA,2000.

6.Wiebe J,Bruce R,O'Hara T.Development and use of a gold standard dataset for subjectivity

classifications[C]∥Proc.of the 37th Annual Meeting of the Association for Computational Linguistics (ACL-99),Seattle,USA,1999:246-253.

7.Wiebe J,Wilson T,Bruce R,et al.Learning subjective language[R].Technical Report TR-02-100,Pennsylvania,USA,2002.

8.Bruce R,Wiebe J.Recognizing subjectivity:A case study in manual tagging[J].Natural LanguageEngineering,1999,5(2):187-205.

9.Wilson T,Wiebe J,Hoffmann P.Recognizing contextual polarity in phrase level sentiment analysis[C]∥Proc.ofHuman Language Technologies Conference/Conference on Empirical Methods in Natural LanguageProcessing(HLT/EMNLP2005).Vancouver,Canada,2005:347-354.

10.Hatzivassiloglou V,Wiebe J.Effects of adjective orientation and gradability on sentencesubjectivity[C]∥Proc.of 18th Int'l Conf.on Computational Linguistics(COL ING-2000).NJ,USA,2000.

11.Wiebe J,Wilson T,Bell M.Identifying collocations for recognizing opinions[C]∥Proc.of the ACL-01 Workshopon Collocation.Toulouse,France,2001.

12.Yu H,Hatzivassiloglou V.Towards answering opinion questions:separating facts from opinions andidentifying the polarity of opinion sentences[C]∥Proc.of the 2003 Conf.on Empirical Methods in NaturalLanguage Processing.Sapporo,Japan,2003:129-136.

13.Pang B,Lee L.A sentimental education:Sentiment analysis using subjectivity summarization based onminimumcuts[C]∥Proc.of the 42nd Meeting of the Association for Computational Languages.Barcelona,Spain,2004:271-278.

14.林斌.基于语义技术的中文信息情感分析方法研究[D].哈尔滨:哈尔滨工业大学硕士论文,2007.

15.叶强,张紫琼,罗振雄.面向互联网评论情感分析的中文主观性自动判别方法[J].信息系统学报,2007,1(1):79-91.16.王根,赵军.基于多重冗余标记CRFs的句子情感分析研究[J].中文信息学报,2007,21(5):51-55.

17.Turney P.Thumbs Up or Thumbs down? Semantic orientation applied to unsupervised classification ofreviews[C]∥Proc.of the 40th Annual Meeting of the Association for ComputationalLinguistics.NJ,USA,2002:417-412.

18.Dave K,Lawrence S,Pennock D.Mining the peanut gallery:Opinion extraction and semantic classification ofproduct reviews[C]∥Proc.of the 12th Int'l World Wide Web Conf.:ACM Press.Budapest,Hungary,2003:519-528.

论文

19.Tong R M.An operational system for detecting and tracking opinions in on-line discussion[C]∥SIGIRWorkshop on Operational Text Classification.NY,USA,2001:1-6.

20.Hu M,Liu B.Mining and summarizing customer reviews[C]∥Proc.of Knowledge Discovery and DataMining,NY,USA,2004:168-177.

21.Liu H,Lieberman H,Selker T.A model of textual affect sensing using real-world knowledge[C]∥Proc.of the11th Int'l.Conf.on Intelligent User Interface,2003:125-132.

22.金聪,金平.网络环境下中文情感倾向的分类方法[J].语言文字应用,2008,5(2):139-144.23.李钝.基于短语模式的文本情感分类研究[J].计算机科学,2008,135(14):231-233.

24.Pang B,Lee L,Vaithyanathan S.Thumbs up? sentiment classification using machine learning

techniques[C]∥Proc.of the Conf.on Empirical Methods in Natural Language Processing.Philadelphia,US,2002:79-86.

25.Ni X,Xue G,Ling X,et al.Exploring in the Weblog space by detecting informative and affectivearticles[C]∥Proc.of the 16th Int'l.Conf.on World Wide Web,2007:281-290.

26.Mullen T,Collier N.Sentiment analysis using support vector machines with diverse informationsources[C]∥Proc.of EMNLP-2004,Barcelona,Spain,2004:412-418.

27.Whitelaw C,Garg N,Argamon ing appraisal groups for sentiment analysis[C]∥Proc.Of the 14th ACMInt'l.Conf.on Information and Knowledge Management,2005:625-631.

28.Cui H,Mittal V,Datar parative experiments on sentiment classification for online productreviews[C]∥Proc.of the 21st National Conf.on Artificial Intelligence (AAAI-06),Boston,USA,2006.29.徐军,丁宇新,王晓龙.使用机器学习方法进行新闻的情感自动分类[J].中文信息学报,2007,21(6):95-100.30.唐慧丰,谭松波,程学旗.基于监督学习的中文情感分类技术比较研究[J].中文信息学报,2007,21(6):88-94.31.Lin W H,Wilson T,Wiebe J,et al.Which side are you on? Identifying perspectives at the document andsentence levels[C]∥ Proc.of the 10th Conf.on Computational Natural Language Learning (CoNLL-X),NY,USA,2006:109-116.

32.Pang B,Lee L.Seeing stars:Exploiting class relationships for sentiment categorization with respect torating scales[C]∥ Proc.of the 43rd Annual Meeting of the Association for ComputerLinguistics.Morristown,NJ,USA,2005:115-124.

33.刘康,刘军.基于层叠CRFs模型的句子褒贬度分析研究[J].中文信息学报,2008,22(1):123-128.

34.Mao Y,Lebanon G.Isotonic Conditional Random Fields and Local Sentiment Flow[C]∥Proc.of the NeuralInformation Processing Systems,2007.

35.McDonald R,Hannan K,Neylon T,et al.Structured models for fine-to-coarse sentiment analysis[C]∥Proc.ofACL,2007:432-439.

36.Kamps J,Marx M,Mokken R J,et al.Words with Attitude[C]∥Proc.of the 1st Int'l Conf.on GlobalWordNet.Mysore,India,2002.

37.朱嫣岚,闵锦,周雅倩,等.基于HowNet的词汇语义倾向计算[J].中文信息学报,2006,20(1):14-20.38.徐琳宏,林鸿飞,杨志豪.基于语义理解的文本倾向性识别机制[J].中文信息学报,2007,21(1):96-100.39.徐琳宏,林鸿飞,潘宇,等.情感词汇本体的构造[J].中文信息学报,2008,22(2):180-185.

40.路斌,万小军,杨建武,等.基于同义词词林的词汇褒贬计算[C]//第七届中文信息处理国际会议,武汉,中国,2007:17-23.41.Dave K,Lawrence S,Pennock D M.Mining the Peanut Gallery:Opinion Extraction and Semantic Classification ofProduct Reviews[C]//Proc.of the 12th Int'l.WWW Conf.Budapest,Hungary,2003.

42.Gamon M,Aue A.Automatic Identification of Sentiment Vocabulary:Exploiting Low Association with KnownSentiment Terms[C]//Proc.of the ACL-2005 Workshop on Feature Engineering for Machine Learning in

论文

NLP.Michigan,USA,2005:57-64.

43.Liu B,Hu M,Chen J.Opinion Observer:Analyzing and Comparing Opinion on the Web[C]//Proc.of the 14thInt'l.Conf.on World Wide Web.Chiba,Japan,2005:343-351.

相似文献(3条)

1.学位论文 陈博 WEB文本情感分类中关键问题的研究 2008

随着计算机技术和互联网的迅猛发展，网络在线的文档成为现代主要的信息载体，是人们生活中不可或缺的主要信息来源。而随着互联网进入web2.0时代，人们从被动的接受门户网站发布信息，转变为主动的获取、发布、共享、传播信息。同时，由于用户参与到信息的产生，网络信息的内容形式也变得多样化，越来越多的具有个人观点性的内容充斥着网络。这些观点性内容对于网络电子商务、网络社区发掘、网络信息安全、网络信息检索等多方面都具有重要的意义和实用价值。对网络文本观点性内容的自动情感分析成为近期web信息处理的一个研究热点，而其中的核心技术就是文本情感分类。

在这样一个背景下，本文对面向web文本的中文分词、文本情感分类以及Weblog观点检索问题进行了下述创新性研究工作：

首先，研究了面向web文本的中文分词问题。根据web文本环境的特点，研究重点在于中文分词中的未登录词识别问题，同时兼顾切分歧义消解、整体切分准确率和高效处理海量文本的能力。在未登录词识别方面，提出了POC-NLW字符标记模板，从字符级别的粒度来表征中文词汇的构成机制，并结合隐马尔可夫模型，实现了基于字符序列标注的中文分词方法。此外，分别使用了基于规则匹配的预处理、基于词典匹配的初级全切分、基于词语级别的N-Gram统计切分模型，并通过级联方式将上述各模块有效组合，构成了多模型混合的层叠系统。实验结果表明，本文提出的基于POC-NLW模板标注的切分方法具有较强的未登录词识别能力；而多模型混合的层叠系统在整体切分精度和未登录词识别方面都达到了较高的实用水平。另外，本文提出的系统还具有高效的建模和切分处理速度，具有面向海量web文本切分的实用性能。

第二，研究了web文本情感分类问题，主要包括文本的主客观分类和正负面极性分类两个子问题。在语言特征表示方面，对比研究了基于多种N-Gram语言特征模板的文本特征表示方式；在文本特征加权方面，对比了布尔、绝对词频、归一化词频以及基于TFIDF的特征加权方式；在特征选择方面，提出了全局TFIDF显著指数，引入“全局过滤．局部加权”的特征抽取方式；在情感分类模型方面，以朴素贝叶斯模型做对比，详细研究了最大熵模型的最大似然估计问题，采用高斯先验和指数型先验，对传统的最大熵模型进行改进。通过在真实网络电影评论数据集上的详细对比试验，以及对语料样本的分析，证实了采用高阶语言特征模板、基于TFIDF的特征选择和过滤方法、加入指数型先验的最大熵模型较好的适用于文本情感分类问题。

第三，研究了Weblog观点检索问题，以TREC Blog Track评测为主线，主要研究了面向blog文档的主题检索和文本情感分类技术在观点检索中的应用。首先，针对Weblog文档的特点以及观点检索的特殊性，在Weblog文档的HTML解析、噪声标签过滤、文本内容提取、词形还原等预处理方面作了技术改进；之后，以Indri检索系统为研究平台，利用结构化查询语言和web搜索引擎进行查询扩展和结构化查询主题构造，并采用基于文档标题字段的域查询，有效的提高了基本的ad-hoc主题检索的性能；在Weblog观点检索方面，使用基于最大熵的主观性内容判别模型，并提出了分类器自学习的策略，实现不同数据集之间的知识传递，在Weblog数据集上有效建模；同时，分别构建了句子级别和文档级别的最大熵模型，并将两者组合构成层叠式的Weblog文档观点性内容判别模型。在Blog Track数据集上的评测指标表明，本文构造的。Weblog观点检索系统达到了较高的性能水平。

2.学位论文 何慧 WEB文本挖掘中关键问题的研究 2009

随着互联网和通讯网的迅猛发展，网络文本成为信息的主要载体及人们生活中不可或缺的主要信息来源，文本挖掘技术的研究意义和实用价值越来越突出。另一方面，随着Web2.0时代的到来，出现了越来越多的由用户创作的网络数字内容。用户数字内容的大量产生和传播使得短文本计算、Web文本信息抽取、文本情感分析等逐渐成为Web文本挖掘研究的热点问题。针对这些问题，本文进行了以下研究：

(1)基于统计语言模型的短文本计算。针对短文本包含字符少、文本语言不规范、文本数量巨大的特点，本文提出了一种基于N-gram的特征提取和RPCL(RivalPenalized Competitive Learning)的短文本聚类算法。首先进行基于字符级的N-gram特征提取，即从未分词的语料中抽取中文块。中文块可以是一个汉字、一个词或者字符串，这样，中文块不但可以表达短文本的语义信息，而且能够保留语序结构和字符之间的依赖。然后通过统计子串约减和互信息过滤得到候选中文块集合。最后，使用一种神经网络聚类算法RPCL对短文本进行聚类。实验结果表明，这种基于N-gram的特征提取和RPCL的短文本聚类算法能够有效的对短文本聚类，并能有效的降低特征的维度。

(2)面向广告推荐和情感分析的Web文本信息抽取。针对广告推荐中的复合词抽取问题，本文提出了基于隐马尔科夫模型的半监督中文复合词抽取算法。从少量种子复合词出发，通过设定一个BEMI(Begin，End，Middle，Independent)模板，使用隐马尔科夫模型识别与种子复合词具有相同或相似信息的复合词。算法采用Bootstrapping的学习方法，通过自学习不断增大复合词列表的规模。实验结果表明，本算法可以满足广告系统关键词推荐的信息抽取需求，并具有较高的准确率和可以接受的召回率。

针对文本分析问题中情感词抽取的问题，本文提出了基于最大熵和LMR(Left，Middle，Right)模板的中文情感词抽取算法。通过对文本设定一个滑动窗口，使用LMR模板标记词的位置信息，使用词、词的先后位置信息、词性信息作为特征，对情感词进行识别和抽取。实验结果表明，本算法具有较高的召回率和准确率，同时在某些特征组合的情况下，情感词抽取具有良好的鲁棒性。

(3)基于监督和半监督的文本情感分类。针对网络上大量流行音乐、网友原创、改编的音乐，本文提出了一种对音乐歌词的情感分类方法。首先，通过对歌词语料库的词进行统计发现其分布基本符合齐夫定律，但与中文分类通用语料库(863计划文本分类测试数据)中词语分布略有差异。由于对歌词表现的情感进行的分类不同于按照主题对普通文本的分类任务，所以需要抽取更多表现情感色彩的特征。本文在N元模型的框架下采取了三种不同的预处理方法(不同N-gram模板、消去停用词、按词性过滤)抽取更多的歌词情感语义特征，并提出了带有高斯先验和指数先验的最大熵模型的分类算法对歌词的情感特征进行建模。实验结果表明，具有高斯先验和指数先验的最大熵模型非常适合用于歌词情感分析问题。

针对实际的情感分类中标注数据不足的情况，本文提出了一种基于半监督学习的文本情感分类算法。假设空间中存在一个情感流形结构，将待分类文本看作是这个情感流形上抽样的点。首先，利用这些点的邻域信息进行构图，每个点与它近邻的边的权重使用它的近邻线性加权表示；然后，将该图看作是一个概率转移矩阵，各类别的标签在此矩阵上扩散完成情感分类过程。在电影评论和中文歌词语料集上的实验结果表明，该算法在文本情感分类上具有良好的性能。

(4)文本观点检索。以本文作者2008年参加的COAE2008中的面向主题的中文文本观点检索任务为主线，介绍了本文参评系统PRIS-SAS。本系统采用两阶段处理方式，在经过编码转换、分词等预处理后，PRIS-SAS首先使用Indri检索系统对语料集建立索引，使用任务中的主题词进行ad-hoc检索，然后使用本文中文本情感分类算法建立倾向性模型和极性模型，对检索得到的相关文本进行文本倾向性判断，并对检索结果重新排序。在COAE2008数据集上的评测指标表明，本文设计的文本观点检索系统达到了较高的性能水平。

3.学位论文 熊德兰 中文网页褒贬倾向性分类研究 2006

文本自动分类是一种有效的信息处理方法，广泛应用于信息检索、信息过滤、信息管理、数据组织等领域。随着计算机和网络通信技术的发展，Internet迅速成为海量的、动态的全球信息服务中心，如何在浩若烟海而又纷繁芜杂的Web文档中掌握最有效的信息成为信息处理技术遇到的新的挑战。Web文本自动分类技术是目前Web数据挖掘的研究热点之一，它能够有效地组织和管理Web资源，提高信息检索的效率。网页自动分类技术与主题搜索、个性化信息检索、信息过滤、信息主动推送服务等技术相结合，可以有效地提高了信息服务的质量。

传统的Web文本分类是根据网页所涉及的主题来进行分类，如将网页分为政治类、军事类、经济类等等，而根据网页中作者对所描述内容的看法、观点等主观感情色彩进行分类的研究较少，我们称后者为情感分类。网页内容的褒贬性就是明显反映作者观点、态度的感情色彩之一，网页褒贬倾向性分类是未来多角度、立体性、个性化文本分类的研究内容之一。

本文探讨了网页褒贬色彩的客观性和褒贬倾向性分类的可行性，提出了名人网页褒贬感情色彩的综合评价方法。作者通过构建褒贬义词典和褒贬评价模板，提取出网页文本中具有情感取向的褒义词、贬义词及语法结构等褒贬特征，结合情感计算和层次分析法的相关理论，建立褒贬评价模型，实现对名人网页褒贬感情色彩的综合度量。同时，针对褒贬倾向的局限性，文中还提出了一种领域褒贬词典的构建方法，并探讨了使用模板自动更新褒贬词典的可行性方案。

在上述研究的基础上，结合自动分类技术，本文进一步探讨了名人网页褒贬倾向性分类的工作原理和实现方法，提出了LSI和KNN相结合的褒贬分类模型。根据网页的褒贬评价结果，提出了一种新的文本相似度计算方法，并给出了有关特征提取和分类过程的具体算法。最后，在名人网页数据集上，对上述理论进行了实验验证，取得了较好的成效。

本文链接：/Periodical_qbxb201005023.aspx

授权使用：武汉理工大学(whlgdx)，授权号：adad6cf2-6175-44bc-abdf-9e6400fac413

下载时间：2011年1月7日

本文来源：https://www.bwwdw.com/article/r4i4.html