数据挖掘概念与技术 - 课后题答案汇总

数据挖掘——概念概念与技术

Data Mining

Concepts and Techniques

习题答案 第 1 章 引言

1.1 什么是数据挖掘？在你的回答中，针对以下问题：

1.2 1.6 定义下列数据挖掘功能：特征化、区分、关联和相关分析、预测

聚 类和演变分析。使用你熟悉的现实生活的数据库，给出每种数据挖掘功 能的例子。 解答：

? 特征化是一个目标类数据的一般特性或特性的汇总。例如，学生的特

征 可被提出，形成所有大学的计算机科学专业一年级学生的轮廓，这些特 征包括作为一种高的年级平均成绩(GPA：Grade point aversge) 的信息， 还有所修的课程的最大数量。

? 区分是将目标类数据对象的一般特性与一个或多个对比类对象的一

般 特性进行比较。例如，具有高 GPA 的学生的一般特性可被用来与具有 低 GPA 的一般特性比较。最终的描述可能是学生的一个一般可比较的 轮廓，就像具有高 GPA 的学生的 75%是四年级计算机科学专业的学生， 而具有低 GPA 的学生的 65%不是。

? 关联是指发现关联规则，这些规则表示一起频繁发生在给定数据集的

特 征 值的 条 件。 例 如， 一 个数 据 挖掘 系 统可 能 发现 的 关联 规 则为 ：

major(X, “ computing science”) ? owns(X,

“personal

computer” ) [support=12%, confid ence=98%]

其中，X 是一个表示学生的变量。这个规则指出正在学习的学生，12% （支持度）主修计算机科学并且拥有一台个人计算机。这个组一个学生 拥有一台个人电脑的概率是 98%（置信度，或确定度）。 ? 分类与预测不同，因为前者的作用是构造一系列能描述和区分数据类

型 或概念的模型（或功能），而后者是建立一个模型去预测缺失的或无效 的、并且通常是数字的数据值。它们的相似性是他们都是预测的工具： 分类被用作预测目标数据的类的标签，而预测典型的应用是预测缺失的 数字型数据的值。

? 聚类分析的数据对象不考虑已知的类标号。对象根据最大花蕾内部的相 似性、最小化类之间的相似性的原则进行聚类或分组。形成的每一簇可 以被看作一个对象类。聚类也便于分类法组织形式，将观测组织成类分 层结构，把类似的事件组织在一起。

? 数据延边分析描述和模型化随时间变化的对象的规律或趋势，尽管这可

能包括时间相关数据的特征化、区分、关联和相关分析、分类、或预测， 这种分析的明确特征包括时间序列数据分析、序列或周期模式匹配、和 基于相似性的数据分析

1.3 1.9 列举并描述说明数据挖掘任务的五种原语。 解答：

用于指定数据挖掘任务的五种原语是：

? 任务相关数据：这种原语指明给定挖掘所处理的数据。它包括指明数据

库、数据库表、或数据仓库，其中包括包含关系数据、选择关系数据的 条件、用于探索的关系数据的属性或维、关于修复的数据排序和分组。 ? 挖掘的数据类型：这种原语指明了所要执行的特定数据挖掘功能，如特

征化、区分、关联、分类、聚类、或演化分析。同样，用户的要求可能 更特殊，并可能提供所发现的模式必须匹配的模版。这些模版或超模式 （也被称为超规则）能被用来指导发现过程。

? 背景知识：这种原语允许用户指定已有的关于挖掘领域的知识。这样的

知识能被用来指导知识发现过程，并且评估发现的模式。关于数据中关 系的概念分层和用户信念是背景知识的形式。

? 模式兴趣度度量：这种原语允许用户指定功能，用于从知识中分割不感

兴趣的模式，并且被用来指导挖掘过程，也可评估发现的模式。这样就 允许用户限制在挖掘过程返回的不感兴趣的模式的数量，因为一种数据 挖掘系统可能产生大量的模式。兴趣度测量能被指定为简易性、确定性、 适用性、和新颖性的特征。

? 发现模式的可视化：这种原语述及发现的模式应该被显示出来。为了使

数据挖掘能有效地将知识传给用户，数据挖掘系统应该能将发现的各种 形式的模式展示出来，正如规则、表格、饼或条形图、决策树、立方体或其它视觉的表示。

1.4 1.13 描述以下数据挖掘系统与数据库或数据仓库集成方法的差别：不

耦 合、松散耦合、半紧耦合和紧密耦合。你认为哪种方法最流行，为什么？

解答： 数据挖掘系统和数据库或数据仓库系统的集成的层次的差别如下。

? 不耦合：数据挖掘系统用像平面文件这样的原始资料获得被挖掘的原

始 数据集，因为没有数据库系统或数据仓库系统的任何功能被作为处理过 程的一部分执行。因此，这种构架是一种糟糕的设计。 ? 松散耦合：数据挖掘系统不与数据库或数据仓库集成，除了使用被挖

掘 的初始数据集的源数据和存储挖掘结果。这样，这种构架能得到数据库 和数据仓库提供的灵活、高效、和特征的优点。但是，在大量的数据集 中，由松散耦合得到高可测性和良好的性能是非常困难的，因为许多这 种系统是基于内存的。

? 半紧密耦合：一些数据挖掘原语，如聚合、分类、或统计功能的预计

算， 可在数据库或数据仓库系统有效的执行，以便数据挖掘系统在挖掘-查询 过程的应用。另外，一些经常用到的中间挖掘结果能被预计算并存储到 数据库或数据仓库系统中，从而增强了数据挖掘系统的性能。

? 紧密耦合：数据库或数据仓库系统被完全整合成数据挖掘系统的一

部 份，并且因此提供了优化的数据查询处理。这样的话，数据挖掘子系统 被视为一个信息系统的功能组件。这是一中高度期望的结构，因为它有 利于数据挖掘功能、高系统性能和集成信息处理环境的有效实现。

从以上提供的体系结构的描述看，紧密耦合是最优的，没有值得顾虑的技术 和执行问题。但紧密耦合系统所需的大量技术基础结构仍然在发展变化，其实现 并非易事。因此，目前最流行的体系结构仍是半紧密耦合，因为它是松散耦合和 紧密耦合的折中。

1.5 1.14 描述关于数据挖掘方法和用户交互问题的三个数据挖掘挑战。

第 2 章 数据预处理

2.1 2.2 假设给定的数据集的值已经分组为区间。区间和对应的频率如下。

年龄 1~5 5~15 15~20 20~50 50~80 80~110

计算数据的近似中位数值。

解答： 先判定中位数区间：

N=200+450+300+1500+700+44=3194；N/2=1597

频率 200 450 300 1500 700 44

∵ 200+450+300=950<1597<2450=950+1500； ∴ 20~50 对应中位数区间。 我们有：L1=20，

N=3197，(∑freq) l=950，freqmed ian=1500，width=30，使用公 式（2.3）： median ? L1

?

???? N / 2 ?? ??freq ???? 950 ?? 3197 / 2 ????? width ? 20 ? ?? ? 30 ? 32.97

?

l

???

freq median

?

??

?? 1500 ??

∴ median=32.97 岁。

2.2 2.4 假定用于分析的数据包含属性 age。数据元组的 age 值（以递增序）

是：13，15，16，16，19，20，20，21，22，22，25，25，25，25，30， 33，33，35，35，35，35，36，40，45，46，52，70。 (a) 该数据的均值是什么？中位数是什么？

(b) 该数据的众数是什么？讨论数据的峰（即双峰、三峰等）。 (c) 数据的中列数是什么？

(d) 你能（粗略地）找出数据的第一个四分位数（Q1）和第三个四分位数（Q3）吗？

(e) 给出数据的五数概括。 (f) 画出数据的盒图。

(g) 分位数—分位数图与分位数图的不同之处是什么？ 解答：

(a) 该数据的均值是什么？中位数是什么？

1 N ? 809 / 27 ? 29.96 ? 30 （公式 2.1 ）。中位数应是第 14 均值是： x ?? ?xi

?N i?1

个，即 x14=25=Q2。

(b) 该数据的众数是什么？讨论数据的峰（即双峰、三峰等）。 这个数集的众数有两个：25 和 35，发生在同样最高的频率处，因此是双峰

众数。

(c) 数据的中列数是什么？ 数据的中列数是最大术和最小是的均值。即：midrange=(70+13)/2=41.5。

(d) 你能（粗略地）找出数据的第一个四分位数（Q1）和第三个四分位数（Q3） 吗？

Q1=20。 数据集的第一个四分位数应发生在 25%处，即在(N+1)/4=7 处。所以：而第三个四分位数应发生在 75%处，即在 3×(N+1)/4=21 处。所以：Q3=35

(e) 给出数据的五数概括。

一个数据集的分布的 5 数概括由最小值、第一个四分位数、中位数、第三个 四分位数、和最大值构成。它给出了分布形状良好的汇总，并且这些数据是：13、 20、25、35、70。

(f) 画出数据的盒略。

(g) 分位数—分位数图与分位数图的不同之处是什么？ 分位数图是一种用来展示数据值低于或等于在一个单变量分布中独立的变

量的粗略百分比。这样，他可以展示所有数的分位数信息，而为独立变量测得的 值（纵轴）相对于它们的分位数（横轴）被描绘出来。

但分位数—分位数图用纵轴表示一种单变量分布的分位数，用横轴表示另一 单变量分布的分位数。两个坐标轴显示它们的测量值相应分布的值域，且点按照 两种分布分位数值展示。一条线（y=x）可画到图中，以增加图像的信息。落在 该线以上的点表示在 y 轴上显示的值的分布比 x 轴的相应的等同分位数对应的值 的分布高。反之，对落在该线以下的点则低。

2.3 2.7 使用习题 2.4 给出的 age 数据回答下列问题：

(a) 使用分箱均值光滑对以上数据进行光滑，箱的深度为 3。解释你的步骤。 评述对于给定的数据，该技术的效果。

(b) 如何确定数据中的离群点？ (c) 对于数据光滑，还有哪些其他方法？ 解答：

(a) 使用分箱均值光滑对以上数据进行光滑，箱的深度为 3。解释你的步骤。 评述对于给定的数据，该技术的效果。

用箱深度为 3 的分箱均值光滑对以上数据进行光滑需要以下步骤： ?? 步骤 1：对数据排序。（因为数据已被排序，所以此时不需要该步骤。） ?? 步骤 2：将数据划分到大小为 3 的等频箱中。

箱 1：13，15，16 箱 2：16，19，20 箱 3：20，21，22 4：22，25，25 箱 5：25，25，30 箱 6：33，33，35 箱

箱 7：35，35，35 箱 8：36，40，45 箱 9：46，52，70 ?? 步骤 3：计算每个等频箱的算数均值。

?? 步骤 4：用各箱计算出的算数均值替换每箱中的每个值。 箱 1：44/3，44/3 ，44/3 箱 2：55/3 ，55/3，55/3 箱 3：21，21，21 4：24，24，24 箱

箱 7：35，35，35

5：80/3，80/3，80/3 箱

6：101/3，101/3 ，101/3 箱

箱 8：121/3，121/3 ，121/3 箱 9：56，56，56 (b) 如

何确定数据中的离群点？ 聚类的方法可用来将相似的点分成组或“簇”，并检测离群点。落到簇的集

外的值可以被视为离群点。作为选择，一种人机结合的检测可被采用，而计算机 用一种事先决定的数据分布来区分可能的离群点。这些可能的离群点能被用人工

轻松的检验，而不必检查整个数据集。

(c) 对于数据光滑，还有哪些其他方法？

其它可用来数据光滑的方法包括别的分箱光滑方法，如中位数光滑和箱边界 光滑。作为选择，等宽箱可被用来执行任何分箱方式，其中每个箱中的数据范围 均是常量。除了分箱方法外，可以使用回归技术拟合成函数来光滑数据，如通过 线性或多线性回归。分类技术也能被用来对概念分层，这是通过将低级概念上卷 到高级概念来光滑数据。

2.4 2.10 如下规范化方法的值域是什么？ (a) min-max 规范化。 (b) z-score 规范化。 (c) 小数定标规范化。 解答：

(a) min-max 规范化。 值域是[new_min, new_max]。 (b) z-score 规范化。

值域是[(old _min －mean)/ σ，(old_max －mean)/σ]，总的来说，对于所有可能 的数据集的值域是(－∞，+∞)。

(c) 小数定标规范化。 值域是(－1.0,1.0)。

2.5 2.12 使用习题 2.4 给出的 age 数据，回答以下问题：

(a) 使用 min-max 规范化将 age 值 35 变换到[0.0，1.0]区间。

(b) 使用 z-score 规范化变换 age 值 35，其中 age 的标准差为 12.94 岁。

(c) 使用小数定标规范化变换 age 值 35。

(d) 对于给定的数据，你愿意使用哪种方法？陈述你的理由。

解答：

(a) 使用 min-max 规范化将 age 值 35 变换到[0.0，1.0]区间。

∵ min A=13，maxA=70，new _min A=0.0，new _maxA=1.0，而 v=35，

v ? min A ?v' ? new _ min A ? ? new _ min A ?new _ maxA ?max A ? min A

?

35 ? 13

?1.0 ? 0.0 ? ? 0.0 ? 0.3860

70 ? 13

(b) 使用 z-score 规范化变换 age 值 35，其中 age 的标准差为 12.94 岁。

13 ? 15 ? 2 ? 16 ? 19 ? 2 ? 20 ? 21 ? 2 ? 22 ? 4 ? 25 A ?

27

30 ? 2 ? 33 ? 4 ? 35 ? 36 ? 40 ? 45 ? 46 ? 52 ? 70 ? 27

809 ? ? 29 .963 27

2 i?1 σ A ??

? ?A

N

?

? A ? ??i

2

? 161.2949 ， σ A ??σ A

? 12.7002

N 2 i?1

A

N s ?? 或? ?A

i

? A ??

N

? ?? 167 .4986 ， s 2 ? sA ??12.9421

A

v=35

v ? σ '

v ? A σ A 35 ? 29.963 ?5.037

? 0.3966 ? 0.400 ? ?

12.7002 12.7002

v ? A 35 ? 29.963 ?5.037

? 0.3892 ? 0.39 或 v ? ? ?s '

sA 12.9421 12.9421 ?

(c) 使用小数定标规范化变换 age 值 35。

?

v

35 由于最大的绝对值为 70，所以 j=2 。 v' ??? 0.35 ? 10 j 10 2

(d) 对于给定的数据，你愿意使用哪种方法？陈述你的理由。

略。

2.6 2.14 假设 12 个销售价格记录组已经排序如下：5，10，11，13，15，35， 50，55，72，92，204，215。使用如下每种方法将其划分成三个箱。

(a) 等频（等深）划分。 (b) 等宽划分。 (c) 聚类。 解答：

(a) 等频（等深）划分。

bin1 bin1

(b) 等宽划分。 bin1 72,91,204,215

每个区间的宽度是：(215-5)/3=70

5,10,11,13 15,35,50,55 bin1 5,10,11,13,15,35,50,55,72 bin1 bin1 (c) 聚类。

我们可以使用一种简单的聚类技术：用 2 个最大的间隙将数据分成 3 个箱。

91 204,215 bin1 5,10,11,13,15 bin1 35,50,55,72,91 bin1

204,215

2.7 2.15 使用习题 2.4 给出的 age 数据， (a) 画出一个等宽为 10 的等宽直方图；

(b) 为如下每种抽样技术勾画例子：SRSWOR，SRSWR ，聚类抽样，分层 抽样。使用大小为 5 的样本和层“青年”，“中年”和“老年”。

解答：(a) 画出一个等宽为 10 的等宽直方图；

8

7 6 5 4

3 2 1 0

15 25 35 45 55 65

(b) 为如下每种抽样技术勾画例子：SRSWOR，SRSWR ，聚类抽样，分层 抽样。使用大小为 5 的样本和层“青年”，“中年”和“老年”。

元组：

T 1 13 T 10 22 T 19 35 T 2 15 T 11 25 T 20 35 T 3 16 T 12 25 T 21 35 T 4 16 T 13 25 T 22 36 T 5 19 T 14 25 T 23 40 T 6 20 T 15 30 T 24 45 T 7 20 T 16 33 T 25 46 T 8 21 T 17 33 T 26 52 T 9 22 T 18 35 T 27 70 SRSWOR 和 SRSWR：不是同次的随机抽样结果可以不同，但前者因无放回 所以不能有相同的元组。

SRSWOR (n=5) SRSWR (n=5) T 4 T 6 T 10 T11 T 26

16 20 22 25 52 T 7 T 7 T 20 T 21 T 25 20 20 35 35 46 聚类抽样：设起始聚类共有 6 类，可抽其中的 m 类。 Sample1 T 1 T 2 T 3 T 4 T 5 13 15 16 16 19 Sample2 T6 T7 T8 T9 T 10 20 20 21 22 22 Sample3 T 11 T 12 T 13 T 14 T 15 25 25 25 25 30 Sample4 T 16 T 17 T 18 T 19 T 20 33 33 35 35 35 Sample5 T 21 T 22 T 23 T 24 T 25 35 36 40 45 46 Sample6 T 26 T 27 52 70

Sample2

Sample5 T21 T22 T23 T24 T25 35 36 40 45 46 T 6 T 7 T 8 T 9 T 10

20 20 21 22 22 分层抽样：按照年龄分层抽样时，不同的随机试验结果不同。

T1 13 young T 10 22 T2 15 young T 11 25 T3 16 young T 12 25 T4 16 young T 13 25 T5 19 young T 14 25 young young young young young T 19 35 middle age T 20 35 middle age T 21 35 middle age T 22 36 middle age T 23 40 middle age T6 20 young T 15 30 middle age T 24 45 middle age T7 20 young T 16 33 middle age T 25 46 middle age T8 21 young T 17 33 middle age T 26 52 middle age T9 22 young T 18 35 middle age T 27 70

senior

T4 16 T 12 25 young young T 17 33 middle age T 25 46 middle age T 27 70

Senio r

2.8 55555555555555555555555555

第 3 章 数据仓库与 OLAP 技术概述

3.1 3.4 假定 BigUniversity 的数据仓库包含如下 4 个维：student(student_name, area_id , major, status, university) ， course(course_name, department) ， semester(semester, year) 和 instructor(dept, rank)；2 个度量：count 和 avg_grade。 在最低概念层， 度量 avg_grade 存放学生的实际 课程成绩。在较高概念层， avg_grade 存放给定组合的平均成绩。

(a) 为该数据仓库画出雪花形模式图。

(b) 由 基 本 方 体 [student, course, semester, instructor] 开 始 ， 为 列 出

BigUniversity 每个学生的 CS 课程的平均成绩，应当使用哪些特殊 的 OLAP 操作。

(c) 如果每维有 5 层（包括 all），如“student该立方体包含多少方体？ 解答：

a) 为该数据仓库画出雪花形模式图。雪花模式如图所示。

b) 由 基 本 方 体 [student, course, semester, instructor] 开 始 ， 为 列 出

BigUniversity 每个学生的 CS 课程的平均成绩，应当使用哪些特殊的 OLAP 操作。

这些特殊的联机分析处理（OLAP ）操作有：

i. ii. iii. iv.

沿课程（course）维从 course_id “上卷”到 department。 沿学生（student）维从 student_id “上卷”到 university 。 取 department= “CS ”和 university= “Big University ”，沿课程 （course）维和学生（student）维切片。

沿学生（student）维从 university 下钻到 student_name。

c) 如果每维有 5 层（包括 all），如“student这个立方体将包含 54=625 个方体。

course 维表 course_id course_name univ 事实表 student_id course_id semester_id instructor_id student 维表

student_id student name area_id major status university department semester 维表 semester_id semester year count avg_grade area 维表 area_id city instructor 维表 Instructor_id dept province country rank 题 3.4 图 题 3.4 中数据仓库的雪花形模式

第四章

4.1 2008-11-29

4.2 有几种典型的立方体计算方法，

4.3 题 4.12 考虑下面的多特征立方体查询：按{item ，regio n，month} 的所有 子集分组，对每组找出 2004 年的最小货架寿命，并对价格低于 100 美元、货架 寿命在最小货架寿命的 1.25~1.5 倍之间的元组找出总销售额部分。

d) 画出该查询的多特征立方体图。 e) 用扩充的 SQL 表示该查询。

f) 这是一个分布式多特征立方体吗？为什么？ 解答：

(a) 画出该查询的多特征立方体图。 R 0→R1(≥1.25*min(shelf)and≤1.5*min(shelf)) (b) 用扩充的 SQL 表示该查询。

select

item, region, month, Min(shelf), SUM(R1)

from e where 04 cube by

item, year=20Purchas

region, month: R1

such that

R1.shelf≥1.25*MIN(Shelf) and (R1.Shelf≤1.5*MIN(Shelf) and

R1.Price<100

(c) 这是一个分布式多特征立方体吗？为什么？ 这不是一个分布多特征立方体，因为在“such that”语句中采用了“≤”条 件。

4.4 2008-11-29

4.5 2008-11-29

第五章

5.1 Aprio ri 算法使用子集支持度性质的先验知识。

5.2 5.2.2 节介绍了由频繁项集产生关联规则的方法。提出了一个更有效的方 法。解释它为什么比 5.2.2 节的方法更有效。（提示：考虑将习题 5.1(b)和习题 5.1(c) 的性质结合到你的设计中。）

■

5.3 数据库有 5 个事物。设 min_sup=60%，

min_conf=80 。 TID T100 Y}

购买的商品 {M, O, N, K, E,

T200 Y} T300

{D, O, N, K, E, {M, A, K, E} {M, U, C, K, Y} {C, O, O, K, I, E}

T400 T500

g) 分别使用 Aprio ri 和 FP 增长算法找出所有的频繁项集。比较两种挖

掘过程的效率。

h) 列举所有与下面的的元规则匹配的强关联规则（给出支持度 s 和

置 信度 c），其中，X 是代表顾客的变量，item 是表示项的变量（如“A”、 “B ”等）：

?x?transaction, buys(X, item 1)∧buys(X, item 2)?buys(X, item 3) [s, c] 解答：

(a) 分别使用 Aprio ri 和 FP 增长算法找出所有的频繁项集。比较两种挖掘

过 程的效率。

Aprio ri 算法：由于只有 5 次购买事件，所以绝对支持度是 5×min_sup=3。

?M ? O ? ? N ? ? K ? E ? C1 ? ? Y

? D ? ? A ?U ?? ? C ?? ? I

3????3 ??2????5 ??4????3??1????1?? 1????2????1 ??

?

?????M ? O ? L1 ? ? K

? ? E Y

3????3 ??5????4 ??3

?

?MO 1 ????MK 3 ?????????ME 2 ???

?MK ? ??

MY 2 ? OK ???

???OK 3 ??

C2 ? ? ??L2 ? ? OE

OE 3 ? ? ??

??KE ? OY 2 ??

????KY ? KE 4 ??? KY 3 ???????EY2 ??? ?

?

3??

???3 ?? 3???OKE 3??C3 ? ???KEY 2 ??????4 ??3

?

?????

L 3 ? ?OKE 3??

FP-growth：数据库的第一次扫描与 Aprio ri 算法相同，得到 L 1。再按支持度 计数的递减序排序，得到：L={(K:5), (E:4), (M:3), (O:3), (Y:3)}。扫描没个事 务，按以上 L 的排序，从根节点开始，得到 FP-树。

Root

K:5

E:4

M:1

O:2

Y:1

Y:1

O:1

Y:1

M:2

题 5.3 图 FP 增长算法

项 条件模式基 {{K,E,M,O:1} ，{K,E,O:1}，{K,M:1}} 条件 FP 树 产生的频繁模式 {K,Y:3} Y O K:3 {{K,E,M:1} ，{K,E:2}} K:3 ，E:3 {K,O:3}，{E,O:3} ，{K,E,O:3} M E {{K,E:2} ，{K:1}} {{K:4}} K:3 {K,M:3} K:4 {K,E:4} 效率比较：Aprio ri 算法的计算过程必须对数据库作多次扫描，而 FP-增长算 法在构造过程中只需扫描一次数据库，再加上初始时为确定支持度递减排序 的一次扫描，共计只需两次扫描。由于在 Aprio ri 算法中的自身连接过程产 生候选项集，候选项集产生的计算代价非常高，而 FP-增长算法不需产生任 何候选项。

(b) 列举所有与下面的的元规则匹配的强关联规则（给出支持度 s 和置信度

c），其中，X 是代表顾客的变量，item 是表示项的变量（如“A”、“B ” 等）：

?x?transaction, buys(X, “K”) ∧buys(X, “O”)?buys(X, “E ”) [s=0.6, c=1] ?x?transaction, buys(X, “E ”)∧buys(X, “E”) ?buys(X, “K”) [s=0.6, c=1] 或也可表示为

K,O→E[s(support)=0.6 或 60%,c(confid ence)=1 或 100%]

E,O→K[s(support)=0.6 或 60%,c(confid ence)=1 或 100%]

5.4 （实现项目）使用你熟悉的程序设计语言（如 C++或 Java），实现本章介 绍的三种频繁项集挖掘算法：

第 6 章 分类和预测6.1 简述决策树分类的主要步骤。

6.2 6.11 下表由雇员数据库的训练数据组成。数据已泛化。例如，age “31? 35”表示年龄在 31~35 之间。对于给定的行，count 表示 department，status，ag e 和 salary 在该行具有给定值的元组数。

department sales sales sales systems systems systems systems marketing marketing secretary secretary

status senior junior junior junior senio r junior senio r senior junior senior junior

age 31?35 26?30 31?35 21?25 31?35 26?30 41?45 36?40 31?35 46?50 26?30

salary 46K?50K 26K?30K 31K?35K 46K?50K 66K?70K 46K?50K 66K?70K 46K?50K 41K?45K 36K?40K 26K?30K

count 30 40 40 20 5 3 3 10 4 4 6

count？ i) 如何修改基本决策树算法，以便考虑每个广义数据元组（即每一行）的 j) 使用修改过的算法，构造给定数据的决策树。

k) 给定一个数据元组，它的属性 department，age 和 salary 的值分别为

“systems”，“26?30”，和“46K?50K”。该元组 status 的朴素贝叶 斯分类是什么？

l) 为给定的数据设计一个多层前馈神经网络。标记输入和输出层节点。 m) 使用上面得到的多层前馈神经网络，给定训练实例（sales，senior ，

31?35，46K?50K），给出后向传播算法一次迭代后的权重值。指出

解答：你使用的初始权重和偏倚以及学习率。

(a) 如何修改基本决策树算法，以便考虑每个广义数据元组（即每一行） 的

count？

(b) 使用修改过的算法，构造给定数据的决策树。

(c) 给 定一 个数 据元 组， 它的 属性 department ，age 和 salary 的 值分 别为

“systems”，“26?30”，和“46K?50K”。该元组 status 的朴素贝叶斯分 类是什么？

解一：设元组的各个属性之间相互独立，所以先求每个属性的类条件概率：

P(systems|junior)=(20+3)/(40+40+20+3+4+6)=23/113; P(26-30|junior)=(40+3+6)/113=49/113； P(46K-50K|junior)=(20+3)/113=23/113；

∵ X=(department=system, age=26 ?30,salary=46K?50K)；

∴ P(X|junior)=P(systems|junior)P(26-30|junior)P(46K-50K|junio r)

=23×49×23/1133=25921/1442897=0.01796 ；

P(systems|senior)=(5+3)/(30+5+3+10+4)=23/52; P(26-30|senior)=(0)/53=0;

P(46K-50K|senior)=(30+10)/52=40/52 ；

∵ X=(department=system, age=26 ?30,salary=46K?50K)； ∴ P(X|senior)=P(systems|senio r)P(26-30|senior)P(46K-50K|senior)=0; ∵ P(junio r)=113/165=0.68 ； ∵ P(senio r)=52/165=0.32；

∴ P(X|junior)P(junior)=0.01796×0.68=0.0122128>0=0=P(X|senior)P(senio r)； 所以：朴素贝叶斯分类器将 X 分到 junio r 类。 解二：设元组的各属性之间不独立，其联合概率不能写成份量相乘的形式。 所以已知：

X=(department=system,age=26?30,salary=46K?50K)，元组总数 为：30+40+40+20+5+3+3+10+4+4+6=165。 先验概率：

当 status=senio r 时，元组总数为：30+5+3+10+4=52，P(senior)=52/165=0.32 ；

当 status=junio r 时 ， 元 组 总 数 为 ： 40+40+20+3+4+6=113 ， P(junio r)=113/165=0.68 ；

因为 status=senio r 状态没有对应的 age=2 6?30 区间，所以：P(X|senior)=0； 因为 status=junio r 状态对应的 partment=systems 、age=26?30 区间的总元组 数为：3，所以：P(X|junior)=3/113； 因为：P(X|junior)P(junior)=3/113×113/165＝0.018>0=P(X|senior)P(senior)； 所以：朴素贝叶斯分类器将 X 分junio r 类。 到

(d) 为给定的数据设计一个多层前馈神经网络。标记输入和输出层节点。 (e) 使用上面得到的多层前馈神经网络，给定训练实例（sales，senior，31?

35，46K?50K），给出后向传播算法一次迭代后的权重值。指出你使用的 初始权重和偏倚以及学习率。

本文来源：https://www.bwwdw.com/article/d7lv.html