QQ登录

只需要一步,快速开始

 注册地址  找回密码
查看: 2535|回复: 0
打印 上一主题 下一主题

python 解决层次聚类

[复制链接]
字体大小: 正常 放大

1198

主题

4

听众

2978

积分

该用户从未签到

跳转到指定楼层
1#
发表于 2024-3-21 10:54 |只看该作者 |倒序浏览
|招呼Ta 关注Ta
层次聚类(Hierarchical Clustering)是一种常见的聚类算法,它将数据点分层次地组织成树状结构,形成一个聚类的层次结构。该算法不需要预先指定要形成的聚类数量,而是根据数据的相似性度量逐步合并最相似的数据点或聚类,直到形成一个包含所有数据点的聚类或满足某个停止条件。( L* ?* L3 g+ D( x" ~4 _
层次聚类算法可以分为两个主要类型:凝聚型(Agglomerative)和分裂型(Divisive)。" U" x2 O; R% Q  r$ d: C2 g
凝聚型层次聚类(自底向上)的工作流程如下:: ]" y. Y9 M! W

' `# t7 q# U. p5 [1.将每个数据点视为一个初始聚类。
& y' v. R: y1 j$ n5 \" a* `2.计算所有聚类之间的相似性或距离度量。
4 w5 s4 b5 t9 J* ^; O* ^# o- b3.合并距离最近的两个聚类形成一个新的聚类,更新相似性矩阵。; ]  v' {( Y+ a0 ~3 l! G/ _' ?
4.重复步骤 3,直到满足停止条件,例如达到指定的聚类数量或某个相似性阈值。' B. k, ~- y# w9 |+ B5 Q
5.最终的层次聚类结果可以表示为树状的聚类结构(树状图或树状图谱),也可以通过截断树状图来获得特定数量的聚类。
! C, E9 p. F1 R/ T: ~( B0 j  R
: P! t3 v+ h- C: l, u9 h1 E分裂型层次聚类(自顶向下)与凝聚型相反,它从一个包含所有数据点的初始聚类开始,然后递归地分裂聚类,直到形成单个数据点作为一个独立的聚类。
* X! Q0 ^8 {1 E0 Q# ^; R层次聚类算法的优点包括不需要预先指定聚类数量、能够提供层次结构的聚类结果以及可以使用不同的相似度度量方法。然而,该算法的计算复杂度较高,尤其在大规模数据集上运行时可能不太高效。
, w: V8 C$ a) F" ~/ Z在Python中,你可以使用scikit-learn库中的AgglomerativeClustering类来实现凝聚型层次聚类算法。该类提供了灵活的参数设置,例如聚类的链接类型、距离度量方法等。# O: s/ |4 l0 a' t2 v1 c2 [
解释代码的含义:1 L$ o& h# [0 X8 I
import numpy as np7 U9 @2 A% Y5 m0 V# E% d# t) i
import pandas as pd
/ o* S; E! m2 w, {# X* J8 p9 Ximport scipy.cluster.hierarchy as sch
) [$ ?! |/ Z- l2 J- G8 K( k& b% A  c3 ]/ k
这些是导入所需的库。numpy用于数值计算,pandas用于数据处理,scipy.cluster.hierarchy提供了层次聚类的功能。! }  K/ p; Z2 l* v4 ^) c1 _" `
df = pd.DataFrame({% |: `2 A  v( |4 |' V) w0 a  d, `$ u
    'Cu': [2.9909, 3.2044, 2.8392, 2.5315, 2.5897, 2.9600, 3.1184],
8 N; }$ Y6 L+ E# S. O    'W': [.3111, .5348, .5696, .4528, .3010, 3.0480, 2.8395],
# r# F: ~3 B% C' i7 l+ X1 }    'Mo': [.5324, .7718, .7614, .4893, .2735, 1.4997, 1.9350],
5 t8 l$ U4 R/ q; }3 g: O+ T# _1 I, l})
" C: t7 z! T2 j! c
) d* b4 c- f/ _2 j$ Q: G7 m4 O这里创建了一个DataFrame对象df,其中包含了三列数据:'Cu'、'W'和'Mo'。每一列代表了一个属性,每行代表一个样本点。
& p" l, |! @; k/ [0 a' i$ \dist = sch.distance.pdist(df), X. R4 q8 z6 {: z5 l2 A

, e7 \7 Z) U8 H6 D8 F2 m这行代码使用scipy.cluster.hierarchy中的pdist函数计算数据帧df中样本点之间的距离。函数返回一个一维数组,该数组包含了所有样本点之间的距离。
, _6 D  C6 ~, x/ Rdist_mat = sch.distance.squareform(dist)
9 z2 `. I+ `& p7 V% h$ G; n* Z, D% E7 v$ N3 z5 B& o
这行代码使用scipy.cluster.hierarchy中的squareform函数将一维数组形式的距离转换为方阵形式的距离矩阵。距离矩阵是一个对称矩阵,其中每个元素表示对应样本点之间的距离。1 ~" Q8 Y( ]) q; O1 k% E5 z; V
z = sch.linkage(dist)
+ i) b, X  S2 O6 C$ V4 `0 F
0 d1 V9 g+ Q7 j7 t9 @% I3 ?这行代码使用scipy.cluster.hierarchy中的linkage函数进行层次聚类。函数接受距离矩阵作为输入,并基于距离计算样本点之间的相似性。这里使用默认的'single'链接方法,即使用最近邻距离作为聚类相似性的衡量。
1 t5 F9 c: _: v8 wsch.dendrogram(z)
; K; p: n, g1 o% A0 Z
6 Y$ J+ a0 _5 m这行代码使用scipy.cluster.hierarchy中的dendrogram函数绘制树状图。函数接受聚类的连接矩阵z作为输入,并根据聚类的合并信息绘制树状图。树状图展示了每个样本点和聚类之间的层次关系。
6 e' j/ @6 c& W/ J: M- t1 J希望这个逐行解释对你有帮助!如果你还有其他问题,请随时提问。) w' u' j7 M% j  p) ]8 D1 z8 q

/ z# @# L5 i6 h  F& S; T7 B4 b3 e4 c2 ^$ J7 O0 Q+ ]. ?

1 v; U6 ]2 I* M" m( k

29.hierarchical_clustering.py

581 Bytes, 下载次数: 0, 下载积分: 体力 -2 点

售价: 2 点体力  [记录]  [购买]

zan
转播转播0 分享淘帖0 分享分享0 收藏收藏0 支持支持0 反对反对0 微信微信
您需要登录后才可以回帖 登录 | 注册地址

qq
收缩
  • 电话咨询

  • 04714969085
fastpost

关于我们| 联系我们| 诚征英才| 对外合作| 产品服务| QQ

手机版|Archiver| |繁體中文 手机客户端  

蒙公网安备 15010502000194号

Powered by Discuz! X2.5   © 2001-2013 数学建模网-数学中国 ( 蒙ICP备14002410号-3 蒙BBS备-0002号 )     论坛法律顾问:王兆丰

GMT+8, 2026-10-16 06:26 , Processed in 0.694325 second(s), 54 queries .

回顶部