原文链接:http://tecdat.cn/?p=19077
最近咱们被客户要求撰写对于SOM的钻研报告,包含一些图形和统计输入。
自组织映射 (SOM)是一种工具,通过生成二维示意来可视化高维数据中的模式,在高维构造中显示有意义的模式
导入
通过以下形式应用给定的数据(或数据样本)对SOM进行“训练”:
- 定义了网格的大小。
- 网格中的每个单元都在数据空间中调配了一个初始化向量。
- 例如,如果要创立22维空间的地图,则会为每个网格单元调配一个22维向量。
- 数据被重复输出到模型中进行训练。每次输出训练向量时,都会执行以下过程:
- 辨认具备最靠近训练向量的代表向量的网格单元。
- 随着训练向量的屡次输出,收敛的参数使调整变得越来越小,从而使地图稳固。
相干视频
**
拓端
,赞8
**
拓端
,赞12
该算法赋予SOM的要害特色:数据空间中靠近的点在SOM中更靠近。因而,SOM可能是示意数据中的空间聚类的好工具。
相干视频
**
拓端
,赞28
Kohonen映射类型
上面的示例将应用2015/16 NBA赛季的球员统计数据。咱们将查看每36分钟更新一次的球员统计信息。这些数据可从 http://www.basketball-referen...取得。咱们曾经清理了数据。
NBA <- read.csv("NBA_cleaned.csv", sep = ",", header = T, check.names = FALSE)
根本SOM
在创立SOM之前,咱们须要抉择要在其中搜寻模式的变量。
colnames(NBA)
## [1] "" "Player" "Pos" "Age" "Tm" "G" "GS" ## [8] "MP" "FG" "FGA" "FG%" "3P" "3PA" "3P%" ## [15] "2P" "2PA" "2P%" "FT" "FTA" "FT%" "ORB" ## [22] "DRB" "TRB" "AST" "STL" "BLK" "TOV" "PF" ## [29] "PTS"
咱们从简略示例开始:
som(scale(NBA[res1], grid = somgrid(6, 4, "rectangular")
请留神,咱们标准化了训练数据,并定义了网格大小。规范SOM图可为网格单元的代表矢量创立这些饼图示意,其中半径对应于特定维度上的大小。
点击题目查阅往期内容
R语言k-means聚类、档次聚类、主成分(PCA)降维及可视化剖析鸢尾花iris数据集
左右滑动查看更多
01
02
03
04
热图SOM
咱们能够通过将每个球员调配到具备最靠近该球员状态的代表向量来辨认地图。“计数”类型的SOM依据球员数量创立了一个热图。
# 色带colors <- function(n, alpha = 1) { rev(heat.colors(n, alpha))}
绘图点
您能够应用“映射”类型的SOM将球员绘制为网格上的点。咱们与惯例SOM进行可视化比拟。
每个地图单元格的代表性矢量显示在右侧。左侧是依据其状态与这些代表向量的靠近水平绘制的球员图表。
环形SOM
下一个示例是一种更改几何形态的办法。在为上述示例训练SOM时,咱们应用了矩形网格。因为边缘(尤其是拐角处)的单元比外部单元具备更少的街坊,因而偏向于将更多的极其值推到边缘。
par(mfrow = c(1, 2))plot(NBA.SOM2, type = "mapping", pchs = 20, main = "Mapping Type SOM")plot(NBA.SOM2, main = "Default SOM Plot")
映射间隔
当用绘制时 type = "dist.neighbours"
,单元格将依据与它们最近的街坊的间隔着色,这使咱们能够直观地看到高维空间中不同因素之间的间隔。
plot(SOM2, type = "dist.neighbours")
有监督SOM
有监督的SOM使咱们能够进行分类。到目前为止,咱们仅将三维数据映射到二维。当咱们解决更高维度的数据时,SOM的实用性变得更加显著,因而让咱们应用扩大的球员统计信息列表来做这个受监督的示例:
咱们创立有监督的SOM,并依据球员在球场上的地位对其进行分类。咱们将数据随机分为训练集和测试集。
indices <- sample(nrow(NBA), 200)training <- scale(NBA[indices, NBA.measures2])testing <- scale(NBA[-indices, NBA.measures2], center = attr(training, "scaled:center"), scale = attr(training, "scaled:scale"))
请留神,当咱们从新标准化测试数据时,咱们须要依据训练数据的形式对其进行标准化。
您能够在训练算法中对训练变量(NBA.training
)与预测变量(NBA$Pos
)进行加权。当初让咱们查看预测的准确性:
## ## Center Point Guard Power Forward Shooting Guard## Center 16 0 26 1## Point Guard 0 49 0 12## Power Forward 10 1 29 5## Shooting Guard 0 8 4 38## Small Forward 0 0 15 9## ## Small Forward## Center 4## Point Guard 11## Power Forward 8## Shooting Guard 19## Small Forward 38
可视化预测:
这次,咱们应用xweight
参数为权重掂量球员统计数据 。
应用type = "codes"
咱们进行绘制,能够 失去规范的可视化球员状态(Codes X
)和球员地位预测(Codes Y
)。
add.cluster.boundaries(NBA.SOM4, NBA.SOM4.hc)
该视图使咱们能够将球员统计数据与地位预测进行比拟。
可视化预测:自定义SOM
在最初一个示例中,咱们将对该type = mapping
图进行一些自定义, 以便咱们能够同时示意理论球员地位和SOM的预测地位。咱们将从可视化开始。
背景色彩绘制的球员点的背景代表其实在地位。
bg.pallet <- c("red", "blue", "yellow", "purple", "green")# 为所有单元格制作仅背景色彩的矢量base.color.vector <- bg.pallet[match(position.predictions, levels(NBA$Pos))]# 设置alpha以最大的预测置信度标准化max.conf <- apply(NBA.SOM4$codes$Y, 1, max)
点击文末 “浏览原文”
获取全文残缺材料。
本文选自《R语言中的SOM(自组织映射神经网络)对NBA球员聚类分析》。
点击题目查阅往期内容
Python用RNN神经网络:LSTM、GRU、回归和ARIMA对COVID19新冠疫情人数工夫序列预测RNN循环神经网络 、LSTM长短期记忆网络实现工夫序列长期利率预测
联合新冠疫情COVID-19股票价格预测:ARIMA,KNN和神经网络工夫序列剖析
深度学习:Keras应用神经网络进行简略文本分类剖析新闻组数据
用PyTorch机器学习神经网络分类预测银行客户散失模型
PYTHON用LSTM长短期记忆神经网络的参数优化办法预测工夫序列洗发水销售数据
Python用Keras神经网络序列模型回归拟合预测、准确度检查和后果可视化
Python用LSTM长短期记忆神经网络对不稳固降雨量工夫序列进行预测剖析
R语言中的神经网络预测工夫序列:多层感知器(MLP)和极限学习机(ELM)数据分析报告
R语言深度学习:用keras神经网络回归模型预测工夫序列数据
Matlab用深度学习长短期记忆(LSTM)神经网络对文本数据进行分类
R语言KERAS深度学习CNN卷积神经网络分类辨认手写数字图像数据(MNIST)
MATLAB中用BP神经网络预测人体脂肪百分比数据
Python中用PyTorch机器学习神经网络分类预测银行客户散失模型
R语言实现CNN(卷积神经网络)模型进行回归数据分析
SAS应用鸢尾花(iris)数据集训练人工神经网络(ANN)模型
【视频】R语言实现CNN(卷积神经网络)模型进行回归数据分析
Python应用神经网络进行简略文本分类
R语言用神经网络改良Nelson-Siegel模型拟合收益率曲线剖析
R语言基于递归神经网络RNN的温度工夫序列预测
R语言神经网络模型预测车辆数量工夫序列
R语言中的BP神经网络模型剖析学生问题
matlab应用长短期记忆(LSTM)神经网络对序列数据进行分类
R语言实现拟合神经网络预测和后果可视化
用R语言实现神经网络预测股票实例
应用PYTHON中KERAS的LSTM递归神经网络进行工夫序列预测
python用于NLP的seq2seq模型实例:用Keras实现神经网络机器翻译
用于NLP的Python:应用Keras的多标签文本LSTM神经网络分类
对用电负荷工夫序列数据进行K-medoids聚类建模和GAM回归
R语言无限混合模型(FMM,finite mixture model)EM算法聚类分析间歇泉喷发工夫
R语言k-Shape工夫序列聚类办法对股票价格工夫序列聚类
Python主题建模LDA模型、t-SNE 降维聚类、词云可视化文本开掘新闻组数据集
R语言用关联规定和聚类模型开掘处方数据摸索药物配伍中的法则
K-means和档次聚类分析癌细胞系微阵列数据和树状图可视化比拟
KMEANS均值聚类和档次聚类:亚洲国家地区生存幸福品质异同可视化剖析和抉择最佳聚类数
PYTHON实现谱聚类算法和扭转聚类簇数后果可视化比拟
无限混合模型聚类FMM、狭义线性回归模型GLM混合利用剖析威士忌市场和钻研专利申请数据
R语言多维数据档次聚类散点图矩阵、配对图、平行坐标图、树状图可视化城市宏观经济指标数据
r语言无限正态混合模型EM算法的分层聚类、分类和密度估计及可视化
Python Monte Carlo K-Means聚类实战钻研
R语言k-Shape工夫序列聚类办法对股票价格工夫序列聚类
R语言对用电负荷工夫序列数据进行K-medoids聚类建模和GAM回归
R语言谱聚类、K-MEANS聚类分析非线性环状数据比拟
R语言实现k-means聚类优化的分层抽样(Stratified Sampling)剖析各市镇的人口
R语言聚类有效性:确定最优聚类数剖析IRIS鸢尾花数据和可视化Python、R对小说进行文本开掘和档次聚类可视化剖析案例
R语言k-means聚类、档次聚类、主成分(PCA)降维及可视化剖析鸢尾花iris数据集
R语言无限混合模型(FMM,finite mixture model)EM算法聚类分析间歇泉喷发工夫
R语言用温度对城市档次聚类、kmean聚类、主成分剖析和Voronoi图可视化
R语言k-Shape工夫序列聚类办法对股票价格工夫序列聚类
R语言中的SOM(自组织映射神经网络)对NBA球员聚类分析
R语言简单网络分析:聚类(社区检测)和可视化
R语言中的划分聚类模型
基于模型的聚类和R语言中的高斯混合模型
r语言聚类分析:k-means和档次聚类
SAS用K-Means 聚类最优k值的选取和剖析
用R语言进行网站评论文本开掘聚类
基于LDA主题模型聚类的商品评论文本开掘
R语言鸢尾花iris数据集的档次聚类分析
R语言对用电负荷工夫序列数据进行K-medoids聚类建模和GAM回归
R语言聚类算法的利用实例