设备管理中设备名称聚类分析
Posted 卓晴
tags:
篇首语：本文由小常识网(cha138.com)小编为大家整理，主要介绍了设备管理中设备名称聚类分析相关的知识，希望对你有一定的参考价值。
简 介： 本文对于设备名称进行了分词聚类，并对聚类结果中仪器所使用的机时进行了腹部统计。通过对词典长度参数， SOM 聚类 边长参数进行调整，查看参数对于聚类结果的影响，找到最合理的参数。通过测试可以看到 SOM 聚类边长为 10×10 时，网络聚类效果最好。词典不同的长度对于聚类分析结果影响不大。通过对聚类结果所使用机时进行直方图统计，可以看到： 大部分的分布还是呈现于总体分布相似的情况，指数分布，这说明对于名称聚类对机时分布统计没有太多的影响。 对于少部分的聚类结果，分布不在呈现指数分布，但机时分布方差更大；综上所述，可以看到仅仅通过对设备名称进行聚类，对于设备使用机时分布没有能够得到更加合理的划分。
关键词： 设备，分类，聚类，机时，使用分布，直方图
§01 设备名称聚类
一、背景介绍
为了对于设备使用时间进行归类评价，需要建立设备正常使用的分布标准。在 设备管理中数据聚类处理-预处理 对来自 JYH 的数据进行了初步的分析，提取所有设备的名称，并进行分词统计。下面的工作包括：
- 建立起适当的分词词典，对设备名称表示成词典向量；
- 对设备进行聚类。
二、词典建立
在 设备管理中数据聚类处理-预处理 中对于所有设备名称进行了分词统计，获得了 2306 个分词，他们具有不同的出现频次。 下面给出了出现频次最多的前 20 个分词。
[['系统' '2347']
['仪' '989']
['分析仪' '900']
['显微镜' '744']
['激光' '619']
['激光器' '516']
['测试' '329']
['扫描' '319']
['质谱' '295']
['机' '255']
['光谱仪' '247']
['分析' '223']
['联用' '216']
['荧光' '212']
['探针' '188']
['平台' '186']
['装置' '185']
['聚焦' '177']
['色谱' '173']
['真空' '173']]
1、确定词典长度
先按照单词出现频次进行排序，选择其中 前 N 项 组成字典，对所有 11531 条记录中的设备名称进行查询，能够匹配上至少一条词典词语的称为匹配名称。 统计词典长度与匹配数据之间的曲线，如下图所示。可以看到选择前 200 ~ 300 条词语形成词典，便可以覆盖 98% 以上的记录。
▲ 图1.2.1 词典长度与匹配覆盖率
为了使得设备名称维度不太大， 先设定词典的长度为 200 ，建立设备名称的向量数据。 下面是词典中的词语：
['系统', '仪', '分析仪', '显微镜', '激光', '激光器', '测试', '扫描', '质谱', '机']
['光谱仪', '分析', '联用', '荧光', '探针', '平台', '装置', '聚焦', '色谱', '真空']
['谱仪', '成像', '高速', 'X射线', '信号', '共', '测量', '网络', '液相', '质谱仪']
['电子显微镜', '测试仪', '高', '纯化', '设备', '飞秒', '原子力', '沉积', '矢量', '流式细胞']
['台', '试验机', '采集', '低温', '热', '多功能', '发射', '显微', '离子', '刻蚀']
['红外', '三维', '与', '半导体', '衍射', '探测器', '相色谱', '分辨', '蛋白', '场']
['等离子体', '光学', '快速', '发生器', '检测', '气', '光纤', '全自动', '拉曼', '精密']
['脉冲', '数据', '超', '热仪', '红外光谱仪', '-', '动态', '实验', '试验台', '示波器']
['超高', '扫描电镜', '工作站', '气体', '多', '光谱', '处理', '控制系统', '纳米', '电子束']
['高温', '微波', '自动', '倒置', '等离子', '频谱', '摄像机', '分子', '及', '炉']
['飞行', '微量', '任意', '/', '无', '试验', '耦合', '核磁共振', '电', '微']
['高性能', '数字', '变换', '高压', '测量仪', '加工', '细胞', '超速离心', '粒子', '干涉仪']
['摩擦', '仿真', '放大器', '波形发生器', '离子束', '杆', '隧道', '超声', '实验台', '定量']
['透射', '冷冻', '光', '等温', '高效', '化学', '同步', '吸附', '生物', '镀膜']
['双', '相机', '制冷机', '滴定', '光度计', '振动', '能谱仪', '流变', '蒸发', '型']
['实时', '高纯锗', '高功率', '时间', '综合', '扫描仪', 'PCR', '样机', '气相', '跟踪']
['环境', '表面', '控制器', '磁控溅射', '合成', '集群', '在线', '光子', '式', '颗粒物']
['反应', '中心', '阻抗', '烧结炉', '液氦', '原子', '傅里叶', '模拟', '粒径', '制备']
['器', '信号源', '样品', '分光', '四级', '电池', '伺服', '光电子', '便携式', '计算']
['晶体', '稀释', '分选', '全', '高分辨率', '3D', '钛', '电子', '光谱分析', '图像']
2、设备名称向量
利用上述 200 个单词组成了词典，对于所有设备的名称建立向量数据。向量的长度为 200。 对于11531 条记录中的设备名称，便于10465 个记录设备名称中向量不全为 0。
下面给出了两条仪器名称记录所对应的数据向量。
三室`真空`定向`炉`
[0 0 0 0 0 0 0 0 0 0 0 0 0 0 0 0 0 0 0 1 0 0 0 0 0 0 0 0 0 0 0 0 0 0 0 0 0
0 0 0 0 0 0 0 0 0 0 0 0 0 0 0 0 0 0 0 0 0 0 0 0 0 0 0 0 0 0 0 0 0 0 0 0 0
0 0 0 0 0 0 0 0 0 0 0 0 0 0 0 0 0 0 0 0 0 0 0 0 0 1 0 0 0 0 0 0 0 0 0 0 0
0 0 0 0 0 0 0 0 0 0 0 0 0 0 0 0 0 0 0 0 0 0 0 0 0 0 0 0 0 0 0 0 0 0 0 0 0
0 0 0 0 0 0 0 0 0 0 0 0 0 0 0 0 0 0 0 0 0 0 0 0 0 0 0 0 0 0 0 0 0 0 0 0 0
0 0 0 0 0 0 0 0 0 0 0 0 0 0 0]
光电`发射`光谱仪
[0 0 0 0 0 0 0 0 0 0 1 0 0 0 0 0 0 0 0 0 0 0 0 0 0 0 0 0 0 0 0 0 0 0 0 0 0
0 0 0 0 0 0 0 0 0 1 0 0 0 0 0 0 0 0 0 0 0 0 0 0 0 0 0 0 0 0 0 0 0 0 0 0 0
0 0 0 0 0 0 0 0 0 0 0 0 0 0 0 0 0 0 0 0 0 0 0 0 0 0 0 0 0 0 0 0 0 0 0 0 0
0 0 0 0 0 0 0 0 0 0 0 0 0 0 0 0 0 0 0 0 0 0 0 0 0 0 0 0 0 0 0 0 0 0 0 0 0
0 0 0 0 0 0 0 0 0 0 0 0 0 0 0 0 0 0 0 0 0 0 0 0 0 0 0 0 0 0 0 0 0 0 0 0 0
0 0 0 0 0 0 0 0 0 0 0 0 0 0 0]
三、名称聚类
在 sklearn-som 中给出了 sklearn 中的自组织特征映射（SOM）聚类方法的使用。
1、初步测试
（1）名称聚类
初步构造一个 10×10 的 SOM 网络， 对于11531 个记录中的名字进行聚类。
from headm import *
from sklearn_som.som import SOM
namevect = tspload('namevect200', 'namevect')
SOM_SIDE = 10
VECT_LEN = shape(namevect)[1]
name_som = SOM(m=SOM_SIDE,n=SOM_SIDE,dim=200)
name_som.fit(namevect)
predictions = name_som.predict(namevect)
tspsave('prediction', pred=predictions)
printf('\\a')
printf(predictions)
下面是聚类后，每一个 SOM 神经元对应的样本个数。通过观察，可以看到其中包括有六个主要的聚类节点，它们对应的样本总数为 4600， 占总数的 40% 左右。
000 000 000 000 000 000 000 000 000 000
000 000 304 077 000 098 084 043 000 000
160 179 101 034 000 446 005 079 000 000
009 000 008 197 119 000 142 053 033 154
384 049 140 000 170 116 183 085 000 076
159 000 110 033 025 103 158 212 083 159
000 130 189 040 060 241 2000 259 000 120
253 028 007 094 000 115 110 000 980 154
000 000 486 000 103 111 000 127 196 190
172 046 178 107 000 029 079 016 226 115
▲ 图1.3.1 对应的样本出现频次以及所形成的六个主要的聚类节点
（2）聚类结果分析
Ⅱ.聚类名称
下面给出了聚类命中个数最多的前 6 个对应的一起名称中前 10 个仪器名称。
第1类，个数：2000
1:直流电源及其控制系统
2:无人驾驶电动飞艇
3:氦气风机
4:自然循环大模拟实验
5:氦净化工程验证回路
6:气相色谱仪
7:气相色谱仪
8:超声多普勒测速仪
9:粒径速度测定仪
10:立式氦气压缩机
第2类，个数：980
1:摇摆综合模拟台架系统
2:DR-CT安全检查系统
3:转筒式固态发酵罐系统
4:单倾冷冻传输杆系统
5:超高灵敏度检漏系统
6:光纤光谱测量系统
7:光学成像系统
8:显微摄像系统
9:晶体培养观察系统
10:蛋白质结晶系统
第3类，个数：486
1:高级扩展流变仪
2:化学吸附仪
3:实时高速喷雾粒度仪
4:蛋白纯化仪
5:全自动磁性细胞分选仪
6:激光光斑跟踪仪
7:台阶仪
8:显微注射仪
9:流变仪
10:形貌仪
第4类，个数：446
1:酶联免疫斑点分析仪
2:自动采样颗粒物分析仪
3:气溶胶粒径分析仪
4:个体化基因分析仪
5:动态力学分析仪
6:比表面积及孔隙分析仪
7:模态分析仪
8:模态测量分析仪
9:连续流动分析仪
10:总磷总氮分析仪
第5类，个数：384
1:高分辨率磁力显微镜
2:原子力显微镜
3:高级荧光显微镜
4:电动倒置显微镜
5:显微镜
6:原子力显微镜
7:荧光显微镜
8:倒置生物显微镜
9:显以上是关于设备管理中设备名称聚类分析的主要内容，如果未能解决你的问题，请参考以下文章