深度学习聚类的综述
来源:Imagination Tech 发布时间:2022-12-30 分享至微信
作者:凯鲁嘎吉

来源:博客园


这篇文章对现有的深度聚类算法进行全面综述与总结。现有的深度聚类算法大都由聚类损失与网络损失两部分构成,博客从两个视角总结现有的深度聚类算法,即聚类模型与神经网络模型。

1. 什么是深度聚类?

经典聚类即数据通过各种表示学习技术以矢量化形式表示为特征。随着数据变得越来越复杂和复杂,浅层(传统)聚类方法已经无法处理高维数据类型。为了解决该问题,深度聚类的概念被提出,即联合优化表示学习和聚类。

2. 从两个视角看深度聚类

3. 从聚类模型看深度聚类

3.1 基于K-means的深度聚类

参考:聚类——K-means - 凯鲁嘎吉 - 博客园

3.2 基于谱聚类的深度聚类

参考:多视图子空间聚类/表示学习(Multi-view Subspace Clustering/Representation Learning),关于“On the eigenvectors of p-Laplacian”目标函数的优化问题- 凯鲁嘎吉 - 博客园

3.3基于子空间聚类(Subspace Clustering, SC)的深度聚类

参考:深度多视图子空间聚类,多视图子空间聚类/表示学习(Multi-view Subspace Clustering/Representation Learning),字典更新与 K-SVD - 凯鲁嘎吉 - 博客园

3.4基于高斯混合模型(Gaussian Mixture Model, GMM)的深度聚类

参考:聚类——GMM,基于图嵌入的高斯混合变分自编码器的深度聚类(Deep Clustering by Gaussian Mixture Variational Autoencoders with Graph Embedding, DGG)- 凯鲁嘎吉 - 博客园

3.5基于互信息的深度聚类

参考:COMPLETER: 基于对比预测的缺失视图聚类方法,Meta-RL——Decoupling Exploration and Exploitation for Meta-Reinforcement Learning without Sacrifices - 凯鲁嘎吉 - 博客园

3.6 基于KL的深度聚类

参考:Deep Clustering Algorithms ,关于“Unsupervised Deep Embedding for Clustering Analysis”的优化问题,结构深层聚类网络,具有协同训练的深度嵌入多视图聚类- 凯鲁嘎吉 -博客园

4.从神经网络模型看深度聚类

4.1基于自编码器(AutoEncoder, AE)的深度聚类

参考:Deep Clustering Algorithms - 凯鲁嘎吉 - 博客园 (DEC, IDEC, DFKM, DCEC)

4.2基于变分自编码器(Variational AutoEncoder, VAE)的深度聚类

参考:变分推断与变分自编码器,变分深度嵌入(Variational Deep Embedding, VaDE),基于图嵌入的高斯混合变分自编码器的深度聚类(Deep Clustering by Gaussian Mixture Variational Autoencoders with Graph Embedding, DGG),元学习——Meta-Amortized Variational Inference and Learning,RL——Deep Reinforcement Learning amidst Continual/Lifelong Structured Non-Stationarity - 凯鲁嘎吉 - 博客园

4.3基于生成对抗网络(Generative Adversarial Network, GAN)的深度聚类

参考:生成对抗网络(GAN与W-GAN),ClusterGAN: 生成对抗网络中的潜在空间聚类,双层优化问题:统一GAN,演员-评论员与元学习方法(Bilevel Optimization Problem unifies GAN, Actor-Critic, and Meta-Learning Methods)- 凯鲁嘎吉 - 博客园

4.4基于孪生网络(Siamese Neural Network)/对比学习(Contrastive Learning)的深度聚类

参考:从对比学习(Contrastive Learning)到对比聚类(Contrastive Clustering),COMPLETER: 基于对比预测的缺失视图聚类方法- 凯鲁嘎吉 - 博客园

4.5基于图神经网络(Graph Neural Network)的深度聚类

参考:结构深层聚类网络 - 凯鲁嘎吉 -博客园

参考文献

[1]第40期:基于深度神经网络的聚类算法——郭西风

[2]物以类聚人以群分:聚类分析的一些挑战和进展-凯鲁嘎吉-博客园

[3] A Survey of Deep Clustering Algorithms -凯鲁嘎吉-博客园

[4] Deep Clustering | Deep Learning Notes

[5]郭西风.基于深度神经网络的图像聚类算法研究[D].国防科技大学,2020.

声明

作者:凯鲁嘎吉

出处:http://www.cnblogs.com/kailugaji/

本文版权归作者和博客园共有,欢迎转载,但未经作者同意必须在文章页面给出原文链接,否则保留追究法律责任的权利。

END


欢迎加入Imagination GPU与人工智能交流2群
入群请加小编微信:eetrend89

(添加请备注公司名和职称)

推荐阅读

对话Imagination中国区董事长:以GPU为支点加强软硬件协同,助力数字化转型

Imagination的IMG CXT GPU荣获2022亚洲金选奖年度最佳IP/处理器

Imagination Technologies是一家总部位于英国的公司,致力于研发芯片和软件知识产权(IP),基于Imagination IP的产品已在全球数十亿人的电话、汽车、家庭和工作场所中使用。获取更多物联网、智能穿戴、通信、汽车电子、图形图像开发等前沿技术信息,欢迎关注 Imagination Tech!

[ 新闻来源:Imagination Tech,更多精彩资讯请下载icspec App。如对本稿件有异议,请联系微信客服specltkj]
存入云盘 收藏
举报
全部评论

暂无评论哦,快来评论一下吧!