计算机技术与发展2020,Vol.30Issue(12) :21-26.DOI:10.3969/j.issn.1673-629X.2020.12.004

基于热重启机制的胶囊投影网络快速训练算法

Learning Capsule Projection Network by Stochastic Gradient Descent with Warm Restarts

谢奔 张索非 吴晓富
计算机技术与发展2020,Vol.30Issue(12) :21-26.DOI:10.3969/j.issn.1673-629X.2020.12.004

基于热重启机制的胶囊投影网络快速训练算法

Learning Capsule Projection Network by Stochastic Gradient Descent with Warm Restarts

谢奔 1张索非 2吴晓富1
扫码查看

作者信息

  • 1. 南京邮电大学 通信与信息工程学院,江苏 南京 210003
  • 2. 南京邮电大学 物联网学院,江苏 南京 210003
  • 折叠

摘要

胶囊投影网络是一种新型的深度神经网络结构,将传统的卷积神经网络与胶囊投影结构结合来学习潜在的视觉特征.尽管胶囊投影网络在多个分类数据集上展现出了先进的性能,但是训练该算法模型往往需要较高的学习成本,这对胶囊投影网络在实际问题中的应用带来一定的限制.针对该问题,将基于热重启机制的随机梯度下降算法引入到胶囊投影网络的学习中,提出了一种基于热重启机制的胶囊投影网络快速训练算法,并在多个分类数据集上对该方法进行实验评估.实验结果表明,与原始的胶囊投影网络相比,该方法不仅解决了训练成本高昂的问题,同时所学模型也具有比较好的泛化性能.

关键词

卷积神经网络/胶囊投影结构/热重启机制/快速训练算法/深度学习

引用本文复制引用

基金项目

国家自然科学基金(61372123)

国家自然科学基金(61701252)

出版年

2020
计算机技术与发展
陕西省计算机学会

计算机技术与发展

CSTPCD
影响因子:0.621
ISSN:1673-629X
被引量1
参考文献量7
段落导航相关论文