首页 | 本学科首页   官方微博 | 高级检索  
     

基于dropout正则化的半监督域自适应方法
引用本文:李志恒.基于dropout正则化的半监督域自适应方法[J].计算机应用研究,2021,38(2):591-594,599.
作者姓名:李志恒
作者单位:南京信息工程大学 电子与信息工程学院,南京210044;南京信息工程大学 人工智能学院,南京210044;南京信息工程大学 电子与信息工程学院,南京210044
基金项目:国家自然科学基金资助项目;江苏省自然科学基金资助项目
摘    要:针对机器学习中训练样本和测试样本概率分布不一致的问题,提出了一种基于dropout正则化的半监督域自适应方法来实现将神经网络的特征表示从标签丰富的源域转移到无标签的目标域。此方法从半监督学习的角度出发,在源域数据中添加少量带标签的目标域数据,使得神经网络在学习到源域数据特征分布的同时也能学习到目标域数据的特征分布。由于有了先验知识的指导,即使没有丰富的标签信息,神经网络依然可以很好地拟合目标域数据。实验结果表明,此算法在几种典型的数字数据集SVHN、MNIST和USPS的域自适应任务上的性能优于现有的其他算法,并且在涵盖广泛自然类别的真实数据集CIFAR-10和STL-10的域自适应任务上有较好的鲁棒性。

关 键 词:域自适应方法  正则化  半监督学习  神经网络
收稿时间:2019/11/4 0:00:00
修稿时间:2021/1/27 0:00:00

Semi-supervised domain adaptation method based on dropout regularization
Li Zhiheng.Semi-supervised domain adaptation method based on dropout regularization[J].Application Research of Computers,2021,38(2):591-594,599.
Authors:Li Zhiheng
Affiliation:(School of Electronics&Information Engineering,Nanjing University of Information Science&Technology,Nanjing 210044,China;School of Artificial Intelligence,Nanjing University of Information Science&Technology,Nanjing 210044,China)
Abstract:Aiming at the problem of inconsistent probability distribution between training samples and test samples in machine learning,this paper proposed a semi-supervised domain adaptation method based on dropout regularization to transfer neural representations from label-rich source domains to unlabeled target domains.From the perspective of semi-supervised learning,this paper added a small amount of labeled target domain data into the source domain data,so that the neural network could learn the feature distribution of target domain data while learning the feature distribution of source domain data.With the gui-dance of prior knowledge,neural network could fit target domain data well even without abundant label information.Experiments show that the proposed algorithm is superior to other existing algorithms in domain adaptation performance on digital datasets and robust on real datasets covering a wide range of natural categories.
Keywords:domain adaptation methods  regularization  semi-supervised learning  neural network
本文献已被 维普 万方数据 等数据库收录!
点击此处可从《计算机应用研究》浏览原始摘要信息
点击此处可从《计算机应用研究》下载全文
设为首页 | 免责声明 | 关于勤云 | 加入收藏

Copyright©北京勤云科技发展有限公司  京ICP备09084417号