IEEEJAS的个人博客分享 http://blog.sciencenet.cn/u/IEEEJAS

博文

基于非凸复合函数的稀疏信号恢复算法

已有 2207 次阅读 2022-3-22 10:20 |系统分类:博客资讯

用本文


周洁容, 李海洋, 凌军, 陈浩, 彭济根. 基于非凸复合函数的稀疏信号恢复算法. 自动化学报, 2022, 48(x): 1−12 doi: 10.16383/j.aas.c200666    

Zhou Jie-Rong, Li Hai-Yang, Ling Jun, Chen Hao, Peng Ji-Gen. Sparse signal reconstruction algorithm based on non-convex composite function. Acta Automatica Sinica, 2022, 48(x): 1−12 doi: 10.16383/j.aas.c200666   

http://www.aas.net.cn/cn/article/doi/10.16383/j.aas.c200666?viewType=HTML


文章简介


关键词


压缩感知, 稀疏信号重构, MM技术, 外点罚函数法, 共轭梯度法


摘   要


基于泛函深度作用的思想, 通过将两种非凸稀疏泛函进行复合, 构造了一种新的稀疏信号重构模型, 实现了对0范数的深度逼近. 综合运用MM (Majorize minimization)技术、外点罚函数法和共轭梯度法, 提出一种求解该模型的算法, 称为NCCS (Non-convex composite sparse)算法. 为降低重构信号陷入局部极值的可能性, 提出在算法的每步迭代中以BP (Basis pursuit)模型的解作为初始迭代值. 为验证所建模型和所提算法的有效性, 进行了多项数值实验. 实验结果表明, 相较于SL0 (Smoothed L_0)算法、IRLS (Iterative reweighed least squares)算法、SCSA (Successive concave sparsity approximation)算法以及BP 算法等经典算法, 提出的算法在重构误差、信噪比、归一化均方差、支撑集恢复成功率等方面都有更优的表现.


引   言


根据奈奎斯特(Nyquist)采样定律, 想要实现信号的无失真输出, 采样频率必须在信号带宽的两倍以上. 然而, 在大多数情形下, 按此定律采样所获得的信息是冗余的, 这不仅造成采样的浪费, 而且处理较大带宽的信号时会给硬件系统带来巨大压力. 压缩感知(Compressed sensing, CS)的出现使该问题的解决成为可能. 压缩感知是一种新型的信号采样及重构理论, 利用少量的测量值就可以实现稀疏或可压缩信号的精确重构. 而稀疏信号的重构在众多科学研究和工程应用中十分重要, 如物理学中的量子态层析成像、天体物理学成像、磁共振成像、信号处理、雷达成像等, CS理论的引入加快了上述应用的研究和发展.


数学上, 稀疏信号重构是指从欠定线性系统b=Ax中恢复原始信号x, 其中b∈R^n是测量向量, A∈R^{n×m} (n<m)为感知矩阵, x∈R^m是未知的稀疏向量. 最稀疏信号的重构模型是:

图片

其中, ||x||_0表示向量x中非零元素的个数.


已经证明, (P_0)模型的直接求解是NP (Non-deterministic polynomial)难的, 其计算量会随着稀疏向量维数的增加而增大, 模型的抗噪能力也很差. 为此人们提出了多种方法对(P_0)模型进行求解, 主要方法可归类于启发式方法、凸松弛方法、非凸松弛方法三种类型. 典型的启发式算法有正交匹配追踪、阈值算法、子空间追踪算法、分级正交匹配追踪等, 这些算法重构理论简单、速度较快, 但往往需要更多观测, 算法的重构精度较低、收敛速度较慢, 并且在有噪声情况下信号的恢复精度较低, 因此其应用范围有限. 典型的凸松弛算法有梯度投影算法、BP (Basis pursuit)算法、BPDN (Basis pursuit denoising)算法、IRLS (Iterative reweighed least squares)算法、Bregma迭代法等, 其中最经典的是BP算法, 文献[18]证明了在测量矩阵满足有限等距性质的条件下BP模型与(P_0)模型等价, 但在多种情形下BP模型中的L1范数不能充分反映信号的稀疏性特征, 往往难以获得稀疏解. 为此, 人们提出了用非凸泛函替代L_0范数的方法, 称之为非凸松弛方法.


相较于L_1范数, 许多非凸泛函能更好地近似L_0范数, 从而更好地反映信号的稀疏性特征. 典型的非凸松弛算法有NSL0 (Newt-on smooth L_0 norm)算法、SL0 (Smoothed L_0)算法、CTNRAL0 (Composite trigono-metric function null-space reweighted appro-ximate L_0 norm)算法、SCSA (Successive concave sparsity approximation)算法等. 易见, 松弛方法的核心是寻找L_0范数的逼近函数, 通过极小化该逼近函数寻得最稀疏解. 显然这种近似模型对(P_0)模型的逼近性能取决于所选取的近似函数对L_0范数的逼近程度. 因此, 如何构造具有更优逼近性能的近似函数已成为稀疏信号重构问题研究中的重要问题.


最近, 文献[23−24]分别构造了两种近似函数g_σ(x)=1−e^{−|x|/σ}、h_σ(x)=|x|/(|x|+σ)以实现对L0范数的逼近, 取得了较好的重构效果. 一个有趣的想法是, 如果将上述每个泛函对信号的作用看成是一次前向(Forward)处理过程, 那么我们是否可以通过泛函的复合实现对信号的深度作用, 从而提高信号重构的性能? 基于这种想法, 本文将上述两个泛函进行复合, 构建一种新的非凸松弛模型, 给出该模型的理论分析, 对该模型提出一种新的近似算法, 并通过数值实验验证算法的有效性以及相较于SL0算法、IRLS算法、BP算法、SCSA算法等经典算法的优越性.


10.16383-j.aas.c200666-Figure5.jpg

图 5  SL0、IRLS、BP、SCSA、NCCS 5种算法的重构误差和稀疏度的变化关系


10.16383-j.aas.c200666-Figure6.jpg

图 6  SL0、IRLS、BP、SCSA、NCCS 5种算法的重构信噪比和稀疏度的变化关系


10.16383-j.aas.c200666-Figure7.jpg

图 7  SL0、IRLS、BP、SCSA、NCCS 5种算法的运行时间和稀疏度的变化关系


10.16383-j.aas.c200666-Figure8.jpg

图 8  SL0、IRLS、BP、SCSA、NCCS 5种算法的支撑集恢复成功率和稀疏度的变化关系


10.16383-j.aas.c200666-Figure9.jpg

图 9  SL0、IRLS、BP、SCSA、NCCS 5种算法的归一化均方差和稀疏度的变化关系


作者简介


周洁容

广州大学数学与信息科学学院硕士研究生. 2014年获得岭南师范学院数学学士学位. 主要研究方向为稀疏信息处理. 

E-mail: jrzhouzoe@163.com


李海洋

广州大学数学与信息科学学院教授.2008年获得陕西师范大学基础数学博士学位. 主要研究方向为量子逻辑理论, 机器学习理论和稀疏信息处理.

E-mail: fplihaiyang@126.com


凌   军

广州大学数学与信息科学学院博士研究生. 2019年获得南昌大学概率论与数理统计硕士学位.主要研究方向为小目标运动检测, 算子半群理论和人工智能 

E-mail: gdalingjun@163.com


陈   浩

广州大学数学与信息科学学院硕士研究生. 2015年获得广州大学数学学士学位. 主要研究方向为小目标运动检测人工智能和计算神经学. 

E-mail: gdchenhao@126.com


彭济根

广州大学数学与信息科学学院教授. 1998年获得西安交通大学计算数学博士学位. 主要研究方向为非线性泛函分析及其应用, 机器学习理论, 稀疏优化和碰撞检测的数学理论与方法. 本文通信作者.

E-mail: jgpeng@gzhu.edu.cn


相关文章


[1]  刘洲洲, 李士宁, 王皓, 张倩昀. 联合弹性碰撞与梯度追踪的WSNs压缩感知重构. 自动化学报, 2020, 46(1): 178-192. doi: 10.16383/j.aas.c170241

http://www.aas.net.cn/cn/article/doi/10.16383/j.aas.c170241?viewType=HTML


[2]  练秋生, 富利鹏, 陈书贞, 石保顺. 基于多尺度残差网络的压缩感知重构算法. 自动化学报, 2019, 45(11): 2082-2091. doi: 10.16383/j.aas.c170546

http://www.aas.net.cn/cn/article/doi/10.16383/j.aas.c170546?viewType=HTML


[3]  王传云, 秦世引. 动态场景红外图像的压缩感知域高斯混合背景建模. 自动化学报, 2018, 44(7): 1212-1226. doi: 10.16383/j.aas.2017.c170061

http://www.aas.net.cn/cn/article/doi/10.16383/j.aas.2017.c170061?viewType=HTML


[4]  李鹏, 王建新, 丁长松. WSN中基于压缩感知的高能效数据收集方案. 自动化学报, 2016, 42(11): 1648-1656. doi: 10.16383/j.aas.2016.c160258

http://www.aas.net.cn/cn/article/doi/10.16383/j.aas.2016.c160258?viewType=HTML


[5]  王琴, 沈远彤. 基于压缩感知的多尺度最小二乘支持向量机. 自动化学报, 2016, 42(4): 631-640. doi: 10.16383/j.aas.2016.c150296

http://www.aas.net.cn/cn/article/doi/10.16383/j.aas.2016.c150296?viewType=HTML


[6]  沈燕飞, 李锦涛, 朱珍民, 张勇东, 代锋. 基于非局部相似模型的压缩感知图像恢复算法. 自动化学报, 2015, 41(2): 261-272. doi: 10.16383/j.aas.2015.c140210

http://www.aas.net.cn/cn/article/doi/10.16383/j.aas.2015.c140210?viewType=HTML


[7]  纪建, 李晓, 许双星, 刘欢, 黄静静. 基于稀疏重构框架下剪切波的SAR图像去噪. 自动化学报, 2015, 41(8): 1495-1501. doi: 10.16383/j.aas.2015.e130004

http://www.aas.net.cn/cn/article/doi/10.16383/j.aas.2015.e130004?viewType=HTML


[8]  张成, 沈川, 程鸿, 章权兵, 陈岚, 韦穗. 彩色全息压缩重构. 自动化学报, 2015, 41(2): 419-428. doi: 10.16383/j.aas.2015.c131140

http://www.aas.net.cn/cn/article/doi/10.16383/j.aas.2015.c131140?viewType=HTML


[9]  陈建, 苏凯雄, 王卫星, 兰诚栋. 基于双边信息的残差分布式压缩视频感知. 自动化学报, 2014, 40(10): 2316-2323. doi: 10.3724/SP.J.1004.2014.02316

http://www.aas.net.cn/cn/article/doi/10.3724/SP.J.1004.2014.02316?viewType=HTML


[10]  任越美, 张艳宁, 李映. 压缩感知及其图像处理应用研究进展与展望. 自动化学报, 2014, 40(8): 1563-1575. doi: 10.3724/SP.J.1004.2014.01563

http://www.aas.net.cn/cn/article/doi/10.3724/SP.J.1004.2014.01563?viewType=HTML


[11]  伍政华, 王强, 刘劼, 孙明健, 沈毅. 基于边膨胀图的压缩感知理论. 自动化学报, 2014, 40(12): 2824-2835. doi: 10.3724/SP.J.1004.2014.02824

http://www.aas.net.cn/cn/article/doi/10.3724/SP.J.1004.2014.02824?viewType=HTML


[12]  彭向东, 张华, 刘继忠. 基于过完备字典的体域网压缩感知心电重构. 自动化学报, 2014, 40(7): 1421-1432. doi: 10.3724/SP.J.1004.2014.01421

http://www.aas.net.cn/cn/article/doi/10.3724/SP.J.1004.2014.01421?viewType=HTML


[13]  伍飞云, 周跃海, 童峰. 基于似零范数和混合优化的压缩感知信号快速重构算法. 自动化学报, 2014, 40(10): 2145-2150. doi: 10.3724/SP.J.1004.2014.02145

http://www.aas.net.cn/cn/article/doi/10.3724/SP.J.1004.2014.02145?viewType=HTML


[14]  刘芳, 武娇, 杨淑媛, 焦李成. 结构化压缩感知研究进展. 自动化学报, 2013, 39(12): 1980-1995. doi: 10.3724/SP.J.1004.2013.01980

http://www.aas.net.cn/cn/article/doi/10.3724/SP.J.1004.2013.01980?viewType=HTML


[15]  赵春晖, 刘巍. 基于分块压缩感知的图像半脆弱零水印算法. 自动化学报, 2012, 38(4): 609-617. doi: 10.3724/SP.J.1004.2012.00609

http://www.aas.net.cn/cn/article/doi/10.3724/SP.J.1004.2012.00609?viewType=HTML


[16]  杜卓明, 耿国华, 贺毅岳. 一种基于压缩感知的二维几何信号压缩方法. 自动化学报, 2012, 38(11): 1841-1846. doi: 10.3724/SP.J.1004.2012.01841

http://www.aas.net.cn/cn/article/doi/10.3724/SP.J.1004.2012.01841?viewType=HTML


[17]  李志林, 陈后金, 姚畅, 李居朋. 基于谱投影梯度追踪的压缩感知重建算法. 自动化学报, 2012, 38(7): 1218-1223. doi: 10.3724/SP.J.1004.2012.01218

http://www.aas.net.cn/cn/article/doi/10.3724/SP.J.1004.2012.01218?viewType=HTML


[18]  何楚, 刘明, 冯倩, 邓新萍. 基于多尺度压缩感知金字塔的极化干涉SAR图像分类. 自动化学报, 2011, 37(7): 820-827. doi: 10.3724/SP.J.1004.2011.00820

http://www.aas.net.cn/cn/article/doi/10.3724/SP.J.1004.2011.00820?viewType=HTML


[19]  方红, 杨海蓉. 贪婪算法与压缩感知理论. 自动化学报, 2011, 37(12): 1413-1421. doi: 10.3724/SP.J.1004.2011.01413

http://www.aas.net.cn/cn/article/doi/10.3724/SP.J.1004.2011.01413?viewType=HTML


[20]  潘榕, 刘昱, 侯正信, 汪少初. 基于局部DCT系数的图像压缩感知编码与重构. 自动化学报, 2011, 37(6): 674-681. doi: 10.3724/SP.J.1004.2011.00674

http://www.aas.net.cn/cn/article/doi/10.3724/SP.J.1004.2011.00674?viewType=HTML



https://blog.sciencenet.cn/blog-3291369-1330522.html

上一篇:知识堆叠降噪自编码器
下一篇:基于文本与图像的肺疾病研究与预测
收藏 IP: 159.226.181.*| 热度|

0

该博文允许注册用户评论 请点击登录 评论 (0 个评论)

数据加载中...

Archiver|手机版|科学网 ( 京ICP备07017567号-12 )

GMT+8, 2024-6-30 00:48

Powered by ScienceNet.cn

Copyright © 2007- 中国科学报社

返回顶部