大工至善|大学至真分享 http://blog.sciencenet.cn/u/lcj2212916

博文

[转载]【计算机科学】【2018.06】【含源码】基于LTI ODE值神经网络自适应的反向传播算法

已有 1212 次阅读 2020-3-23 16:59 |系统分类:科研笔记|文章来源:转载

本文为西班牙加泰罗尼亚理工大学(作者:Albert Prat Baucells)的硕士论文,共86页。

 

在文献[Velasco et al., 2014]中,介绍了一种经典人工神经网络结构的新方法,称为“LTI ODE值神经网络”,其中LTI ODE代表线性时不变序微分方程。在这个新的系统中,人工神经网络中的节点特征是:以可微连续时间信号的形式输入;以线性时不变序微分方程(LTI ODE)作为连接权值;以及在频域中评估的激活函数。结果表明,这种新的结构可以同时使用一个共同的神经结构来解决多个问题。然而,文章最后提出了开发新的神经网络模型的学习算法的必要性。本硕士论文以Velasco等人2014年指出的缺点为出发点,主要目的是开发一种LTI ODE值神经网络的训练算法。作为第一种自然的方法,反向传播算法的改进被认为是一个通用的框架。此外,由于输入信号的性质是可微的连续时间信号,因此分析了如何获得一个可以以模拟电路的形式物理实现的模型。

 

In [Velasco et al., 2014], a new approachof the classical artificial neural network architecture is introduced, named’LTI ODE-valued neural networks’, where LTI ODE stands for Linear TimeInvariant Ordinal Differential Equation. In this novel system, nodes in theartificial neural network are characterized by: inputs in the form ofdifferentiable continuous-time signals; linear time-invariant ordinarydifferential equations (LTI ODE) as connection weights; and activationfunctions evaluated in the frequency domain. It was shown that this newconfiguration allows solving multiple problems at the same time using a commonneural structure. However, the article concludes with the need for developinglearning algorithms for the new model of neural network. Taking as startingpoint the drawback pointed out in [Velasco et al., 2014], the main objective ofthis master thesis is to develop a training algorithm for a LTI ODE-valuedneural network. As a first and natural approach, modifications of theBackPropagation algorithm is considered as a general framework. Moreover, sincethe nature of the inputs are differentiable continuous-time signals, it isanalyzed how to obtain a model that can be physically implemented in the formof an analogical circuit.

 

1. 引言

2. 人工神经网络

3. LTI-ODEVNNLTI ODE算子

4. 静态LTI-ODE算子

5. 代价

附录A Matlab代码

附录静态LTI ODE算子



更多精彩文章请关注公众号:qrcode_for_gh_60b944f6c215_258.jpg



https://blog.sciencenet.cn/blog-69686-1224919.html

上一篇:[转载]【信息技术】【2018】【含部分源码】基于图像处理的车速测量
下一篇:[转载]【统计学】【1999】基于归纳推理技术的时间序列预测
收藏 IP: 114.102.130.*| 热度|

0

该博文允许注册用户评论 请点击登录 评论 (0 个评论)

数据加载中...
扫一扫,分享此博文

Archiver|手机版|科学网 ( 京ICP备07017567号-12 )

GMT+8, 2024-9-19 14:34

Powered by ScienceNet.cn

Copyright © 2007- 中国科学报社

返回顶部