📑 Table of Contents

前馈神经网络英文:Feedforward Neural Network),是指神經網路的識別-推理架構。人工神經網路架構是以輸入乘上權重來獲得輸出(輸入對輸出):前饋。[1]循环神经网络或有迴圈的神經網路允許後處理階段的資訊回饋到前處理階段進行序列處理。[2]然而,在推論的每個階段,前饋乘法仍然是核心,對於反向傳播或透過時間的反向傳播來說是不可或缺的。[3][4][5][6][7]因此,神經網路不能包含負反饋或正反饋等回饋,在負反饋正反饋中,輸出會回饋到相同的輸入並對其進行修改,因為這會形成一個無限循環,不可能通過反向傳播在時間上倒退以產生錯誤信號。這個問題和命名似乎是一些電腦科學家和其他研究腦部網路領域的科學家之間的混淆點。[8]

在前饋網路中,資訊總是朝一個方向移動,從來不會倒退。

前馈神经网络為人工智能領域中,最早发明的簡單人工神经网络类型。在它内部,参数从输入层向输出层单向传播。有異於循环神经网络,它的内部不会构成有向环[9]

单层感知机

编辑

多层感知机

编辑

参考

编辑
  1. ^ Zell, Andreas. Simulation Neuronaler Netze [Simulation of Neural Networks] 1st. Addison-Wesley. 1994: 73. ISBN 3-89319-554-8 (German). 
  2. ^ Schmidhuber, Jürgen. Deep learning in neural networks: An overview. Neural Networks. 2015-01-01, 61: 85–117. ISSN 0893-6080. PMID 25462637. S2CID 11715509. arXiv:1404.7828 . doi:10.1016/j.neunet.2014.09.003 (英语). 
  3. ^ Linnainmaa, Seppo. The representation of the cumulative rounding error of an algorithm as a Taylor expansion of the local rounding errors (学位论文). University of Helsinki: 6–7. 1970 (芬兰语). 
  4. ^ Kelley, Henry J. Gradient theory of optimal flight paths. ARS Journal. 1960, 30 (10): 947–954. doi:10.2514/8.5282. 
  5. ^ Rosenblatt, Frank. x. Principles of Neurodynamics: Perceptrons and the Theory of Brain Mechanisms. Spartan Books, Washington DC, 1961
  6. ^ Werbos, Paul. Applications of advances in nonlinear sensitivity analysis (PDF). System modeling and optimization. Springer. 1982: 762–770 [2 July 2017]. (原始内容存档 (PDF)于14 April 2016). 
  7. ^ Rumelhart, David E., Geoffrey E. Hinton, and R. J. Williams. "Learning Internal Representations by Error Propagation页面存档备份,存于互联网档案馆)". David E. Rumelhart, James L. McClelland, and the PDP research group. (editors), Parallel distributed processing: Explorations in the microstructure of cognition, Volume 1: Foundation. MIT Press, 1986.
  8. ^ Achler, T. What AI, Neuroscience, and Cognitive Science Can Learn from Each Other: An Embedded Perspective. Cognitive Computation. 2023 (英语). 
  9. ^ 戴葵. 译.(机械工业出版社)《神经网络设计》

📚 Artikel Terkait di Wikipedia

PDP

電漿顯示器(英文:Plasma Display Panel),平面顯示器技術的一種,顯示原理與日光燈、霓虹燈等氣體放電、發光技術類似,但精細至每個原色像素皆可獨立放電,在大尺寸市場獨具優勢。 分布式并行处理(英文:Parallel Distributed Processing),人工智能领域的一种理论。

玻尔兹曼机

, 编. Learning and Relearning in Boltzmann Machines (PDF). Parallel Distributed Processing: Explorations in the Microstructure of Cognition. Volume 1:

GROMACS

Folding@home: Lessons From Eight Years of Volunteer Distributed Computing (PDF). Parallel & Distributed Processing, IEEE International Symposium. 2009: 1–8 [2016-12-25]

GNU parallel

维基共享资源中相关的多媒体资源:GNU parallel xargs pexec PPSS - (Distributed) Parallel Processing Shell Script (页面存档备份,存于互联网档案馆) Tange, Ole. GNU Parallel 20220322 ('Маріу́поль')

認知架構

認知架構是集中式还是分散式,也就是有沒有將处理器的神经关联置於其核心。分散式的特點在1980年代中期以分散式平行處理(Parallel distributed processing,PDP)和联结主义的名义流行起来 ,神经网络就是一个很好的例子。此外,另一个设计问题是要如何在整體論、原子論或更具体

人工智能加速器

of the Japan Society of Applied Physics. 1988.  Zhang, Wei. Parallel distributed processing model with local space-invariant interconnections and its optical

并行计算

并行计算机可以根据硬件支持并行的级别进行大致分类。多核计算机与多处理器计算机在一台机器内部拥有多个处理单元(英语:processing element);而计算机集群、大规模并行处理系统(英语:Massively parallel (computing))(MPP)和网格计算则调动多台计算机协同处理同一任务。有时,传统的

多层感知器

James L. McClelland, and the PDP research group.(editors), Parallel distributed processing: Explorations in the microstructure of cognition, Volume 1: