请教关于前馈网络线性可分的有关问题
发布时间:2011-07-03 09:17:42 文章来源:www.iduyao.cn 采编人员:星星草
请问关于前馈网络线性可分的问题
书上说非线性可分问题,加入一个隐层,将输入映射到另外一个空间,就有可能成为线性可分问题。
假设输入向量为x(i), 输出向量为y(j), 阀值向量v(j), 单层网络权矩阵w(i*j),
y = f(x*w + v)
加入一个隐层,设隐层输出向量为z(k), 输入层到隐层权矩阵w1(i*k), 隐层阀值向量v1(k), 隐层到输出层权矩阵w2(k*j), 输出层阀值向量v2(j)
z = f1(x*w1 + v1)
y = f2(z*w2 + v2) = f2(f1(x*w1 + v1)*w2 + v2)
如果选激活函数f1为线性函数,f1(x) = k*x
f1(x*w1+v1)*w2 = x*f1(w1)*w2+f1(v1)*w2,
y = f2(x*f1(w1)*w2 + f1(v1)*w2+v2)
w1是i*k的矩阵,w2是k*i的矩阵,v1是k维向量,v2是j维向量
f1(w1)*w2得到一个i*j的矩阵,f1(v1)*w2得到j维向量,f1(v1)*w2+v2可以写到一起, 形成:
y = f2(x*w ' + v ') w '(i*j) = f1(w1) * w2, v '(j) = f1(v1)*w2+v2
还是单层网络的样子.. 怎样增强的分类能力?
不知道我这里的理解哪里有错误?是否是激活函数不能选线性函数?
------解决方案--------------------
如果楼上学过高等代数则可以这么想:如果激活函数是线性的,则神经网络在本质上可以看成一个线性变换器
一个在低维情况下的不可分问题在高维下就可能会变的可分.
线性变换在本质上其实可以逼近任何非线性函数
------解决方案--------------------
不明LZ在说什么
------解决方案--------------------
------解决方案--------------------
不知,帮顶
友情提示:
信息收集于互联网,如果您发现错误或造成侵权,请及时通知本站更正或删除,具体联系方式见页面底部联系我们,谢谢。
其他相似内容:
-
现在神经网络有什么的用途
神经网络听说不少了,可是就没听说应用什么上面了.
神经网络真的有作用吗?
------解决方案----------...
-
懂得DTP和测试的人过来指点哈
我现在招聘了两家公司一个是DTP排版,一个是博彦的软件测试在武汉,我想问哈哪个公司好一点?发展空间更...
-
SOS~~关于蚁群算法解决机器人路径规划问题的参数设置
rt。急求高人解答~·
有大大知道么?
各个常量参数的设置应该是怎样的?
...
-
我能学人工智能吗?
我对人工智能有点兴趣,本来想考研的时候选人工智能的研究方向的,但是由于我本科专业是软件工程,并没有学人工智能,...
-
如何用matlab编写模糊关系中的合成运算
如题,想请教各位高手,怎么来求两个矩阵的合成运算
------解决方案--------------------
...
-
用什么方法识别是不是人?
哪位大虾能指点:
我现想识别人和桌椅等,就是我现在想做一小实验,就是当人在他前它知道是人,把其他无生命的物...
-
ANFIS
谁有ANFIS MATLAB源代码啊?不胜感激
------解决方案--------------------
直接在help文件里面anfis就可以了撒
自己看看...
-
谁了解BP神经网络啊?
谁了解BP神经网络啊?
一个朋友写了篇论文,让我帮看看,修正一下。
可是我一点也不懂。丢人啊!
------解决方案---...
-
请问各位在哪里可以下载到 Visual Lisp 编程工具
本人最近正在学习人工智能,但是一直用VC++做为练习工具,现在想用一下Lisp,请求各位...
-
求BP仿真算法
网上只有大量的BP学习算法
我已经写了一个BP学习算法程序
网络可以训练成功
但是训练好的网络如何根据输入产生输...