魔爪文学

手机浏览器扫描二维码访问

第586章 怎么理解激活函数是连接感知机和神经网络的桥梁(第1页)

激活函数:连接感知机和神经网络的桥梁

要理解激活函数如何把简单的感知机变成复杂的神经网络,我们可以用一个故事和一个比喻来说明。

故事比喻:魔法学院的考核门

在一座神秘的魔法学院里,有许多魔法师想要进入更高等级的殿堂学习更强大的法术。但这座学院设有一道道考核门,每一扇门都会评估魔法师的潜力,决定他们是否有资格进入下一层。

这些考核门,就像神经网络中的激活函数,它们决定哪些信息可以继续往下传递,哪些信息应该被忽略。

激活函数的作用:筛选并放大关键信息

每个魔法师在进入考核门之前,都需要经过以下流程:

1.计算魔力值(感知机的加权求和)

?每个魔法师的能力不同,有些擅长火球术,有些擅长治愈术,还有些只是普通人。

?在进入考核门之前,学院的考官会对每位魔法师的天赋进行加权评分(相当于神经网络的加权求和)。

?比如,火系魔法的分数高,治疗系魔法的分数低,不同魔法的权重不同。

比喻:这就像感知机中的线性计算,它只是单纯地累加输入信息,但还没有真正决定“谁能晋级”。

2.进入考核门(激活函数的作用)

?魔法学院的考核门不会让所有魔法师都进入下一层,它会根据他们的魔力值来筛选:

?如果魔力值太低,考核门会直接关闭(相当于ReLu函数把负值变成o)。

?如果魔力值很高,考核门会全力开启,让魔法师顺利通过(相当于sigmoid或ReLu把大数保留)。

?如果魔力值一般,考核门可能会半开半闭,让部分魔法师勉强进入(相当于sigmoid在o附近平滑过渡)。

比喻:这个考核门就是激活函数,它决定哪些信息(魔法师)能继续传递,哪些信息(魔法师)会被屏蔽。

3.进入下一层(神经网络的深度学习)

?通过考核门的魔法师,进入更高级的学院,学习更复杂的魔法。

?这一层的导师会根据他们的技能,进一步筛选、训练,并将合格者送往更高层次的殿堂。

?只有经历多层训练的魔法师,最终才能成为大魔导师(神经网络最终完成学习和预测)。

比喻:这就像一个深度神经网络,每一层的激活函数确保只有最有价值的信息传递到下一层,最终形成一个强大的aI预测模型。

另一种比喻:激活函数=交通信号灯

想象一个庞大的城市交通网络,有成千上万个路口,每个路口都设有交通信号灯,它们的作用就类似于神经网络的激活函数。

1.车辆行驶(输入层)

?每个路口都会收到大量的车流(输入数据)。

2.红绿灯控制(激活函数)

?如果车流量太小(输入值低),红灯阻止车辆前进(ReLu设为o)。

?如果车流量很大(输入值高),绿灯放行(ReLu设为正值)。

?某些地方可能用缓慢变色的信号灯(sigmoid平滑输出),让车辆有一定概率通行。

3.进入下一个路口(下一层神经元)

?只有经过激活信号筛选的车流,才能继续向下一个路口前进,直到最终到达目的地(最终的aI预测结果)。

比喻:

?如果没有交通信号灯(没有激活函数),所有车都会无差别前进,导致整个交通系统混乱(神经网络失效)。

?不同的路口可以使用不同的信号灯策略(不同类型的激活函数,如ReLu、sigmoid、Tanh)。

?只有经过信号灯筛选的车流,才能形成一个高效的交通网络(高效的神经网络)。

结论:激活函数的关键作用

1.感知机只能做简单的线性计算,但激活函数让它变得非线性,使得神经网络能学习更复杂的模式。

2.激活函数就像“考核门”或“交通信号灯”,确保只有最重要的信息能传递到下一层,帮助aI进行深度学习。

3.不同的激活函数适用于不同的任务,就像不同的考试规则或信号灯系统,影响整个学习和预测的效果。

思考:如果没有激活函数,神经网络会变成什么样?你觉得哪种激活函数最适合不同的任务?

请关闭浏览器阅读模式后查看本章节,否则将出现无法翻页或章节内容丢失等现象。

热门小说推荐
鹈鹕浅尝人类[娱乐圈]

鹈鹕浅尝人类[娱乐圈]

鹈鹕浅尝人类娱乐圈作者草莓菠萝蜜完结  简介  洗白自己第一步,就是参加一个讨喜的观鸟综艺。  但商晚硕发现,自己竟然被一只鹈鹕给缠上了?!  鹈鹕,万物皆可夹,吃不了也要兜着走!...

穿书後发现狗血文女配竟是我前世

穿书後发现狗血文女配竟是我前世

作为星际时代整个帝国数一数二的机械师,陆渺没有想到某一天看完好友借给她的古董女强修仙爽文就穿进了那书中世界。而且穿就穿了,竟然还穿成了那声名狼藉的恶毒女配陆渺渺?这恶毒女配不仅嚣张跋扈到处惹是生非,还和女主陆珈棠抢男人丶抢机缘,最後落得一个家破人亡,跳崖自尽的下场。陆渺正疑惑自己为何会穿进这狗血文,又如何离开?脑海中突然出现一个自称为系统的声音,给她发布了帮助原主洗白,打脸所有看不起她的配角的任务。为了系统答应她的那个最终奖励,她只好任劳任怨为其打工,只是为何她越是了解原主的记忆,越发觉得自己好似经历过一般呢?作品又名渺渺兮予怀超强剑道炼器双修大女主×绿茶装弱魔族卧底小师弟(bg文,把女主放前面只是因为我宠女主,什麽都要女主优先)阅读指南1女主很强,非常强,虽然在成长过程中也有受挫折的时候,但都凭实力解决了,同境界无敌,越阶挑战轻轻松松2男主提供的情绪价值居多,打架场面比较少3男配很多,但男主从头到尾只有一个4少量狗血剧情,但反派不会洗白,不会强行降智5总之是个一边升级打怪一边复仇一边谈恋爱顺带一边拯救世界的故事最後,新人作者,创作不易,还请多多支持~点点收藏不迷路~内容标签强强仙侠修真系统穿书爽文反套路其它穿书,女强,爽文,HE,救赎...

吞针恋人

吞针恋人

于是,她在深夜的久安街道,骑着一辆系着风铃的单车,慢悠悠地往前晃去。一路驶过冷清的冬泉北路,再到嘈杂的关户夜市,最终穿过偶尔传出一两声吱嘎作响的筒子楼。她回头望去,那些晾在廊道的陈旧衣物在昏暗的路灯...

哦莫,我头呢

哦莫,我头呢

高冷腹黑冥王vs软萌笨蛋可爱鬼第一次见面,南噜噜正在满地找头,还把鼻涕悄咪咪蹭到了江宴身上。第二次见面,江宴在正在拍戏,南噜噜跳到江宴身上,一个劲儿叨叨救救我救救我救救我第三次见面,南噜噜给江宴来了个鬼压床。江宴忍住了,左右鬼门来了小鬼就会走。然而没想到南噜噜睡过头了,错过了鬼门开的时间。从此,江宴家多了一个牛皮糖似的赖着不走的小鬼,江宴每天都在想方设法把小鬼送走。他把小鬼收进盒子放在草丛里,第二天小鬼依旧乐呵呵地叼着棒棒糖跟在他屁股后头。他拍完戏故意把小鬼丢在外面,第二天小鬼还会坐在他旁边咔嚓咔嚓吃小饼干。最后他决定把小鬼送到冥兵手里,让他们把小鬼带回地府,结果没多久小鬼伤痕累累哭着找到他,怀里护着为他准备的生日蛋糕。小鬼哭的可怜宴宴,你差点把我弄丢了江宴颤抖着手,心一瞬间疼的无以复加。他把南噜噜抱进怀里对不起,以后再也不弄丢你了人们知道影帝江宴家养了个漂亮的男生,江宴简直把人宠上了天,男生在家摔了一跤,江宴都会紧张地放下工作跑回去看。再后来,江宴把男生带在身边,形影不离。但是南噜噜要走了,鬼门开的时间再次到了。南噜噜知道自己是鬼,迟早要回地府的,他偷偷离开了江宴,回到地府。可是刚回去不久,冥兵突然把他绑了起来,说他惹怒了冥王。南噜噜惊恐的以为自己小命不保,可当他看到面前的王座上那个熟悉的俊美男人时,脑袋轰的一声江宴居然是自己的大boss!你想跑哪儿去?男人钳住南噜噜的下巴,强迫他抬起头。南噜噜揪紧了衣服,颤抖着声音狗腿似的笑跑跑到你心里去你信不信这是你说的,不许反悔。几天后南噜噜不知道自己为什么要犯蠢讲那种话,导致自己现在连床都下不了...

周乐

周乐

我叫周越,一个普普通通,简简单单的高中生。我没有什么特长,也没有什么太大的缺点。就是很普通,很正常。对,就是正常。和作者的其他作品里的人公相比,我就是两个字,正常。若是说我唯一的特点,我自己认为,是脾气好吧。我都没怎么生气过,待人接物也特别好。也许,我就是人们所说的那种烂好人吧。今天,也是个普通的早晨,我像往常一样,准备着早餐。...

[琉璃同人]捕风

[琉璃同人]捕风

十三戒炼狱塔中,心魔杀死了真正的司凤,戴上情人咒面具回到离泽宫。他融入禹司凤原本的生活,却也不想踏上禹司凤本该有的轨迹。亦真亦假,虚虚实实,他想获得自由,他定能获得自由。内容标签灵异神怪仙侠修真替身救赎...

每日热搜小说推荐