新浪中文网

手机浏览器扫描二维码访问

第592章 积极反馈的老师Relu函数（第1页）

故事比喻：只有积极反馈的老师（re露

函数）

在一所小学里，有一位特别的数学老师——小张老师，他的教学方式很独特：

1.

如果学生答对了题目，他就会大声表扬：“很好！继续加油！”

2.

如果学生答错了，他什么都不说，不批评也不惩罚，就像没听见一样。

这个老师的教学方式就像

re露（修正线性单元）激活函数——它只保留正面的信息（正值），对负面的信息（负值）完全忽略。

re露

的数学规则

re露

函数的公式是：

简单来说：

?

输入是正数（好消息）→

保留！

?

输入是负数（坏消息）→

直接归零！

这就像小张老师的教学方式，学生回答正确（正反馈），他给予鼓励；学生回答错误（负反馈），他不做任何反应，不给负面打击。

另一种比喻：运动员的训练（re露

只关注正面成长）

想象一位跑步训练的运动员，他每天都记录自己的跑步成绩：

1.

如果今天比昨天跑得快了（进步了），他就把这次成绩记录下来。

2.

如果今天比昨天慢了（退步了），他就忽略这次成绩，不让它影响心态。

这个训练方法就像

re露，它专注于“有用的进步”，而不会让负面的信息拖后腿。

为什么

ai

需要

大反派女魔头，前世居然是男的  三国：身为反贼，没有金手指  被废静心多年，你们才开始后悔？  海贼：从女帝开始，路飞持续崩溃  开局逃荒直接掀桌  庶女当家日常  穿越之异世女领主  等你一直等到老  遗笑苍天  高中三年，无人知道我已觉醒  兽世溺宠：蛇蛇我啊，万龙之母  斩神：我道系青年，请个神合理吧  开局创建杀手组织，我威压诸天  穿书七十年代，过好自己的日子  直播算命：你爹让你扔下水道了  系统沙雕我添堵，一身反骨离大谱  北域时空  异能太强，大佬被特殊部门收编了  开局就长生，可我咋是奴隶啊  轮回塔