首页 > 其他 > 详细

单输出感知机及其梯度

时间:2020-01-29 00:07:14      阅读:120      评论:0      收藏:0      [点我收藏+]

单层的感知机结构可写成以下公式:

y=XW+b(y = Σxi*wi+b)

技术分享图片

 

 

这里单层感知机的激活函数改成使用现代化的sigmoid激活函数

# 定义网络结构
x=tf.random.normal([1,3])
w=tf.ones([3,1])
b=tf.ones([1])
y = tf.constant([1])


with tf.GradientTape() as tape:

    tape.watch([w, b])
    logits = tf.sigmoid(x@w+b) 
    loss = tf.reduce_mean(tf.losses.MSE(y, logits))

grads = tape.gradient(loss, [w, b])
print(w grad:, grads[0])

print(b grad:, grads[1])

技术分享图片

 

单输出感知机及其梯度

原文:https://www.cnblogs.com/zdm-code/p/12239217.html

(0)
(0)
   
举报
评论 一句话评论(0
关于我们 - 联系我们 - 留言反馈 - 联系我们:wmxa8@hotmail.com
© 2014 bubuko.com 版权所有
打开技术之扣,分享程序人生!