首页 > 其他分享 >学习笔记414—Sigmoid函数求导

学习笔记414—Sigmoid函数求导

时间:2023-08-28 15:47:06浏览次数:40  
标签:函数 sigmoid torch 414 d2l Sigmoid 求导

Sigmoid函数求导

基础知识:

 Sigmoid函数:

 Sigmoid图形:

 生成Sigmoid图形代码:

import torch
from d2l import torch as d2l
%matplotlib inline

x=torch.arange(-8.0,8.0,0.1,requires_grad=True)
sigmoid=torch.nn.Sigmoid()
y=sigmoid(x)

d2l.plot(x.detach(),y.detach(),'x','sigmoid(x)',figsize=(5,2.5))

 

求导过程:

故Sigmoid函数的求导结果为:

 

参考链接:https://zhuanlan.zhihu.com/p/452684332

 

 

标签:函数,sigmoid,torch,414,d2l,Sigmoid,求导
From: https://www.cnblogs.com/hechangchun/p/17662428.html

相关文章

  • P7414 [USACO21FEB] Modern Art 3 G 题解
    思路考虑区间DP。设\(f_{i,j}\)表示要刷到\([i,j]\)这一段的目标需要的最小次数。对于\(f_{i,j}\),如果\(color_i\)与\(color_j\)相等,那么再子区间合并的时候就可以少刷一次,即\(f_{i,j}=\min\limits_{k=i}^{j-1}f_{i,k}+f_{k+1,j}-1\)。否则\(f......
  • 【lc】 414第三大的数
    地址:https://leetcode.cn/problems/third-maximum-number/description/思路:设置一个set用来存储数据就Ok了,set还能天然去重。注意判断新数据是否在set中。代码:classSolution:defthirdMax(self,nums)->int:tmp_ans=set()fornuminnums:......
  • AP5414 DC-DC升压恒流 升降压电源驱动IC
    产品简介AP5414是一种输入电压范围宽(0.8~5.5V),可调恒定电流和限定电流两种模式来驱动白光LED而设计的升压型DC/DC变换器。该器件能利用单节或双节干电池驱动单颗大功率白光LED,同样可以利用一节锂电池驱动两颗、三颗或多颗WLED。驱动WLED串联连接的方法可以提供相等的WL......
  • 矩阵求导与矩阵微分
    简介下面的系列文章来自知乎用户iterator,是我见过最好的矩阵求导教程,没有之一!强烈推荐去看作者原文!矩阵求导的本质与分子布局、分母布局的本质(矩阵求导——本质篇)-知乎矩阵求导公式的数学推导(矩阵求导——基础篇)-知乎矩阵求导公式的数学推导(矩阵求导——进阶篇)-知......
  • 测试求导
     importjava.util.Arrays;publicclassFindTurningPoints{publicstaticvoidmain(String[]args){//定义函数f(x)double[]x={-1,0,1};double[]y={-2,-1,2};//求函数的二阶导数double[][]dyd......
  • 向量求导
    因变量为标量,自变量为向量参考\(y\)为因变量,标量;\(X=[x_1,x_2,\dots,x_n]^T\)为自变量是向量,n维。\(y=f(X)\),即!!\(y=f(x_1,x_2,\dots,x_n)\)因此可以直接求导:\[\frac{\partialy}{\partialX}=(\frac{\partialy}{\partialx_1};\frac{\partialy}{\partialx_2};\dots......
  • 【矩阵论】含hadamard积求导和优化问题
    本篇使用的符号说明,考虑优化问题\[\min\limits_X\|A\circX-B\|_F^2,\tag{1}\]其中\(A,X,B\inM_{m,n}\)。自然的想法是对其求导找闭式解,由于\(F\)-范数的平方可以看作对每个位置的平方求和,于是\((1)\)可以向量化写成以下形式,\[\min\limits_X\|\operatorname{vec}(A)\odot\o......
  • 《产品发展的路标是客户需求导向 企业管理的目标是流程化的组织建设》-- 任正非在PERB
    《产品发展的路标是客户需求导向企业管理的目标是流程化的组织建设》--任正非在PERB产品路标规划评审会议上的讲话2003年5月26日【导读】流程的核心是要反映业务的本质。流程承载业务,业务在流程上跑,沿着流程进行业务管理,由此,组织也必须与业务和流程进行......
  • Sublime Text (Build 4143) x64 激活
    下载、安装SublimeText41、官方下载地址:https://www.sublimetext.com/download2、下载完成后,直接安装即可激活1、使用浏览器打开网站:https://hexed.it,点击【打开文件】2、打开SublimeText安装目录下的sublime_text.exe文件,在【搜索】中输入:807805000f94c1,按回车键。3......
  • 矩阵求导攻略
    矩阵求导攻略定义与记号求导方法定义法求导逐分量求导矩阵微分求导矩阵微分求导......