計算を入力してください
このツールで前回入力した値があります。
結果
ソフトプラス関数の1次微分
0.622459
x における phi'(x) = 0.5
| 入力値 x |
0.5 |
| 計算式 |
φ'(x) = 1 / (1 + e^(-x)) |
| 値域 |
0 < φ'(x) < 1 |
このページの誤りを報告
ソフトプラス関数の1次微分計算とは
この計算ツールは、任意の実数 \(x\) におけるソフトプラス(Softplus)活性化関数の1次微分(導関数)を求めます。ソフトプラス関数は \(\varphi(x) = \ln(1 + e^x)\) で定義され、ニューラルネットワークで広く用いられる ReLU(正規化線形ユニット)関数を滑らかに近似した、微分可能な関数です。その導関数はちょうどロジスティックシグモイド関数と一致するため、勾配法による学習で特に扱いやすいという特徴があります。
使い方
導関数を評価したい \(x\) の値を入力して計算を実行してください。計算結果として \(\varphi'(x)\) が返されますが、この値は常に 0 より大きく 1 より小さい範囲に収まります。\(x\) が正の値ほど結果は 1 に近づき、負の値ほど 0 に近づきます。\(x\) がちょうど 0 のとき、結果は 0.5 になります。
計算式の解説
ソフトプラス関数を微分すると、次のようになります。
$$\frac{d}{dx}\ln\!\left(1 + e^{x}\right) = \frac{e^{x}}{1 + e^{x}} = \frac{1}{1 + e^{-x}}$$
これがロジスティックシグモイド関数 \(\sigma(x)\) です。本計算ツールでは数値計算の安定性を保つため、\(x \geq 0\) のときは \(\frac{1}{1 + e^{-x}}\)、\(x < 0\) のときは同値の \(\frac{e^{x}}{1 + e^{x}}\) を用いることで、絶対値の大きい入力に対する指数関数のオーバーフローを回避しています。
ソフトプラス曲線(上昇するホッケースティック型)と、その一次導関数であるS字型のシグモイド。
計算例
\(x = 0.5\) とします。このとき \(e^{-0.5} = 0.6065306597\) なので、\(1 + e^{-0.5} = 1.6065306597\) となります。したがって $$\varphi'(0.5) = \frac{1}{1.6065306597} = 0.622459$$ です。入力がわずかに正であるため、導関数の値は 0.5 をやや上回ります。
よくある質問
なぜ導関数がシグモイド関数になるのですか? \(\ln(1 + e^x)\) に連鎖律を適用すると、式変形により \(\frac{1}{1 + e^{-x}}\)、すなわち標準的なロジスティックシグモイドに帰着するためです。
\(\varphi'(x)\) の値域はどうなりますか? 開区間 \((0, 1)\) です。\(x\) が負の無限大に向かうと値は 0 に、正の無限大に向かうと 1 に近づきますが、いずれの境界値にも決して到達しません。
ゼロ除算の心配はありませんか? ありません。\(1 + e^{-x}\) はすべての実数 \(x\) に対して常に 0 より大きいため、分母が 0 になることはありません。
関連する電卓
-
シグモイド関数の1次微分 計算ツール
ゲインaを持つシグモイド(ロジスティック)関数の点xにおける1次微分を計算。シグモイド値と2次微分も同時に算出できる無料オンラインツールです。
-
シグモイド関数 計算ツール(1次・2次微分付き)
シグモイド関数 σ(x)=1/(1+e^(-a·x)) とその1次微分・2次微分を指定範囲で計算し、数値表とグラフで表示。ゲインaも自由に設定できます。
-
微分計算機
4次までの多項式を微分できる無料の微分計算機。導関数の式、指定した点での微分係数、2階導関数、接線の方程式をすぐに求められます。
-
tanh(x)関数の1次微分計算
双曲線正接関数tanh(x)とその1次微分tanh'(x)=1-tanh(x)^2、さらに2次微分を任意の実数xで計算します。ニューラルネットの活性化関数にも最適。
-
第1種ケルビン関数の1次微分(表・グラフ)
第1種ケルビン関数の1次微分 ber'_v(x)・bei'_v(x) を、任意の実数次数 v と指定した x の範囲について計算し、表とグラフで表示します。
-
ソフトサイン関数・導関数 計算ツール
ソフトサイン関数 φ(x) = x /(1 + |x|) と、その1次導関数 φ'(x) = 1 /(1 + |x|)^2 の値を任意の範囲で表計算・グラフ表示します。
発見
-
ソフトプラス関数(および1次微分)の表とグラフ
ソフトプラス関数 f(x)=ln(1+e^x) と、その微分 f'(x)=シグモイド関数 の値を、指定した x の範囲で表とグラフに計算します。無料・即時・ニューラルネットワーク対応。
-
てこの計算機
モーメントの法則を使って、てこの問題をすぐに解決。4つのうち3つの値を入力すれば、力点の力・荷重・腕の長さと機械的利得が求まります。
-
献血が可能かどうかの判定
日本赤十字社の主な採血基準(性別・年齢・体重)をもとに、200mL・400mL献血、成分献血(血漿・血小板)が可能かどうかを判定します。
-
野球の打率の計算
安打数と打数から野球の打率(AVG)を簡単計算。安打÷打数を小数第3位まで(例:.300)算出します。MLB・NPB共通の指標に対応。
-
機械的倍率(MA)計算ツール
出力(荷重)と入力(加える力)から機械的倍率(MA)を計算。てこ・滑車・各種機械に対応した無料のMA計算ツールで瞬時に結果がわかります。