minor changes

Author: AkiRusProd

README.md

@@ -9,16 +9,17 @@
 1) Sigmoid
 2) Tanh
 3) Softmax
-4) Softplus
-5) Softsign
-6) Swish
-7) Mish
-8) TanhExp
-9) ReLU
-10) LeakyReLU
-11) ELU
-12) SELU
-13) GELU
+4) LogSoftmax
+5) Softplus
+6) Softsign
+7) Swish
+8) Mish
+9) TanhExp
+10) ReLU
+11) LeakyReLU
+12) ELU
+13) SELU
+14) GELU
 
 *[See Activation Functions...](neunet/nn/activations.py)*
 

neunet/nn/activations.py

@@ -499,21 +499,4 @@ def forward(self, x: Tensor):
         return _LogSoftmax(f_x, [x, f_x, self.axis], "log_softmax", device=x.device)
 
     def __call__(self, x):
-        return self.forward(x)
-
-
-activations = {
-    "sigmoid": Sigmoid(),
-    "tanh": Tanh(),
-    "softmax": Softmax(),
-    "softplus": Softplus(),
-    "softsign": Softsign(),
-    "swish": Swish(),
-    "mish": Mish(),
-    "tanh_exp": TanhExp(),
-    "relu": ReLU(),
-    "leaky_relu": LeakyReLU(),
-    "elu": ELU(),
-    "selu": SELU(),
-    "gelu": GELU(),
-}
+        return self.forward(x)