show_chart Doğrusallık Neden Kötü?
Eğer nöronlara aktivasyon fonksiyonu koymazsanız, 100 katmanlı devasa bir ağ bile matematiksel olarak sadece tek bir katman gibi davranır. Yalnızca düz bir çizgi çizebilir (Lineer). Gerçek dünyadaki bir kedi yüzünü veya bir romanı düz bir çizgiyle tanımlayamazsınız. Aktivasyon fonksiyonu o düz çizgiyi eğer, büker ve ağın karmaşık kıvrımları (gözler, kulaklar, kelime şakaları) öğrenmesini sağlar.
Popüler Fonksiyonlar
trending_up ReLU (Rectified Linear Unit)
Günümüzde en çok kullanılan fonksiyondur. Kuralı basittir: Gelen sayı 0'dan küçükse sil (sıfır yap), 0'dan büyükse aynen geçir. Ağı inanılmaz hızlandırır.
timeline Sigmoid
Gelen herhangi bir sayıyı 0 ile 1 arasına sıkıştırır. Bir resmin kedi mi köpek mi olduğu gibi %50 ihtimalli kararlarda kullanılır.
pie_chart Softmax
Ağın en son çıktısında kullanılır. Çıkan yüzlerce sayıyı topladığınızda %100 oranını verecek şekilde olasılıklara dağıtır.