TI/Sztuczne sieci neuronowe

Z Brain-wiki

Przykład: rozpoznawanie cyfr za pomocą prostej sieci neuronowej

Sztuczny neuron czyli prosty sumator

Sztuczne sieci neuronowe konstruowane są jednostek zwanych "sztucznymi neuronami". Możemy o nich myśleć jako o komórkach pamięci komputera. Konkretna wartość zapisana w jednej takiej komórce (D) jest w każdym kroku obliczana według stałego schematu:

  • liczby z komórek (sztycznych neuronów) poprzedniej warstwy ABC są mnożone przed odpowiednie wagi i dodawane do siebie: A * wAD + B * wBD + C * wCD
  • wyliczona powyżej suma ważona jest poddawana działaniu funkcji aktywacji f:

D = f (A * wAD + B * wBD + C * wCD)


Ann 6neurons weights.png

Spróbujmy teraz prześledzić obliczenia wykonywane przez przykładową sieć:

  1. W (sztucznych:) neuronach po lewej (ABC) znajdują się wartości (liczby), które dla uproszczenia oznaczymy tymi samymi literami ABC. Mogą one reprezentować wejście sieci (wtedy będzie to "warstwa wejściowa") lub być wynikiem obliczeń poprzednich warst sieci (wtedy będzie to "warstwa ukryta").
  2. Wartości w neuronach D i E (wartwa ukryta) wyliczamy według podanego powyżej wzoru:
    • D = f (A * wAD + B * wBD + C * wCD)
    • E = f (A * wAE + B * wBE + C * wCE)
  3. W następnym kroku wyliczamy wartość dla neuronu ostatniej warstwy F:
    • F = f (D * wDF + E * wEF)

Wyliczoną w ten sposób wartość F możemy uznać za "odpowiedź" tej sieci na podane na wejściu liczby A, B, i C.

Sztuczna sieć neuronowa sieć jest jednoznacznie określona przez strukturę połączeń oraz konkretne wartości wag wXY, zwanych też parametrami sieci lub modelu; w roku 2024 liczby parametrów dużych modeli sięgają setek miliardów.


przykłady z bazy MNIST, źródło: Wikipedia


Tikz.png