Aula 17 - Redes Neurais Flashcards
Relação entre perceptrons e portas lógicas
Os perceptrons podem ser usados para implementar portas lógicas (AND, NOT e OR).
Pode-se reduzir qualquer circuito booleano a perceptrons acoplados.
a_j^l
“ativação” saída da unidade j na camada l.
W^l
matriz de pesos do mapeamento da camada l para a camada l+1
Se existirem m_l unidades na camada l e m_l+1 unidades na camada l+1, …
Se existirem m_l unidades na camada l e m_l+1 unidades na camada l+1, então W_l tem dimensão (m_l+1) x ((m_l)+1)
No âmbito das redes neurais
significado de Θ
função sigmóide (e.g. função logística)
Aprendizagem das redes neurais
Uma vez definido a arquitetura da rede, é preciso treiná-la.
Ideia: Escolher uma perda (duplamente) diferenciável e aplicar o gradiente descedente.