Aprendizado de Máquina

Question 1

Descrição do agente baseado em aprendizado

Answer 1

Agente que pode melhorar seu comportamento através do estudo e suas próprias ações

Question 2

Como ele funciona (como aprende)?

Answer 2

A partir de uma coleção de pares de entrada e saída {(x1,y1), (x2,y2), …}, aprende uma função que prevê a saída para novas entradas

Question 3

Por que é importante que o agente aprenda?

Answer 3

• Nem sempre o projetista vai saber a solução do problema
• As vezes os agentes estão em ambientes desconhecidos
• Útil como forma de construção de sistemas (colocar o agente na realidade ao invés de representá-lo)
• Maximiza as percepções para melhorar a performance

Question 4

Arquitetura do Agente baseado em aprendizado

Answer 4

Learning Element: Melhora o desempenho da performance
Performance Element: Escolhe a ação
Problem Generator: Sugere ações que levarão a novas experiências
Critic: Fornece o feedback

Question 5

Funcionamento da arquitetura com base no exemplo de um taxi

Answer 5

The performance element consists of whatever collection of knowledge and procedures the taxi has for selecting its driving actions. The taxi goes out on the road and drives, using this performance element. The critic observes the world and passes information along to the learning element.

For example, after the taxi makes a quick left turn across three lanes of traffic, the critic observes the shocking language used by other drivers. From this experience, the learning element is able to formulate a rule saying this was a bad action, and the performance element is modified by installation of the new rule. The problem generator might identify certain areas of behavior in need of improvement and suggest experiments, such as trying out the brakes on different road surfaces under different conditions.

Question 6

Elementos do aprendizado

Answer 6

Componente a ser melhorado (qualquer componente relacionado aos outros agentes, mapeamento, percepção…)
Conhecimento prévio
Representação usada para dados
Feedback

Question 7

Por que o feedback é tão importante?

Answer 7

Porque é apartir dele que o elemento que escolhe as ações é melhorado, ele traz a crítica e o lerning element implementa

Question 8

Tipos de feedback

Answer 8

• Aprendizagem Supervisionada: aprende através de uma função que mapeia entradas em saídas, por meio de amostras rotuladas
• Aprendizagem não Supervisionada: Aprende padrões em amostras não rotuladas
• Aprendizagem por Reforço: aprende por recompensas em tentativa e erro