Agente Autonomo

Agente Autonomo de Software (Softbot): Controlam sistemas de acesso, recuperação e atualização de informação, normalmente operam em redes de computadores e habitam um mundo virtual. Muitas vezes atuam em conjunto.

Agente Autonomo de Hardware (Robots): Controlam um conjunto de atuadores e sensores acoplados ao mundo fisico e integrados ao proprio agente. Atuam isoladamente.

Um Agente pode ser:

1. Completamente não autonomo
2. Operacionalmente autonomo e não adaptativo
3. Operacional autonomo e adaptativo não autonomo
4. Operacional autonomo e adaptativo autonomo

Usa-se a experiência para propagar o conhecimento no tempo.

Autônomo operacional -> Realiza uma operação sem que haja interferência humana.
Autônomo adaptativo -> Pode sofrer modificações estruturais ao longo do tempo, e é usado quando a modelagem do processo for mais custosa.

O agente realiza uma ação sobre o ambiente (processo dinâmico) e percebe, através dos sensores, as alterações no ambiente.

O crítico só age quando não ocorre uma evolução no aprendizado de modo que, o cenário atual não atende os requisitos necessários para que a tarefa possa ser identificada como "concluída com êxito". É ele que informa o quanto bem (ou mal) o agente está agindo.

O Elemento de Desempenho é o responsável por mapear o par Estado/Ação, e para cada p(E,A) deve existir um reforço.