Fundação de Amparo à Pesquisa do Estado do Rio de Janeiro / Neste trabalho apresentamos as etapas para a utilização do método da Programação Dinâmica, ou Princípio de Otimização de Bellman, para aplicações de controle ótimo. Investigamos a noção de funções de controle de Lyapunov (FCL) e sua relação com a estabilidade de sistemas autônomos com controle. Uma função de controle de Lyapunov deverá satisfazer a equação de Hamilton-Jacobi-Bellman (H-J-B). Usando esse fato, se uma função de controle de Lyapunov é conhecida, será então possível determinar a lei de realimentação ótima; isto é, a lei de controle que torna o sistema globalmente assintóticamente controlável a um estado de equilíbrio. Como aplicação, apresentamos uma modelagem matemática adequada a um problema de controle ótimo de certos sistemas biológicos. Este trabalho conta também com um breve histórico sobre o desenvolvimento da Teoria de Controle de forma a ilustrar a importância, o progresso e a aplicação das técnicas de controle em diferentes áreas ao longo do tempo. / This dissertation presents the steps for using the method of Dynamic Programming or Bellman Optimization Principle for optimal control applications. We investigate the notion of control-Lyapunov functions (CLF) and its relation to the stability of autonomous systems with control. A control-Lyapunov function must satisfy the Hamilton-Jacobi- Bellman equation (H-J-B). Using this fact, if a control-Lyapunov function is known, it is possible to determine the optimal feedback law, in other words, the control law which makes the system globally asymptotically controllable at an equilibrium state. As an application, we present a mathematical model suitable for an optimal control problem of certain biological systems. This dissertation also presents a brief historic about the development of the Control Theory in a way of illustrate the importance and the progress of the control techniques, specially where it can be applied, according to the diverse areas and different times that this techniques were discovered and used.

Fundação de Amparo à Pesquisa do Estado do Rio de Janeiro / Neste trabalho apresentamos as etapas para a utilização do método da Programação Dinâmica, ou Princípio de Otimização de Bellman, para aplicações de controle ótimo. Investigamos a noção de funções de controle de Lyapunov (FCL) e sua relação com a estabilidade de sistemas autônomos com controle. Uma função de controle de Lyapunov deverá satisfazer a equação de Hamilton-Jacobi-Bellman (H-J-B). Usando esse fato, se uma função de controle de Lyapunov é conhecida, será então possível determinar a lei de realimentação ótima; isto é, a lei de controle que torna o sistema globalmente assintóticamente controlável a um estado de equilíbrio. Como aplicação, apresentamos uma modelagem matemática adequada a um problema de controle ótimo de certos sistemas biológicos. Este trabalho conta também com um breve histórico sobre o desenvolvimento da Teoria de Controle de forma a ilustrar a importância, o progresso e a aplicação das técnicas de controle em diferentes áreas ao longo do tempo. / This dissertation presents the steps for using the method of Dynamic Programming or Bellman Optimization Principle for optimal control applications. We investigate the notion of control-Lyapunov functions (CLF) and its relation to the stability of autonomous systems with control. A control-Lyapunov function must satisfy the Hamilton-Jacobi- Bellman equation (H-J-B). Using this fact, if a control-Lyapunov function is known, it is possible to determine the optimal feedback law, in other words, the control law which makes the system globally asymptotically controllable at an equilibrium state. As an application, we present a mathematical model suitable for an optimal control problem of certain biological systems. This dissertation also presents a brief historic about the development of the Control Theory in a way of illustrate the importance and the progress of the control techniques, specially where it can be applied, according to the diverse areas and different times that this techniques were discovered and used.