LN Métodos Numéricos Computacional

UNIVERSIDADE FEDERAL DE SANTA CATARINA
E SISTEMAS
DEPARTAMENTO DE AUTOMAC
AO
METODOS
DE OTIMIZAC
AO:
TEORIA E PRATICA
Versao preliminar
Eduardo Camponogara
Florian
opolis, Setembro de 2006
Agradecimentos
Agradeco sinceramente o apoio recebido dos alunos Alberto X. Pavim, Agustinho

Plucenio, Martn Pomar, Maurcio Serra e Rodrigo Carlson na preparacao da versao
eletronica das notas de aula em LATEX.
ii
Sum
ario
1 As Sub
areas da Otimizac
ao
1.1 Conceitos Fundamentais . . . . . . . . . . . . . . . . . .
1.1.1 Modelagem de Problemas . . . . . . . . . . . . .
1.1.2 Elementos de um Problema de Otimizacao . . . .
1.1.3 Duas Excecoes à Formulacao Geral . . . . . . . .
1.2 Programacao Linear . . . . . . . . . . . . . . . . . . . .
1.2.1 Problema Exemplo . . . . . . . . . . . . . . . . .
1.3 Programacao Linear Inteira . . . . . . . . . . . . . . . .
1.4 Programacao Quadratica . . . . . . . . . . . . . . . . . .
1.5 Mnimos Quadrados Nao-Linear . . . . . . . . . . . . . .
1.6 Mnimos Quadrados (Linear) . . . . . . . . . . . . . . . .
1.6.1 Exemplo Ilustrativo . . . . . . . . . . . . . . . . .
1.6.2 O Problema de Mnimos Quadrados . . . . . . . .
1.6.3 Ajuste de Curvas . . . . . . . . . . . . . . . . . .
1.7 Equacoes Nao-Lineares . . . . . . . . . . . . . . . . . . .
1.7.1 Aplicacao em Sistemas de Controle . . . . . . . .
1.8 Otimizacao Nao-Linear sem Restricoes . . . . . . . . . .
1.9 Otimizacao Nao-Linear com Limites Superiores/Inferiores
1.10 Otimizacao Nao-Linear com Restricoes . . . . . . . . . .
1.11 Programacao Semi-Definida . . . . . . . . . . . . . . . .
1.11.1 Exemplo . . . . . . . . . . . . . . . . . . . . . . .
1.12 Referencias . . . . . . . . . . . . . . . . . . . . . . . . .
1.13 Exerccios . . . . . . . . . . . . . . . . . . . . . . . . . .
2 Minimiza
c
ao de Fun
c
oes com o M
etodo de Descenso
2.1 Problemas de Interesse . . . . . . . . . . . . . . . . . .
2.2 Fundamentos de Otimizacao Irrestrita . . . . . . . . . .
2.2.1 O que e uma solucao para P1 ? . . . . . . . . . .
2.2.2 Reconhecendo Um Mnimo Local . . . . . . . .
2.3 O Algoritmo de Descenso . . . . . . . . . . . . . . . . .
2.3.1 O Algoritmo de Descenso em Detalhes . . . . .
2.3.2 Direcao de Busca . . . . . . . . . . . . . . . . .
2.3.3 Encontrando a Direcao de Busca . . . . . . . .
iii
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
1
1
1
2
2
3
3
4
4
5
6
6
6
7
8
9
10
10
10
12
12
12
13
13
14
14
.
.
.
.
.
.
.
.
17
17
18
18
18
20
21
21
22
2.4
2.5
2.3.4 Encontrando o Passo . . . . . . . . . . . . . . . . . . .

2.3.5 Reducao Suficiente e Retrocesso . . . . . . . . . . . . .
2.3.6 Convergencia do Metodo de Descenso . . . . . . . . . .
2.3.7 Taxa de Convergencia do Metodo de Descenso Ingreme
Referencias . . . . . . . . . . . . . . . . . . . . . . . . . . . .
Exerccios . . . . . . . . . . . . . . . . . . . . . . . . . . . . .
3 M
etodo de Newton: Soluc
ao de Equa
c
oes N
ao-Lineares
miza
c
ao de Fun
c
oes
3.1 Problemas de Interesse . . . . . . . . . . . . . . . . . . . . . .
3.2 O Metodo de Newton em uma Variavel . . . . . . . . . . . . .
3.2.1 Exemplo . . . . . . . . . . . . . . . . . . . . . . . . . .
3.3 O Metodo de Newton para Minimizacao em uma Variavel . . .
3.3.1 Exemplo . . . . . . . . . . . . . . . . . . . . . . . . . .
3.4 O Metodo de Newton em M
ultiplas Variaveis . . . . . . . . . .
3.5 Minimizacao Irrestrita . . . . . . . . . . . . . . . . . . . . . .
3.6 Convergencia . . . . . . . . . . . . . . . . . . . . . . . . . . .
3.6.1 Convergencia Linear . . . . . . . . . . . . . . . . . . .
3.6.2 Convergencia Quadratica . . . . . . . . . . . . . . . . .
3.6.3 Convergencia do Metodo de Newton . . . . . . . . . .
3.7 Metodos de Regiao de Confianca . . . . . . . . . . . . . . . .
3.8 Otimizacao de Funcoes Sujeito a Igualdades . . . . . . . . . .
3.9 Referencias . . . . . . . . . . . . . . . . . . . . . . . . . . . .
3.10 Exerccios . . . . . . . . . . . . . . . . . . . . . . . . . . . . .
4 Otimizac
ao N
ao-Diferenci
avel
4.1 Otimizacao Black-Box . . . . . . . . . . . . . . . .
4.2 Algoritmo Genetico (AG) . . . . . . . . . . . . . .
4.2.1 Genetica e Evolucao . . . . . . . . . . . . .
4.2.2 Adaptacao Biologica . . . . . . . . . . . . .
4.2.3 Hereditariedade com Evolucao Simulada . .
4.2.4 Popularidade do Algoritmo Genetico . . . .
4.2.5 Algoritmo Genetico em Detalhes . . . . . .
4.2.6 Operador Genetico Cross-Over . . . . . . .
4.2.7 Exemplo de Aplicacao . . . . . . . . . . . .
4.2.8 Questoes Praticas . . . . . . . . . . . . . . .
4.2.9 Schema Theorem . . . . . . . . . . . . . . .
4.3 Simulated Annealing . . . . . . . . . . . . . . . . .
4.3.1 O Processo de Annealing . . . . . . . . . . .
4.3.2 O Algoritmo de Metropolis . . . . . . . . . .
4.3.3 Exemplo: O Problema do Caixeiro Viajante
4.4 Referencias . . . . . . . . . . . . . . . . . . . . . .
4.5 Exerccios . . . . . . . . . . . . . . . . . . . . . . .
iv
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
22
24
25
26
28
28
e Mini.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
31
31
31
32
33
33
35
36
37
37
37
38
39
41
43
43
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
47
47
48
48
48
49
49
50
51
51
52
52
54
54
55
57
58
59
5 Treinamento de Redes Neurais: Um Problema de Otimizac

ao
5.1 Elementos Basicos das Redes Neurais . . . . . . . . . . . . . . . .
5.1.1 O Problema de Treinamento . . . . . . . . . . . . . . . . .
5.1.2 ALVINN: Um Exemplo de Aplicacao . . . . . . . . . . . .
5.1.3 Problemas Apropriados para Redes Neurais . . . . . . . .
5.2 Perceptron: A Primeira Unidade Neural . . . . . . . . . . . . . .
5.2.1 Treinando um Perceptron . . . . . . . . . . . . . . . . . .
5.3 Regra Delta . . . . . . . . . . . . . . . . . . . . . . . . . . . . . .
5.3.1 Treinando uma Unidade Delta . . . . . . . . . . . . . . . .
5.4 A Unidade Sigmoid . . . . . . . . . . . . . . . . . . . . . . . . . .
5.5 Referencias . . . . . . . . . . . . . . . . . . . . . . . . . . . . . .
5.6 Exerccios . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . .
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
61
62
62
63
63
65
65
67
67
68
69
70
6 Programa
c
ao Linear
6.1 Problema Exemplo: Gerenciamento de Uma Unidade de Producao
6.1.1 Gerente de Producao Otimista . . . . . . . . . . . . . . . .
6.1.2 Gerente de Producao Pessimista . . . . . . . . . . . . . .
6.2 O Problema de Programacao Linear . . . . . . . . . . . . . . . . .
6.3 Algoritmo Simplex . . . . . . . . . . . . . . . . . . . . . . . . . .
6.3.1 Exemplo . . . . . . . . . . . . . . . . . . . . . . . . . . . .
6.3.2 Algoritmo Simplex em detalhes . . . . . . . . . . . . . . .
6.3.3 Inicializacao . . . . . . . . . . . . . . . . . . . . . . . . . .
6.4 Dualidade . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . .
6.4.1 Motivacao . . . . . . . . . . . . . . . . . . . . . . . . . . .
6.4.2 O Problema Dual . . . . . . . . . . . . . . . . . . . . . . .
6.4.3 O Teorema Fraco da Dualidade . . . . . . . . . . . . . . .
6.4.4 O Teorema Forte da Dualidade . . . . . . . . . . . . . . .
6.4.5 Folga Complementar . . . . . . . . . . . . . . . . . . . . .
6.5 Algoritmo Simplex em Notacao Matricial . . . . . . . . . . . . . .
6.5.1 Dicionario em Forma Matricial . . . . . . . . . . . . . . .
6.6 Referencias . . . . . . . . . . . . . . . . . . . . . . . . . . . . . .
6.7 Exerccios . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . .
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
73
74
74
74
75
77
78
81
83
85
85
86
87
87
89
90
91
92
92
.
.
.
.
.
.
.
.
.
.
.
.
95
95
97
97
97
98
98
100
100
101
102
103
104
7 Teoria dos Jogos

7.1 Introducao . . . . . . . . . . . . . . . . .
7.2 Jogos Matriciais . . . . . . . . . . . . . .
7.2.1 O Jogo da Tesoura, Pedra e Papel
7.2.2 Um Jogo Menos Trivial . . . . . .
7.3 Formalizacao . . . . . . . . . . . . . . .
7.4 Estrategia Otima

para o Agente Coluna
7.5 Estrategia Otima para o Agente Linha .

7.6 Relacao entre os Problemas Px e Py . . .
7.7 Teorema Minimax . . . . . . . . . . . . .
7.8 Jogos Quadraticos . . . . . . . . . . . . .
7.8.1 Exemplo . . . . . . . . . . . . . .
7.9 Referencias . . . . . . . . . . . .v . . . .
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
7.10 Exerccios . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 105

8 Fluxo em Redes
8.1 Dois Problemas Classicos . . . . . . . . . . . . . . . . . . . . . . .
8.1.1 O Problema de Transporte . . . . . . . . . . . . . . . . . .
8.1.2 O Problema de Alocacao . . . . . . . . . . . . . . . . . . .
8.2 O Problema de Fluxo Maximo . . . . . . . . . . . . . . . . . . . .
8.2.1 Fluxos e Cortes . . . . . . . . . . . . . . . . . . . . . . . .
8.2.2 Algoritmo de Caminhos Aumentantes . . . . . . . . . . . .
8.2.3 Implicacoes Combinatorias do Problema de Fluxo Maximo
8.3 O Problema de Fluxo de Custo Mnimo . . . . . . . . . . . . . . .
8.3.1 Transformacoes . . . . . . . . . . . . . . . . . . . . . . . .
8.3.2 Um Exemplo . . . . . . . . . . . . . . . . . . . . . . . . .
8.3.3 Redes Residuais . . . . . . . . . . . . . . . . . . . . . . . .
8.3.4 Algoritmo de Cancelamento de Circuitos Negativos . . . .
8.4 Matrizes Totalmente Unimodulares . . . . . . . . . . . . . . . . .
8.5 Referencias . . . . . . . . . . . . . . . . . . . . . . . . . . . . . .
8.6 Exerccios . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . .
9 Linguagens de Modelagem
9.1 Linguagem Mosel . . . . . . . . . . . . . . . . . . . . . . . . . .
9.1.1 Qual Interface Devemos Utilizar? . . . . . . . . . . . . .
9.1.2 Resolvendo um Problema . . . . . . . . . . . . . . . . .
9.1.3 Indo Mais Longe . . . . . . . . . . . . . . . . . . . . . .
9.1.4 Trabalhando com o Optimizer . . . . . . . . . . . . . . .
9.1.5 Construindo um Primeiro Modelo . . . . . . . . . . . . .
9.1.6 Usando Cadeias de Caracteres como Indices . . . . . . .
9.1.7 Modelagem Versatil . . . . . . . . . . . . . . . . . . . . .
9.2 Linguagem AMPL . . . . . . . . . . . . . . . . . . . . . . . . .
9.2.1 Modelo AMPL do Problema da Mochila . . . . . . . . .
9.2.2 Comentarios . . . . . . . . . . . . . . . . . . . . . . . . .
9.3 Estudo de Caso: Alocacao de Rotas em Redes de Computadores
9.4 Formulacao do Problema . . . . . . . . . . . . . . . . . . . . . .
9.4.1 Formulacao em MOSEL . . . . . . . . . . . . . . . . . .
9.4.2 Formulacao em AMPL . . . . . . . . . . . . . . . . . . .
9.5 Referencias . . . . . . . . . . . . . . . . . . . . . . . . . . . . .
9.6 Exerccios . . . . . . . . . . . . . . . . . . . . . . . . . . . . . .
10 Fundamentos de Programa
c
ao Inteira
10.1 Introducao . . . . . . . . . . . . . . . .
10.1.1 Escalonamento de Trens . . . .
10.1.2 Airline Crew Scheduling . . . .
um Problema Inteiro? . . . .
10.2 O Que E
10.2.1 Problema (Linear) Inteiro Misto
10.2.2 Problema (Linear) Inteiro . . .
10.2.3 Problema Linear Binario . . . .
vi
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
107
107
107
109
110
112
114
117
119
120
122
123
124
126
129
129
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
135
135
136
136
137
138
138
140
141
142
143
144
144
144
146
150
153
153
.
.
.
.
.
.
.
155
155
155
156
156
156
156
157
10.2.4 Problema de Otimizacao Combinatoria . . . . . . . . . . . . . .

10.3 Programacao Linear e Arredondamento . . . . . . . . . . . . . . . . . .
10.4 Formulacao de PIs e PIBs . . . . . . . . . . . . . . . . . . . . . . . . .
10.4.1 Exemplo 1: Formulando o Problema de Alocacao . . . . . . . .
10.4.2 Exemplo 2: O Problema da Mochila . . . . . . . . . . . . . . .
10.4.3 Exemplo 3: O Problema de Cobertura por Conjuntos . . . . . .
10.4.4 Exemplo 4: O Problema do Caixeiro Viajante (PCV) . . . . . .
10.5 Explosao Combinatoria . . . . . . . . . . . . . . . . . . . . . . . . . . .
10.6 Formulacao de Problemas Inteiros Mistos (PIMS) . . . . . . . . . . . .
10.6.1 Exemplo 1: Modelando Custos Fixos . . . . . . . . . . . . . . .
10.6.2 Exemplo 2: Localizacao de Depositos sem Limites de Capacidade
10.6.3 Alternativas Discretas e Disjuntas . . . . . . . . . . . . . . . . .
10.7 Formulacoes Alternativas . . . . . . . . . . . . . . . . . . . . . . . . . .
10.7.1 Formulacoes Equivalentes para o Problema da Mochila . . . . .
10.7.2 Localizacao de Depositos sem Limites de Capacidade . . . . . .
10.8 Formulacoes Apertadas e Ideais . . . . . . . . . . . . . . . . . . . . . .
10.8.1 Formulacoes Equivalentes para o Problema da Mochila . . . .
10.8.2 Formulacao para o Problema de Localizacao de Depositos . . . .
10.9 Referencias . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . .
10.10Exerccios . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . .
157
157
158
158
159
160
161
162
163
163
164
165
166
166
167
168
169
169
170
170
11 Programa
c
ao Inteira: Relaxa
c
oes e Algoritmo Branch-and-Bound
11.1 Condicoes de Otimalidade . . . . . . . . . . . . . . . . . . . . . . . . .
11.1.1 Limite Primal . . . . . . . . . . . . . . . . . . . . . . . . . . . .
11.1.2 Limite Dual . . . . . . . . . . . . . . . . . . . . . . . . . . . . .
11.2 Relaxacao Baseada em PL (Relaxacao Linear) . . . . . . . . . . . . . .
11.3 Relaxacao Combinatoria . . . . . . . . . . . . . . . . . . . . . . . . . .
11.3.1 O Problema do Caixeiro Viajante . . . . . . . . . . . . . . . .
11.3.2 O Problema da Mochila . . . . . . . . . . . . . . . . . . . . . .
11.4 Relaxacao Lagrangeana . . . . . . . . . . . . . . . . . . . . . . . . . . .
11.5 Algoritmo Branch-and-Bound . . . . . . . . . . . . . . . . . . . . . . .
11.5.1 Estrategia de Divisao e Conquista . . . . . . . . . . . . . . . . .
11.5.2 Enumeracao Implcita . . . . . . . . . . . . . . . . . . . . . . .
11.5.3 Algoritmo Branch-and-Bound (B&B) . . . . . . . . . . . . . . .
11.6 Referencias . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . .
11.7 Exerccios . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . .
173
173
174
174
174
175
175
175
176
177
177
178
181
184
184
12 Algoritmos de Planos de Corte e Desigualdades Fortes

12.1 Introducao a Planos de Corte . . . . . . . . . . . . . . .
12.2 Exemplos de Desigualdades Validas . . . . . . . . . . . .
12.2.1 Um conjunto 0-1 puro . . . . . . . . . . . . . . .
12.2.2 Um Conjunto 0-1 Misto . . . . . . . . . . . . . .
12.2.3 Um Conjunto Inteiro Misto . . . . . . . . . . . .
12.2.4 Conjunto Combinatorio . . . . . . . . . . . . . .
12.2.5 Arredondamento Inteiro . . . . . . . . . . . . . .
12.2.6 Arredondamento Inteiro Misto . . . . . . . . . . .
vii
187
187
188
188
188
189
189
190
190
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
12.3 Teoria
12.3.1
12.3.2
12.3.3
12.4
12.5
12.6
12.7
de Desigualdades Validas . . . . . . . . . . . . . . . . . . . . . .
Desigualdades Validas para Problemas Lineares . . . . . . . . .
Desigualdades Validas para Problemas Inteiros . . . . . . . . . .
Procedimento Chvatal-Gomory para Geracao de Desigualdades
Validas . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . .
O Algoritmo de Planos de Corte . . . . . . . . . . . . . . . . . . . . . .
Algoritmo de Planos de Corte Usando Cortes de Gomory Fracionarios .
12.5.1 Exemplo . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . .
Desigualdades Disjuntivas . . . . . . . . . . . . . . . . . . . . . . . . .
12.6.1 Exemplo . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . .
12.6.2 Desigualdades Disjuntivas para Problemas 0-1 . . . . . . . . . .
Exerccios . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . .
190
191
191
192
192
193
194
195
195
196
197
13 Programa
c
ao com Restric
oes L
ogicas
199
14 Programa
c
ao Din
amica: Domnio Discreto
14.1 Um Exemplo de Programacao Dinamica . . . . . . . . . . . . . . . . .
14.1.1 Calculando N
umeros de Fibonacci . . . . . . . . . . . . . . . . .
14.2 Programacao Dinamica para o Problema da Mochila . . . . . . . . . .
14.2.1 Complexidade do Algoritmo . . . . . . . . . . . . . . . . . . . .
14.3 Elementos de um Algoritmo DP: Sequencia Crescente Mais Longa . . .
14.3.1 Construindo um Algoritmo . . . . . . . . . . . . . . . . . . . . .
14.4 Edicao Automatica de Cadeias de Smbolos (Approximate String Matching) . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . .
14.4.1 Projeto de um Algoritmo DP . . . . . . . . . . . . . . . . . . .
14.5 Exerccios . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . .
201
202
203
204
205
206
207
15 Programa
c
ao Din
amica: Domnio Contnuo
15.1 Introducao . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . .
15.1.1 Exemplo: Controle de Inventario . . . . . . . . . . . . . .
15.1.2 Distincao Entre Otimizacao Open-Loop e Closed-Loop
15.2 O Problema Basico de Programacao Dinamica . . . . . . . . . .
15.2.1 O Valor da Informacao . . . . . . . . . . . . . . . . . . . .
15.3 O Algoritmo de Programacao Dinamica . . . . . . . . . . . . . . .
15.3.1 Princpio da Otimalidade . . . . . . . . . . . . . . . . . . .
15.3.2 O Algoritmo de Programacao Dinamica . . . . . . . . . . .
15.4 Sistemas Lineares com Custo Quadratico . . . . . . . . . . . . . .
15.4.1 Aplicando o Algoritmo de Programacao Dinamica . . . . .
15.4.2 A Equacao de Riccati e seu Comportamento Assintotico .
15.5 Exerccios . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . .
215
215
216
217
218
218
219
219
219
220
221
222
224
16 Programa
c
ao N
ao-Linear Restrita: Fundamentos
malidade
16.1 Teoria da Otimizacao Nao-Linear sob Restricoes .
16.1.1 Solucao Local Solucao Global . . . . . .
16.1.2 Suavidade das Funcoes . . . . . . . . . . .
viii
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
208
208
210
e Condi
c
oes de Oti229
. . . . . . . . . . . . 229
. . . . . . . . . . . . 230
. . . . . . . . . . . . 230
16.2 Exemplos . . . . . . . . . . . . . . . . . . . .
16.2.1 Uma Restricao de Igualdade . . . . . .
16.2.2 Uma Restricao de Desigualdade . . . .
16.2.3 Duas Desigualdades . . . . . . . . . . .
16.3 Condicoes de Otimalidade de Primeira Ordem
16.3.1 Exemplo . . . . . . . . . . . . . . . . .
16.4 Exerccios . . . . . . . . . . . . . . . . . . . .
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
17 Programa
c
ao N
ao-Linear: Fundamentos de Algoritmos
17.1 Categorizando Algoritmos de Otimizacao . . . . . . . . .
17.1.1 O Metodo da Funcao Penalidade . . . . . . . . .
17.1.2 O Metodo de Barreiras . . . . . . . . . . . . . . .
17.1.3 O Metodo Lagrangeano Aumentado . . . . . . . .
17.1.4 Metodo Seq
uencial Linear . . . . . . . . . . . . .
17.1.5 Programacao Quadratica Seq
uencial . . . . . . .
17.2 Eliminacao de Variaveis . . . . . . . . . . . . . . . . . .
17.2.1 Exemplo: Problemas Que Podem Surgir . . . . .
17.2.2 Eliminacao de Restricoes Lineares . . . . . . . . .
17.2.3 Os Efeitos das Desigualdades . . . . . . . . . . .
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
231
232
233
235
238
240
241
.
.
.
.
.
.
.
.
.
.
243
244
244
244
245
245
245
245
246
246
248
18 Programa
c
ao Quadr
atica
18.1 Exemplo: Otimizacao de Portofolio . . . . . . . . . . . . . . . . . . . .
18.2 Propriedades de Problemas Quadraticos com Apenas Restricoes de
Igualdade . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . .
18.2.1 Resolvendo o Sistema KKT . . . . . . . . . . . . . . . . . . . .
18.3 Problemas Quadraticos Sob Restricoes . . . . . . . . . . . . . . . . . .
18.3.1 Condicoes de Otimalidade . . . . . . . . . . . . . . . . . . . . .
18.4 O Metodo de Conjunto Ativo para Problemas Quadraticos Convexos .
18.4.1 Exemplo . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . .
18.5 Exerccios . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . .
251
252
19 Programa
c
ao N
ao-Linear sob Restric
oes: Algoritmos
19.1 Algoritmos . . . . . . . . . . . . . . . . . . . . . . . . . . . . .
19.2 O Metodo de Barreira Logartmica . . . . . . . . . . . . . . .
19.2.1 Propriedades das Funcoes de Barreira Logartmica . . .
19.2.2 Algoritmo Baseado na Funcao Barreira Logartmica . .
19.2.3 Propriedades da Funcao Log-Barrier e Algoritmo Geral
19.2.4 Manipulando Restricoes de Igualdade . . . . . . . . . .
19.3 Metodo Lagrangeano Aumentado . . . . . . . . . . . . . . . .
19.3.1 Motivacao e Estrutura do Algoritmo . . . . . . . . . .
19.3.2 Exemplo . . . . . . . . . . . . . . . . . . . . . . . . . .
19.3.3 Extensao para Restricoes de Desigualdade . . . . . .
19.3.4 Propriedades do Lagrangeano Aumentado . . . . . . .
19.4 Programacao Linear Sequencial . . . . . . . . . . . . . . . . .
19.5 Programacao Quadratica Sequencial . . . . . . . . . . . . . . .
19.5.1 O metodo SQP Local . . . . . . . . . . . . . . . . . .
ix
265
265
265
266
268
269
270
271
271
272
273
275
275
276
276
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
253
255
255
256
256
259
261
19.5.2 Linhas Gerais do Metodo SQP

19.5.3 Restricoes de desigualdade . .
19.5.4 Implementacao de SQP . . . . .
19.6 Exerccios . . . . . . . . . . . . . . . .
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
A Exerccios Resolvidos
A.1 Introducao à Otimizacao . . . . . . . . . . . . . . . . . . . . . . . . .
A.2 Minimizacao de Funcoes com o Metodo de Descenso . . . . . . . . . .
A.3 Metodo de Newton . . . . . . . . . . . . . . . . . . . . . . . . . . . .
A.4 Otimizacao Black-Box . . . . . . . . . . . . . . . . . . . . . . . . . .
A.5 Treinamento de Redes Neurais . . . . . . . . . . . . . . . . . . . . . .
A.6 Programacao Linear . . . . . . . . . . . . . . . . . . . . . . . . . . .
A.7 Teoria dos Jogos . . . . . . . . . . . . . . . . . . . . . . . . . . . . .
A.8 Fluxo em Redes . . . . . . . . . . . . . . . . . . . . . . . . . . . . . .
A.9 Linguagens de Modelagem . . . . . . . . . . . . . . . . . . . . . . . .
A.10 Programacao Inteira: Fundamentos . . . . . . . . . . . . . . . . . . .
A.11 Programacao Inteira: Relaxacoes e Algoritmo Branch-and-Bound . .
A.12 Algoritmos de Planos de Corte e Desigualdades Fortes . . . . . . . . .
A.13 Programacao Logica . . . . . . . . . . . . . . . . . . . . . . . . . . .
A.14 Programacao Dinamica: Domnio Discreto . . . . . . . . . . . . . . .
A.15 Programacao Dinamica: Domnio Contnuo . . . . . . . . . . . . . . .
A.16 Programacao Nao-Linear Sob Restricoes: Fundamentos . . . . . . . .
A.17 Programacao Nao-Linear Sob Restricoes: Fundamentos de Algoritmos
A.18 Programacao Quadratica . . . . . . . . . . . . . . . . . . . . . . . . .
A.19 Programacao Nao-Linear sob Restricoes: Algoritmos . . . . . . . . .
.
.
.
.
278
279
280
280
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
287
288
290
294
298
299
300
305
308
312
315
320
328
330
331
339
343
345
346
349
Lista de Figuras
1.1
1.2
Predicao peso com base na altura . . . . . . . . . . . . . . . . . . . . .

Instancia do problema de localizacao de central telefonica. . . . . . . .
8
11
2.1
2.2
Exemplo de funcao com um n

umero infinito de otimos locais
Ilustracao do gradiente de uma funcao, f (xk ), que assume
ortogonal à curva de nvel que passa por xk . . . . . . . . . .
Ilustracao de passo satisfatorio. . . . . . . . . . . . . . . . .
Ilustracao das condicoes de Armijo e de curvatura. . . . . .
18
2.3
2.4
3.1
3.2
3.3
. . . . . .
a direcao
. . . . . .
. . . . . .
. . . . . .
21
23
23
Ilustracao do processo iterativo de Newton. . . . . . . . . . . . . . . . .

Funcao cos(x) . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . .
Modelo mecanico. O modelo consiste de um tabuleiro com um furo
perfurado a cada ponto yk . Atraves da cada buraco, um fio e passado com
o correspondente peso wk preso a sua ponta. Os outros extremos dos fios
sao amarrados com um no. Na ausencia de friccao e fios entrelacados, as
forcas atingem um equilbrio no ponto do no quando este esta localizado
na solucao otima x . . . . . . . . . . . . . . . . . . . . . . . . . . . . .
34
34
4.1
4.2
4.3
4.4
4.5
4.6
4.7
4.8
4.9
Operador cross-over de um ponto. . . . . . . . . . . . . . . . . . . . . .

Operador cross-over de dois pontos. . . . . . . . . . . . . . . . . . . . .
Fenomeno de crowding. . . . . . . . . . . . . . . . . . . . . . . . . . . .
Empacotamento de componentes eletronicos em circuitos integrados. . .
Ilustracao do processo de annealing. . . . . . . . . . . . . . . . . . . . .
Comportamento tpico do nvel de energia conforme processo de annealing.
Probabilidade de transicao com a queda de temperatura. . . . . . . . .
Exemplo de rota para uma instancia particular. . . . . . . . . . . . . .
Ilustracao dos operadores de perturbacao . . . . . . . . . . . . . . . . .
51
51
53
54
55
56
56
57
58
5.1
5.2
5.3
5.4
5.5
5.6
5.7
5.8
5.9
5.10
Exemplo de topologia de redes neurais. . . . . . . .

Unidade de processamento neural. . . . . . . . . . .
Rede neural com camadas intermediarias. . . . . . .
Rede neural do sistema ALVINN. . . . . . . . . . .
Perceptron. . . . . . . . . . . . . . . . . . . . . . .
Conjuntos separaveis e nao separaveis linearmente.
Unidade delta. . . . . . . . . . . . . . . . . . . . . .
Funcao sigmoid. . . . . . . . . . . . . . . . . . . . .
Sistema neural para reconhecimento de palavras . .
Topologia da rede neural. . . . . . . . . . . . . . . .
xi
61
62
63
64
65
66
67
69
69
71
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
45
6.1
6.2
6.3
Exemplo de problema infactvel. As regioes achuradas indicam as regioes

factveis para cada uma das restricoes. Observe que a intersecao das
regioes achuradas e vazia. . . . . . . . . . . . . . . . . . . . . . . . . .
Exemplo de problema ilimitado. Podemos avancar dentro da regiao
factvel de maneira a crescer o valor da funcao objetivo sem limites.
Por exemplo, ao longo da direcao (x1 , 0) podemos avancar sem limites,
fazendo o valor da funcao objetivo aumentar. . . . . . . . . . . . . . . .
Metodo simplex como um processo iterativo. . . . . . . . . . . . . . . .
77
78
91
7.1
Curvas de nvel, conjuntos reativos, solucao Nash e pontos Pareto de um

jogo quadratico entre dois agentes. . . . . . . . . . . . . . . . . . . . . 104
8.1
8.2
Problema de transporte. . . . . . . . . . . . . . . . . . . . . . . . . . .
Alocacao balanceada de tarefas em dois processadores como um problema de corte mnimo. A alocacao otima consiste em processar os
modulos 1, 2 e 4 no processador 1, deixando os modulos 3 e 5 no processador 2. O custo de processamento dos modulos e igual 15 enquanto que
o custo de comunicacao e 3, perfazendo um custo total de 18 unidades.
O custo total e a capacidade do corte s-t mnimo como indicado na figura.
Exemplo de rede residual G(x) obtida a partir de uma rede G e fluxo x.
Rede residual G(x0 ) para fluxo x0 nulo. . . . . . . . . . . . . . . . . . .
Rede residual G(x1 ) para fluxo x1 . . . . . . . . . . . . . . . . . . . . . .
Transformacao de arestas em arcos. . . . . . . . . . . . . . . . . . . . .
Remocao de limite inferior nos arcos. . . . . . . . . . . . . . . . . . . .
Eliminando capacidade de arcos. . . . . . . . . . . . . . . . . . . . . . .
Exemplo de problema de fluxo de custo mnimo. As linhas tracejadas
correspondem ao fluxo otimo. . . . . . . . . . . . . . . . . . . . . . . .
Exemplo de rede residual. . . . . . . . . . . . . . . . . . . . . . . . . .
Exemplo de rede residual. . . . . . . . . . . . . . . . . . . . . . . . . .
Primeira iteracao do algoritmo de cancelamento de circuito negativo.
A figura mostra a rede residual G(x0 ), o circuito com custo negativo em linhas tracejadas e o fluxo x0 . O circuito e dado por w0 =
((4, 2), (2, 3), (3, 4)) que tem custo c(w0 ) = 1 e capacidade maxima
(w0 ) = 2. . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . .
Segunda iteracao do algoritmo de cancelamento de circuito negativo. A
figura mostra a rede residual G(x1 ), o ciclo w1 = ((3, 2), (2, 1), (1, 3))
com custo c(w1 ) = 1 e capacidade maxima (w1 ) = 1, e o fluxo x1 . . .
Terceira iteracao do algoritmo de cancelamento de circuito negativo. Na
figura e dada a rede residual G(x2 ) e o respectivo fluxo x2 . Tambem e
indicado o circuito w2 = ((2, 3), (3, 4), (4, 2)) com custo c(w2 ) = 3 e
capacidade (w2 ) = 1. . . . . . . . . . . . . . . . . . . . . . . . . . . .
Fluxo otimo x3 e rede residual G(x3 ). Nao ha ciclo de custo negativo. .
xii
8.3
8.4
8.5
8.6
8.7
8.8
8.9
8.10
8.11
8.12
8.13
8.14
8.15
8.16
8.17
108
112
113
115
115
116
116
121
121
122
122
124
125
127
132
132
133
8.18 Propriedade de unimodularidade das matrizes de incidencia de grafos.

Um arco sem no de origem indica fluxo injetado no no destino, enquanto
que um arco sem no de destino indica fluxo consumido pelo no origem. 133
8.19 Grafo G = (V, A) com a especificacao do problema de fluxo em rede. . . 134
9.1
Rede exemplo do problema de alocacao de rotas. . . . . . . . . . . . . . 150
10.1
10.2
10.3
10.4
10.5
10.6
10.7
10.8
10.9
Ilustracao da solucao obtida atraves de arredondamento

Ilustracao da restricao de conectividade . . . . . . . . .
Funcao com custo fixo . . . . . . . . . . . . . . . . . .
Regiao factvel nao convexa . . . . . . . . . . . . . . .
Formulacoes equivalentes alternativas . . . . . . . . . .
Formulacoes alternativas . . . . . . . . . . . . . . . . .
Formulacoes apertadas . . . . . . . . . . . . . . . . . .
Grafo da instancia do problema do caixeiro viajante . .
Rede de abastecimento. . . . . . . . . . . . . . . . . . .
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
158
162
163
165
167
168
169
171
172
11.1
11.2
11.3
11.4
11.5
11.6
11.7
11.8
11.9
Arvore
de enumeracao . . . . . . . . . . . . . . . . . .
Arvore de enumeracao . . . . . . . . . . . . . . . . . .
Arvore
de enumeracao completa, explcita . . . . . . .
Eliminacao por otimalidade . . . . . . . . . . . . . . .
Eliminacao por limite . . . . . . . . . . . . . . . . . . .
Nenhum ramo da arvore pode ser eliminado . . . . . .
Quebra do primeiro no da arvore de enumeracao B&B .
Dividindo S1 em S11 e S12 . . . . . . . . . . . . . . . .
Cortando o no S12 por meio da condicao de otimalidade
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
178
178
179
179
180
180
182
182
183
12.1 Espaco de solucoes factveis e desigualdade valida x 6 14 4(2 y) . 189

12.2 Desigualdades disjuntivas . . . . . . . . . . . . . . . . . . . . . . . . . 196
14.1 Arvore
de recursao do algoritmo recursivo para calculo do n
umero de
Fibonacci . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 204
14.2 Valores D[i, j] calculados pelo algoritmo DP ao calcular a distancia
de edicao mnima entre o padrao P = abcdef ghijkl e o texto T =
bcdef f ghixkl . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 211
14.3 Hierarquia da empresa XYZ . . . . . . . . . . . . . . . . . . . . . . . . 213
15.1 Estrutura do sistema linear com controle otimo de realimentacao . . . 222
15.2 Sistema de fornos para aquecimento de materiais . . . . . . . . . . . . 224
15.3 Pendulo invertido . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 227
16.1
16.2
16.3
16.4
16.5
16.6
16.7
Fronteiras nao suaves . . . . .

Espaco de solucoes . . . . . .
Direcoes de descenso . . . . .
Restricao de desigualdade . .
Regiao de descenso nao vazia
Regiao de descenso vazia . . .
Meio disco . . . . . . . . . . .
.
.
.
.
.
.
.
. .
. .
. .
. .
. .
. .
. .
xiii
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
231
232
233
234
235
236
236
16.8 Regiao de descenso vazia . . . . . . . . . . . . . . . . . . . . . . . . . . 237

16.9 Ambas as restricoes . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 238
16.10Regiao factvel . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 240
17.1 Curvas de nvel das funcoes x2 + y 2 e y 2 = (x 1)3 . . . . . . . . . . . 247
18.1 Regiao factvel e curvas de nvel da funcao objetivo. . . . . . . . . . . . 260
18.2 Seq
uencia de iterandos. . . . . . . . . . . . . . . . . . . . . . . . . . . . 261
19.1 Curvas de nvel da funcao P (x, ) = x log x log(1 x) para
{0.01, 0.1, 0.4, 1} . . . . . . . . . . . . . . . . . . . . . . . . . . . .
19.2 Curvas de nvel da funcao P (x, ) = (x1 + 21 )2 + (x2 21 )2
(log x1 + log(1 x1 ) + log x2 + log(1 x2 )) para {22, 5, 2} . . . .
19.3 Curvas de nvel da funcao LA (x, 0.4, 50) . . . . . . . . . . . . . . . .
19.4 Elipsoide . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . .
A.1 Solucoes do sistema de equacoes nao-lineares . . . . . . . . . . . . . . .
A.2 Exemplo de problema de fluxo em redes . . . . . . . . . . . . . . . . .
A.3 Ilustracao da reducao do problema de caminhos mnimos com pedagio
ao problema de fluxo de custo mnimo atraves da operacao de quebra de
vertices. . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . .
A.4 Rede de abastecimento. . . . . . . . . . . . . . . . . . . . . . . . . . . .
A.5 Arvore
branch-and-bound parcial . . . . . . . . . . . . . . . . . . . . . .
A.6 Arvore
A.7 Arvore branch-and-bound parcial . . . . . . . . . . . . . . . . . . . . . .
A.8 Arvore
A.9 Arvore
A.11 Arvore

A.13 Exemplo de execucao do algoritmo de programacao dinamica para subsequencia mais longa de duas cadeias de caracteres. . . . . . . . . . . .
A.14 Grafo para computo de todos os possveis emparelhamentos de subcadeias mais longas. . . . . . . . . . . . . . . . . . . . . . . . . . . . . . .
A.15 Processo Markoviando do jogo par-mpar. . . . . . . . . . . . . . . . . .
A.16 Trajetoria de iterandos produzida pelo algoritmo de barreiras. . . . . .
xiv
267
268
273
282
295
309
311
319
320
321
321
322
323
324
325
326
335
336
342
350
Lista de Tabelas
1.1
Dados amostrais . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . .
3.1
Iteracoes do metodo de Newton. . . . . . . . . . . . . . . . . . . . . . .
33
4.1
Populacao inicial . . . . . . . . . . . . . . . . . . . . . . . . . . . . . .
52
5.1
Amostras para treinamento da rede neural . . . . . . . . . . . . . . . .
70
8.1
8.2
8.3
8.4
8.5
Capacidade de producao dos

Demanda dos clientes . . . .
Custo unitario de transporte
Custo de processamento . .
Custo de comunicacao . . .
9.1
9.2
Dados do problema da mochila . . . . . . . . . . . . . . . . . . . . . . 139

Sequenciamento de tarefas . . . . . . . . . . . . . . . . . . . . . . . . . 154
fornecedores .
. . . . . . . .
. . . . . . . .
. . . . . . . .
. . . . . . . .
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
109
109
109
111
111
10.1 N
umero de solucoes em funcao do tamanho do problema . . . . . . . . 162
10.2 Crescimento de funcoes . . . . . . . . . . . . . . . . . . . . . . . . . . . 162
14.1 Tabelas DP para o Problema da Mochila . . . . . . . . . . . . . . . . . 206
14.2 Tabelas DP para o Problema de Subseq
uencia Mais Longa . . . . . . . 208
A.1
A.2
A.3
A.4
A.5
Tabela D[i, j] para emparelhamento perfeito . . . . . . . . . . . .

Tabela D[i, j] para emparelhamento flutuante . . . . . . . . . . .
Resolucao das recorrencias do algoritmo de programacao dinamica
Jogos dos palitos . . . . . . . . . . . . . . . . . . . . . . . . . . .
Jogos dos palitos . . . . . . . . . . . . . . . . . . . . . . . . . . .
xv
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
332
332
337
338
338
xvi
Nota
c
ao
xvii
xviii
Captulo 1
As Sub
areas da Otimizac
ao
Otimizacao e a area da Matematica Aplicada que se preocupa em calcular e computar valores otimos para variaveis de decisao que induzem desempenho otimo, ao mesmo
tempo que satisfazem restricoes, de um modelo matematico.
1.1
Conceitos Fundamentais
1.1.1
Modelagem de Problemas
A representacao da realidade e uma necessidade da sociedade moderna, seja pela

impossibilidade de lidar diretamente com a realidade, seja por aspectos economicos,
seja pela complexidade. Assim, busca-se a representacao da realidade por meio de
modelos que sejam bem estruturados e representativos desta realidade.
Modelos s
ao representacoes simplificadas da realidade que preservam, para
determinadas situacoes e enfoques, uma equivalencia adequada.
Dentre as caractersticas de um modelo se destacam a sua capacidade representativa e
a capacidade de simplificacao da realidade. A capacidade representativa de um modelo
deve ser validada por meio de experimentacao, analise numerica, ensaios ou qualquer
outro metodo que verifique a acuracia das predicoes obtidas com o modelo. A modelagem de um problema complexo nao e uma tarefa trivial. Invariavelmente depende
de fatores subjetivos como intuicao, experiencia, criatividade e poder de sntese. A
formulacao consiste em traduzir o modelo em uma linguagem formal, normalmente
expressa em notacao matematica e compreendendo variaveis, equacoes, desigualdades e formulas. Os processos de formulacao e validacao sao iterativos, pois envolvem
m
ultiplas etapas de tentativa e erro, e interativos à medida que o modelador deve
intervir continuamente objetivando refinar o modelo.
Uma abordagem freq
uentemente empregada na formulacao e resolucao de problemas
consiste no emprego de modelos de otimizacao, os quais visam maximizar (minimizar)
um criterio de desempenho como, por exemplo, a producao de um dado insumo, sujeito a restricoes que descrevem as condicoes operacionais. A linguagem utilizada pela
otimizacao para expressar os problemas de uma forma declarativa e conhecida universalmente por programacao matematica. No que segue, apresentamos a linguagem
1. As Subareas da Otimizacao
de programacao matematica e exemplificamos o seu uso em uma serie de problemas

ilustrativos e de interesse geral.
1.1.2
Elementos de um Problema de Otimizac

ao
Tipicamente, um problema de otimizacao tem tres elementos constituintes:

1) Vari
aveis de Decis
ao: Parametros cujos valores definem uma solucao para o problema. Em um sistema de producao, esses parametros podem definir as quantidades produzidas e os recursos utilizados.
2) Fun
c
ao Objetivo: Uma funcao das variaveis de decisao a ser minimizada ou maximizada. No sistema de manufatura, podemos estar interessados em minimizar
custos, reduzir o n
umero de homens-hora e conseq
uentemente aumentar a produtividade.
3) Restric
oes: Um conjunto de funcoes que define o espaco factvel de solucoes. No
sistema de manufatura, as restricoes estabelecem limites para os recursos utilizados, restricoes operacionais do processo de producao, bem como limitacoes fsicas
e tecnologicas.
Formulac
ao do Problema de Otimizac
ao Generalizado
O problema geral de otimizacao e expresso em programacao matematica como:
Minimize f (x)
Sujeito a :
g(x) 6 0
h(x) = 0
x Rn
(1.1)
onde: f : Rn R e a funcao objetivo; g : Rn Rp e h : Rn Rq sao restricoes que

limitam o espaco de solucoes factveis; e x e o vetor com as variaveis de decisao.
1.1.3
Duas Excec
oes `
a Formulac
ao Geral
Sao duas as classes principais de excecoes à formulacao geral do problema de otimizacao.

1) Problemas sem func
ao objetivo: O usuario deseja apenas encontrar um conjunto de decisoes que sejam viaveis, isto e, encontre x Rn tal que:
g(x) 6 0
h(x) = 0
2) Problemas com m
ultiplos objetivos: Em problemas reais nao e incomum procurar otimizar mais do que um objetivo. No problema de manufatura o usuario
pode desejar maximizar o lucro, maximizar a qualidade dos itens manufaturados e ainda minimizar o tempo de producao. Usualmente, estes problemas sao
reduzidos a problemas envolvendo apenas um objetivo (combinando-se m

ultiplos
objetivos em apenas um ou, alternativamente, escolhendo-se um objetivo e introduzindo restricoes). Tais problemas sao transcritos em programacao matematica
como:
Minimize f1 (x)
..
.
Minimize fk (x)
x Rn
Sujeito a : g(x) 6 0
h(x) = 0
1.2
Programac
ao Linear
O problema de programa linear e um caso particular de (1.1) cuja funcao objetivo

e restricoes sao todas lineares. Matematicamente, f (x) = cT x, g(x) = Ax a e
h(x) = Bx b sendo c, a e b vetores e A e B matrizes com dimensoes apropriadas.
O problema e os algoritmos de programacao linear sao amplamente empregados tendo
in
umeras aplicacoes. No que segue apresentamos uma aplicacao e a formulacao geral.
1.2.1
Problema Exemplo
Um atleta deseja encontrar uma dieta otimizada, ou seja, um programa alimentar

com tipos e quantidades de alimentos que atendam às suas necessidades mnimas. Os
alimentos devem ser escolhidos de forma a minimizar o preco total. Os dados do
problema sao:
N alimentos, tais como arroz, feijao, alface, etc;
M tipos de substancias alimentares, como protenas, lipdios, etc;
cn e o preco unitario do alimento n;
am,n e a quantidade de substancia m contida em cada unidade de alimento n; e
bm e a quantidade mnima de substancia m a ser ingerida pelo atleta.
Exerccio: modele o problema em programac
ao matem
atica.
1) Vari
aveis: xn e quantidade de alimento n a ser comprada e ingerida, n = 1, . . . , N .
2) Restric
oes:
a1,1 x1 + a1,2 x2 + . . . + a1,N xN > b1
a2,1 x1 + a2,2 x2 + . . . + a2,N xN > b2

..
..
..
..
.
.
.
.
.
.
.
a x + a x + ... + a
M,1 1
M,2 2
M,N xN > bM
onde x1 , x2 , . . . , xN > 0.
3) Fun
c
ao objetivo: f = c1 x1 + c2 x2 + . . . + cN xN
4) Formulac
ao compacta:
Minimize cT x
x RN
Sujeito a : Ax b
x0
1.3
(1.2)
Programac
ao Linear Inteira
Uma variedade de problemas reais podem ser formulados com o emprego de variaveis
discretas. Dentre eles, citamos o problema de agendamento de trens, o problema de
agendamento de tripulacoes de avioes e o problema de alocacao em sistemas de telecomunicacoes. Todos estes problemas tem uma caracterstica em comum: fazem uso de
variaveis inteiras ou discretas. Nao se pode por exemplo dividir um vagao de trem em
fracoes; nao se pode alocar meio piloto a uma aeronave; e nao se pode instalar uma
fracao de um servidor de telecomunicacoes. Estes e muitos outros problemas fazem
parte do universo da programacao linear inteira, que engloba problemas da forma:
Minimize cT x
Sujeito a :
Ax b
Cx = d
x0
x Zn
1.3.1
Problema Exemplo
Aqui ilustramos uma aplicacao do problema de programacao inteira que envolve a

instalacao de depositos e unidades produtoras de aco que venham a suprir as demandas
de clientes, ao mesmo tempo que os custos de instalacao e transportes sejam minimizados. Temos que decidir, dentre um conjunto de locais pre-selecionados, onde instalar
as unidades produtoras e quais unidades instaladas serao responsaveis pela demanda
de cada cliente.
1) Dados do Problema: os dados abaixo constituem uma instancia do problema:
i. um n
umero m de possveis locais para instalacao de depositos e sider
urgicas;
ii. um n
umero n de clientes;
iii. di e a demanda de aco do cliente i e esta deve ser suprida por precisamente
um deposito ou sider
urgica;
iv. uj e a capacidade de um possvel deposito a ser instalado no local j;
v. o custo de transporte do deposito j para o cliente i e ci,j ; e
vi. o custo de instalacao do deposito j e fj .
2) Tarefa: Formule o problema de definir quais depositos devem ser instalados de

maneira a suprir a demanda e, ao mesmo tempo, minimizar o custo total de
instalacao e transporte.
3) Vari
aveis: as variaveis de decisao sao:
i. xij = 1 se o cliente i e atendido pelo deposito j, xij = 0 caso contrario; e
ii. yj = 1 se o deposito j e instalado, yj = 0 caso contrario.
4) Formulac
ao:
Minimize
m
n P
P
cij xij +
i=1 j=1
Sujeito a :
n
P
i=1
m
P
m
P
f j yj
j=1
di xij 6 uj yj
j = 1, . . . , m
xij
i = 1, . . . , n
= 1
j=1
xij B
i = 1, . . . , n
j = 1, . . . , m
j = 1, . . . , m
yj B
sendo B = {0, 1}.
1.4
Programac
ao Quadr
atica
O problema geral de programacao quadratica e formulado como segue:

Minimize
Sujeito a :
1 T
x Qx
2
+ cT x
Ax 6 b
Cx = d
onde Q e uma matriz simetrica.
Programacao quadratica tem aplicacoes em identificacao de parametros para modelos de processos, modelos estruturais e sistemas de controle, e em algoritmos como
SQP (Sequential Quadratic Programming).
A dificuldade de se resolver tais problemas depende da natureza da matriz Q. Quais
caractersticas de Q tornam o problema difcil? Se Q > 0 (positiva semi-definida)1 ou
Q > 0 (positiva definida) o problema e relativamente facil de ser resolvido (ou seja,
encontrar a solucao otima global). Se Q e indefinida (ou negativa semi-definida ou
definida) entao o problema e muito difcil.
Q Rnn e dita positiva semi-definida se xT Qx > 0 para todo x Rn . A matriz e dita positiva
definida se a desigualdade e estrita para todo x 6= 0. Se Q = QT , ent
ao Q e positiva semi-definida se
e somente se os autovalores de Q s
ao nao negativos. Note que os autovalores de matrizes simetricas
s
ao n
umeros reais. A matriz Q e dita indefinida se existe x, y Rn tal que xT Qx > 0 e y T Qy < 0.
1
1.5
Mnimos Quadrados N
ao-Linear
O problema dos mnimos quadrados nao-linear consiste de um problema da seguinte

forma:
Minimize 12 kf (x)k2
x Rn
onde k k corresponde à norma Euclidiana e f (x) : Rn Rm e uma funcao qualquer,

contnua e diferenciavel. Tais problemas tem aplicacoes no casamento de modelos com
dados experimentais, tipicamente encontrados em estudos economicos, aprendizagem
automatica e engenharia.
Seja {(yk , zk ) : k = 1, . . . , K} um conjunto de pares entrada-sada de uma funcao
z = h(y) desconhecida, yk Rp e zk Rq . Suponha que uma funcao gx (y) com
parametros dado pelo vetor x Rn e sugerida como aproximacao de h(y). Existe,
portanto, uma famlia F = {gx : x Rn } de aproximadores. O problema entao
encontrar a funcao gx que minimiza o erro de aproximacao:
e=
K
X
k=1
(gx (yk ) zk )2
Definindo f (x) = [f1 (x), . . . , fK (x)] tal que fk (x) = gx (yk ) zk , temos que o problema de encontrar o aproximador de menor erro se reduz a um problema de mnimos
quadrados nao-linear.
Uma aplicacao do problema de mnimos quadrados nao-linear e o treinamento de
redes neurais. Dado uma serie de exemplos de treinamento (pares entrada-sada), o
problema de treinar uma rede neural a aproximar a funcao descrita pelos pares entradasada se reduz a um problema de mnimos quadrados nao-linear.
1.6
Mnimos Quadrados (Linear)
Varios problemas encontrados na pratica como, por exemplo, o problema de ajuste

de curvas e de identificacao de sistemas, podem ser expressos como um problema de
encontrar os parametros de uma funcao linear nos parametros que aproxime os dados
observados.
Abaixo ilustramos uma aplicacao do problema de mnimos quadrados (linear) ao
problema de encontrar uma funcao de predicao do peso de pessoas em funcao da altura
com base em exemplos amostrais. Na seq
uencia formalizamos o problema de mnimos
quadrados e finalizamos com uma aplicacao ao problema de ajuste de curvas generalizado.
1.6.1
Exemplo Ilustrativo
Seja w(h) um modelo que descreve a relacao entre a altura e o peso medio das
pessoas do sexo feminino. Suponha que o modelo escolhido e um polinomio da forma:
w(h) = x3 h3 + x2 h2 + x1 h + x0 ,
ou seja, w(h) e um polinomio de terceira ordem que modela o peso como uma funcao
da altura. Os dados amostrais sao dados na Tabela 1.1
Tabela 1.1: Dados amostrais

Amostra (i) Altura (hi ) Peso (wi )
1
1.50
55
2
1.54
53
3
1.58
56
4
1.60
52
5
1.65
58
6
1.67
59
7
1.70
64
8
1.72
71
9
1.72
71
10
1.75
75
11
1.80
82
12
1.81
81
Problema Exemplo
Encontre os parametros x3 , x2 , x1 e x0 que minimizam a funcao erro, a qual consiste
na soma dos quadrados dos erros de predicao:
1
2
Minimize
x0 , x1 , x2 , x3
n
P
i=1
kw(hi ) wi k2
A solucao otima para o problema acima, tomando como dados as entradas da Tabela
1.1, e:
x0
x1
x2
x3
=
=
=
=
100.0000
32.0025
64.3704
42.1669
A Figura 1.1 ilustra os dados amostrais juntamente com a curva de aproximacao w(h)
dada pelo polinomio w(h) = x3 h3 + x2 h2 + x1 h + x0 .
1.6.2
O Problema de Mnimos Quadrados
Consideremos inicialmente um sistema
a11 x1 + a12 x2 +
a21 x1 + a22 x2 +
a31 x1 + a32 x2 +
..
a x + a x +
m1 1
m2 2
linear com mais equacoes do que variaveis:

... +
... +
... +
a1n xn =
a2n xn =
a3n xn =
b1
b2
b3
. . . + amn xn = bm
85
w(h) (Peso)
80
75
70
65
Aproximacao
60
Valores Amostrais
55
50
45
1.5
1.55
1.6
1.65
1.7
1.75
1.8
1.85
1.9
h (altura)
Figura 1.1: Predicao peso com base na altura

o qual pode ser colocado na forma mais compacta
Ax = b
onde A Rmn , x Rn1 e b Rm1 . Vamos assumir que nao existe solucao x tal
que Ax = b, o que ocorre quando posto(A) < posto([A|b]).
O problema de encontrar uma solucao aproximada para Ax = b pode ser colocado
em programacao matematica como um problema de mnimos quadrados linear:
PM Q : Minimize kAx bk
x Rn
onde r = Ax b e chamado de resduo. A solucao x para PM Q com menor erro residual
krk e dita solucao de mnimos quadrados. O problema PM Q pode ser colocado na forma
equivalente PM
Q:
2
T
PM
Q : Minimize kAx bk = (Ax b) (Ax b) =
x Rn
m
P
i=1
(aTi x bi )2
onde aTi e a i-esima linha de A.
1.6.3
Ajuste de Curvas
O problema geral de ajuste de curvas pode ser colocado como segue. Ajuste a curva
dada pela funcao
g(t) = x1 g1 (t) + x2 g2 (t) + . . . + xn gn (t)
aos dados (t1 , y1 ), . . . , (tm , ym ), ou seja, gostaramos que:

g(t1 )
g(t2 )
..
.
g(tm )
= y1
= y2
.
= ..
= ym
onde gi (t) : R R, i = 1, . . . , n, sao funcoes quaisquer mas conhecidas; tais funcoes

sao ditas bases. Note que as variaveis do problema sao x1 , x2 , . . . , xn e tipicamente
m >> n.
Podemos colocar o problema de ajuste de curvas como um problema mnimos quadrados, o qual assume a forma:
Minimize f =
=
m
P
i=1
m
P
i=1
[g(ti ) yi ]2
[x1 g1 (t) + x2 g2 (t) + . . . + xn gn (t) yi ]2
que, por sua vez, pode ser expresso em forma matricial:

Minimize kAx bk2
x Rn
onde:
A=
1.7
g1 (t1 )
g1 (t2 )
..
.
g2 (t1 ) . . . gn (t1 )
g2 (t2 ) . . . gn (t2 )
..
..
..
.
.
.
g1 (tm ) g2 (tm ) . . . gn (tm )
eb=
y1
y2
..
.
ym
Equaco
es N
ao-Lineares
Sistemas de equacoes nao-lineares aparecem em problemas de otimizacao, mas

tambem em equacoes diferenciais e suas formas discretizadas, jogos dinamicos e processos iterativos. Seja f (x) : Rn Rm uma funcao contnua e diferenciavel, o problema
de interesse e definido como segue:
Encontre x tal que f (x ) = 0
Alguns algoritmos transformam este problema em um problema de otimizacao irrestrita:
Minimize kf (x)k2
x Rn
onde k k e uma norma vetorial.
10
1.7.1
Aplicac
ao em Sistemas de Controle
Dado um sistema de equacoes diferenciais, encontre um ponto de equilbrio. Considere o sistema de equacoes diferenciais abaixo:
x 1 = x1 1
x 2 = 2x1 x2 2 2x1 + 2x2 2 2 + sin(x2 2)
x 3 = 2x2 2 2
De uma forma mais compacta, o sistema acima pode ser escrito como x = f (x) onde
x = [x1 , x2 , x3 ]. Um problema tpico no domnio de controle nao linear e a busca de
um ponto de operacao ou de equilbrio, i.e., um ponto x tal que x = 0. O problema
de encontrar um ponto de equilbrio pode ser reduzido à solucao de um sistema de
equacoes n
ao lineares: f (x) = 0. Para o exemplo acima, um ponto de equilbrio e
x = [1, 2, x3 ].
1.8
Otimizac
ao N
ao-Linear sem Restrico
es
Otimizacao irrestrita (sem restricoes) constitui um bloco fundamental no desenvolvimento de software. Algoritmos para solucao de problemas de otimizacao restrita
fazem uso de otimizacao irrestrita. O problema de otimizacao irrestrita e definido
como:
Minimize f (x)
x Rn
Tipicamente procura-se um otimo local x , ou seja, x tal que f (x ) 6 f (x) para todo
x B(x , ) = {x : kxx k 6 } e > 0. Otimizacao global se preocupa em encontrar
um vetor x cujo valor f (x ) 6 f (x) para todo x Rn .
1.8.1
Problema Exemplo
Seja z = (x, y) a coordenada onde sera instalada uma central telefonica. Suponha
que as chamadas sao recebidas de um conjunto S = {z1 = (x1 , y1 ), . . . , zm = (xm , ym )}
de localidades com probabilidade uniforme. Seja Z a variavel randomica associada com
o local das chamadas. Portanto, Z assume valores do conjunto S tal que a probabilidade
de uma chamada vir do local k e P r{Z = zk } = 1/m, para k = 1, . . . , m.
Tarefa
Qual deve ser a localizacao da central telefonica para que E[kZ zk2 ] seja minimizado? Em outras palavras, desejamos minimizar o quadrado da distancia da central
telefonica aos locais das chamadas. E[f (Z)] e o valor esperado da funcao f (Z) da
variavel aleatoria Z 2 .
2
Quando a variavel aleat

oria Z assume valores zk {z1 , . . . , zm }, onde a probabilidade de Z = zk
ePconhecida e dada por pk , ent
ao o valor esperado de uma funcao f (Z) e definido por E[f (Z)] =
m
k=1 f (zk )pk .
11
Soluc
ao
Desenvolvendo a expressao do valor esperado, deduzimos:
2
E[kZ zk ] =
=
m
X
k=1
m
X
k=1
kzk zk2 P r{Z = zk }

k(xk , yk ) (x, y)k2 /m
Assim, o problema pode ser reduzido a um problema de mnimos quadrados, que e um

caso particular de otimizacao irrestrita.
Exemplo Num
erico
Para o problema de localizar a central telefonica na regiao dada pela Figura 1.2 que
indica os locais de possveis chamadas. A chamadas podem ser originadas dos seguintes
locais: z1 = (5, 12), z2 = (8, 8), z3 = (4, 9), z4 = (11, 2), z5 = (11, 4),
z6 = (2, 9), z7 = (5, 4), z8 = (15, 8), z9 = (17, 4), z10 = (12, 8), z11 = (17, 13),
z12 = (12, 13) e z13 = (7, 11).
Para a situacao onde as chamadas sao equiprovaveis, a localizacao otima da central
telefonica e (3.3846, 4.2308).
y
16
14
z1
z11
z12
z13
12
10
z2
z10
8
z3
z4
Central
z9
4
2
2
10 12 14 16 18
z5
z7
z8
z6
Figura 1.2: Instancia do problema de localizacao de central telefonica.
12
1.9
Otimizac
ao N
ao-Linear com Limites Superiores/Inferiores
Esta classe de problemas e dada pela formulacao a seguir:

Minimize f (x)
x Rn
Sujeito a : l 6 x 6 u
onde f e uma funcao contnua e diferenciavel.
Estes modelos tem aplicacoes em engenharia e na identificacao de modelos fsicos,
onde as grandezas e parametros sao sujeitos a limites. Alguns algoritmos de otimizacao
restrita resolvem sequencias de problemas com limites superiores e inferiores.
1.10
Otimizac
ao N
ao-Linear com Restrico
es
Os problemas de otimizacao nao-linear com restricoes consistem em minimizar uma

funcao nao-linear sujeita a restricoes nao-lineares. O problema geral e da forma:
Minimize f (x)
Sujeito a :
g(x) 6 0
h(x) = 0
onde f : Rn Rm , g : Rn Rp e h : Rn Rq sao funcoes contnuas e diferenciaveis.
Os modelos de otimizacao nao-linear restritos sao os mais gerais no domnio da otimizacao contnua.
1.10.1
Problema Exemplo
Desejamos instalar uma estacao de bombeiros de forma que a mesma esteja dentro
de um raio r (km) de um conjunto S = {(x1 , y1 ), . . . , (xp , yp )} de predios nas proximidades da unidade dos bombeiros. Alem disso, desejamos localiza-la o mais afastado
possvel de um conjunto T = {(
x1 , y1 ), . . . , (
xq , yq )} de estacoes de bombeiros vizinhas.
Tarefa
Formule este problema em linguagem de otimizacao.
Formulac
ao
Maximize d
Sujeito a :
k(x, y) (xj , yj )k 6 r
k(x, y) (
xj , yj )k > d
j = 1, . . . , p
j = 1, . . . , q
13
Observacoes:
d 6 min{k(x, y) (
xj , yj )k : j = 1, . . . , q}
r > max{k(x, y) (xj , yj )k : j = 1, . . . , p}
1.11
Programac
ao Semi-Definida
Esta classe compreende problemas com funcao objetivo linear e restricoes envolvendo matrizes e suas propriedades (tais como matriz positiva definida e semi-definida).
Tipicamente, uma matriz Fi (x) e definida como uma funcao afim com parametros dados
pelo vetor x. Mais precisamente:
Fi (x) = Fi,0 + Fi,1 x1 + . . . + Fi,n xn
T
onde Fij Rnn e uma matriz simetrica, ou seja, Fi,j = Fi,j
. Os problemas sao
expressos na forma a seguir:
Minimize cT x
Sujeito a :
Fi (x) > 0
i = 1, . . . , m
onde Fi (x) > 0 significa que a matriz Fi (x) deve ser positiva semi-definida (linear
matrix inequality).
1.11.1
Exemplo
Considere o seguinte sistema dinamico

x = Ax
Uma condicao suficiente para que o sistema convirja para x = 0 à medida que t ,
a partir de qualquer estado inicial x(0), e a existencia de uma funcao V (x) com as
seguintes propriedades:
V (x) e positiva definida, ou seja, para todo x 6= 0 tem-se V (x) > 0 e V (0) = 0
V (x) < 0 para x 6= 0.
Tal funcao e conhecida como funcao Lyapunov.
Como encontrar tal func
ao?
Seja V (x) = xT P x para P > 0. Neste caso V (x) satisfaz a condicao de ser positiva
definida. Como fazer para satisfazer a segunda condicao?
d
V
dt
d T
(x P x)
dt
= x T P x + xT P x
= (xT AT )P x + xT P (Ax)
= xT (AT P + P A)x
14
Entao a condicao V < 0 e equivalente a AT P + P A < 0. O problema de encontrar uma

funcao Lyapunov, quando esta existe, pode ser colocado em programacao matematica:
Minimize cT x
Sujeito a :
P (x) > 0
AT P (x) + P (x)A < 0
onde P (x) gera o espaco de matrizes simetricas.
1.12
Refer
encias
A modelagem em programacao matematica e tanto arte quanto ciencia. Pode-se

dizer que um problema bem-formulado pode ser resolvido eficientemente com algoritmos de proposito geral. A habilidade de modelar depende da experiencia, intuicao e
conhecimento dos algoritmos que podem ser empregados para resolucao. Na pratica a
busca de um modelo e um processo iterativo: cada modelo e avaliado numericamente
e a qualidade da aproximacao e medida; o modelo e revisado e o processo se repete. O
livro de Williams [43] e recomendado como texto introdutorio para modelagem em programacao matematica. A Internet tambem oferece um volume fantastico de referencias.
Dentre elas, recomendamos:
Optimization Tree: http://www-fp.mcs.anl.gov/otc/Guide/OptWeb/
OR Notes: http://www.brunel.ac.uk/depts/ma/research/jeb/or/contents.html
1.13
Exerccios
EX 1.1 (Produ
c
ao Industrial Otimizada): Uma companhia manufatura dois produtos (x e y) usando duas maquinas (M1 e M2 ). Para produzir uma unidade do
item x, sao necessarios 50 minutos de processamento na maquina M1 e 30 minutos de processamento na maquina M2 . Para produzir cada unidade do item
y, sao necessarios 24 minutos de processamento na maquina M1 e 33 minutos
de processamento na maquina M2 . No incio da semana, tem-se 30 unidades de
x e 90 unidades de y em estoque. O tempo disponvel para processamento na
maquina M1 durante a semana e de 40 horas, ja para a maquina M2 o tempo
disponvel e de 35 horas. A demanda por item x na semana corrente esta prevista
em 75 unidades, enquanto que para o item y a estimativa e de 95 unidades. O
objetivo da empresa e maximizar a quantidade agregada de itens x e y no fim da
semana.
Tarefa: formule em programacao linear o problema de decidir quantas unidades
de cada item devem ser produzidas.
EX 1.2 (Mnimos Quadrados): Formule os problemas a seguir como problemas de
mnimos quadrados. Para cada problema forneca a matriz A e o vetor b tal que
15
o problema possa ser expresso como:

Minimize kAx bk2
x
Tarefas
a) Minimize xT x + kBx dk2 , onde B Rpn , e d Rp e x Rn .
b) Minimize kBx dk2 + kF x gk2 , onde B Rpn , d Rp , F Rqn , g Rq

e x Rn .
c) Minimize kBx dk2 + 2kF x gk2 , onde B Rpn , d Rp , F Rqn ,

g Rq e x Rn .
d) Minimize x21 + 2x22 + 3x23 + (x1 x2 + x3 1)2 + (x1 4x2 + 2)2 (Sugestao:
expresse os tres termos principais na forma procurada, depois utilize os
resultados obtidos em (a), (b) e (c).)
EX 1.3 (Projeto de Latas): O preco do cm2 de latao e R$ 2,00. Deseja-se produzir
latas cilndricas sem tampa, com volume igual ou superior a 500 cm3 e de custo
mais baixo possvel. Formule em programacao matematica (otimizacao nao-linear
com restricoes) o problema de dimensionar a lata, ou seja, de encontrar a altura
possvel formular este problema em programacao
h (cm) e raio r (cm) da lata. E
nao-linear irrestrita?
EX 1.4 (Rede de Abastecimento de Agua):

Considere uma regiao onde serao
instaladas M caixas de agua, sendo a caixa m localizada na posicao (xm , ym )
conhecida. Suponha que um tubo mestre devera ser instalado horizontalmente,
ou seja, ao longo da linha yt , e que tubos verticais secundarios serao construdos
para conectar o tubo mestre a cada caixa. Desejamos encontrar a altura para
instalar o tubo mestre (valor de yt ) tal que o comprimento total da rede de
abastecimento seja o menor possvel. Formule este problema em programacao
possvel expressar tal problema em programacao linear?
matematica. E
EX 1.5 (The Queens Problem): Considere um tabuleiro de xadrez (88 posicoes).
Deseja-se colocar o maior n
umero possvel de rainhas no tabuleiro, de maneira que
nenhuma delas possa ser eliminada por nenhuma das demais rainhas. Formule
o problema de encontrar tais posicoes em programacao matematica (otimizacao
linear inteira).
EX 1.6 (Rastreamento de Objetos): Dois radares (R1 e R2 ) estao localizados nas
posicoes z1 = (x1 , y1 ) e z2 = (x2 , y2 ) respectivamente. Cada radar informa o centro de rastreamento e controle da respectiva distancia a um objeto desconhecido
z = (x, y). Sendo d1 a distancia de R1 a z e d2 a distancia de R2 a z, formule o
problema de calcular as coordenadas z = (x, y) do objeto desconhecido.
(Sugestao: expresse o problema em duas equacoes nao-lineares.)
EX 1.7 (Escalonamento de Tarefas): Um conjunto de n tarefas devem ser processadas em uma maquina capaz de operar uma tarefa de cada vez. Cada tarefa
16
j consome pj unidades de tempo na maquina. Um grafo direcionado acclico

G = (V, E), com V = {1, . . . , n}, estabelece uma ordem parcial de precedencia
para execucao na maquina, isto e, se existe um caminho i,j de i para j em G,
entao a tarefa i deve ser processada antes da tarefa j. Dados pesos nao negativos
wj , j = 1, . . . , n, em que ordem as tarefas devem ser processadas na maquina de
maneira a minimizar a soma dos instantes de incio de processamento das tarefas
(sj e o instante em que a tarefa j inicia processamento na maquina) ponderados
pelos pesos (wj ), respeitando as restricoes de precedencia? Formule o problema
em programacao linear inteira mista (com variaveis discretas e contnuas).
EX 1.8: Considere a formulacao do problema de instalacao de depositos, como visto
anteriormente:
Minimize
m
n P
P
cij xij +
i=1 j=1
Sujeito a :
n
P
i=1
m
P
m
P
f j yj
j=1
di xij 6 uj yj
j = 1, . . . , m
xij
i = 1, . . . , n
= 1
j=1
xij B
yj B
i = 1, . . . , n
j = 1, . . . , m
j = 1, . . . , m
Existem outras formulacoes para o problema? Quais sao as vantagens e desvantagens das formulacoes alternativas?
EX 1.9: Para problemas de otimizacao quadratica cuja matriz Q e simetrica, o Prof.
Kunz desenvolveu um algoritmo capaz de encontrar uma solucao global otima.
Suponha que voce tem que resolver um problema de otimizacao quadratica onde
Q nao e simetrica. Sera que e possvel resolver o problema em questao com o
algoritmo do Prof. Kunz?
Captulo 2
Minimiza
c
ao de Funco
es com o
M
etodo de Descenso
Este captulo se concentra nas propriedades gerais dos problemas de otimizacao
nao-linear sem restricoes e no algoritmo de descenso. Sao introduzidos conceitos de
otimo local e otimo global, bem como condicoes necessarias e condicoes suficientes
para que uma solucao candidata seja um otimo local. O algoritmo de descenso e as
condicoes para convergencia global a partir de um ponto qualquer para um otimo local
sao apresentados na seq
uencia. Por fim analisa-se a taxa de convergencia do algoritmo
de descenso.
2.1
Problemas de Interesse
Consideraremos primeiramente o problema de minimizacao irrestrita:

P1 :
Minimize f (x)
x Rn
onde f : Rn R
Tambem investigaremos a solucao de equacoes nao-lineares, mas com maior enfase no

proximo captulo. Este problema pode ser formulado em programacao matematica
como:
P2 : Encontre x Rn , tal que c(x) = 0
onde c : Rn Rm
Vamos estudar conceitos basicos em otimizacao, apresentando os algoritmos de descenso
e de Newton. Os dois algoritmos podem, em princpio, ser utilizados para resolver P1
e P2 , todavia apresentam propriedades distintas. Assumiremos que as funcoes f e
c sao contnuas, diferenciaveis e algumas vezes duas vezes diferenciaveis. Aqui, nos
concentramos no algoritmo de descenso para solucao de P1 .
18
2. Minimizacao de Funcoes com o Metodo de Descenso
2.2
Fundamentos de Otimizac
ao Irrestrita
2.2.1
O que
e uma soluc
ao para P1 ?
Em geral, gostaramos de encontrar uma solucao otima global, ou seja, um ponto x

tal que f (x ) 6 f (x) para todo x Rn . Tipicamente, e extremamente difcil encontrar
uma solucao global porque o conhecimento de f e usualmente local. A grande maioria
dos algoritmos e capaz de encontrar uma solucao otima para uma certa vizinhanca de
f . Formalmente, dizemos que x e um otimo local se existe uma vizinhanca N de x
tal que f (x ) 6 f (x) para todo x N , onde N = N (x , ) = {x Rn : kx x k 6 }
para algum > 0 e qualquer norma vetorial kk. Um ponto x e um otimo local estrito
se f (x ) < f (x) para todo x N , x 6= x .
Exemplo
Considere a funcao f (x) = x4 cos(1/x) + 2x4 para x 6= 0 e f (0) = 0. Note que f e
contnua e duas vezes diferenciavel. O ponto x = 0 e um otimo global, mas existe um
n
umero infinito de otimos locais.
f (x)
x*
Figura 2.1: Exemplo de funcao com um n

umero infinito de otimos locais
2.2.2
Reconhecendo Um Mnimo Local
A partir das definicoes acima, parece que a u

nica maneira de se identificar um
mnimo local e atraves da comparacao com os pontos na vizinhanca. Quando a funcao
e suave, entretanto, ha formas mais eficientes e praticas de se identificar um mnimo
local.
1) Expans
ao de Taylor de Primeira Ordem
19
Assumindo que a funcao f e diferenciavel, a expansao de Taylor consiste em

aproximar f em torno de um ponto x Rn como:
f (x + x) f (x) + f (x)T x + O(kxk2 ).
onde f (x)T = [f (x)/x1 , . . . , f (x)/xn ] e o gradiente de f e O(kxk2 ) e o
resduo (erro da aproximacao). Para pequenos passos (kxk pequeno) podemos
desprezar o resduo, resultando na seguinte aproximacao:
f (x + x) f (x) + f (x)T x
Teorema 2.1 (Condicao necess
aria de primeira ordem) Se x e um otimo local
e f e uma funcao continuamente diferenci
avel em uma vizinhanca aberta, ent
ao
f (x ) = 0.
Prova. Vamos supor o contrario. Seja x = f (x ) para algum > 0
pequeno, tal que x = (x + x) esteja na vizinhanca de x . Portanto, f (x) =
f (x + x) = f (x ) + f (x )T [f (x )] < f (x ). Isto configura uma contradicao.
2) Expans
ao de Taylor de Segunda Ordem
Se f e duas vezes diferenciavel, podemos utilizar uma aproximacao de segunda
ordem como segue:
1
f (x + x) f (x) + f (x)T x + xT 2 f (x)x + O(kxk3 )
2
onde a matriz 2 f (x) e denominada de Hessiana, sendo sua entrada i, j definida
por 2 f (x)/xi xj = [f (x)/xj ]/xi . Para um pequeno passo x, o resduo
pode ser desprezado resultando na expansao abaixo:
1
f (x + x) f (x) + f (x)T x + xT 2 f (x)x
2
Teorema 2.2 (Condicao necess
aria de segunda ordem) Se x e um otimo local
2
de f e f e contnua em uma vizinhanca aberta de x , ent
ao f (x ) = 0 e
2 f (x ) e positiva semi-definida.
Prova. Pelo Teorema 2.1, f (x ) = 0. Pela aproximacao de Taylor de segunda
ordem, podemos dizer que f (x + x) = f (x ) + 21 xT 2 f (x )x. Suponha que
2 f (x ) nao e positiva semi-definida, o que implica que existe x pequeno tal que
xT 2 f (x )x < 0. Portanto, f (x + x) = f (x ) + 21 xT 2 f (x )x < f (x )
e, conseq
uentemente, x nao pode ser um otimo local de f .
Teorema 2.3 (Condicao suficiente de segunda ordem) Suponha que 2 f (x) seja
contnua em uma vizinhanca de x , f (x ) = 0 e 2 f (x ) seja positiva definida.
Entao x e um
otimo local estrito de f .
20

Prova. Seja x = x +x um ponto na vizinhanca de x . Para x suficientemente
pequeno, f (x) = f (x +x) = f (x )+f (x )T x+ 21 xT 2 f (x )x = f (x )+
1
xT 2 f (x )x > f (x ), porque f (x ) = 0 e 2 f (x ) e positiva definida. A
2
u
ltima desigualdade implica que todo x na vizinhanca de x , x Rn tal que
kx x k 6 para > 0 pequeno o suficiente, induz f (x) > f (x ).
Observa
c
ao: as condicoes suficientes de segunda ordem nao sao necessarias, ou
seja, uma solucao pode ser um mnimo estrito e mesmo assim nao passar no teste
de suficiencia. Um exemplo simples e a funcao f (x) = x4 . Para esta funcao, o
ponto x = 0 e um mnimo local estrito cuja Hessiana nao e positiva definida.
3) Fun
c
oes Convexas
Uma funcao f : Rn R e convexa se para todo x, y Rn e (0, 1) tem-se:
f (x + (1 )y) 6 f (x) + (1 )f (y)
Se f e uma funcao duas vezes diferenciavel, entao f e convexa se 2 f (x) e positiva
semi-definita para todo x Rn . Uma funcao f e concava se f e convexa.
Teorema 2.4 Se f e convexa, ent
ao todo o mnimo local e tambem um mnimo
global.
Prova. Seja x um mnimo local e suponha, por absurdo, que x nao seja um
mnimo global. Seja x um mnimo global e considere o segmento de reta que une
os pontos x e x, ou seja,
x =
x + (1 )x onde (0, 1].
Por convexidade de f , temos que f (x) 6 f (
x) + (1 )f (x ) < f (x ) + (1
)f (x ) = f (x ). Qualquer vizinhanca N de x contem um pedaco do segmento
de reta acima definido e, portanto, sempre existira um x em N que satisfaca a
desigualdade f (x) < f (x ). Conclui-se que x nao e um otimo local.
2.3
O Algoritmo de Descenso
A grande maioria dos algoritmos de otimizacao sao iterativos. Dado um ponto x0 ,

eles produzem uma seq
uencia de pontos x0 , x1 , x2 , . . . , xT = {xk } convergente para um
mnimo local. Tipicamente, um processo iterativo consiste em obter uma nova solucao
a partir da solucao anterior:
xk+1 = Gk (xk )
para k = 0, . . . , T 1
Para que a seq

uencia convirja para um otimo local, os algoritmos induzem uma reducao
(nao necessariamente a cada iteracao) da funcao objetivo, ou seja, f (xk ) < f (xkm ).
21
2.3.1
O Algoritmo de Descenso em Detalhes
O algoritmo de descenso consiste em escolher uma direcao pk , a cada iteracao k, e

fazer uma busca ao longo desta direcao a partir do iterando xk . Em outras palavras, o
algoritmo resolve o seguinte problema de uma dimensao:
Minimize (k ) = f (xk + k pk )
k > 0
(2.1)
onde k e o passo a ser dado na direcao pk de forma que o proximo iterando passa a
ser xk+1 = xk + k pk .
A solucao exata de (2.1) induziria o benefcio maximo da direcao pk ; todavia, a minimizacao exata e cara computacionalmente e nao necessaria. Em vez disso, o metodo
de descenso gera um n
umero limitado de passos ate encontrar um passo k que aproxima o mnimo de (2.1). Um novo ponto e gerado, xk+1 = xk + k pk , uma nova direcao
pk+1 e encontrada e o processo se repete.
2.3.2
Direc
ao de Busca
A direcao de maior descenso, f (xk ), e a opcao obvia para a busca direcional.

A direcao de maior descenso produz a maior taxa de reducao no valor de f dentre
todas as possveis direcoes. O metodo de maior descenso (steepest descent) executa
uma busca ao longo da direcao pk = f (xk ) a cada iteracao. O passo k pode ser
escolhido de varias formas. Uma vantagem do metodo de descenso e que ele requer
apenas o gradiente, f (xk ), nao necessitando da Hessiana. Todavia, ele pode se tornar
excessivamente lento em problemas difceis.
A Figura 2.2 ilustra as curvas de nvel (contour curves) de uma funcao f : R2 R
em torno de um otimo local x . O gradiente de f em um ponto x e ortogonal à curva
de nvel que passa pelo ponto x.
Curva de nvel
x2
f (x1 , x2 ) = z2
f (x)
f (x1 , x2 ) = z1
x1
Figura 2.2: Ilustracao do gradiente de uma funcao, f (xk ), que assume a direcao
ortogonal à curva de nvel que passa por xk .
22
2.3.3
Encontrando a Direc
ao de Busca
O processo iterativo do metodo de descenso e dado por: xk+1 = xk + k pk , onde

k e um escalar positivo (chamado de passo) e pk e um vetor (chamado de direcao de
descenso). O sucesso do metodo depende da escolha adequada da direcao e do passo. O
algoritmo exige que pk seja uma direcao de descenso, ou seja, f (xk )T pk < 0. Outros
algoritmos utilizam uma direcao da forma pk = Bk1 f (xk ), onde Bk e uma matriz
simetrica nao-singular. Note que quando Bk e positiva definida, pk define uma direcao
de descenso.
2.3.4
Encontrando o Passo
Durante a computacao do passo k , deparamo-nos com um conflito. Por um lado,

desejamos escolher k que produza uma reducao substancial em f mas, por outro
lado, nao desejamos gastar muito esforco computacional durante a escolha. O passo
ideal minimizaria a funcao (), definida por: () = f (xk + pk ), onde > 0.
Encontrar um minimizador local pode ser muito caro, necessitando varias computacoes
de f e f . Metodos praticos executam uma busca inexata, procurando obter uma
reducao satisfatoria de f a um custo mnimo. Tipicamente, os metodos aproximados
estabelecem condicoes para um decrescimo satisfatorio.
Condi
c
oes para Passo Satisfat
orio
A condicao de Armijo e definida pela seguinte desigualdade:
f (xk + k pk ) 6 f (xk ) + c1 k f (xk )T pk
(2.2)
onde c1 (0, 1). Em outras palavras, a condicao estabelece que a reducao em f deve
ser proporcional ao passo k e à derivada direcional f (xk )T pk . Seja l() = f (xk ) +
c1 f (xk )T pk , entao a condicao de Armijo pode ser expressa como f (xk + pk ) 6 l().
Note que a funcao l() e uma funcao decrescente e linear em . A Figura 2.3 ilustra a
condicao de Armijo (2.2).
A condicao de Armijo nao e, entretanto, suficiente para garantir progresso razoavel
e satisfatorio do algoritmo, pois a condicao pode ser satisfeita por passos extremamente pequenos. Para evitar passos muito pequenos, uma condicao de curvatura e
introduzida, a qual exige que:
f (xk + k pk )T pk > c2 f (xk )T pk ,
(2.3)
para alguma constante c2 (c1 , 1). Note que o lado esquerdo e simplesmente
d()/d = ()1 , assim a condicao de curvatura garante que a taxa de decrescimento () seja c2 vezes o gradiente (0). Em outras palavras, () deve ser menos
negativo do que (0). Isso faz sentido: se (0) e bastante negativo, entao temos uma
indicacao de que podemos reduzir f substancialmente ao longo da direcao escolhida;
caso contrario, se (0) e pouco negativo, temos um sinal de que nao podemos reduzir
f substancialmente. Passos satisfatorios que satisfazem simultaneamente as condicoes
de Armijo (2.2) e de curvatura (2.3) sao ilustrados na Figura 2.4
1
Use a regra da cadeia para verificar esta afirmacao: dz(y(x))/dx = (dz/dy)(dy/dx), onde z(y) e
uma funcao de y e y(x) e uma funcao de x.
23
() = f (xk + pk )
l()
Passo satisfatorio
Passo satisfatorio
Figura 2.3: Ilustracao de passo satisfatorio.
() = f (xk + pk )
c2 f (xk )T pk
l()
Satisfaz Armijo
Satisfaz Armijo
Satisfaz Curvatura
Satisfaz Curvatura
Figura 2.4: Ilustracao das condicoes de Armijo e de curvatura.
24
As condicoes suficientes para reducao da funcao objetivo (2.2) e de curvatura (2.3)

sao conhecidas como condicoes de Wolfe:

f (xk + k pk )
6 f (xk ) + c1 k f (xk )T pk
(2.4)
f (xk + k pk )T pk > c2 f (xk )T pk
onde 0 < c1 < c2 < 1. Equivalentemente, as condicoes de Wolfe podem ser expressas
como:

(k ) 6 (0) + c1 k (0)
(2.5)
(k ) > c2 (0)
Nao e difcil provar que existem passos k que satisfazem as condicoes de Wolfe se a
funcao f e suave e possui um limite inferior.
Lema 2.1 Seja f : Rn R uma funcao continuamente diferenci

avel. Seja pk uma
direcao de descenso para o ponto xk , e assuma que f e limitada inferiormente ao longo
do raio {xk + pk : > 0}. Entao, se 0 < c1 < c2 < 1, existem intervalos para os
passos que satisfazem as condicoes de Wolfe.
Prova. Uma vez que () = f (xk + pk ) e limitada inferiormente para todo > 0 e
uma vez que 0 < c1 < c2 < 1, a linha l() = f (xk ) + c1 f (xk )T pk deve interceptar a
curva () pelo menos uma vez. Seja > 0 o menor valor tal que l() intercepta
(), ou seja,
f (xk + pk ) = f (xk ) + c1 fkT pk
(2.6)
A condicao de Armijo e claramente satisfeita por todos os passos menores que .

A partir do Teorema do Valor Medio2 , deve existir (0, ) tal que3
f (xk + pk ) f (xk ) = f (xk + pk )T pk
(2.7)
Combinando (2.6) e (2.7), obtemos

f (xk + pk )T pk = c1 fkT pk > c2 fkT pk
(2.8)
uma vez que c1 < c2 e fkT pk < 0. Assim, satisfaz as condicoes de Wolfe, e
as desigualdades (2.4) sao estritas. Portanto, de acordo com a propriedade de f ser
suave, deve existir um intervalo em torno de para o qual as condicoes de Wolfe sao
satisfeitas.
2.3.5
Reduc
ao Suficiente e Retrocesso
Utilizando-se o chamado metodo de retrocesso, podemos sistematicamente encontrar um passo k que satisfaz as condicoes de Wolfe (2.4) sem considerar a segunda
condicao.
O teorema do valor medio diz que f (y) f (x) = f (z)T (y x) sendo z um vetor que pertence
ao segmento x y.
3
Pelo Teorema do Valor Medio, faca y = xk + pk , x = xk e observe que y x = pk e
z = xk + pk .
2
25
Procedimento
Escolha > 0 (tipicamente = 1)
Escolha , c1 (0, 1)
Faca
Repita ate que f (xk + pk ) 6 f (xk ) + c1 f (xk )T pk
Faca
Fim-repita
Termine com k
O procedimento acima encontra um passo satisfatorio (i.e., que satisfaz as condicoes
de Wolfe) apos um n
umero finito de iteracoes pois k eventualmente se torna pequeno
o suficiente para satisfazer a condicao de Armijo.
2.3.6
Converg
encia do M
etodo de Descenso
Para que o algoritmo de descenso obtenha convergencia global4 devemos escolher

nao apenas direcoes apropriadas, mas tambem passos adequados. O teorema a seguir
descreve condicoes suficientes para que o metodo de descenso convirja, a partir de
qualquer ponto inicial, para um mnimo local.
Teorema 2.5 Considere uma iteracao (2.1), onde pk e uma direcao de descenso e k
satisfaz as condicoes de Wolfe (2.4). Suponha que f e limitada por baixo em Rn e
que f e continuamente diferenci
avel em um conjunto aberto N que contem o conjunto
L = {x : f (x) 6 f (x0 )}, onde x0 e o ponto inicial da iteracao. Assuma ainda que f
e Lipschitz contnua em N , i.e., existe uma constante L > 0 tal que
kf (x) f (
x)k 6 Lkx xk, para todo x, x N .
(2.9)
Entao
X
k>0
cos(k )2 kfk k2 < .
(2.10)
Prova. A partir da iteracao xk+1 = xk + k pk e a segunda condicao de Wolfe (2.4),

f (xk + k pk )T pk > c2 f (xk )T pk , temos que
(fk+1 fk )T pk > (c2 1)fkT pk
enquanto que a condicao Lipschitz e a desigualdade de Schwartz5 implicam
(fk+1 fk )T pk 6
6
6
6
4
|(fk+1 fk )T pk |
kfk+1 fk kkpk k
Lkxk + k pk xk kkpk k
k Lkpk k2 .
Por convergencia global entendemos a propriedade do algoritmo de convergir a partir de qualquer

ponto inicial x0 para um
otimo local x
5
Para k k = k k2 , |xT y| 6 kxkkyk
26
Combinando as duas relacoes acima, obtemos:

k >
c2 1 fkT pk
.
L kpk k2
Substituindo esta desigualdade na primeira condicao de Wolfe, verificamos

fk+1 6 fk c1
1 c2 (fkT pk )2
.
L
kpk k2
Fazendo k ser o angulo entre pk e a direcao de maior descenso fk , verifica-se que

cos k =
fkT pk
.
kfk kkpk k
Fazendo c = c1 (1 c2 )/L e combinando as duas u

ltimas expressoes obtemos
fk+1 6 fk c cos2 k kfk k2 .
Somando a expressao acima para todos os ndices menores ou iguais a k, obtemos
fk+1 6 f0 c
k
X
j=0
cos2 j kfj k2 .
Uma vez que f e limitada inferiormente, sabemos que f0 fk+1 e uma constante positiva,
para todo k. Tomando o limite da expressao acima, conclumos que
X
j=0
cos2 j kfj k2 < .
A conseq
uencia do Teorema 2.5 e a convergencia global do metodo de descenso,
visto que este sempre escolhe como direcao de descenso um vetor pk com angulo k que
se afasta de 900 . Assim cos k > > 0 para todo k. Conseq
uentemente lim kfk k = 0.
k
Em outras palavras, a norma do gradiente kfk k converge para zero se a direcao de

descenso nao e muito proxima da ortogonalidade e as condicoes de Wolfe sao satisfeitas.
2.3.7
Taxa de Converg
encia do M
etodo de Descenso Ingreme
Aqui vamos considerar a taxa de convergencia de metodos de descenso em regioes

proximas de um otimo local. Uma funcao continuamente diferenciavel f pode ser
aproximada em torno de um otimo local x nao singular6 como uma funcao quadratica
1
f (x) = f (x ) + (x x )T 2 f (x )(x x )
2
6
x e dito
otimo local nao singular se as condicoes suficientes de otimalidade local de segunda
ordem s
ao satisfeitas.
27
desde que kx x k seja pequeno. Podemos assumir sem perda de generalidade que
x = 0 e f (x ) = 07 . Assim a aproximacao quadratica de f fica
1
f (x) = xT Qx, f (x) = Qx, 2 f (x) = Q.
2
O metodo de descenso ngreme ou de descenso maximo (steepest descent) pode ser
colocado na forma:
xk+1 = xk k f (xk ) = (I k Q)xk
o que nos leva a
kxk+1 k2 = xTk (I k Q)2 xk .
Uma vez que xT (I k Q)2 x 6 M ax{ ((I k Q)2 )}kxk2 , onde (A) denota o
conjunto de autovalores da matriz A, conclumos que:
kxk+1 k2 6 M ax{ ((I k Q)2 )}kxk k2 .
Os autovalores de (I k Q)2 sao iguais a (1 k i )2 , onde i sao os autovalores de Q.
Dessa forma podemos deduzir que
M ax{ ((I k Q)2 )} = M ax{(1 k m)2 , (1 k M )2 }
onde m (M ) e o menor (maior) autovalor de Q. Segue entao que para xk 6= 0
kxk+1 k
6 M ax{|1 k m|, |1 k M |}.
kxk k
(2.11)
Se |1 k m| < |1 k M | entao a desigualdade (2.11) e satisfeita como uma equacao

e xk e proporcional ao autovetor correspondente a m. Se |1 k m| > |1 k M | entao
a desigualdade (2.11) e satisfeita como uma equacao e xk e proporcional ao autovetor
correspondente a M . O passo k que minimiza o limite dado em (2.11) e
=
2
M +m
o que implica em
kxk+1 k
M m
6
,
kxk k
M +m
(2.12)
que e a melhor taxa de convergencia do steepest descent com passo constante. De

acordo com (2.12), quanto menor for a diferenca entre o maior e menor autovalor de
Q, mais rapida e a convergencia. Nas situacoes em que as curvas de nvel em torno de
x sao alongadas, i.e., quando a diferenca entre o maior e menor autovalor e grande, a
taxa de convergencia tende a diminuir.
7
Basta fazer uma mudanca de variavel x

= x x deslizando o ponto x para a origem do sistema
de coordenadas resultante; e adicionar a constante f (x ) à funcao objetivo.
28
2.4
Refer
encias
Este captulo foi produzido a partir dos textos de Bertsekas [9] e Nocedal e Wright
[39]. O primeiro texto e bastante completo e trata da parte tecnica em profundidade,
alem de apresentar varias aplicacoes e problemas com inspiracao fsica. O segundo texto
e mais introdutorio e recomendado para o leitor iniciante que deseja se aprofundar em
algoritmos de otimizacao nao-linear. Outras referencias com boa cobertura da teoria e
algoritmos de otimizacao nao-linear sao os livros de Gill et al. [22] e Bazaraa et al. [8].
2.5
Exerccios
EX 2.1: Calcule o gradiente f (x) e a matriz Hessiana 2 f (x) da funcao f (x) =

100(x2 x21 )2 + (1 x1 )2 . Mostre que o ponto x = (1, 1) e o u
nico otimo global.
O ponto x satisfaz as condicoes necessarias para ser um otimo local?

EX 2.2 Mostre que a funcao f (x) = 8x1 + 12x2 + x21 2x22 possui apenas um ponto
estacionario e que este nao define um mnimo nem um maximo de f .
EX 2.3: Seja c Rn um vetor e A Rnn uma matriz simetrica. Calcule o gradiente
e a matriz Hessiana de f1 (x) = cT x e de f2 (x) = xT Ax/2.
EX 2.4: Define-se uma funcao f (x) como convexa se, e somente se, f (x + (1 )y)
6 f (x) + (1)f (y) para todo x, y e [0, 1]. Sejam f (x) e g(x) duas funcoes
convexas. Responda às seguintes questoes:
a) h(x) = f (x) + g(x) e convexa?
b) h(x) = f (x) g(x) e convexa?
c) h(x) = f (x)2 e convexa?

p
d) h(x) = f (x) e convexa, assumindo que f (x) > 0?
EX 2.5: Seja f (x) uma funcao quadratica: f (x) = 12 xT Qx bT x, onde Q e simetrica

e positiva definida. O algoritmo de descenso pode ser descrito como segue:
Seja x0 Rn o ponto inicial, k = 0;
Enquanto (kf (xk )k > ) e (k < itbound) faca
pk = f (xk )
xk+1 = xk + k pk , onde k = argmin {f (xk + pk ) : > 0}
k =k+1
Fim
Implemente esse algoritmo em Matlab. Sua funcao script deve receber como
parametros de entrada Q, b, x0 e gerar a seq
uencia {xk }. Use como tolerancia
6
= 10 e itbound = 100. Rode experimentos para exemplos onde n = 2 e b = 0,
com as seguintes matrizes:
a) uma matriz Q cujo condition number (Q) = 10, e
29
b) uma matriz Q para a qual (Q) = 100.

Para construir a matriz Q tome D = [0.1 0; 0 1], escolha uma matriz randomica
e ortogonal P (P T P = I), e finalmente faca Q = P T DP e x0 = P [1; 0.1]; para a
parte (b) faca o mesmo, mas utilize 0.01 em vez de 0.1 nos dois lugares.
Apresente os resultados em tabelas bem como em figuras, juntamente com os
dados utilizados nos experimentos (Q, x0 , etc.).
EX 2.6: Para () = f (xk +pk ), mostre que () = f (xk +pk )T pk sendo Q = QT .
EX 2.7: Mostre que xT (I k Q)2 x 6 max{ ((I k Q)2 )}kxk2 sendo Q = QT .
EX 2.8: Mostre que os autovalores de (I k Q)2 sao iguais a (1 k i )2 , onde i sao
os autovalores de Q.
EX 2.9: Para M > m > 0, encontre a solucao otima do problema:
min
max{|1 m|, |1 M |}
>0
EX 2.10: Considere a seguinte forma do algoritmo de descenso. Dado um vetor com
solucao candidata xk , um passo inicial s e a direcao de descenso dk = f (xk ),
se a solucao xk+1 = xk + sdk nao produz um decrescimo suficiente de f , entao o
passo e reduzido ate que o decrescimo seja suficiente.
Dados escalares s, e > 0 com (0, 1) e (0, 1), definimos k = mk s
onde mk e o primeiro inteiro nao negativo para o qual:
f (xk ) f (xk + m sdk ) > m sf (xk )T dk ,
(2.13)
obtendo como proximo iterando o ponto xk+1 = xk + k dk . Em outras palavras,

os passos m s, m = 0, 1, . . . sao realizados ate que a desigualdade acima seja
satisfeita para m = mk . Portanto, nao estamos satisfeitos apenas com uma
melhora no valor da funcao objetivo; a reducao deve ser suficientemente grande
conforme a desigualdade (2.13).
Considere o problema de minimizar f (x, y) = 3x2 + y 4 . As tarefas a serem
realizadas sao:
a) Aplique uma iteracao do algoritmo de descenso acima delineado com o ponto
inicial x0 = (1, 2), s = 1, = 0.1 e = 0.5. Indique os valores de
x0 + m sd0 , f (x0 + m sd0 ), f (x0 ) f (x0 + m sd0 ) e m sf (x0 )T d0 .
b) Repita os passos de (a) usando s = 1, = 0.1 e = 0.1. Como que o custo

do novo iterando compara com aquele obtido em (a)? Comente sobre os
benefcios e perdas obtidos atraves da escolha de .
EX 2.11: Sao dadas duas tarefas:
a) Encontre o paraleleppido de volume unitario que tenha a menor area. Defina

x, y e z como as dimensoes do paraleleppido.
30
b) Dado um triangulo no plano, considere o problema de encontrar o ponto

cuja soma das distancias dos vertices do triangulo e mnima. Mostre que tal
ponto e um vertice do triangulo ou o ponto que forma um angulo de 120o
com cada lado do triangulo.
EX 2.12: Responda se as afirmacoes abaixo sao corretas.
i. Prof. Kunz afirma que nao existe mnimo local para a funcao f (x) =
ex
.
ex +ex
ii. Seja f : Rn R uma funcao contnua e diferenciavel. Prof. Kunz afirma

que se x Rn e um mnimo local, entao obrigatoriamente f (x) = 0.
iii. Seja f : Rn R uma funcao contnua e diferenciavel. Prof. Kunz afirma

que se existe um mnimo local, entao deve existir um mnimo global.
iv. Seja f : R R uma funcao contnua e duas vezes diferenciavel. Para um
certo x R, tem-se f (x) = 0 e f (x) > 0. Prof. Kunz afirma que x e um
mnimo local.
v. Seja f : R R uma funcao contnua e duas vezes diferenciavel tal que

f (x) > 0 para todo x R. Prof. Kunz afirma que se x e um mnimo local,
entao obrigatoriamente x tambem e um otimo global.
vi. Considere a funcao f (x) = ex /x2 . Dejamos encontrar o mnimo global de
f (x) na regiao R = [1, ). Prof. Kunz diz que se x R e um mnimo local
para f (x) na regiao R, entao x e obrigatoriamente um mnimo global.
vii. Sejam f (x, y) e g(x, y) duas funcoes contnuas e diferenciaveis. Prof. Kunz
afirma que se (
x, y) e um mnimo local de h(x, y) = f (x, y) + g(x, y) entao
(
x, y) e tambem um mnimo local para f e g.
Captulo 3
M
etodo de Newton: Solu
c
ao de
Equac
oes N
ao-Lineares e
Minimiza
c
ao de Funco
es
Este captulo trata do metodo de Newton e suas aplicacoes na solucao de sistemas de
equacoes nao-lineares e na minimizacao de funcoes. Sao apresentados os fundamentos
do algoritmo, exemplos e a prova de convergencia local em uma variavel. Para garantir
convergencia global do metodo quando aplicado à minimizacao de funcoes, aplica-se a
tecnica de regiao de confianca que e expandida e reduzida de forma que a aproximacao
quadratica da funcao seja satisfatoria dentro da regiao. A secao final do captulo
estende o metodo de Newton para o problema de minimizacao de funcoes sob restricoes
de igualdade. Esta secao pode ser omitida sem perda, pois a otimizacao de funcoes sob
restricoes sera topico de outros captulos.
3.1
Problemas de Interesse
Desenvolveremos metodos de Newton para a solucao de equacoes nao-lineares, formuladas como segue:
P2 : Encontre x Rn , tal que c(x) = 0
onde c : Rn Rm
Tambem investigaremos a solucao do problema de minimizacao irrestrita, ou seja:
P1 :
3.2
Minimize f (x)
x Rn
onde f : Rn R
O M
etodo de Newton em uma Vari
avel
Nesta secao nos concentramos na solucao do problema P2 em uma variavel, ou

seja, desejamos encontrar x R tal que c(x) = 0, onde c(x) : R R. O metodo,
como o proprio nome sugere, foi proposto por Isaac Newton. O metodo de Newton
32 3. Metodo de Newton: Solucao de Equacoes Nao-Lineares e Minimizacao de Funcoes
e um processo iterativo de fundamental importancia no desenvolvimento de muitos

algoritmos de programacao nao-linear. Seja xk a solucao candidata na iteracao k, sendo
a solucao inicial x0 definida arbitrariamente. A ideia basica do metodo de Newton esta
na aproximacao de c(x) com uma serie de Taylor de primeira ordem em torno do ponto
xk . Isso nos leva a seguinte aproximacao:
c(xk+1 ) = c(xk ) + c (xk )(xk+1 xk )
onde c (x) = dc/dx. O metodo calcula a proxima solucao candidata de forma a resolver
a aproximacao linear. Mais precisamente:
c(xk ) + c (xk )(xk+1 xk ) = 0
xk+1 = xk [c (xk )]1 c(xk )
Tipicamente, nao se espera que c(xk+1 ) = 0, mas que xk+1 defina uma solucao candidata
de melhor qualidade do que aquela definida por xk . Formalmente, espera-se que:
|xk+1 x | < |xk x | e
|c (xk+1 )| < |c (xk )|
onde x e uma solucao, i.e., c(x ) = 0.

Uma seq
uencia de solucoes x0 , x1 , . . . e dita convergente se limk |xk x | = 0.
M
etodo de Newton em uma vari
avel
Dado um x inicial e uma tolerancia > 0
Repita
Calcule c(x) e c (x)
Se |c(x)| < , retorne x
x x c(x)/c (x)
Ate que um n
umero maximo de iteracoes seja atingido
3.2.1
Exemplo
Procuramos um zero para a funcao c(x) = 10 2x + 4x2 . A Tabela 3.1 mostra

os resultados do metodo de Newton para x0 = 1000. A Figura 3.1 ilustra o processo
iterativo de Newton.
importante ressaltar que o metodo de Newton apresenta uma taxa de convergencia
E
quadratica. Isso significa, de maneira informal, que o n
umero de dgitos corretos na
solucao candidata duplica a cada iteracao. (O metodo de Newton apresenta convergencia Q-quadratica, ou seja, existe M R tal que kxk+1 x k/kxk x k2 6 M
para k suficientemente grande se x0 pertence à regiao de convergencia.) Entao qual e o
problema com o metodo de Newton? O metodo de Newton pode divergir. Isso ocorre
quando a solucao inicial nao e suficientemente proxima da solucao otima. O metodo
de Newton se comporta bem na regiao proxima da solucao, todavia nao apresenta
convergencia global como o metodo de descenso.
3. Metodo de Newton: Solucao de Equacoes Nao-Lineares e Minimizacao de Funcoes 33
k
0
1
2
3
4
5
6
7
8
9
10
11
12
13
14
3.3
Tabela 3.1: Iteracoes do metodo de

xk
c(xk )
1000 3.997990000000000e+006
500.1262815703926 9.994949375065696e+005
250.1907039194102 2.498711719029211e+005
125.2254781755631 6.246523058084260e+004
62.74799109896568 1.561374556562558e+004
31.51949620842356 3.900875572514462e+003
15.92572254113459 9.726631087465399e+002
8.169595939998821 2.406299994113832e+002
4.371580213652639 5.769969383029171e+001
2.621653885664322 1.224896861354670e+001
1.976061758605505 1.667156778081310e+000
1.855327609771498 5.830693877868853e-002
1.850787497645492 8.245047246546733e-005
1.850781059371159 1.658051473896194e-010
1.850781059358212
0
Newton.
|xk x |
9.981492189406418e+002
4.982755005110344e+002
2.483399228600520e+002
1.233746971162049e+002
6.089721003960747e+001
2.966871514906535e+001
1.407494148177637e+001
6.318814880640609e+000
2.520799154294426e+000
7.708728263061098e-001
1.252806992472928e-001
4.546550413286443e-003
6.438287280197130e-006
1.294742091317858e-011
2.220446049250313e-016
O M
etodo de Newton para Minimizac
ao em
uma Vari
avel
Nesta secao tratamos do problema de encontrar um valor x R tal que f (x) :

R R seja mnimo. O metodo inicia, como no caso anterior, com uma aproximacao
da funcao em torno da solucao candidata corrente, xk , mas desta vez utilizamos uma
aproximacao de segunda ordem1 .
1
f (xk+1 ) = f (xk ) + f (xk )[xk+1 xk ] + f (xk )[xk+1 xk ]2 .
2
Para que xk+1 seja o mnimo da aproximacao, necessitamos que:
df /dxk+1 = 0 f (xk ) + f (xk )[xk+1 xk ] = 0
xk+1 = xk [f (xk )]1 f (xk ).
3.3.1
Exemplo
Encontre um mnimo de f (x) = cos(x) (conforme Figura 3.2). Se iniciamos o

processo iterativo no ponto x0 = /4, o metodo converge para o ponto x = 02 . Se
iniciamos no ponto x0 = 3/4, o metodo converge para o ponto x = 3 . O que
levou o metodo de Newton a convergir para um ponto de maximo? Sera que o metodo
apresenta uma falha fundamental?
1
Poderamos ter adotado uma aproximacao de primeira ordem?

Note que cos(x ) = 1
3
Observe que cos() = 1
2
y = f (x)
x
9 8 7 6 5 4 3 2 1
x2
3 4
x1
8 9
x0
Figura 3.1: Ilustracao do processo iterativo de Newton.
y = cos(x)
Figura 3.2: Funcao cos(x)

Note que o metodo de Newton gera uma seq
uencia de solucoes x0 , x1 , . . . , x que
converge para um ponto x estacionario, ou seja, f (x ) = 0. Todavia, x nao e necessariamente um ponto de mnimo, podendo tambem definir um ponto de inflexao (e.g.,
o ponto estacionario da funcao f (x) = x3 ) ou de maximo (e.g., o ponto estacionario da
funcao f (x) = x2 ). Abaixo relembramos as condicoes necessarias e suficientes para
mnimo local:
Condi
c
oes Necess
arias Para Mnimo Local: f (x ) = 0 e f (x ) > 0
Condi
c
oes Suficientes Para Mnimo Local: f (x ) = 0 e f (x ) > 0.
3.4
O M
etodo de Newton em M
ultiplas Vari
aveis
Desejamos encontrar um vetor x = (x1 , . . . , xn ) tal que:
c1 (x)
c(x) = ...
=0
cm (x)
(3.1)
Para simplificar a apresentacao, suponha que m = n. Da mesma forma que no caso de

uma variavel, utilizamos uma aproximacao linear de c(x) em torno da solucao candidata
xk :
c(xk+1 ) = c(xk ) + G(xk )[xk+1 xk ]
(3.2)
sendo a matriz G(x) = c(x) chamada
c1 /x1 . . .
..
...
G(x) = .
cn /x1
de Jacobiana e definida como segue:

cT1
c1 /xn
..
..
(3.3)
= .
.
cTn
. . . cn /xn
Para encontrar o proximo iterando, fazemos c(xk )+G(xk )[xk+1 xk ] = 0, resultando

no processo iterativo abaixo:
xk+1 = xk G1 (xk )c(xk ).
(3.4)
Lembramos que o metodo de Newton em m

ultiplas variaveis herda as mesmas propriedades de sua versao monovariada:
o metodo apresenta convergencia quadratica, desde que o ponto inicial x0 esteja
dentro de sua regiao de convergencia;
o metodo pode divergir se uma tecnica de globalizacao nao for empregada; e
a matriz Jacobiana deve ser nao-singular para que o metodo tenha sucesso.
M
etodo de Newton em V
arias Vari
aveis
Dado um x inicial e uma tolerancia > 0
Repita
Calcule c(x) e G(x)
Se kc(x)k < , retorne x
Encontre uma solucao para G(x)x = c(x)
Faca x x + x
Ate que um n
umero maximo de iteracoes seja atingido
Enfatizamos que a iteracao Newton, conforme Equacao (3.4), nao e realizada atraves
do calculo direto da inversa de G(x). Fazemos uso de algoritmos de solucao de sistemas
de equacoes lineares para resolver o sistema G(x)x = c(x). Um forma robusta para
resolve-lo se da atraves da decomposicao LU , a qual decompoe G em duas matrizes
triangulares L (triangular inferior) e U (triangular superior), de maneira que G = LU .
Uma vez calculados os fatores L e U , a solucao de (3.4) pode ser obtida com duas
retrosubstituicoes. Quando a matriz G e positiva definida, o que ocorre no caso do
metodo de Newton estar sendo utilizado como ferramenta para encontrar um ponto
estacionario de uma funcao f , e recomendavel realizar uma fatoracao Cholesky. Esta
encontra uma matriz triangular inferior L de forma que G = LLT . Algoritmos eficientes e robustos podem ser encontrados na literatura para executar ambos os tipos de
fatoracao.
3.5
Minimiza
c
ao Irrestrita
Aqui a atencao se volta para o problema de minimizacao irrestrita em m

ultiplas
variaveis. Desejamos encontrar um vetor x = (x1 , . . . , xn ) tal que o valor da funcao
f (x) seja mnimo. Vamos aproximar f (x) em torno da solucao candidata corrente xk
como segue:
1
f (xk+1 ) = f (xk ) + f (xk )T [xk+1 xk ] + [xk+1 xk ]T 2 f (xk )[xk+1 xk ]
2
Fazendo xk+1 = x+ , xk = x, f (xk ) = g, 2 f (xk ) = H e p = [xk+1 xk ], a aproximacao
pode ser reescrita como segue:
1
f (x+ ) = f (x) + g T p + pT Hp.
2
Da mesma forma que no caso monovariado, podemos encontrar um ponto estacionario
para a aproximacao forcando x+ a satisfazer a condicao necessaria de primeira ordem.
Formalmente:
f (x+ ) = 0 g + Hp = 0 p = H 1 g.
Portanto, o processo iterativo pode ser expresso como segue:
xk+1 = xk [2 f (xk )]1 f (xk ).
Uma vez que o metodo de Newton se baseia na busca de um ponto para o qual o
gradiente de f (x) e nulo, nao ha garantia de que o processo iterativo convirja para
um ponto de mnimo, podendo divergir ou ser atrado para um ponto de inflexao ou
de maximo. Lembramos que as condicoes necessarias e suficientes (minimizacao de
funcoes) para que xk seja um mnimo local sao:
Condi
c
oes Necess
arias: f (xk ) = 0 e 2 f (xk ) > 0 (positiva semi-definida).
Condi
c
oes Suficientes: f (xk ) = 0 e 2 f (xk ) > 0 (positiva definida).
3.6
Converg
encia
Algoritmos nao-iterativos, como o metodo de Gauss para solucao de sistemas de

equacoes lineares, tem custo computacional bem-definido. O n
umero de operacoes de
ponto-flutuante e finito e pode ser expresso como uma funcao polinomial das dimensoes
do problema. O comportamento de algoritmos iterativos, por outro lado, e mais difcil
de ser medido. O n
umero de iteracoes depende do problema e do ponto inicial. A
eficiencia de um algoritmo iterativo e medida em termos de um limite superior de
iteracoes necessarias para se atingir uma solucao com certa precisao. Tais limites sao
obtidos por meio de uma analise de convergencia.
3.6.1
Converg
encia Linear
Uma seq
uencia xk com limite x e linearmente convergente se existe uma constante
c (0, 1) tal que:
|xk x | 6 c|xk1 x |
(3.5)
para k suficientemente grande. Convergencia linear e algumas vezes definida como

segue. A seq
uencia xk com limite x converge R-linearmente se existe um valor M e
c (0, 1) tal que:
|xk x | 6 M ck
(3.6)
para k suficientemente grande.
3.6.2
Converg
encia Quadr
atica
Uma seq
uencia xk com limite x converge quadraticamente se existe uma constante
c > 0 tal que:
|xk x | 6 c|xk1 x |2
(3.7)
2k
para k suficientemente grande. A seq

uencia xk = 1 + ( 12 ) converge quadraticamente
para x = 1 pois:
2k+1 " 2k #2
1
1
= |xk x |2 .
(3.8)
=
|xk+1 x | =
2
2

Definindo rk = log10 [|xk x |/|x |], quando |x | 6= 0, e dividindo por |x | podemos
reescrever (3.7) como
rk > 2rk1 log10 (|x c|).
(3.9)
Uma vez que |xk x | 0, rk + e eventualmente o primeiro termo da parte

à direita da desigualdade dominara o segundo. rk e aproximadamente o n
umero de
dgitos corretos na iteracao k, portanto o n
umero de dgitos corretos praticamente
dobra a cada iteracao.
3.6.3
Converg
encia do M
etodo de Newton
O metodo de Newton converge quadraticamente se G(x ) tem posto completo e se

x0 e suficientemente proximo de x . Para o caso unidimensional, a ser estudado nesta
secao, a convergencia quadratica e obtida se f (x ) 6= 0. Seja I = [x , x + ] um
intervalo em torno da solucao x dentro do qual as seguintes condicoes sao satisfeitas:
i. existe uma constante m > 0 tal que |f (x)| > m para todo x I; e
ii. existe uma constante L > 0 tal que |f (x) f (y)| 6 L|x y| para todo x, y I.
Vamos mostrar que se |xk x | 6 , entao
|xk+1 x | 6
L
|xk x |2
2m
(3.10)
Em outras palavras, a desigualdade (3.7) e satisfeita com c = L/(2m), garantindo dessa

forma convergencia quadratica para x . Denotando xk+1 por x+ e xk por x, temos que
x+ = x
f (x)
f (x)
|x+ x | = |x
x |
f (x)
f (x)
| f (x) f (x)(x x)|
=
|f (x)|
|f (x ) f (x) f (x)(x x)|
=
|f (x)|
Lembre-se que f (x ) = 0. Nos assumimos que |f (x)| > m e, portanto,

|x+ x | 6
|f (x ) f (x) f (x)(x x)|

m
(3.11)
Para limitar o numerador, podemos proceder como segue

Z x
(f (u) f (x))du|
|f (x ) f (x) f (x)(x x)| = |
x
Z x
|f (u) f (x)|du
6
x
Z x
|u x|du
6 L
x
|x x|2
= L
2
(3.12)

L
|x x|2 o que prova (3.10). A desiJuntando (3.11) e (3.12) obtemos |x+ x | 6 2m
gualdade (3.10) por si so nao garante que |xk+1 x | 0. Entretanto, se assumirmos
que |x0 x | 6 e 6 m/L, entao convergencia quadratica segue imediatamente.
Uma vez que |x0 x | 6 , podemos aplicar (3.10) e obter:
|x1 x | 6
L
L 2
|x0 x |2 6
6 /2.
2m
2m
Uma vez que |x1 x | 6 , podemos aplicar (3.10) e obter a desigualdade:

|x2 x | 6
L 2
L
|x1 x |2 6
/4 6 /8.
2m
2m
Repetindo este processo, conclumos que:

L
|xk+1 x | 6
|xk x |2 6 2
2m
2k
1
.
4
Segundo o desenvolvimento acima, se f (x ) = 0 e f e uma funcao contnua, entao

e razoavel assumir que as condicoes acima sao satisfeitas para algum , m e L. Na
pratica, entretanto, e difcil encontrarmos valores para , m e L, portanto o resultado
de convergencia nao nos oferece ajuda no sentido de escolhermos o ponto inicial x0 ,
mesmo porque isto demandaria conhecimento antecipado da existencia de uma raiz. O
resultado nos diz que se x0 e suficientemente proximo de x , entao o metodo de Newton
converge com uma taxa quadratica.
3.7
M
etodos de Regi
ao de Confianca
Como visto acima, o metodo de Newton puro para minimizacao de funcoes encontra
p = x xk que minimiza uma aproximacao de f em torno de xk dada pela expansao
de Taylor de segunda ordem:
1
fk (p) = f (xk ) + f (xk )T p + pT 2 f (xk )p.
2
Sabemos que fk (p) e uma boa aproximacao de f (xk + p) quando p esta dentro de uma
vizinhanca proxima de zero, mas a dificuldade e que na minimizacao de fk (p) podemos
obter um passo fora desta regiao. Se torna portanto relevante considerar um passo
de Newton restrito pk obtido por meio da minimizacao de fk (p) dentro de uma regiao
pequena na vizinhanca do zero, chamada regiao de confianca (trust region):
pk = Argmin fk (p)
kpk 6 k
(3.13)
onde k e um escalar positivo. Explorando o fato de que o problema (3.13) tem apenas
uma restricao, uma solucao aproximada pode ser obtida rapidamente.
importante enfatizar que mesmo quando 2 f (xk ) nao e positiva definida ou ate
E
mesmo quando a direcao Newton nao e uma direcao de descenso, o passo de Newton

restrito pk reduz o custo da funcao, desde que f (xk ) 6= 0 e k seja suficientemente
pequeno. Note que para todo p tal que kpk 6 k ,
f (xk + p) = fk (p) + o(k2 )
e portanto
f (xk + pk ) = fk (pk ) + o(k2 )
1
= f (xk ) + M inkpk6k {f (xk )T p + pT 2 f (xk )p} + o(k2 ).
2
Denotando
pk =
temos
f (xk )
k ,
kf (xk )k
1
f (xk + pk ) 6 f (xk ) + f (xk )T pk + pTk 2 f (xk )
pk } + o(k2 )
2
k2
f (xk )T 2 f (xk )f (xk ) + o(k2 )
= f (xk ) k kf (xk )k +
2kf (xk )k2
Para k suficientemente pequeno o termo negativo k kf (xk )k domina os u
ltimos dois
termos, o que nos leva a concluir que: f (xk+1 ) < f (xk ). Podemos tambem observar que
uma reducao nos custos pode ser obtida mesmo quando f (xk ) = 0 desde que k seja
suficientemente pequeno e f tenha uma direcao de curvatura negativa no ponto xk , o
que significa dizer que 2 f (xk ) nao e positiva semidefinida. Portanto, o procedimento
so falha em reduzir o custo quando f (xk ) = 0 e 2 f (xk ) e positiva semidefinida, que
corresponde a dizer que xk satisfaz as condicoes necessarias de segunda ordem.
Os desenvolvimentos acima nos levam a considerar passos da forma
xk+1 = xk + pk ,
onde pk e o passo de Newton restrito com respeito a um escalar k . A chave para a
convergencia rapida do metodo de Newton com regiao de confianca esta em ajustar
dinamicamente o parametro k , garantindo reducao significativa e se comportando
como o metodo de Newton puro proximo de um mnimo local nao singular4 . Uma
forma razoavel de ajustar o valor inicial de k e incrementar o valor quando o metodo
parece estar gerando reducoes no valor de f e reduzi-lo caso contrario. O progresso em
direcao a um otimo local pode ser medido com base na razao entre a reducao antecipada
e a reducao efetivamente observada:
rk =
f (xk ) f (xk+1 )
.
f (xk ) fk (pk )
Aumenta-se o valor de se esta razao esta proxima ou acima da unidade, e reduzimos o

seu valor caso contrario. Usando como parametros 0 < 1 6 2 6 1 e 0 < 1 < 1 < 2 ,
um algoritmo pode ser proposto:
4
Um mnimo local x e nao singular se satisfaz as condicoes suficientes de segunda ordem, ou seja,
f (x) = 0 e 2 f (x) > 0
Passo 1: Encontre:
pk = Argmin fk (p)
kpk 6 k
Se fk (pk ) = f (xk ) pare (xk satisfaz as condicoes necessarias de primeira e segunda
ordem).
Passo 2: Se f (xk + pk ) < f (xk ) defina xk+1 = xk + pk , calcule
rk =
f (xk ) f (xk+1 )
f (xk ) fk (pk )
e va para o Passo 3, caso contrario faca k = 1 kpk k e va para o Passo 1.

Passo 3: Faca
k+1
Volte ao Passo 1.
1 kpk k
2 k
=
se rk < 1
se 2 6 rk e kpk k = k
caso contrario
Se f e duas vezes diferenciavel entao e possvel mostrar que o algoritmo acima

converge, i.e., a seq
uencia {xk } e limitada e existe um ponto limite que satisfaz as
condicoes necessarias de segunda ordem. Alem disso, se {xk } converge para um mnimo
local x nao singular, entao o metodo tem a mesma taxa de convergencia do metodo
de Newton puro.
3.8
Otimizac
ao de Funco
es Sujeito a Igualdades
Ate aqui vimos como o metodo de Newton pode ser empregado para encontrar uma
solucao simultanea de um sistema c(x) de equacoes nao-lineares e tambem encontrar
um otimo local para uma funcao f (x) (i.e., solucao que satisfaz as condicoes necessarias
de primeira ordem). Aqui vamos combinar estes dois problemas e estender o metodo
de Newton. Esta secao pode ser omitida sem perda de informacao ja que a otimizacao
restrita sera objeto de estudo detalhado em captulos futuros. Considere o problema
de encontrar um vetor x que minimiza uma funcao f (x) e ao mesmo tempo e solucao
simultanea de um sistema de equacoes:
Minimize f (x)
Sujeito a :
c(x) = 0
onde x Rn , f : Rn R e c : Rn Rm com m < n. Pela teoria classica de
otimizacao, podemos tomar o Lagrangeano:
L(x, ) = f (x) T c(x) = f (x)
m
X
i=1
i ci (x)

onde Rm e o vetor com os multiplicadores de Lagrange. Da mesma forma que o
problema de minimizacao irrestrita, para um par solucao-multiplicador (x , ) definir
uma solucao localmente otima a derivada deve ser nula com respeito a x e , portanto:
x L(x , ) = 0
L(x , ) = 0
(3.14)
(3.15)
Calculando as derivadas conforme (3.14) e (3.15), obtemos:

x L = f (x)
m
X
i=1
i ci (x)
= f (x) c(x)T
L = c(x)
(3.16)
(3.17)
onde c(x) e o Jacobiano de c. Note que as condicoes (3.14) e (3.15) podem ser satisfeitas por um par (x , ) que induz um mnimo local, maximo local ou simplesmente
um ponto estacionario. Da mesma forma que em otimizacao irrestrita, podemos desenvolver condicoes necessarias de segunda ordem. Primeiramente, vamos calcular a
Hessiana do Lagrangeano com respeito a x:
H = 2xx L
= 2 f (x)
m
X
i=1
i 2 ci (x)
(3.18)
Entao pode ser demonstrado que condicoes necessarias (3.19) e suficientes (3.20) para
que o par (x , ) seja um mnimo local sao respectivamente:
uT Hu > 0
uT Hu > 0
(3.19)
(3.20)
para todo u tangente ao espaco de restricoes no ponto x , ou seja, para todo u

{v : ci (x )T v = 0, i = 1, . . . , m}. Enquanto que as condicoes de segunda ordem em
otimizacao irrestrita exigem que a curvatura de f seja positiva em todas as direcoes,
sob restricoes de igualdade a curvatura deve ser positiva apenas nas direcoes factveis
(tangentes ao espaco de solucoes factveis no ponto x ).
De forma analoga à aplicacao do metodo de Newton para minimizacao de funcoes,
podemos desenvolver um metodo de Newton para encontrar um par (x , ) que satisfaz
as condicoes necessarias de primeira ordem. Primeiro, aproximamos a funcao x L com
um aproximador linear em torno de (

x, ):
+ 2 f (
x L(x, ) = x L(
x, )
x)(x x)
m
m
X
X
i)
i 2 ci (
x)(x x)
ci (
x)(i
i=1
i=1
+ [2 f (
= x L(
x, )
x)
T
m
X
i=1
i 2 ci (
x)](x x) c(
x)T ( )
x)T ( )
= f (
x) c(
x) + H(x x) c(
= f (
x) + H(x x) c(
x) T
(3.21)

Segundo, aproximamos a funcao L com um aproximador linear, obtendo:
L(x, ) = c(
x) c(
x)(x x)
(3.22)
Logo, dado um par (xk , k ), o proximo iterando (xk+1 , k+1 ) do metodo de Newton e
obtido resolvendo um sistema de equacoes lineares:

x L(xk+1 , k+1 ) = 0
f (xk ) + H(xk+1 xk ) c(xk )T k+1 = 0
L(xk+1 , k+1 ) = 0
c(xk ) c(xk )(xk+1 xk ) = 0
ou, de forma mais compacta,

Hxk f (xk )
xk+1
H
c(xk )T
=
c(xk ) c(xk )xk
k+1
c(xk )
0
3.9
(3.23)
Refer
encias
Para um tratamento aprofundado e rigoroso do metodo de Newton recomendamos o livro texto de Bertsekas [9] sobre programacao nao-linear. Para problemas de
minimizacao de funcoes, os metodos quasi-Newton diferem do metodo de Newton no
sentido que os primeiros nao calculam a matriz Hessiana 2 f (xk ) a cada iterando xk .
Em vez disso, os metodos quasi-Newton utilizam uma aproximacao Bk de 2 fk que e
atualizada com base na seq
uencia de pares (x0 , f0 ), . . . , (xk , fk ). Aqueles interessados
em metodos quasi-Newton e os que desejam resolver problemas de grande porte devem
obrigatoriamente ler o survey de Dennis e More [16]. Este artigo apresenta de forma
clara e sucinta as regras de atualizacao de Bk propostas por: Broyden (B); Davidon,
Fletcher e Powell (DFP); e Broyden, Fletcher, Goldfarb e Shanno (BFGS).
3.10
Exerccios
EX 3.1: Seja c(x) = arctan(x). Encontre a regiao de convergencia e a de divergencia

do metodo de Newton.
EX 3.2: Considere o sistema de equacoes nao-lineares a seguir:
1
= 0
2
x2 x21 + 0.2 = 0
log(x21 + 2x22 + 1)
Implemente em Matlab o algoritmo de Newton para resolver o sistema acima.

Para cada um dos seguintes iterandos iniciais, indique se o algoritmo converge e,
em caso afirmativo, o ponto para o qual ele converge: x0 = (1, 1); x0 = (1, 1);
x0 = (1, 1); e x0 = (1, 1).
EX 3.3: Considere uma transformacao linear inversvel x = Sy. Escreva o metodo de
Newton no espaco da variavel y e mostre que este gera uma seq
uencia yk = S 1 xk ,
onde {xk } e a seq
uencia gerada pelo metodo de Newton no espaco da variavel x.

EX 3.4: Seja A Rmn uma matriz, rank(A) = m, c Rn . Considere o problema
abaixo:
P : Minimize kx ck2
Sujeito a :
Ax = 0
x Rn
Transforme P em um problema de otimizacao irrestrita, permitindo o emprego

do algoritmo de Newton. Podemos garantir que um ponto estacionario define um
otimo local? Podemos afirmar que um otimo local e um otimo global?
EX 3.5: Embora as aplicacoes do metodo de Newton em Calculo sejam bastante antigas, so recentemente descobriu-se que sua extensao para o plano complexo pode
gerar fractais. Em 1879, Caley formulou a seguinte questao: dado um ponto inicial z0 , para qual das razes de uma funcao complexa f (z) o metodo de Newton
converge?
Seja f (x) = z 3 + 2. Encontre as tres razes desta funcao. Produza uma figura
seguindo o procedimento abaixo:
1) Se restrinja ao quadrado [2, 2] [2, 2] do plano complexo.
2) Divida esta regiao do plano em pequenos subquadrados.
3) Execute o metodo de Newton a partir do n

umero complexo definido pelo
subquadrado.
4) Pinte o subquadrado com a cor vermelha, amarela ou azul, dependendo da
raiz para a qual o metodo convergiu.
EX 3.6 [9]: Considere o problema de otimizacao irrestrita onde e um parametro:
Minimize f (x, y) = x2 + y 2 + xy + x + 2y
x, y
Quais pontos sao estacionarios? Quais desses pontos definem mnimos locais?
Quais desses pontos sao mnimos globais?
EX 3.7 [9]: Para cada uma das funcoes abaixo, encontre os pontos estacionarios.
Quais desses pontos sao mnimos ou maximos locais? Quais desses pontos sao
mnimos ou maximos globais?
1) f (x, y) = (x2 4)2 + y 2
2) f (x, y) = (y x2 )2 x2
3) f (x, y) = 21 x2 + x cos(y)
EX 3.8 [9]: Desejamos encontrar o ponto x em um plano cuja soma das distancias
ponderadas a partir de um conjunto de pontos y1 , . . . , ym seja minimizada. Matematicamente, o problema e:
Minimize
x Rn
m
P
k=1
wk kx yk k
onde w1 , . . . , wm sao escalares positivos. Mostre que existe um otimo global para
o problema e que este pode ser realizado atraves do modelo mecanico dado na
Fig. 3.3. Esta solucao otima global e u
nica?
y4
y2
x
y1
y3
w4
w2
w1
w3
Figura 3.3: Modelo mecanico. O modelo consiste de um tabuleiro com um furo perfurado a cada ponto yk . Atraves da cada buraco, um fio e passado com o correspondente
peso wk preso a sua ponta. Os outros extremos dos fios sao amarrados com um no. Na
ausencia de friccao e fios entrelacados, as forcas atingem um equilbrio no ponto do no
quando este esta localizado na solucao otima x .
Captulo 4
Otimizac
ao N
ao-Diferenci
avel
Nos captulos anteriores nos concentramos nos problemas de encontrar um otimo
local de uma funcao f (x) e de resolver um sistema de equacoes nao-lineares c(x) = 0.
Em ambas as situacoes assumimos que as funcoes f e c sao contnuas e diferenciaveis.
Isto permitiu utilizar aproximacoes de primeira e segunda ordem com base na expansao
de Taylor, bem como o desenvolvimento de algoritmos que fazem uso do gradiente (no
caso de minizacao de f (x)) ou da matriz Jacobiana (no caso de encontrar raiz para c(x)).
Aqui vamos tratar o problema de encontrar um mnimo para uma funcao f (x) qualquer
que pode ser descontnua e nao diferenciavel. Logo, metodos inspirados na expansao
de Taylor nao sao aplicaveis. Apresentaremos de forma sucinta o Algoritmo Genetico
e Simulated Annealing que podem ser empregados para resolver tais problemas.
4.1
Otimizac
ao Black-Box
Neste captulo focamos nossa atencao no problema geral de otimizaccao irrestrita,

sendo este expresso em programacao matematica como:
P : Minimize f (x)
x Rn
onde nada se assume sobre f : Rn R
Uma gama expressiva de problemas praticos e teoricos pode ser reduzida a P . Em
particular, f pode representar:
O custo de producao para um dado conjunto de parametros que representam
indicadores economicos, custos de materia-prima e planejamento da producao,
podendo este custo ser estimado por meio de simulacao computacional.
O valor da funcao objetivo de um problema de otimizacao, onde f (x) = se x
e infactvel.
O premio recebido em um certo jogo quando o participante segue a estrategia
induzida por x.
O termo otimizacao n
ao-diferenci
avel tem suas razes no fato que para uma funcao
f qualquer o gradiente pode nao estar definido, portanto pode nao existir informacao
48
4. Otimizacao Nao-Diferenciavel
local quanto à direcao de descenso. Duas tecnicas para otimizacao nao-diferenciavel

sao:
Algoritmo Gen
etico (AG). O AG tem suas razes na Teoria da Evolucao
de Charles Darwin, podendo este ser visto como um mecanismo de evolucao
simulada.
Simulated Annealing (SA). Se inspira no processo fsico de obtencao de estruturas cristalinas atraves do super-aquecimento e resfriamento lento da substancia,
o que leva o sistema a atingir o nvel mais baixo de energia possvel.
4.2
Algoritmo Gen
etico (AG)
4.2.1
Gen
etica e Evoluc
ao
A percepcao de que certas caractersticas sao hereditarias (i.e., transmitidas geneticamente) data de varias decadas passadas. A Teoria da Evolucao [14] e considerada
um dos maiores avancos cientficos ate esta data. Ela tem implicacoes em varias areas
naturais, cientficas e sociais como, por exemplo, Biologia, Matematica, Fsica e Sociologia.
4.2.2
Adapta
c
ao Biol
ogica
Estudaremos maneiras pelas quais o processo de evolucao natural pode ser empregado para se evoluir solucoes computacionais (Algoritmo Genetico) e ate mesmo
programas ou algoritmos (Programacao Genetica) para problemas interessantes.
A propriedade de adaptacao e descrita pela seguinte expressao:
Adaptac
ao = Variedade + Hereditariedade + Sele
c
ao
1) Variedade: Se refere a como os indivduos diferem uns dos outros, portanto so
pode ocorrer se existirem m
ultiplos indivduos, implicando em paralelismo e multiplicidade espacial (Populacao).
uma forma de persistencia temporal que se propaga de pai
2) Hereditariedade: E
para filho, um processo iterativo que se repete (Processo Iterativo).
3) Sele
c
ao Natural: A capacidade de reproducao e exponencial, extremamente
maior do que a quantidade de recursos disponveis (limitada). Surge, portanto,
a frase a sobrevivencia dos reprodutores. Levando em conta esta capacidade
exponencial, os seres humanos formam um grupo seleto de indivduos (Selecao).
A frase mais conhecida e a sobrevivencia do mais dotado. Entretanto, a teoria diz
que o que importa e a reproducao, o que implica a frase a sobrevivencia do reprodutor.
Segundo a teoria da evolucao, as caractersticas de uma pessoa (cor dos olhos, alta,
inteligente, etc.) so importam se aumentam a capacidade de reproducao. A evolucao
das especies pode levar a processos cclicos como, por exemplo, a dinamica entre leoes
e gazelas. Se os leoes se tornam mais perspicazes ao cacarem gazelas, entao as gazelas
sobreviventes tendem a ser mais rapidas, que por sua vez vao gerar descendentes mais
ageis, dificultando a caca dos leoes.
4.2.3
49
Hereditariedade com Evoluc

ao Simulada
Da mesma forma que em sistemas biologicos, as equacoes de adaptacao biologica

podem ser utilizadas para evoluir solucoes de um problema (Algoritmo Genetico) e
ate mesmo algoritmos (Programacao Genetica). John Holland [28] foi um dos primeiros
a propor a simulacao do processo de evolucao natural para resolver problemas diversos,
tais como problemas de otimizacao e de aprendizagem de maquina. Ele concebeu o
termo Algoritmo Genetico (AG) e foi um dos grandes impulsionadores da area que
hoje e conhecida como Computacao Evolucionaria.
O algoritmo genetico representa solucoes como estruturas semelhantes ao DNA, as
quais expressam alguma forma de aptidao. Isto esta inspirado na Natureza, onde estruturas de DNA aparecem em organismos com capacidade de se acasalarem, e onde haja
mutacao e cross-over do material genetico. Estes princpios fundamentais foram apresentados atraves da teoria de Darwin, mais tarde complementada pelos trabalhos de
Gregor Mendel (pai da Genetica) e posteriormente enriquecidos pela descoberta da estrutura de dupla helice do DNA. Estes u
ltimos trabalhos mostram que as caractersticas
transmitidas sao discretas, nao sao contnuas como anteriormente assumido. Mendel
mostrou em seus experimentos que, se controlarmos o ambiente, as caractersticas sao
bem distintas (e.g., flores altas ou baixas). Conclusao:
A linguagem da natureza e um alfabeto discreto.
O AG expressa uma solucao como uma cadeia de smbolos (usualmente 0s e 1s) de
tamanho fixo, da mesma forma que o DNA codifica as caractersticas de um indivduo.
necessario a existencia de uma funcao de aptidao (fitness function) que mapeie a
E
cadeia em uma forma u
til. Por exemplo, a cadeia pode representar:
um vetor com as variaveis de uma funcao f que se deseja minimizar; ou
uma estrategia para competir em um jogo.
4.2.4
Popularidade do Algoritmo Gen

etico
A popularidade do algoritmo genetico se da em funcao de tres propriedades:

1) Robustez: Evolucao natural e tida como um metodo bem-sucedido e robusto no
meio biologico.
2) Generalidade: AGs sao capazes de tratar problemas complexos, que possuem um
n
umero grande de componentes e cujas contribuicoes para o todo nao sao bem
entendidas.
3) Paraleliza
c
ao: AGs sao naturalmente paralelos; podem ser implementados em redes de computadores (maquinas assncronos) e computadores paralelos (maquinas
sncronos).
Antes de procedermos à descricao dos passos do Algoritmo Genetico, assumiremos
o seguinte:
50
O problema de otimizacao a ser resolvido e de maximizacao, em vez de minimizacao. Para transformar minimizacao em maximizacao, basta substituir o
operador min por max e f (x) por f (x).
A funcao objetivo (f (x) se maximizacao, f (x) se minimizacao) sera utilizada
como funcao de aptidao (fitness function, fi ). Portanto, quanto mais alto o valor
da fitness function (fi ) melhor a qualidade da respectiva solucao. Assumiremos
tambem que a fitness function assume um valor nao negativo. Isso pode ser
contornado atraves da adicao de uma constante, i.e., seja m = M in{fi (x) : x
pertence à populacao}, entao basta substituir fi (x) por fi (x) m para que a
fitness function se torne nao negativa.
4.2.5
Algoritmo Gen
etico em Detalhes
O algoritmo genetico pode ser descrito como uma funcao AG(fi , ft , p, r, m) cujos
parametros de entrada definem um problema a ser resolvido. Abaixo segue o pseudocodigo.
Algoritmo AG(fi , ft , p, r, m)
Parametros de entrada:
fi - fitness function
ft - fitness threshold (condicao de parada)
p - tamanho da populacao
r - fracao da populacao a ser substituda por cross-over
m - taxa de mutacao
Inicialize a populacao P : gere p solucoes candidatas aleatoriamente
Avalie os elemento de P : para cada x P , calcule fi (x)
Enquanto max{fi (x) : x P } < ft , execute:
Seja P a nova populacao, iniciando com P =
Selecione probabilisticamente (1 r)p elementos de P e adicione a P ,

sendo a probabilidade
P de x P ser selecionado dada por:
fi (xj )
P r(x) = fi (x)/
xj P
Probabilisticamente selecione rp/2 pares de elementos de P ,

de acordo com a distribuicao dada por P r(x).
Para cada par (xi , xj ) execute cross-over e adicione os filhos a P .
Execute mutacao de mp elementos de P
Faca P P
Calcule fi (x) para todo x P
51
4.2.6
Operador Gen
etico Cross-Over
Os operadores geneticos determinam como os membros de uma populacao sao combinados, ou sofrem mutacao, de forma a gerar novos candidatos. Na Figura 4.1 e
ilustrado o operador cross-over de um ponto, enquanto que o operador cross-over de
dois pontos e exemplificado na Figura 4.2. O operador de cross-over uniforme consistem em utilizar uma mascara cujos bits sao selecionados aleatoriamente com probabilidade uniforme. Ja o operador de mutacao simplesmente troca um ou mais bits de um
cromossomo de 0 para 1 (ou vice-versa). Os bits sao escolhidos aleatoriamente com
probabilidade uniforme.
Cromossomos pais
Filhos
11101001000
11101010101
M
ascara
11111000000
00001010101
00001001000
Figura 4.1: Operador cross-over de um ponto.
Cromossomos pais
Filhos
11101001000
00101000101
M
ascara
00111110000
00001010101
11001011000
Figura 4.2: Operador cross-over de dois pontos.
4.2.7
Exemplo de Aplicac
ao
O problema consiste em encontrar o valor maximo da funcao f (x) = x2 onde x pode

assumir valores do conjunto A = {0, . . . , 31}. Para aplicacao do algoritmo genetico, os
seguintes passos sao sugeridos:
Utilize 5 bits para representar uma solucao candidata.
Defina a funcao de aptidao fi (x) = f (x).
Gere um conjunto de 4 solucoes candidatas randomicamente para compor a populacao inicial. (Tamanho da populacao p = 4).
52
Adote o operador cross-over de um ponto como metodo de reproducao. (Taxa de

substituicao por cross-over r = 50%).
Adote como mecanismo de mutacao a troca de um bit de uma solucao candidata.
(Taxa de mutacao m = 5%).
Na Tabela 4.1 estao indicados os valores iniciais armazenados na memoria do algoritmo genetico. Com esta populacao inicial e os parametros acima sugeridos, o
algoritmo genetico encontra a solucao otima para o problema: x = 11111 sendo
f (x ) = 961.
Tabela 4.1: Populacao inicial
Solucao
Fitness Probabilidade
Candidata
de Reproducao
01101
169
14,4%
11000
576
49,2%
01000
64
5,5%
10011
361
30,9%
4.2.8
Quest
oes Pr
aticas
O fenomeno de crowding ocorre quando um indivduo com alta aptidao se reproduz

rapidamente, gerando copias ou filhos muito semelhantes que venham a constituir a
maior parte da populacao. O aspecto negativo de crowding e a perda de diversidade,
o que acarreta convergencia prematura para otimo local. O fenomeno de crowding e
ilustrado na Figura 4.3.
Algumas estrategias para evitar crowding sao:
selecao de pares para reproducao atraves de torneios em vez de selecao probabilstica;
utilizar o valor de posicao (ranking) no lugar da aptidao para calcular as probabilidades de selecionar os indivduos; e
o valor de aptidao de um indivduo pode ser reduzido pela presenca de outros
indivduos semelhantes.
4.2.9
Schema Theorem
possvel descrever matematicamente a evolucao da populacao de um AG em

E
funcao do tempo? O Schema Theorem de Holland (1975) [28] oferece uma caracterizacao.
Defini
c
ao 4.1 Um Schema e uma cadeia de 0s, 1s e *s (curinga) que representa uma
famlia de indivduos.
53
Populacao Inicial
Populacao Resultante
Figura 4.3: Fenomeno de crowding.

O schema 0*1 representa os indivduos 001 e 011. Schemas podem ser utilizados para caracterizar a populacao de um algoritmo genetico. Uma populacao de
cadeias (vetores de bits 0s e 1s) pode ser vista em termos do conjunto de schemas
que ela representa e o n
umero de indivduos associados com cada schema. Seja m(s, t)
o n
umero de indivduos no instante t (t-esima populacao) que pertencam ao schema
s. O Schema Theorem descreve o valor esperado1 de m(s, t + 1) tomando como base:
m(s, t); as propriedades de s; as propriedades da populacao; e os parametros do AG
(e.g., metodos de recombinacao e taxa de mutacao).
Teorema 4.1 Considerando apenas selecao, tem-se
E[m(s, t + 1)] =
u(s, t)
m(s, t)
fm (t)
onde: m(s, t) e o n
umero de indivduos em Pt (t-esima populacao) que pertencam ao
schema s; fm (t) e o valor medio da funcao de aptidao dos elementos de Pt ; e u(s, t) e
o valor medio da funcao de aptidao dos elementos de Pt que pertencam ao schema s.
Se vemos o AG como um processo virtual paralelo que i) executa uma busca atraves
do espaco de possveis schemas e, ao mesmo tempo, ii) executa uma busca atraves do
espaco de indivduos, entao a equacao do Teorema 4.1 indica que schemas de maior
aptidao crescerao em influencia com o passar das geracoes.
Teorema 4.2 Considerando o operador cross-over de um ponto e mutacao, tem-se

pc d(s)
u(s, t)
m(s, t) 1
[1 pm ]o(s)
E[m(s, t + 1)] >
fm (t)
l1
onde:
1
Denotado por E[] e mais rigorosamente conhecido por esperanca matematica
54
pc e a probabilidade do operador cross-over de um ponto ser aplicado a um indivduo arbitrario;

pm e a probabilidade de que um bit arbitrario de um indivduo arbitrario sofra
mutacao;
l e o n
umero de bits das cadeias;
o(s) e o n
umero de bits definidos presentes no schema s (bits 0 ou 1); e
d(s) e a dist
ancia entre o bit definido mais `
a esquerda e o mais a` direita no
schema s.
O Teorema 4.2 nos diz que os schemas de maior aptidao deverao aumentar sua
influencia, especialmente aqueles que possuem um pequeno n
umero de bits definidos
(contendo varios *) e aqueles cujos bits definidos estao proximos uns dos outros.
4.3
Simulated Annealing
Simulated Annealing (SA) e um metodo de otimizacao bastante geral (como o Algoritmo Genetico) que tem demonstrado excelente desempenho em problemas que apresentam um n
umero muito grande de otimos locais. Uma das aplicacoes mais bemsucedidas de SA e o problema de localizacao de componentes eletronicos em microprocessadores, no qual procura-se minimizar o comprimento total das conexoes. A Figura
4.4 ilustra o problema de localizacao e empacotamento de circuitos eletronicos.
CI1
CI2
CI3
CI5
CI4
CI6
Figura 4.4: Empacotamento de componentes eletronicos em circuitos integrados.
4.3.1
O Processo de Annealing
O processo de annealing se refere ao metodo por meio do qual lquidos (ou metais) se
resfriam e cristalizam. Aquecemos a substancia ate uma temperatura muito alta, depois
resfriamos lentamente. Na natureza, se o resfriamento e bastante lento, a substancia
55
assume uma configuracao de menor energia para a temperatura de equilbrio. A Figura

4.5 ilustra o processo de formacao de cristais por meio de annealing.
Alta Temperatura
Baixa Temperatura
Cristalizacao
Figura 4.5: Ilustracao do processo de annealing.

A Natureza pode ser vista como um processo de minimizacao do nvel de energia,
sendo este probabilstico. Mais precisamente, a probabilidade de um sistema fsico se
encontrar em uma configuracao com nvel de energia E e dada por:
E
P r(E) e T
(4.1)
onde e a constante de Boltzman e T e a temperatura. De acordo com a equacao (4.1),

para uma dada temperatura T , quanto maior o nvel de energia, menor a probabilidade
da configuracao. Para um dado nvel de energia E, a probabilidade da configuracao
diminui com a reducao da temperatura. Mesmo em baixa temperatura e possvel
que o sistema esteja em um nvel elevado de energia, embora a probabilidade seja
extremamente pequena. Em outros palavras, o sistema aumenta o nvel de energia
algumas vezes, outras vezes ele diminui, mas a probabilidade de aumentar diminui
exponencialmente com a reducao da temperatura. Este comportamento oscilatorio e
decrescente com a reducao da temperatura e ilustrado na Figura 4.6.
4.3.2
O Algoritmo de Metropolis
Em 1953 Metropolis et al. [36] incorporaram as ideias apresentadas acima em

computacoes numericas. Mais tarde, Kirkpatrick et al. [32, 31] estabeleceram a relacao
entre encontrar uma configuracao de baixa energia e o problema de otimizacao, dando
origem a um novo metodo de otimizacao inspirado em fenomenos fsicos.
Dado um conjunto de configuracoes para um sistema, a probabilidade do sistema
assumir a configuracao E2 a partir da configuracao E1 e dada por:
(E E )/kT
e 2 1
se E2 > E1
Pr =
1
se E2 < E1
A Figura 4.7 ilustra a queda de probabilidade de transicao para estados de maior

energia com a reducao de temperatura. Para empregarmos o algoritmo de Metropolis
em outros sistemas, nao necessariamente termodinamicos, precisamos de:
56
Energia do Sistema
1 / Temperatura
Figura 4.6: Comportamento tpico do nvel de energia conforme processo de annealing.
uma descricao das possveis configuracoes do sistema;
um gerador randomico de perturbacoes do sistema; essas perturbacoes definem
as opcoes de configuracao;
uma funcao objetivo (analoga a` energia) cuja minimizacao desejamos executar; e
um parametro de controle T (analogo à temperatura) e um procedimento de
annealing que descreve a maneira pela qual T decresce.
Probabilidade
E2 E1
Figura 4.7: Probabilidade de transicao com a queda de temperatura.
57
4.3.3
Exemplo: O Problema do Caixeiro Viajante
Em uma instancia do Problema do Caixeiro Viajante (PCV) sao dados N cidades e

uma matriz de distancias M . Desejamos encontrar uma rota que, partindo da cidade 1,
visite as demais cidades precisamente uma vez e retorne à cidade 1, tal que o caminho
percorrido seja o menor possvel. O PCV pertence à famlia dos problemas NP-Difceis
[21, 12], o que significa dizer que nao se conhece um algoritmo capaz de encontrar uma
rota otima em tempo polinomial qualquer que seja a instancia do problema.
8
Cidade
Rota
4
3
6
5
9
7
2
Figura 4.8: Exemplo de rota para uma instancia particular.

Abaixo seguem os passos para se aplicar o algoritmo SA:
Configurac
ao: utilize um vetor x com N posicoes, x {1, 2, . . . , N }N , para
armazenar uma permutacao das cidades.
Perturbac
ao: uma subseq
uencia de cidades e removida da rota e inserida em
outra posicao. A Figura 4.9 ilustra dois operadores de perturbacao.
Fun
c
ao Objetivo: a funcao objetivo e definida como a equacao:
E=
N
1
X
n=1
k(xn , yn ) (xn+1 , yn+1 )k + k(xN , yN ) (x1 , y1 )k
Procedimento de Annealing: abaixo segue os pseudo-codigo do procedimento

de annealing.
Procedimento de Annealing
Gere aleatoriamente um conjunto S de configuracoes
Calcule a variacao de energia E maxima para as configuracoes de S:
E = max{|E[si ] E[sj ]| : si , sj S}
Defina T0 (temperatura inicial) como algumas dezenas de vezes
58
o valor de E
Defina Tmin como a temperatura mnima
Seja s um elemento qualquer de S
Seja sbest = s a melhor solucao encontrada
Faca k = 0
Equanto Tk > Tmin faca
Repita para n = 1 ate 100N
Obtenha uma solucao alternativa s perturbando s
Se E[s ] < E[s] entao
s s
Se E[s] < E[sbest ] entao
sbest s
Fim-se
Caso contrario
Faca s s com probabiblidade dada por e

Fim-se
Fim-repita
Tk+1 0.98Tk
k k+1
Fim-Enquanto
E[s ]E[s]
T
Figura 4.9: Ilustracao dos operadores de perturbacao
4.4
Refer
encias
Os livros de Davis [15] e de Goldberg [24] trazem uma discussao ampla da filosofia
por tras dos Algoritmos Geneticos, apresentam elementos teoricos e aplicacoes. Tais
59
referencias sao indicadas para um aprofundamento na teoria e aplicacoes de Algoritmos

Geneticos. Recomendamos ainda dois surveys sobre Algoritmos Evolucionarios, um
voltado para a solucao de problemas nao-lineares inteiros mistos [13] e outro voltado
para problemas encontrados nas areas de sistemas e teoria de controle [19]. Para um
estudo teorico da propriedade de convergencia global do metodo simulated annealing,
o leitor pode consultar o livro de Aart e Korst [1].
4.5
Exerccios
EX 4.1 (O Problema de Bi-Parti

c
ao M
axima em Grafos): Seja G = (V, E)
um grafo nao direcionado cujas arestas possuem pesos nao-negativos. Uma aresta
(u, v) E possui peso w(u, v). Para dois conjuntos A e B de vertices, definimos
w(A, B) o peso total das arestas que tem um extremo em A e o outro, em B.
Mais precisamente:
X
w(A, B) =
w(u, v)
(u,v)E,uA,vB
O problema e encontrar S V tal que w(S, V S) seja maximo.

Os dados de uma instancia do problema da bi-particao maxima sao fornecidos
em arquivos tipo texto, cujo formato consiste do n
umero de vertices, do n
umero
de arestas e de uma lista de arestas e pesos.
Exemplo de instancia:
56
1 3 0.3
2 4 0.5
2 5 1.2
1 5 0.8
3 4 0.5
2 3 3.0
Tarefas
i. implemente um Algoritmo Genetico para resolver o problema de bi-particao
maxima e teste o algoritmo em alguns problemas;
ii. implemente e teste um algoritmo Simulated Annealing para o problema de
bi-particao maxima; e
iii. compare os algoritmos e os resultados obtidos.
EX 4.2: O problema da bi-particao maxima e NP-Difcil? Um problema e NP-Difcil
se qualquer problema de decisao NP-Completo pode ser reduzido em tempo polinomial ao problema em consideracao.
60
EX 4.3: O problema da bi-particao mnima e formulado como:

Minimize w(S, V S)
SV
Sujeito a:
S 6=
Como que este problema poderia ser resolvido?
mnima e NP-Difcil?
O problema da bi-particao
EX 4.4: Suponha que os pesos das arestas do grafo G = (V, E) sao variaveis aleatorias
independentes: o peso da aresta (u, v) e uma variavel aleatoria w(u, v) com distribuicao, media e varianca conhecidos que independem dos pesos das demais
arestas. Em tal situacao, como que se poderia resolver os problemas da biparticao maxima e mnima se o objetivo e maximizar ou minimizar o valor esperado E[w(S, V S)] respectivamente?
Captulo 5
Treinamento de Redes Neurais: Um
Problema de Otimizac
ao
Redes Neurais Artificiais (RNs) constituem metodos robustos de aproximacao
de funcoes de valores vetoriais, reais ou discretos. Em outras palavras, as redes neurais toleram erros nos pares de treinamento. Uma rede neural pode ser vista como um
aproximador universal ou, mais precisamente, como um interpolador universal uma vez
que elas nao sao capazes de inferir informacoes que estao fora do conjunto de treinamento. Dado um conjunto qualquer de treinamento podemos, em princpio, construir
uma rede neural que produz os mesmos valores da funcao para os pares entrada-sada
de treinamento. O algoritmo de treinamento de propagacao reversa (back-propagation)
nada mais e do que uma implementacao especializada do algoritmo de descenso, sendo
objeto de estudo neste captulo.
Como o proprio nome sugere, redes neurais sao inspiradas em sistemas biologicos de
aprendizagem que tipicamente consistem de redes complexas de unidades elementares,
conforme a Figura 5.1. Na figura, a primeira camada recebe os sinais de entrada, que
sao processados e transformados em novos sinais a serem transmitidos às unidades
da camada intermediaria, que por sua vez processa os sinais de entrada e os envia à
camada de sada.
Entrada
Sada
Figura 5.1: Exemplo de topologia de redes neurais.

interessante considerarmos que o cerebro humano possui aproximadamente 1011
E
62
5. Treinamento de Redes Neurais: Um Problema de Otimizacao
neuronios (100 bilhoes de neuronios), cada um conectado com cerca de 104 neuronios.
O tempo de resposta de um neuronio e aproximadamente 103 segundos, muito mais
lento do que um computador, cujas portas logicas apresentam um tempo de resposta
da ordem de 1010 segundos. O cerebro humano reconhece uma figura em cerca de 101
segundos. Dado o tempo relativamente lento de resposta do neuronio, em comparacao
com a velocidade de processamento de informacao, podemos concluir que o sistema de
aprendizagem biologico e extremamente paralelo e distribudo, todavia nao possui um
n
umero muito grande de camadas.
Existem, entretanto, incompatibilidades entre as redes neurais artificiais e as unidades do sistema biologico de aprendizagem. A sada de uma unidade artificial e um
valor constante, enquanto que as unidades biologicas emitem uma serie complexa de
sinais, consistindo em pulsos com varias freq
uencias.
5.1
Elementos B
asicos das Redes Neurais
O elemento basico de uma rede neural e a unidade de processamento. Na Figura 5.2

e ilustrada a estrutura geral de uma unidade de processamento neural, a qual consiste
em um vetor com os sinais de entrada x = (x1 , . . . , xn ), uma unidade de combinacao
linear dos sinais de entrada cujos pesos sao dados pelo vetor w = (w1 , . . . , wn ), e
n
P
wi xi que produz os sinais de sada tal que
uma funcao de ativacao f (s) onde s =
i=1
yi = f (s) para i = 1, . . . , m. Unidades de processamento sao organizadas em camadas

e conectadas por arcos (sinapses) que simbolizam os sinais de comunicacao de uma
camada (ou sinais de entradas) para outra camada. Um exemplo de rede neural e dado
na Figura 5.3.
Entrada
x1
w1
x2
Sada
y1
Peso das sinapses
S
wn
xn
y2
w2
f (S)
S=
n
P
wi x i
i=1
ym
Figura 5.2: Unidade de processamento neural.
5.1.1
O Problema de Treinamento
Dados: uma rede neural (a sua topologia), ou seja, um grafo G = (V, E);
exemplos de treinamento, ou seja, uma lista de pares de entrada e sada desejados
D = {(x1 , y 1 ), . . . , (xK , y K )}.
63
Camadas Intermediarias
111111
000000
000000
111111
000000
111111
000000
111111
000000
111111
000000
111111
000000
111111
000000
111111
000000
111111
000000
111111
000000
111111
000000
111111
000000
111111
000000
111111
000000
000000
111111
Entrada111111
000000
111111
000000
111111
000000
111111
000000
111111
000000
111111
000000
111111
000000
111111
000000
111111
000000
111111
000000
111111
000000
111111
000000
111111
000000
111111
000000
111111
000000
111111
000000
111111
000000
111111
111111
000000
000000
111111
000000
111111
000000
111111
000000
111111
000000
111111
000000
111111
000000
111111
000000
111111
000000
111111
000000
111111
000000
111111
000000
111111
000000
111111
000000
111111
000000
111111
000000
111111
000000
111111
000000
111111
000000
111111
000000
111111
000000
111111
000000
111111
000000
111111
000000
111111
000000
111111
000000
111111
000000
111111
000000
111111
000000
111111
000000
111111
000000
111111
000000
111111
000000
111111
111111
000000
000000
111111
000000
111111
000000
111111
000000
111111
000000
111111
000000
111111
000000
111111
000000
111111
000000
111111
000000
111111
000000
111111
000000
111111
000000
111111
000000
111111
000000
111111
000000
111111
000000
111111
000000
111111
000000
111111
000000
111111
000000
111111
000000
111111
000000
111111
000000
111111
000000
111111
000000
111111
000000
111111
000000
111111
000000
111111
000000
111111
000000
111111
000000
111111
000000
111111
111111
000000
000000
111111
000000
111111
000000
111111
000000
111111
000000
111111
000000
111111
000000
111111
000000
111111
000000
111111
000000
111111
000000
111111
000000
111111
000000
111111
000000
111111
000000
111111
000000
111111
000000
111111
000000
111111
000000
111111
000000
111111
000000
111111
000000
111111
000000
111111
000000
111111
000000
111111
000000
111111
000000
111111
000000
111111
000000
111111
000000
111111
000000
111111
000000
111111
000000
111111
Sada
Figura 5.3: Rede neural com camadas intermediarias.

O problema e encontrar pesos para as sinapses tal que o erro de estimacao das
sadas seja o menor possvel (least squares problem). Seja f (w, x) : Rn Rm a funcao
representada pela rede neural com pesos dados por um vetor w Rr , onde r e o n
umero
de conexoe sinapticas da rede. Dado x, a rede responde com um valor y = f (x). Em
programacao matematica, o problema de treinamento da rede neural pode ser escrito
como:
K
P
Minimize 21
kf (w, xk ) y k k2
w Rr
5.1.2
k=1
ALVINN: Um Exemplo de Aplicac

ao
Um exemplo de aplicacao de redes neurais e o sistema ALVINN [40] desenvolvido na

Universidade de Carnegie Mellon, que utilizou com sucesso o modelo de redes neurais
para dirigir de forma autonoma um veculo por cerca de 120 Km a uma velocidade
de ate 100 Km/h. Mais recentemente, este mesmo sistema foi aprimorado e desempenhou com sucesso a tarefa mais audaciosa de dirigir o mesmo veculo, de uma forma
semi-autonoma, da cidade de Pittsburgh na Pennsylvania ate a cidade de Berkeley na
California. Uma ilustracao simplificada da rede neural do sistema ALVINN e mostrada
na Figura 5.4. Cada pixel da imagem e primeiramente transformado em tonalidade de
cinza e depois enviado à respectiva unidade neural, que por sua vez processa o sinal
recebido e retransmite às outras unidades da camada intermediaria. A camada neural
de sada conta com varias unidades que indicam o grau de giro do volante, onde a
unidade mais à esquerda indica giro maximo à esquerda enquanto que a unidade mais
à direita indica giro oposto. A unidade cujo valor de sada e mais intenso tera seu
comando executado pelo sistema robotico.
5.1.3
Problemas Apropriados para Redes Neurais
Em geral, as redes neurais sao recomendadas para problemas de aproximacao complexos tipicamente de natureza nao-linear e sujeitos a rudos, tais como dados e sinais
64
Esquerda
Em frente
Direita
Comandos
Rede Neural
Imagem de
Entrada
Figura 5.4: Rede neural do sistema ALVINN.

provenientes de cameras e microfones. Mais especificamente, RNs em combinacao com
o algoritmo de propagacao reversa (back-propagation) sao adequadas para problemas
com as seguintes caractersticas:
instancias que sao representadas por pares contendo muitos atributos (m
ultiplas
entradas e m
ultiplas sadas), ou seja, as dimensoes dos vetores x e y;
o atributo de sada tenha um valor discreto, real ou um vetor de valores; no
ALVINN, por exemplo, a sada e um vetor com cerca de 30 sadas, cada uma
representando a probabilidade de um comando.
treinamento pode ser feito off-line;
a avaliacao da funcao deve ser muito rapida, para uso em aplicacoes de temporeal;
a habilidade de se entender o significado da aproximacao nao e necessaria, o que
pode ser um obstaculo para o uso de redes neurais em aplicacoes de diagnostico
medico, onde e imprescindvel que o sistema justifique uma decisao e indique a
seq
uencia de inferencia que leva à conclusao; e
os exemplos de treinamento podem conter erros.
65
5.2
Perceptron: A Primeira Unidade Neural
Marvin Minsky e Dean Edmonds construiram o primeiro computador neural em

1951. Ironicamente, Minsky mais tarde provou teoremas que contriburam para o fim
das pesquisas em redes neurais em meados de 1970 [37]. Embora a Ciencia da Computacao tenha desprezado o campo das redes neurais apos a publicacao do livro Perceptrons, por Minsky e Papert, trabalhos de pesquisa continuaram em outros domnios,
especialmente na Fsica. A motivacao principal veio nos anos 80 quando pelo menos 4
grupos reinventaram o algoritmo de propagacao reversa (back-propagation algorithm),
inicialmente proposto por Bryson e Ho em 1969 [10]. Os algoritmos foram aplicados a
varios problemas de aprendizagem em Ciencia da Computacao e Psicologia.
A estrutura basica da unidade perceptron e ilustrada na Figura 5.5. Em essencia, a
unidade recebe o sinais de entrada x1 , . . . , xn , pois assumimos que o sinal x0 e sempre
1, e os combina linearmente de acordo com os pesos sinapticos w0 , . . . , wn , obtendo o
sinal wT x, onde x = (x0 , . . . , xn ) e w = (w0 , . . . , wn ). O sinal de sada enviado pelos
canais y1 , . . . , ym sao identicos, assumindo o valor 1 se o sinal de wT x e positivo e
1 caso contrario. A funcao de sada se comporta, portanto, como um threshold: se
(w1 , . . . , wn )T (x1 , . . . , xn ) > w0 onde w0 contem o valor do threshold entao o sinal de
sada assume o valor maximo, 1, de outra forma o sinal assume o valor mnimo, -1.
Entrada
x0
Sada
y1 = sign(wT x)
w0
Peso das sinapses
x1
w1
y2
Threshold
S
S=
xn
n
P
wi x i
i=0
wn
ym
Figura 5.5: Perceptron.
5.2.1
Treinando um Perceptron
Sendo dado um conjunto de pontos de treinamento D = {(x1 , t1 ), . . . , (xM , tM )},

considere o problema de treinamento de um perceptron, que consiste em minimizar o
erro de predicao:
M
2
P
P : Minimize
sign(wT xk ) tk
w Rn
k=1
Quais sao os possveis obstaculos a serem encontrados na resolucao de P ? Um obstaculo

fundamental e o fato de que a funcao sign(x) nao e diferenciavel, o que inviabiliza o
emprego de algoritmos eficientes baseados no gradiente da funcao. Outra limitacao
66
fundamental advem do fato que o perceptron so consegue classificar corretamente, com

erro nulo, aqueles conjuntos de dados que sao linearmente separaveis. Note que a regiao
H = {x Rn : sign(wT x) 6 0} forma um hiper-espaco, sendo a regiao complementar
dada por H
= {x Rn : sign(wT x) > 0}. Em outras palavras, o perceptron define
H
um subespaco multidimensional, classificando como positivo os exemplos que estao de
um lado e como negativo os demais. Esta limitacao e ilustrada na Figura 5.6. O
perceptron pode ser usado para representar as funces logicas and, or, nor e nand. Por
si so, entretanto, o perceptron nao consegue implementar a porta logica xor. Todavia,
podemos aumentar o poder de representacao do peceptron se utilizarmos uma rede.
Qualquer funcao Booleana dada na forma normal disjuntiva (i.e., uma disjuncao de
clausulas) pode ser representada por uma rede de perceptrons.
x2
x2
+
+ +
+
+
+
+
+
+
+
+
x1
x1
Conjunto Linearmente Separ

avel
Conjunto Nao Separ
avel Linearmente
Figura 5.6: Conjuntos separaveis e nao separaveis linearmente.
O procedimento de treinamento de um perceptron e o elemento basico para desenvolver o procedimento de treinamento de uma rede. Assim apresentamos abaixo um
algoritmo de treinamento de um perceptron.
Algoritmo de Treinamento de um Perceptron
O vetor com pesos sinapticos w = (w0 , . . . , wn )
e inicializado randomicamente (0, 5 < wi < 0, 5)
taxa de aprendizagem (e.g., = 0, 01)
m 1 (temos M exemplos de treinamento)
Repita
Para i = 0, . . . , n
wi = [tm sign(wT xm )]xm
i
wi = wi + wi
Fim-Para
m mod(m, M ) + 1
67
Fim-Repita
Uma propriedade interessante do algoritmo acima e que ele converge sempre que o
conjunto de treinamento for linearmente separavel [37].
5.3
Regra Delta
Um dos obstaculos ao uso do perceptron e a possibilidade de falha quando os exemplos de treinamento nao sao linearmente separaveis. A regra delta supera esta dificuldade, propiciando a concepcao de um algoritmo que converge para a melhor aproximacao linear da relacao entre entrada e sada (a funcao entrada-sada desconhecida).
Em sntese, a regra delta consiste em substituir a sada o(x) = sign(wT x) pela sada
o(x) = wT x, i.e., simplesmente eliminamos a funcao sinal deixando a funcao de sada
o uma funcao linear e diferenciavel. A unidade delta e ilustrada na Figura 5.7.
x0
Entrada
w0
Sada
y1 = w T x
Peso das sinapses

y2 = w T x
x1 w 1
f (S) = S
xn
S=
wn
n
P
wi x i
i=0
ym = w T x
Figura 5.7: Unidade delta.
5.3.1
Treinando uma Unidade Delta
Dado um conjunto fixo de exemplos D = (x1 , t1 ), . . . , (xM , tM ), onde xk Rn+1

e tk R, k = 1, . . . , M , o problema de treinamento da unidade delta consiste em
encontrar o vetor w Rn+1 que minimize o erro de predicao. (Note que assumimos
que xk0 = 1.) Em programacao matematica, o problema e expresso como:
P : Minimize E(w) =
w Rn+1
1
2
M
P
k=1
w T xk t k
2
Portanto, o problema de minimizar a funcao E(w) esta dentro do domnio da otmizacao

diferenciavel sem restricoes. Podemos, por exemplo, aplicar o algoritmo de descenso
ou algoritmo de Newton. Qualquer que seja a abordagem, sera necessario calcular
68
o gradiente de E. Seja E = [E/w0 , E/w1 , . . . , E/wn ] o gradiente de E.

Podemos calcular a derivada parcial de E com respeito a wj como segue:
( M
)
X

1
E
2
=
w T xk t k
wj
wj 2 k=1
=
=
M
X
k=1
M
X
k=1
w T xk t k

w T xk t k
wj

wT xk tk xkj
Note que E pode ser convenientemente calculado em termos dos valores das sadas
para as diferentes entradas, wT xk tk , e o proprio valor da k-esima entrada xk . Se
utilizarmos um algoritmo de descenso para resolver o problema, entao dada uma
solucao candidata wl , o algoritmo de descenso busca a solucao alternativa wl+1 =
wl l E(wl ), sendo l a solucao (aproximada) do problema:

Minimize fl () = E wl l E(wl )
R
Sujeito a : > 0
A capacidade representacional de uma rede com m
ultiplas camadas de unidades lineares e superior à capacidade de uma unidade linear? Nao, pois uma composicao
linear de funcoes lineares continua sendo uma funcao linear. Assim, uma rede neural
multi-camada de unidades delta nao e mais representativa do que o espaco das funcoes
lineares.
5.4
A Unidade Sigmoid
Objetivando contornar as limitacoes da unidade delta e, ao mesmo tempo, incorporar o poder representacional de uma rede de perceptrons, foi proposto a aproximacao
da funcao threshold com uma funcao diferenciavel. Uma funcao com tais propriedades
e a funcao sigmoid (x), cujo comportamento e ilustrado na Figura 5.8.
Dados i) um grafo G = (V, A) representando uma rede com m
ultiplas camadas, cujas
unidades de processamento neural sao do tipo sigmoid, e ii) uma lista com exemplos de
treinamento (x1 , t1 ), . . . , (xM , tM ), onde xk Rn+1 e tk Rm , podemos utilizar o algoritmo de propagacao reversa para treinar a rede. (Lembramos que xk = [xk0 , xk1 , . . . , xkn ],
wk = [w0k , w1k , . . . , wnk ] e xk0 = 1.) Este algoritmo consiste em um algoritmo de descenso
que objetiva minimizar o erro entre as sadas da rede e os valores desejados. Em
programacao matematica, este problema pode ser especificado como:
P : Minimize E(w) =
w Rr
1
2
M
P

P
oj (xk ) tk 2
k=1 jSaida
onde w e o vetor com os pesos sinapticos de todos os arcos de G e oj (x) e a sada da

j-esima unidade da camada de sada da rede neural.
69
1
(x) =
1
1+ex
1
2
x
Figura 5.8: Funcao sigmoid.
Redes multi-camada com unidades sigmoid podem representar funcoes nao lineares
de elevada complexidade. Elas podem ser utilizadas em reconhecimento de voz, identificacao e modelagem de processos nao-lineares, e predicao de grandezas economicas.
Na Figura 5.9 e ilustrado um sistema neural para reconhecimento de palavras que toma
como entrada dois sinais com a intensidade de duas freq
uencias.
head
whod hood
hid
F2 (Hz)
had
heed
head
hid
hem
whod
F1
F2
hud
hood
heard
F1 (Hz)
Figura 5.9: Sistema neural para reconhecimento de palavras
5.5
Refer
encias
O presente captulo e uma sntese da parte de Redes Neurais do livro de Mitchell

[38]. Para uma exposicao rigorosa do algoritmo back-propagation recomendamos o livro
de Bertsekas [9].
70
Uma abordagem unificada de Redes Neurais com enfoque em modelagem e sistemas de controle aparece no artigo de Hagan e Demuth [26]. Este artigo propoe uma
modelagem generica de redes tipo perceptron multicamadas, introduzindo conceitos
fundamentais, discutindo o emprego de redes Neurais como aproximadores universais
e descrevendo um algoritmo de treinamento tipo back-propagation. Por fim os autores
fazem uma breve apresentacao dos modelos de controladores baseados em Redes Neurais. Para um aprofundamento maior das abordagens de controle, recomendamos os
seguintes artigos de revisao: [29], [6], [2].
5.6
Exerccios
EX 5.1: Implemente com um perceptron as funcoes logicas AND, NAND, OR e NOR.

EX 5.2: Considere o grafo G = (V, E) da Figura 5.10, o qual representa uma rede
neural com tres camadas: a camada de entrada com quatro unidades (vertices
do grafo); a camada intermediaria com duas unidades; e a camada de sada com
quatro unidades. Seja oj o valor da sada de uma unidade j. As unidades de
entrada simplesmente copiam os valores de entrada para suas sadas, ou seja,
(o1 = x1 , . . . , o4 = x4 ). As sadas da rede neural correspondem às sadas das
unidades da terceira camada (o7 = y1 , . . . , o10 = y4 ).
Seja j uma unidade intermediaria ou de sada. Esta unidade j calcula sua sada
oj como segue:
X
wij oi
netj =
(i,j)E
oj = (netj ) =
1
1 + enetj
O conjunto de entradas e sadas desejadas e dado na Tabela 5.1. Dados os pesos

dos arcos de G (w15 , w16 , w25 , w26 , . . . , w67 , w68 , w69 , w6,10 ), a rede neural pode ser
vista como uma funcao fw (x) : R4 R4 que, dado o valor de x, retorna o valor
estimado de y.
Tabela 5.1: Amostras para treinamento da rede neural
Amostra
Sada
t
t
t
t
t
t
t x = (x1 , x2 , x3 , x4 ) (y1 , y2t , y3t , y4t )
1
(0,0,0,1)
(0,0,0,1)
2
(0,0,1,0)
(0,0,1,0)
3
(0,1,0,0)
(0,1,0,0)
4
(1,0,0,0)
(1,0,0,0)
Tarefas
71
i. Formule o problema de treinar esta rede neural em programacao matematica.

(Sugestao: defina restricoes para calcular nettj e otj , para cada unidade j e
exemplo de treinamento t, como uma funcao dos pesos ws e das variaveis
nettj e otj que antecedem a unidade em questao; formule uma funcao objetivo
para minimizar o erro entre as sadas da rede neural e os valores desejados,
i.e, o erro entre ot6+k e o resultado esperado ykt , para k = 1, . . . , 4.)
ii. Se voce utilizou restricoes, reescreva o problema em programacao matematica sem utilizar restricoes.
iii. Aplique o algoritmo de descenso para encontrar os valores dos pesos
sinapticos w que minimiza o erro.
x1
w15
7
5
y1
x2
y2
x3
y3
10
y4
x4
w46
Figura 5.10: Topologia da rede neural.
72
Captulo 6
Programac
ao Linear
A programacao linear teve sua incepcao nos anos 30 e foi impulsionada nos anos
40 com o desenvolvimento do algoritmo Simplex por George Dantzig. Aplicacoes em
engenharia, ciencia da computacao, economia e matematica sao in
umeras. Alguns
pesquisadores consideram que os algoritmos de programacao linear sao os mais empregados na ciencia da computacao. Existem algoritmos que sao versoes especializadas do
algoritmo Simplex como, por exemplo, o algoritmo Simplex para problemas de fluxo
em redes. Em 1979, Khachiyan propos o primeiro algoritmo de tempo polinomial para
programacao linear. Este algoritmo, conhecido por elipsoide, nao teve sucesso pratico
em virtude do tamanho das matrizes geradas, pela necessidade de precisao numerica
acentuada e em decorrencia de instabilidade numerica. O algoritmo elipsoide tem conseq
uencias relevantes na programacao inteira e na solucao de problemas lineares com
um n
umero exponencial de restricoes1 . Mais recentemente, em 1984, Karmakar [30]
desenvolveu um algoritmo de ponto-interior com tempo polinomial e potencial para
resolver instancia praticas. Surge entao uma area intensa de pesquisa que se alastra
ate os dias atuais: algoritmos de ponto-interior para programacao linear, programacao
quadratica e outros problemas. Apesar do tempo polinomial dos algoritmos de pontointerior, o algoritmo Simplex continua sendo muito empregado, em parte porque ele
ainda e mais eficiente em uma gama consideravel de problemas e e tambem em funcao
de suas aplicacoes em programacao inteira.
Os assuntos tratados neste captulo sao uma compilacao de topicos dos textos de
Chvatal [11] e Vanderbei [42]. A Secao 6.1 ilustra uma aplicacao de programacao
linear e o conceito de problema dual. A Secao 6.2 apresenta a formulacao geral do
problema de programacao linear, enquanto a Secao 6.3 aborda o algoritmo Simplex por
meio de dicionarios. A Secao 6.4 trata da teoria da dualidade em programacao linear,
apresentando conceitos gerais, os teoremas fraco e forte da dualidade, e o teorema da
folga complementar. Por fim, a Secao 6.5 formaliza o algoritmo Simplex em notacao
compacta matricial.
1
Se um problema de programacao linear tem um n

umero exponencial de restricoes, mas existe
um algoritmo de tempo polinomial capaz de detectar uma restricao nao satisfeita por uma solucao
candidata, ent
ao o algoritmo elips
oide leva a um algoritmo de tempo polinomial para resolver o
problema em quest
ao.
74
6. Programacao Linear
6.1
Problema Exemplo: Gerenciamento de Uma

Unidade de Produc
ao
Uma unidade de producao pode manufaturar uma variedade de produtos N =

{1, . . . , n}, sendo estes produtos montados a partir de um conjunto de materias-primas
M = {1, . . . , m}. As decisoes gerenciais sao dinamicas, evoluindo conforme as condicoes
do mercado. Considere um certo momento onde: bi e a quantidade de materia-prima i
disponvel; i e o custo unitario da materia-prima i; a manufatura de uma unidade de
produto j requer aij unidades da materia-prima i; e o produto j pode ser vendido ao
preco j por unidade. A seguir investigaremos dois problemas relacionados.
6.1.1
Gerente de Produc
ao Otimista
O problema envolve a alocacao da materia-prima na manufatura de itens acabados.

Se o gerente decide produzir xj unidades do produto
Pm j, entao o lucro associado com a
venda de uma unidade de produto j e cj = j i=1 i aij . O problema de determinar
o n
umero de unidades a serem vendidas de forma a maximizar o lucro pode ser expresso
em programacao matematica como segue:
P0 : Maximize
n
P
c j xj
j=1
Sujeito a :
xj > 0
n
P
aij xj 6 bi
j = 1, . . . , n
(6.1)
i = 1, . . . , m
j=1
Assim, a tarefa do gerente e determinar as quantidades de producao, {xj }nj=1 , que

maximizem a funcao objetivo e satisfacam as restricoes de (6.1).
6.1.2
Gerente de Produc
ao Pessimista
Nesta situacao o gerente assume a posicao de contador tendo como tarefa avaliar o
preco de venda de cada materia-prima. Em outras palavras, a unidade de manufatura
nao produzira e passara a se comportar como um deposito. A unidade deve estar
preparada para vender a materia-prima. Assim seja wi o valor unitario para vender a
mat
Peria-prima i, a ser definido pelo gerente. O valor total da venda de todo o estoque
e m
e encontrar o valor mais baixo para venda que nao
i=1 bi wi . O objetivo do gerente
incorra perdas financeiras. Portanto, duas restricoes sao:
wi > i , i = 1, . . . , m, o valor do item i deve ser maior ou igual ao valor de
mercado; e
Pm
aij wj > j , j = 1, . . . , n, pois de outra forma seria mais lucrativo utilizar a

materia-prima para gerar produto j e vende-lo no mercado.
i=1
75
O problema a ser resolvido pelo gerente entao fica:

m
P
P1 : Minimize
bi w i
i=1
Sujeito a :
w i > i
m
P
aij wi > j
i = 1, . . . , m
j = 1, . . . , n
i=1
Agora, efetue a mudanca de variavel conforme segue:

w i > i w i y i = i e y i > 0
w i = y i + i e y i > 0
(6.2)
(6.3)
Em termos das variaveis {yi }m

i=1 , o problema se torna:
P2 : Minimize
m
P
bi yi +
m
P
b i i
i=1
i=1
Sujeito a :
m
P
aij yi +
m
P
aij i > j
j = 1, . . . , n
i=1
i=1
yi > 0
i = 1, . . . , m
Uma vez que bi i e uma constante para todo i, o problema pode ser expresso na forma
abaixo:
m
P
bi yi
P3 : Minimize
i=1
Sujeito a :
m
P
aij yi > cj
j = 1, . . . , n
i=1
yi > 0
i = 1, . . . , m
Veremos na seq
uencia que P3 e o problema dual de P0 .
6.2
O Problema de Programac
ao Linear
Programacao linear (PL) envolve a escolha de valores para variaveis de forma otima.
As variaveis {xj } sao ditas variaveis de decisao. O objetivo em PL e sempre maximizar
(minimizar) uma funcao linear:
Minimize c1 x1 + c2 x2 + . . . + cn xn
sob restricoes da forma:
6
= b
a1 x 1 + a2 x 2 + . . . + a n x n
>
76
facil converter uma restricao do tipo 6 em outra equivalente do tipo =:

E

a1 x 1 + a2 x 2 + . . . + a n x n + s = b
a1 x 1 + a2 x 2 + . . . + an x n 6 b
s>0
a1 x 1 + a2 x 2 + . . . + an x n > b
a1 x 1 + a2 x 2 + . . . + a n x n s = b
s>0
A variavel s e dita variavel de folga (slack variable), ja que seu valor corresponde à
quantidade de recurso b nao utilizada. Podemos tambem converter uma restricao do
tipo = em restricoes equivalentes do tipo 6:

a1 x 1 + a2 x 2 + . . . + an x n 6 b
a1 x 1 + a2 x 2 + . . . + a n x n = b
a1 x 1 + a2 x 2 + . . . + an x n > b
Podemos ainda converter variaveis irrestritas em sinal em variaveis nao negativas:
x = x+ x
x+ > 0
xR

x >0
Portanto, podemos assumir que qualquer problema em PL pode ser especificado (reexpresso) na forma abaixo:
P L : Maximize c1 x1 + c2 x2 + . . . + cn xn
Sujeito a :
a1,1 x1 + a1,2 x2 + . . . + a1,n xn
a2,1 x1 + a2,2 x2 + . . . + a2,n xn
..
.
6 b1
6 b2
.
6 ..
am,1 x1 + am,2 x2 + . . . + am,n xn 6 bm

x1 , . . . , xn > 0
Um vetor com valores para as variaveis de decisao x = (x1 . . . xn )T e dito uma solucao
candidata. A solucao x e dita factvel se satisfaz as restricoes. A solucao x e dita otima
se ela e factvel e induz o valor otimo da funcao objetivo.
Exemplo de Problema Infactvel

Um problema e dito infactvel se nao existe uma solucao candidata x Rn que
satisfaca às restricoes. O problema abaixo e um exemplo de problema infactvel, S =
{x Rn : Ax 6 b, x > 0} = , sendo este ilustrado na Figura 6.1.
Maximize 5x1 + 4x2
Sujeito a :
x1
+ x2 6 1
2x1 2x2 6 9
x1 , x2 > 0
77
x2
5
{x : x1 + x2 > 4.5}
4
3
2
{x : x1 + x2 6 1}
1
2
x1
5
x1 + x2 = 4.5
x1 + x2 = 1
3
Figura 6.1: Exemplo de problema infactvel. As regioes achuradas indicam as regioes

factveis para cada uma das restricoes. Observe que a intersecao das regioes achuradas
e vazia.
Exemplo de Problema Ilimitado

Um problema e ilimitado se nao existe um limite superior para o valor da funcao
objetivo, ou seja, podemos crescer o valor da funcao objetivo arbitrariamente. Abaixo
segue um exemplo de problema ilimitado cuja ilustracao e feita na Figura 6.2.
Maximize x1 4x2
Sujeito a :
2x1 + x2 6 1
x1 2x2 6 2
x1 , x2 > 0
6.3
Algoritmo Simplex
O algoritmo Simplex, proposto por George Dantzig nos anos 40, constituiu um
grande avanco cientfico-tecnologico e deu grande impulso ao campo da pesquisa operacional que estava dando os primeiros passos. O nome do algoritmo tem suas razes
no conceito de simplex: um plano que corta os vetores unitarios. O algoritmo como
e conhecido atualmente difere da versao original e tem servido de base para versoes
estendidas para tarefas especficas como, por exemplo, o metodo dual Simplex que e
amplamente adotado em implementacoes branch-and-bound e branch-and-cut para resolucao de problemas inteiros, e o metodo Simplex adaptado para o problema de fluxo
em redes de custo mnimo.
O algoritmo Simplex pode ser visto como um processo combinatorio que busca
encontrar as colunas da matriz de restricoes que induzem uma base e, portanto, uma
solucao basica otima. A dificuldade advem do fato que tipicamente existe um n
umero
78
x2
5
4
2x1 + x2 = 1
3
2
Regiao Factvel
{x : 2x1 + x2 6 1
x1 2x2 6 2}
1
2
3
x1
x1 2x2 = 2
Figura 6.2: Exemplo de problema ilimitado. Podemos avancar dentro da regiao factvel
de maneira a crescer o valor da funcao objetivo sem limites. Por exemplo, ao longo
da direcao (x1 , 0) podemos avancar sem limites, fazendo o valor da funcao objetivo
aumentar.
exponencial de possveis combinacoes de colunas, gerando portando um desempenho de
pior caso de ordem exponencial. Apesar deste aspecto desfavoravel, o algoritmo Simplex
e eficaz e para muitas instancias continua sendo o algoritmo mais rapido, mesmo quando
comparado com algoritmos de ponto-interior que tem desempenho polinomial no pior
caso.
No que segue apresentamos o algoritmo Simplex atraves de um exemplo.
seq
uencia daremos detalhes do algoritmo e trataremos aspectos de inicializacao.
6.3.1
Na
Exemplo
Considere o problema de programacao linear abaixo:

Maximize 5x1 + 4x2 + 3x3
Sujeito a :
2x1 + 3x2 + x3 6 5
4x1 + x2 + 2x3 6 11
3x1 + 4x2 + 2x3 6 8
x1 , x2 , x3 > 0
(6.4)
79
Apos adicionarmos variaveis de folga, o problema toma a forma a seguir:

Maximize
Sujeito a :
0 + 5x1 + 4x2 + 3x3
w1 = 5 2x1
w2 = 11 4x1
w3 = 8 3x1
x1 , x2 , x3 , w 1 , w 2 , w 3
3x2 x3
x2 2x3
4x2 2x3
>0
(6.5)
O sistema (6.5) coloca o problema de programacao linear em uma forma conhecida

por dicionario, na qual a funcao objetivo e um subconjunto de variaveis (vari
aveis
basicas) com cardinalidade igual ao n
umero de restricoes sao expressos em termos das
variaveis restantes (vari
aveis n
ao basicas). As variaveis nao basicas assumem valores
nulos e, portanto, uma solucao pode ser obtida diretamente a partir do dicionario.
Para o dicionario acima, a base e formada pelas variaveis w1 , w2 e w3 , enquanto que as
variaveis nao basicas sao x1 , x2 e x3 . Ja que as variaveis nao basicas assumem valores
nulos, obtemos diretamente os valores das variaveis basicas: w1 = 5, w2 = 11 e w3 = 8.
Note que a solucao obtida e factvel para o problema em questao uma vez que todas
as variaveis (basicas e nao basicas) sao nao negativas. Alem disso, a funcao objetivo
corrente tem valor = 0.
O metodo Simplex e um processo iterativo que inicia com uma solucao y 0 =
0 T
(x01 . . . x0n w10 . . . wm
) , onde n = 3 e m = 3, satisfazendo as equacoes de
(6.4). Partindo do dicionario (6.5), o Simplex busca uma nova solucao y 1 tal que:
5x11 + 4x12 + 3x13 > 5x01 + 4x02 + 3x03 . Para tanto, e necessario fazer uma solucao nao
basica com coeficiente positivo na equacao de entrar na base que, por sua vez, fara
a variavel nao basica aumentar e consequentemente elevar o valor da funcao objetivo.
Obviamente, a variavel que entra na base nao pode aumentar seu valor indefinidamente,
a menos que o problema seja ilimitado. A primeira variavel basica a se tornar nula
passa a ser uma variavel nao basica na iteracao seguinte. O processo entao se repete
ate que se convirja para uma solucao otima ou ate que se detecte que o problema e
ilimitado.
Abaixo ilustramos o funcionamento do Algoritmo Simplex na solucao da instancia
(6.4), conforme o esboco dado acima.
Algoritmo Simplex
Inicializa
c
ao: Para iniciarmos o processo, necessitamos de uma solucao factvel, tal
como:
x01 = 0, x02 = 0, x03 = 0, w10 = 5, w20 = 11, w30 = 8
Esta solucao y 0 induz o valor = 0 para a funcao objetivo.
Passo 1: A solucao corrente nao e otima. Qualquer acrescimo no valor de x1 aumenta
o valor de . Mas nao podemos aumentar o valor de x1 ilimitadamente ja que
este esta limitado pelas desigualdades abaixo:
2.5
w1 = 5 2x1 > 0
x1 6 5/2 =
w2 = 11 4x1 > 0
x1 6 11/4 = 2.75
w3 = 8 3x1 > 0
x1 6 8/3 = 2.667
80
Assim, o valor de x1 na proxima iteracao e o menor dentre {5/2, 11/4, 8/3}, o

que leva a igualdade:
3
1
5 1
(6.6)
x1 = w 1 x2 x3
2 2
2
2
Substituindo-se (6.6) no sistema (6.5) de maneira a transferir-se a variavel w1
para o lado direito, obtem-se:
x1
5
2
12 w1 23 x2 12 x3

w2 = 11 4 25 12 w1 23 x2 12 x3 x2 2x3
= 1 + 2w1 + 5x2

w3 = 8 3 25 12 w1 23 x2 12 x3 4x2 2x3
= 12 + 32 w1 + 21 x2 12 x3
(6.7)

= 5 25 21 w1 32 x2 12 x3 + 4x2 + 3x3
25 w1 27 x2 + 12 x3
= 25
2
Agora, substituindo as equacoes (6.7) no dicionario (6.5), obtem-se o dicionario

abaixo:
Max = 25
25 w1 72 x2 + 21 x3
2
x1 = 25 12 w1 32 x2 21 x3
(6.8)
w2 = 1 +2w1 +5x2
w3 = 21 + 32 w1 + 12 x2 21 x3
A solucao induzida pelo dicionario (6.8) e y 1 = (x11 , x12 , x13 , w11 , w21 , w31 ) =
( 52 , 0, 0, 0, 1, 12 ) cujo valor da funcao objetivo e = 25
. Neste dicionario, as
2
variaveis x1 , w2 , e w3 sao ditas variaveis basicas tal que o conjunto B =
{x1 , w2 , w3 } contem as variaveis basicas. As demais variaveis sao ditas nao
basicas, sendo o conjunto N = {x2 , x3 , w1 } o conjunto das variaveis nao basicas.
Passo 2: A solucao corrente nao e otima! Note que um pequeno acrescimo no valor
de x3 invariavelmente aumenta o valor de . Mas nao podemos aumentar o valor
de x3 ilimitadamente uma vez que isto poderia tornar a solucao infactvel (outras
variaveis poderiam assumir valores negativos). Para que a solucao resultante seja
factvel, as desigualdades abaixo devem ser respeitadas:

x1 = 52 12 x3 > 0
x3 6 5
1
1
w 3 = 2 2 x3 > 0
x3 6 1
Portanto, w3 deve sair da base para que a variavel x3 possa entrar na base sem
violar as restricoes. Apos substituirmos a equacao x3 = 1 + 3w1 + x2 2w3 nas
equacoes do dicionario (6.8), obtemos:
x1 = 25 21 w1 32 x2 12 (1 + 3w1 + x2 2w3 )
= 2 2w1 2x2 + w3
25 w1 72 x2 + 12 (1 + 3w1 + x2 2w3 )
= 25
2
= 13 w1 3x2 w3
(6.9)
81
Substituindo as equacoes do dicionario (6.8) pelas equacoes (6.9) obtemos um

novo dicionario:
Max
x1
w2
x3
= 13 w1 3x2 w3
= 2 2w1 2x2 +w3
= 1 +2w1 +5x2
= 1 +3w1 +x2 2w3
(6.10)
cuja base e B = {x1 , x3 , w2 }. A solucao dada pelo dicionario (6.10) e otima:

x1 = 2, x2 = 0, x3 = 1, w1 = 0, w2 = 1, w3 = 0, e = 13 e uma solucao
otima pois os coeficientes das variaveis nao basicas na equacao de , no dicionario
correspondente dado pelo sistema (6.10), sao todos negativos; aumentando o valor
de qualquer varavel nao basica reduzira o valor da funcao objetivo.
6.3.2
Algoritmo Simplex em detalhes
Nesta secao generalizamos os passos ilustrados acima para o caso geral do problema
de programacao linear. Considere a forma geral do problema de programacao linear:
Maximize
n
P
c j xj
j=1
Sujeito a :
n
P
(6.11)
aij xj 6 bi
i = 1, . . . , m
j=1
xj > 0
j = 1, . . . , n
Inicializa
c
ao: Obter Dicion
ario Inicial
Inicialmente e necessario introduzir variaveis de folga na formulacao (6.11) como
segue:
n
P
c j xj
=
j=1
(6.12)
n
P
aij xj
i = 1, . . . , m
w i = bi
j=1
Com o intuito de facilitar os proximos desenvolvimentos, vamos assumir que wi = xn+i

para i = 1, . . . , m, dessa forma gerando o dicionario:
n
P
c j xj
j=1
xn+i = bi
n
P
(6.13)
aij xj
i = 1, . . . , m
j=1
cuja base e dada pelas colunas correspondentes às variaveis do conjunto

{xn+1 , . . . , xn+m }. Seja B {1, . . . , n + m} o conjunto com os ndices das variaveis
basicas. Seja N = {1, . . . , n + m} B o conjunto com os ndices das variaveis nao
basicas. Inicialmente, vamos assumir que x1 = 0, . . . , xn = 0 induz uma solucao
82
factvel, o que equivale a dizer que bi > 0 para i = 1, . . . , m. Durante a aplicacao

do algoritmo Simplex, o dicionario assumira a forma:
P
cj xj
= +
jN
P
(6.14)
a
ij xj ,
i B
xi = bi
jN
onde cj e conhecido por custo reduzido da variavel nao basica xj .

Laco de Itera
c
ao
No que segue descrevemos os passos do algoritmo Simplex.
i. Escolha um k {j N : cj > 0}. Se nao existir nenhum k com tal propriedade,

entao a solucao corrente e otima. A variavel xk e dita vari
avel que entra na base.
ii. A variavel que saira da base e escolhida de forma que a solucao subseq
uente
continue viavel.
xi = bi a
ik xk i B bi a
ik xk > 0 i B
a
ik xk 6 bi
i B
Considerando a u
ltima desigualdade, surgem tres casos:
(a) Se nao existe a
ik > 0, i B, entao o problema e ilimitado (unbounded).
(b) Se existe bi = 0 e a
ik > 0 para algum i B, entao xi e a variavel que
sai da base e o pivoteamento e dito degenerado. Pivoteamento compreende
todos os passos envolvidos em uma mudanca de base. O pivoteamento e
dito degenerado porque uma variavel entrou na base com valor nulo e, conseq
uentemente, nao aumentou o valor da funcao objetivo.
(c) Se os dois casos acima nao ocorrem, entao a variavel que sai da base e
l {i B : a
ik /bi e maximo, a
ik > 0 e bi > 0}. Isto e, l {i B : bi /
aik e
mnimo}.
iii. Uma vez escolhida a variavel xk que entra na base e a variavel xl que sai da
base, executamos as operacoes apropriadas nas linhas do dicionario. A iteracao
e chamada de pivoteamento. Repetimos a partir do primeiro passo ate que uma
solucao otima seja atingida.
Nao ocorrendo pivoteamentos degenerados o algoritmo Simplex converge em tempo
finito para a solucao otima, ou este detecta que o problema e ilimitado. Na presenca de
pivoteamentos degenerados o algoritmo Simplex pode entrar em ciclos e nunca convergir. Para que isto seja evitado, regras de pivoteamento foram concebidas que garantem
convergencia em um n
umero exponencial no n
umero de colunas da matriz. Para maiores detalhes sobre regras de pivoteamento, o leitor pode consultar os textos de Chvatal
[11] e Vanderbei [42]. Uma regra simples que garante convergencia e a regra de Bland
(Blands rule). Segundo esta regra, a variavel que entra na base e a variavel que sai
da base, quando existir mais do que uma alternativa, sao aquelas que tiverem menor
ndice dentre os seus respectivos conjuntos de alternativas.
83
6.3.3
Inicializac
ao
Ate este momento, consideramos problemas cujos bi s sao todos nao negativos. Isso
permitia a obtencao de uma solucao viavel fazendo xj = 0 para j = 1, . . . , n e xi+n = bi
para i = 1, . . . , m. O que devemos fazer se algum bi e negativo? Contornamos esta
dificuldade ao resolvermos um problema auxiliar, cuja solucao inicial e viavel e cuja
solucao otima e viavel para o problema original, isto se este e factvel. O problema
auxiliar e expresso como segue:
PA : Maximize x0
Sujeito a :
n
P
aij xj x0 6 bi i = 1, . . . , m
(6.15)
j=1
xj > 0
j = 0, . . . , n
Nao e difcil de ver que o problema (6.11) possui uma solucao factvel se e somente
se a solucao otima do problema auxiliar (6.15) tem valor nulo como valor otimo da
facil de se obter uma solucao para (6.15): basta definir xj = 0 para
funcao objetivo. E
j = 1, . . . , n e tomar um valor suficientemente grande para x0 .
Exemplo
Aqui ilustramos o emprego do problema auxiliar na busca de uma solucao factvel
para um problema de programacao linear.
Problema Original: Considere como problema de programacao linear a formulacao:
Maximize 2x1 x2
Sujeito a :
x1 + x2 6 1
x1 2x2 6 2
x2 6
1
x1 , x2 > 0
Problema Auxiliar: De acordo com os desenvolvimentos anteriores, o problema auxiliar toma a forma:
Maximize x0
Sujeito a :
x1 + x2 x0 6 1
x1 2x2 x0 6 2
x2 x0 6
1
x0 , x1 , x2 > 0
Dicion
ario Inicial: Tomando o dicionario inicial como se os elementos bi s fossem
todos nao negativos, obtemos:
Max
w1
w2
w3
=
= 1 +x1 x2
= 2 +x1 +2x2
=
1
x2
x0
+x0
+x0
+x0
84
Para tornar o dicionario viavel, basta executar um pivoteamento com a variavel

x0 fazendo a variavel basica mais negativa sair na base. Assim x0 e a variavel
que entra na base enquanto que w2 e a variavel que sai da base. As equacoes a
seguir descrevem a operacao de pivoteamento.
x0
= 2 x1 2x2 + w2
w1 = 1 + x1 x2 + (2 x1 2x2 + w2 )
= 1 3x2 + w2
(6.16)
w 3 = 1 x2 + x0
= 1 x2 + (2 x1 2x2 + w2 )
= 3 x1 3x2 + w2
Executando o pivoteamento conforme
abaixo:
Max = 2
w1 = 1
x0 = 2
w3 = 3
equacoes (6.16), obtemos o dicionario

+x1 +2x2
3x2
x1 2x2
x1 3x2
w2
+w2
+w2
+w2
Segundo Pivoteamento: Fazendo x1 entrar na base, x0 deve obrigatoriamente deixar

a base, gerando o dicionario:
Max
w1
x1
w3
=
=
=
=
0 x0
1
3x2 +w2
2 x0 2x2 +w2
1 +x0 x2
Note que o dicionario acima e otimo para o problema auxiliar e, mais ainda, a
solucao candidata x1 = 2, x2 = 0, w1 = 1, w2 = 0 e w3 = 1 e factvel para o
problema original dado que = 0.
Obtendo Dicion
ario Factvel: Eliminando a coluna de x0 e introduzindo a funcao
objetivo inicial, obtemos um dicionario factvel para o problema original:
Max
w1
x1
w3
=
=
=
=
4
1
2
1
+3x2 2w2
3x2 +w2
2x2 +w2
x2
Pivoteamento: O dicionario acima nao e otimo, assim podemos fazer x2 entrar na

base e w1 sair da base, obtendo o dicionario:
Max
x2
x1
w3
= 3 w1
= 31
w31
= 43
+ 23 w1
2
+ w31
= 3
w2
+ w32
+ 31 w2
w32
Portanto, encontramos uma solucao otima do problema original, onde x1 =

x2 = 13 , com valor objetivo igual a 3.
4
3
85
6.4
Dualidade
Associado a um problema de programacao linear P (primal) esta outro problema

de programacao linear chamado de dual e denotado por D. Ha varias conseq
uencias
teoricas e praticas resultantes da teoria da dualidade. Por exemplo, qualquer solucao
para D induz um limite para o valor otimo da funcao objetivo de P, o problema primal,
e vice-versa.
6.4.1
Motivac
ao
Considere o problema exemplo abaixo:

P : Maximize 4x1 + x2 + 3x3
Sujeito a :
x1 + 4x2
6 1
3x1 x2 + x3 6 3
x1 , x2 , x3
> 0
(6.17)
Qualquer solucao factvel para P induz um limite inferior. Por exemplo, x = (1, 0, 0)
nos diz que o valor otimo da funcao objetivo > 4. Usando a solucao x = (0, 0, 3)
descobrimos que > 9. Quao proximo do otimo estao estes limites inferiores? Vamos
multiplicar a primeira restricao de (6.17) por 2, multiplicar a segunda restricao por 3,
e depois adiciona-las como segue:
2(x1 + 4x2 )
6 2(1)
3(3x1 x2 + x3 ) 6 3(3)
11x1 + 5x2 + 3x3 6 11
Note que 4x1 + x2 + 3x3 6 11x1 + 5x2 + 3x3 6 11, pois xj > 0. Assim conclumos que
9 6 6 11. Para obtermos limites superiores mais apertados, utilizamos o mesmo procedimento mas desta vez com variaveis em vez de n
umeros especficos. Multiplicamos
as restricoes por duas variaveis nao negativas:
y1 (x1 + 4x2 )
6 y1
y2 (3x1 x2 + x3 )
6 3y2
(y1 + 3y2 )x1 + (4y1 y2 )x2 + y2 x3 6 y1 + 3y2
Agora, estipulamos que:
y1 + 3y2
4y1 y2
y2
y1 , y2
>
>
>
>
4
1
3
0
(6.18)
Valores para (y1 , y2 ) satisfazendo as desigualdades (6.18) nos levam às seguintes desigualdades:
= 4x1 + x2 + 3x3
6 (y1 + 3y2 )x1 + (4y1 y2 )x2 + y2 x3
6 y1 + 3y2
86
Dessa maneira obtemos o limite superior (y1 + 3y2 ) para . Nossa tarefa e minimizar
este limite superior atraves da solucao do problema de programacao linear que segue:
D : Minimize y1 + 3y2
Sujeito a :
y1 + 3y2
4y1 y2
y2
y1 , y2
6.4.2
>
>
>
>
4
1
3
0
O Problema Dual
Aqui desenvolvemos a maneira atraves da qual o problema dual pode ser obtido a
partir do problema primal. Primeiramente, considere o problema primal que segue:
n
P
P : Maximize
c j xj
j=1
Sujeito a :
n
P
aij xj 6 bi
i = 1, . . . , m
> 0
j = 1, . . . , n
aij yi > cj
j = 1, . . . , n
> 0
i = 1, . . . , m
j=1
xj
O problema dual associado a P e:
m
P
D : Minimize
bi yi
i=1
Sujeito a :
m
P
i=1
yi
Queremos mostrar que o dual do dual e o problema primal. Podemos expressar o dual
como segue:
D : Maximize
Sujeito a :
m
P
bi yi
i=1
m
P
i=1
aij yi 6 cj
yi
> 0
j = 1, . . . , n
i = 1, . . . , m
Gerando o dual de D, obtemos:

DD : Minimize
n
P
j=1
Sujeito a :
n
P
j=1
xj
cj xj
aij xj > bi
> 0
i = 1, . . . , m
j = 1, . . . , n
87
que por sua vez pode ser colocado na forma:

n
P
DD : Maximize
c j xj
j=1
Sujeito a :
n
P
aij xj 6 bi
i = 1, . . . , m
> 0
j = 1, . . . , n
j=1
xj
Os desenvolvimentos acima demonstram que DD P .
6.4.3
O Teorema Fraco da Dualidade
Teorema 6.1 (Dualidade Fraca) Seja x = (x1 . . . xn )T uma solucao primal factvel e
y = (y1 . . . ym )T uma solucao dual factvel. Entao:
cT x =
n
X
c j xj 6
j=1
Prova:
n
P
c j xj 6
n
P
m
P
i=1
m
P
j=1
j=1
j=1
=
6
m
P
m
X
i=1
aij yi xj pois xj > 0 e

i=1
!
n
P
aij xj yi
bi yi
pois
n
P
m
P
aij yi > cj
i=1
aij xj 6 bi e yi > 0
j=1
i=1
bi yi = bT y
T
Se obtemos uma solucao primal x = (x1 . . . xn )T e uma dual y = (y1 . . . ym
)
ambas factveis, tal que
n
m
X
X
c j xj =
bi yi
j=1
i=1
entao podemos concluir que ambas as solucoes sao otimas para seus respectivos problemas. Para o problema exemplo dado por (6.17) as solucoes otimas sao x =
(0 0.25 3.25)T e y = (1 3)T .
6.4.4
O Teorema Forte da Dualidade
O fato de que em programacao linear nao ha folga entre o valor otimo da funcao
objetivo dos problemas primal e dual e conhecido como Teorema Forte da Dualidade.
Teorema 6.2 (Dualidade Forte) Se o problema primal admite uma solucao otima x
e o dual uma solucao
otima y , ent
ao:
c T x =
n
X
j=1
cj xj =
m
X
i=1
bi yi = bT y .
88
Ilustra
c
ao do Teorema Forte
Abaixo seguem os problemas primal e dual.
P : Max 4x1 + x2 + 3x3
S.a :
x1 + 4x2
6 1
3x1 x2 + x3 6 3
x1 , x2 , x3
> 0
D : Min y1 + 3y2
S.a :
y1 + 3y2
4y1 y2
y2
y1 , y2
>
4
>
1
>
3
>0
Os dicionarios iniciais sao:

Max = 0 +4x1 +x2 +3x3
w1 = 1 x1 4x2
w2 = 3 3x1 +x2 x3
Max
z1
z2
z3
=
=
=
=
0
y1
4 +y1
1 +4y1
3
3y2
+3y2
y2
+y2
Os dicionarios acima podem ser representados por duas matrizes, as matrizes P e D

abaixo:
0 1 3
0
4
1
3
4
1
3
0
D=
P = 1 1 4
1
4 1
3 3
1 1
3
0
1
Note que D = P T . Se aplicarmos o metodo Simplex ao problema primal e, ao mesmo

tempo, executarmos pivoteamento analogo no dual podemos verificar que a propriedade
D = P T sera mantida. Mais especificamente, considere uma solucao primal factvel a
qual faremos x3 entrar na base e w2 a deixar a base. Uma vez que as colunas do primal
correspondem às linhas do dual, conclumos que a coluna x3 do primal corresponde
à linha z3 do dual. Da mesma forma, a linha w2 do primal corresponde à coluna
y2 do dual. Portanto, a variavel y2 entra na base do dual enquanto que z3 deixa a
base.
Fazendo x3 entrar na base e w2 deixar a base, obtemos os dicionarios abaixo:
Max = 9 5x1 +4x2 3w2
w1 = 1 x1 4x2
x3 = 3 3x1 +x2 w2
Max
z1
z2
y2
=
=
=
=
9 y1
5
+y1
4 +4y1
3
3z3
+3z3
z3
+z3
Deixando x2 entrar na base e removendo w1 , produzimos os dicionarios abaixo:

(P rimal) : Max = 10
6x1
w1 3w2
1
1
x2 = 4
4 x1
41 w1
x3 = 3.25 3.25x1 41 w1 w2
(Dual) : Max
z1
y1
y2
=
=
=
=
10 0.25z2
6
+ 41 z2
+1 + 14 z2
3
3.25z3
+3.25z3
+ 14 z3
+z3
89
Ao analisarmos o dicionario do primal, verificamos que a solucao e otima, dado que os

coeficientes da linha da funcao objetivo sao todos negativos. Analisando o dicionario
do dual verificamos que este e factvel e tambem otimo. Para obter o dicionario do
primal a partir do dicionario do dual, obtenha a matriz transposta negativa e troque
xj por zj e wi por yi . Observe que enquanto o primal nao for otimo, a solucao induzida
pelo dicionario do dual e infactvel.
6.4.5
Folga Complementar
A folga complementar estabelece uma relacao algebrica entre a solucao primal otima
e a solucao dual otima. Tais condicoes podem ser obtidas a partir das condicoes de otimamlidade de primeira ordem para problemas nao-lineares (the Karush-Kuhn-Tucker
conditions), a serem discutidas mais à frente. Para dar uma ideia da importancia de
tais condicoes, os algoritmos ponto-interior primal-dual [45] em essencia buscam valores
para (x, y, w, z) R2(n+m) tal que (x, w) seja primal factvel, (y, z) seja dual factvel e
(x, y, w, z) satisfaca as condicoes de folga complementar.
Teorema 6.3 Suponha que x = (x1 . . . xn )T e uma solucao primal factvel e que
y = (y1 . . . yn )T e dual factvel. Seja w = (w1 . . . wm )T o vetor com as vari
aveis de
folga do primal e z = (z1 . . . zn )T o vetor com as vari
aveis de folga do dual. Entao x
e y s
ao solucoes
otimas para seus respectivos problemas se, e somente se,

xj zj = 0 para j = 1, . . . , n
(6.19)
yi wi = 0 para i = 1, . . . , m.
Fazendo X = diag(x1 , . . . , xn ), Z = diag(z1 , . . . , zn ), Y = diag(y1 , . . . , ym ) e W =
diag(w1 , . . . , wm ), as condicoes (6.19) podem ser expressas como:
XZe = 0
Y We = 0
onde e = (1 . . . 1)T e um vetor de dimensao apropriada com todas as entradas iguais
a 1. Portanto, (x, y, w, z) define solucoes primais e duais otimas se e somente se:
Ax + w
= b
= c
AT y z
XZe
= 0
(6.20)
Y
W
e
=
0
(x, y, w, z) > 0
Para o caso mais simples (mas igualmente geral), onde o problema primal so tem
restricoes de igualdade (Ax = b) enquanto o vetor de decisoes e nao nulo (x > 0), as
condicoes (6.20) assumem uma forma mais simples:
Ax
= b
T
A yz = c
(6.21)
= 0
XZe
(x, z)
> 0
90
Note que se nao fossem as restricoes x > 0 e as folgas duais z > 0, poderamos aplicar
o metodo de Newton. O caminho central C e um arco parametrizado por > 0, onde
um ponto (x , y , z ) C se resolver o sistema:
Ax
= b
T
A yz = c
(6.22)
XZe
=
(x, z)
> 0
O caminho central C = {(x , y , z ) : > 0} desempenha um papel importante na

teoria de algoritmos de ponto interior. As equacoes (6.22) aproximam as equacoes
(6.21) à medida que tende para zero. O caminho central guia a serie de solucoes
candidatas ao longo de uma direcao que se afasta de solucoes esp
urias ao exigir que
os produtos xi zi sejam estritamente positivos e decrescentes para zero a uma mesma
taxa. Muitos metodos primal-dual tomam o passo de Newton na direcao de C para
cada > 0, em vez de passos de Newton puros que ignoram as desigualdades. Uma
vez que estes passos tem tendencia para o centro do poliedro definido por (x, s) > 0,
tipicamente e possvel tomar passos mais longos do que passos de Newton puros sem
violar as desigualdades.
6.5
Algoritmo Simplex em Notac

ao Matricial
Apos inserirmos variaveis de folga sempre que necessario, podemos assumir a seguinte formulacao do problema de programacao linear:
Maximize cT x
Sujeito a :
Ax = b
x
> 0
(6.23)
O algoritmo simplex e um processo iterativo, consistindo em escolher variaveis basicas

a cada iteracao. A Figura 6.3 ilustra as operacoes de pivoteamento que produzem as
iteracoes x0 x1 . . . x , tendo como ponto de convergencia a solucao otima x .
Conforme notacao estabelecida acima, B e o conjunto de ndices das variaveis
basicas, enquanto N denota o conjunto dos ndices das variaveis nao basicas. Assim,
cada linha i de Ax = b pode ser escrita como
n
X
j=1
aij xj = bi
X
jB
aij xj +
aij xj = bi .
jN
Seja B a submatriz m m de A Rmn correspondente às colunas basicas. Note

que B tem posto completo, rank(B) = m, da surge o nome de matriz basica ja que
esta pode gerar o espaco de todos os possveis b Rm . A dificuldade combinatoria de
programacao linear esta em encontrar m colunas dentre n > m colunas que induzem a
solucao basica otima: o n
umero de possveis combinacoes de colunas e n!/m!(n m)!.
Seja N a submatriz m (n m) de A correspondente às colunas nao basicas. Entao,
podemos escrever Ax = b como BxB + N xN = b, onde xB e o vetor com as variaveis
91
basicas e xN , o vetor com as variaveis nao basicas. O problema (6.23) pode entao ser
expresso como:
Maximize cTB xB + cTN xN
Sujeito a :
(6.24)
BxB + N xN = b
x = (xB , xN ) > 0
x2
c
c
x(3) = x
x(2)
x(0)
x(1)
x1
Figura 6.3: Metodo simplex como um processo iterativo.
6.5.1
Dicion
ario em Forma Matricial
O dicionario tem a propriedade de que as variaveis basicas podem ser escritas como
uma funcao das variaveis nao basicas. Portanto,
BxB + N xN = b xB = B 1 b B 1 N xN .
(6.25)
Substituindo (6.25) na equacao da funcao objetivo, deduzimos que

= cTB xB + cTN xN =
= cTB (B 1 b B 1 N xN ) + cTN
xN
= cTB B 1 b + cTN cTB B 1 N xN .
Se combinarmos (6.25) e (6.26), obtemos o dicionario:
= cTB B 1 b + cTN cTB B 1 N xN

xB = B 1 b B 1 N xN .
(6.26)
92
6.6
Refer
encias
O material apresentado neste captulo foi compilado a partir dos textos de Chvatal [11] e Vanderbei [42], que sao excelentes referencias sobre programacao linear. A
segunda referencia e mais moderna, apresentando aplicacoes diversas, fazendo uma introducao à programacao convexa e tambem discutindo algoritmos de ponto-interior.
Para um estudo mais aprofundado de metodos de ponto-interior recomendamos o livro
de Wright [45].
6.7
Exerccios
EX 6.1: Utilize o metodo Simplex (executando as operacoes conforme ilustrado em

sala de aula) para resolver o problema abaixo:
Maximize 2x1 6x2
Sujeito a :
x1 x2 x3 6 2
2x1 x2 + x3 6 1
x1 , x2 , x3
> 0
EX 6.2: Utilize o metodo Simplex (no papel ou fazendo uso de pacote de otimizacao
linear) para resolver o problema abaixo:
Maximize 3x1 + 2x2
Sujeito a :
x1 2x2
x1 x2
2x1 x2
x1
2x1 + x2
x1 + x2
x1 + 2x2
x2
x1 , x2
6
6
6
6
6
6
6
6
>
1
2
6
5
16
12
21
10
0
EX 6.3: Mostre em um grafico a regiao factvel do problema dado em EX 6.2. Indique

a seq
uencia de solucoes basicas produzida pelo metodo Simplex.
EX 6.4: De um exemplo mostrando que uma variavel que se torna basica em uma
iteracao do Simplex pode se tornar nao-basica na iteracao seguinte.
EX 6.5: Mostre que uma variavel que se torna nao-basica em uma iteracao do Simplex
nao pode tornar-se basica na iteracao seguinte.
93
EX 6.6: Encontre o dual do seguinte problema de programacao linear:

P : Maximize cT x
Sujeito a :
a 6 Ax 6 b
l6x6u
x>0
EX 6.7: Ilustre o Teorema Forte da Dualidade no problema dado no exerccio EX 6.1.
(Se necessario, utilize o pacote de programacao linear lp solve disponvel no
diretorio /users/professores/camponog/lp solve 1.4)
EX 6.8: Para o problema de programacao linear dado por max{cT x : Ax 6 b, x >
0}, podemos dizer que as condicoes de folga complementar (Teorema 6.3) sao
equivalentes às condicoes abaixo?
xT z = 0
yT w = 0
EX 6.9: Considere o problema de programacao linear dado por:
PL : Maximize cT x
Sujeito a : Ax = b
x Rn
Sera que e necessario fazer uso de um algoritmo de programacao linear (e.g.,
Simplex) para resolver PL ?
EX 6.10: O problema de mnimos quadrados consiste em encontrar x Rn tal que
minimize f2 (x) = kAx bk2 . Seja P um problema semelhante ao de mnimos
quadrados onde utilizamos a norma l-1 e restricoes nos valores dos parametros:
P : Minimize f1 (x) = kAx bk1
x Rn
Sujeito a : x > l
x6u
onde A Rmn com m n e l, u Rn .
Como que voce resolveria P ? Escolha um conjunto de m = 30 pontos no plano

a partir de perturbacoes de pontos de uma reta conhecida. Ilustre a reta obtida
resolvendo um problema de mnimos quadrados e a reta obtida resolvendo P
(desconsidere as restricoes). (O problema de mnimos quadrados, min f2 (x), tem
solucao dada por x = (AT A)1 AT b.)
EX 6.11: Como voce resolveria o problema abaixo P dado por:
P : Minimize f (x) = kAx bk
x Rn
Sujeito a : x > l
x6u
onde A Rmn com m n e l, u Rn .
94
Captulo 7
Teoria dos Jogos
Situacoes onde os resultados dependem das decisoes de agentes independentes sao
comuns em engenharia, economia e ciencias humanas, entre outras. Em tais situacoes,
podemos estar interessados em formular um problema de decisao, simular o comportamento de um conjunto de entidades competitivas ou cooperativas, e ainda buscar uma
poltica de decisao que maximize os retornos. Com esse intuito, faremos uma breve introducao à Teoria dos Jogos, apresentando alguns conceitos basicos e formalismos, mas
nos concentraremos em jogos matriciais onde o ganho de um agente invariavelmente
incorre prejuzos ao outro (finite two-person zero-sum games).
7.1
Introduc
ao
A Teoria dos Jogos se preocupa com procedimentos de decisao entre m

ultiplos
agentes independentes, podendo ser de natureza dinamica quando a ordem das decisoes
afeta o resultado final e n
ao-cooperativa quando cada agente se preocupa com o benefcio
proprio, o que tipicamente esta em conflito com os interesses dos demais agentes.
Para melhor apresentar alguns conceitos, vamos assumir que x RN e o vetor
de decisoes compartilhadas por M agentes independentes, x = (x1 . . . xM )T , onde
xm RNm e a parte das decisoes que estao sob a autoridade do m-esimo agente e
P
M
e dito infinito quando as decisoes de pelo menos um agente,
m=1 Nm = N . Um jogo
digamos agente m, sao oriundas de um conjunto infinito de decisoes, o que equivale
a dizer que xm RNm . Um jogo e dito finito quando as decisoes de todos os agentes
sao provenientes de conjuntos discretos, por exemplo, xm Sm {1, . . . , k}. Um jogo
e dito dinamico quando as decisoes dos agentes evoluem no tempo, seja de maneira
contnua com xm (t) descrevendo as decisoes do agente m no instante t, seja de maneira
discreta com xm (k) correspondendo às decisoes para o agente durante a janela de tempo
[tk , tk+1 ) para k = 0, 1, . . . , .
importante tambem destinguir entre acoes (controles) e estrategias (regras de
E
decisao ou polticas de controle). Considere um motorista que deve decidir sobre qual
rota tomar para se deslocar de casa ao trabalho no dia seguinte, sendo as alternativas
tomar a rota mais curta atraves do t
unel ou seguir a rodovia ao longo do lago. Entao
uma estrategia para o motorista e: se o tempo estiver chuvoso ou se o t
unel estiver
congestionado, entao tomarei a rota mais longa ao longo do lago e, caso contrario,
96
7. Teoria dos Jogos
tomarei o t
unel. Isto e uma estrategia ou poltica de controle pois a decisao que sera
tomada depende de informacoes que nao estao sob controle do agente. Os resultados de
tal estrategia, apos as informacoes que nao podem ser antecipadas (condicoes climaticas
e condicoes de trafego) sao conhecidas, sao ditos acoes. De certa forma, uma estrategia
que nao depende de condicoes que nao podem ser antecipadas consiste de um conjunto
de acoes. No exemplo acima, as acoes sao seguir pelo t
unel ou seguir pela rodovia ao
longo do lago. Estrategias podem ser determinsticas, quando as acoes sao funcoes das
condicoes observadas (estado) ou estocasticas quando as acoes dependem das condicoes
mas sao tomadas probabilisticamente, podendo certas acoes ter mais ou menos probabilidade do que outras acoes alternativas. Ha jogos onde a estrategia otima deve ser
necessariamente estocastica. Um exemplo sera visto na parte de jogos matriciais na
seq
uencia.
A nocao de otimalidade tambem merece mencao. Para tanto, seja fm (x) a funcao
ganho que o m-esimo agente esta tentando maximizar, para m = 1, . . . , M . Observe
que fm depende tambem das decisoes de outros agentes. Surge portanto um jogo
dinamico. Seja x(k) o agregado das decisoes dos agentes no instante tk . Dado x(k), o
melhor curso de acao do agente m e uma decisao do seu conjunto reativo Rm (x(k)) no
ponto x(k), sendo este definido por:
Rm (x) = {xm : xm = argmaxym fm (x1 , . . . , xm1 , ym , xm+1 , . . . , xM )}
O conjunto reativo Rm (x) contem as solucoes otimas do problema de maximizar fm
sob a condicao que os demais agentes mantem fixas as suas decisoes. Logo, o agente m
implementa uma decisao xm (k + 1) Rm (x(k)) no instante tk+1 . Com todos os agentes
reagindo às decisoes dos demais com acoes dos seus respectivos conjuntos reativos surge
um processo iterativo:
x(k + 1) = G(x(k))
(7.1)
onde G(x) = (G1 (x) . . . Gm (x))T e Gm (x(k)) Rm (x(k)) define a funcao reativa de
cada agente m = 1, . . . , M . Note que o processo iterativo (7.1) so pode ser estavel
quando nenhum agente tem incentivo para se desviar de suas decisoes correntes, o que
equivale a dizer que:
x(k + 1) = G(x(k)) x = G(x )
sendo x um ponto fixo. O ponto fixo x e um ponto estavel para agentes competitivos:
qualquer agente m que implementar uma solucao xm 6= xm estara incorrendo perdas a
si proprio. Tais pontos sao conhecidos por pontos Nash. Surge portanto a questao de
convergencia de processos iterativos descritos por (7.1). Nao e difcil mostrar que uma
condicao suficiente para convergencia e satisfeita quanto kG(x) G(y)k < kx yk para
alguma norma vetorial k k.
Em jogos com soma zero (zero-sum games), onde o ganho de um agente corresponde à perda de outro agente, nao ha possibilidade para ganho m
utuo que permita
cooperacao, a menos que certos agentes sejam altrustas. Na proxima secao vamos
estudar polticas de decisao que induzem equilbrio em jogos sem possibilidade de cooperacao.
Em situacoes onde ha possibilidade de cooperacao, que levam dois ou mais agentes
a obterem ganhos maiores, o ponto Nash tipicamente induz ganhos inferiores. Os
pontos otimos sao conhecidos por solucoes Pareto. Um vetor de decisoes xP pertence
97
7. Teoria dos Jogos
ao conjunto Pareto, denotado por P, se nao existe um vetor de decisoes x tal que
fm (x) > fm (xP ) para m = 1, . . . , M e fm (x) > fm (xP ) para algum m. Em outras
palavras, xP P se nao existe um conjunto de decisoes que induza ganhos melhores
do que os induzidos por xP para todos os agentes.
O restante do captulo se concentra em jogos matriciais, que sao mais simples e que
podem ser resolvidos por meio da programacao linear, o que consiste em encontrar os
pontos de equilbrio do jogo, ou seja, as estrategias para os jogadores que induzem um
ponto Nash.
7.2
Jogos Matriciais
Em jogos matriciais cada agente seleciona uma acao dentre um n

umero finito de
possibilidades que nao depende da escolha do agente oponente. O agente 1, denotado
por agente linha, escolhe a acao i enquanto que o agente 2, denotado por agente coluna,
escolhe a acao j. Para o par de acoes (i, j), o agente 1 paga aij unidades ao agente 2 se
aij > 0; caso contrario, se aij < 0, o agente 2 paga aij unidades ao agente 1. Assim
o jogo matricial e representado por uma matriz A Rmn onde o agente linha pode
escolher dentre m acoes e o agente coluna tem n acoes.
7.2.1
O Jogo da Tesoura, Pedra e Papel
Conforme matriz dada em (7.2), cada iteracao do jogo tem como resultado vitoria
para um dos agentes (e derrota para o outro agente) ou empate. Neste jogo, nenhum
agente possui uma estrategia determinstica vencedora: se um agente sempre escolhe
uma alternativa, entao o outro agente pode selecionar a opcao que o leva à vitoria.
Portanto, os agentes devem randomizar suas estrategias mas, em virtude da simetria
do problema, cada agente deve selecionar uma das alternativas com probabilidade 1/3.
Por exemplo, se o agente linha seleciona papel com probabilidade 1/2 e escolhe pedra
e tesoura com probabilidade 1/4, entao se o agente coluna selecionar tesoura com
probabilidade 1 ele vencera em 50% das vezes, empatara em 25% das vezes e sera
derrotado em apenas 25% das vezes.
A=
7.2.2
P apel
T esoura
P edra
P apel T esoura P edra

0
1
1
1
0
1
1
1
0
(7.2)
Um Jogo Menos Trivial
Considere um jogo cuja matriz de ganhos e perdas e definida como segue:
0
1 2
0
4
A = 3
5 6
0
(7.3)
Este jogo tem a propriedade de que qualquer estrategia fixa pode ser explorada pelo
agente oponente. Por exemplo, se o agente linha escolha a primeira linha em todas as
98
7. Teoria dos Jogos
jogadas, entao o agente coluna pode escolher a segunda coluna obtendo um ganho de
1 unidade a cada iteracao. Novamente, os agentes devem randomizar suas estrategias.
Mas agora a probabilidade uniforme de 1/3 nao e mais otima. Alem disso, qual dos
agentes tem vantagem neste jogo? Note que:
X
aij = 10
i,j:aij >0
aij = 11
i,j:aij <0
o que nos leva a suspeitar que o agente linha tem vantagem neste jogo.
7.3
Formalizac
ao
Se o agente linha segue uma estrategia randomizada, entao o agente coluna observa
que a probabilidade do agente linha escolher a opcao i e yi . O vetor de probabilidades
y Rm do agente linha e chamado de vetor estocastico, o qual satisfaz as propriedades:
y > 0, eT y = 1
onde e e um vetor com todas as entradas iguais a 1. Se a estrategia do agente coluna
for modelada por um vetor estocastico x, entao o ganho esperado do agente coluna e
dado por:
m X
n
X
yi aij xj = y T Ax.
i=1 j=1
7.4
Estrat
egia Otima
para o Agente Coluna
Suponha que o agente coluna decide jogar de acordo com a estrategia x. Nesta
situacao, a melhor defesa do agente linha e a estrategia y que resolve o seguinte
problema:
y = Argmin
y T Ax
y Rm
Sujeito a :
(7.4)
T
e y=1
y>0
A partir do Teorema Fundamental da Programacao Linear, sabemos que existe pelo
menos uma solucao basica otima. Por exemplo, para a matriz A dada em (7.3), suponha
que x = (1/3, 1/3, 1/3). Entao:
1/3
1/3
0
1 2
0
1 2
0
4 1/3 = 1/3
0
4 x = 3
Ax = 3
1/3
1/3
5 6
0
5 6
0
Assim a melhor estrategia para o agente linha e y = (1, 0, 0), y = (0, 0, 1), ou qualquer
combinacao convexa de y e y . Uma vez que dado x o agente linha escolhe uma
99
7. Teoria dos Jogos
estrategia y que produz o mnimo de (7.4), entao o agente coluna pode se antecipar
escolhendo a estrategia x que produz o maximo do seguinte problema:
x = Argmax Min y T Ax
x
y
S.a :
eT x = 1
eT y = 1
x, y > 0
(7.5)
Enquanto que o problema (7.4) pode ser resolvido atraves de programacao linear,
o problema (7.5) envolve dois operadores de otimizacao. De que forma poderamos
resolver (7.5)? O problema (7.5) pode ser resolvido por meio de programacao linear.
Lembre que ja verificamos como que o problema interno (Min) pode ser resolvido por
meio de uma estrategia determinstica:
Max Min y T Ax = Max Min {eT1 Ax, eT2 Ax, . . . , eTm Ax}
x
y
x
(7.6)
onde ei e um vetor com todas as entradas iguais a zero, com excecao da i-esima entrada.
O problema (7.6) pode ser expresso em programacao linear como segue:
Px : Max z
S.a :
z 6 eT1 Ax
..
.
Max z
S.a :
ez 6 Ax
eT x = 1
x>0
z irrestrito em sinal
z 6 eTm Ax
eT x = 1
x>0
O problema acima pode se colocado em uma forma matricial:

Px : Max
S.a :
0 1
x
z

0
6
x
A e
T
1
=
z
e 0
x>0
(7.7)
Os desenvolvimentos acima mostram que a estrategia otima x do agente coluna e

precisamente a solucao do problema Px .
100
7.5
7. Teoria dos Jogos
Estrat
egia Otima
para o Agente Linha
Por simetria, pode ser verificado que o agente linha procura uma estrategia y que
produz a solucao otima do seguinte problema min-max:
Min Max y T Ax
Min Max {y T Ae1 , y T Ae2 , . . . , y T Aen }
y
x
y
S.a :
S.a :
T
e y=1
eT y = 1
T
e x=1
y>0
x, y > 0
(7.8)
O problema (7.8) pode ser expresso em programcao linear como segue:

Py : Min w
S.a :
w > y T Ae1
..
.
w > y T Aen
eT y = 1
y>0
w irrestrito em sinal
Min w
S.a :
ew > AT y
eT y = 1
y>0
Da mesma forma que para o agente coluna, podemos expressar o problema de encontrar
uma estrategia otima em uma forma matricial:

y
0 1
Py : Min
w
S.a :

0
>
y
AT e
(7.9)
1
=
w
eT 0
y>0
7.6
Rela
c
ao entre os Problemas Px e Py
Considere o problema Px na sua forma matricial (7.7). Vamos obter o problema

dual de Px introduzindo as variaveis duais y (para as linhas da matriz A) e a variavel
w para a u
ltima restricao de Px , conforme desenvolvimento abaixo:

x
0 1
Px : Max
z
S.a :

0
6
x
A e
(y)
(7.10)
T
1
=
z
e
0
(w)
x>0
z irrestrito.
101
7. Teoria dos Jogos
O dual do problema (7.10) e:

Px : Min
S.a :
0 1
y
w

w
y>0
w irrestrito

A e
eT 0
>
=
0
1
T
que pode ser manipulado de forma a se obter:

y
0 1
Px : Min
w
S.a :

0
>
y
AT e
1
=
w
eT
0
y>0
w irrestrito
(7.11)
(7.12)
Assim conclumos que o dual de Px corresponde ao problema Py , ou seja, Px Py . Ao

resolver seu problema Px , o agente coluna obtem sua estrategia otima x e tambem a
estrategia otima y do agente linha.
7.7
Teorema Minimax
Inicialmente demonstrado por John Von Neumann em 1928, pode ser facilmente
demonstrado atraves da Teoria da Dualidade Linear.
Teorema 7.1 Existem vetores estocasticos x e y para os quais
Max y T Ax = Min y T Ax .
x
y
Prova: Observando que o dual de Px e Py e que ambos os problemas tem regioes
factveis limitadas, conclumos que z = w sendo z o valor otimo de Px e w o valor
otimo de Py . Pelo lado de Px , deduzimos que:
z = max min{eT1 Ax, . . . , eTm Ay}
x
= min{eT1 Ax , . . . , eTm Ax } [Assumindo que x e solucao otima de Px ]

= min y T Ax
[Ha uma solucao basica otima]
(7.13)
y
Pelo lado de Py , deduzimos que:

w = min max{y T Ae1 , . . . , y T Aen }
y
= max{y T Ae1 , . . . , y T Aen } [Assumindo que y e solucao otima de Py ]

[Ha uma solucao basica otima]
(7.14)
= max y T Ax
x
102
7. Teoria dos Jogos
A partir dos desenvolvimentos acima conclumos que:

min y T Ax = z = w = max y T Ax
y

O valor otimo z = w dos problemas primal e dual e chamado de valor otimo do
jogo. Ao adotar a estrategia y , o agente linha garante que nao perdera mais do que w
unidades em media. Similarmente, o agente coluna assegura que recebera pelo menos
z unidades em media se adotar a estrategia x .
Um jogo com valor z = w = 0 e dito justo. Jogos cujos papeis dos agentes podem
ser invertidos sao ditos jogos simetricos. Esses jogos sao justo e caracterizados por
aij = aji para todo i, j, isto e, A = AT . Uma matriz A e dita anti-simetrica se
A = AT .
7.8
Jogos Quadr
aticos
Aqui vamos discutir e ilustrar as questoes de convergencia e otimalidade em jogos

dinamicos restritos a funcoes quadraticas. Dentro deste contexto, o problema de decisao
do agente m e dado formalmente por:
Pm : Minimize
xm
1 T
x Am x
2
+ bTm x + cm
onde: xm e um vetor com as decisoes do agente; x = (x1 . . . xM )T e um vetor com

as decisoes de todos os agentes; Am e uma matriz simetrica positiva definida; bm e um
vetor; e cm e um escalar. Quebrando Am em sub-matrizes e bm em sub-vetores, Pm
pode ser colocado na forma:
Pm : Minimize
xm
onde:
Am =
Am,1,1
Am,2,1
..
.
1
2
M
M P
P
i=1 j=1
Am,1,2
Am,2,2
..
.
xTi Am,i,j xj +
...
...
...
Am,1,M
Am,2,M
..
.
Am,M,1 Am,M,2 . . . Am,M,M
M
P
i=1
bTm,i xi + cm
e bm =
bm,1
bm,2
..
.
bm,M
Note que o conjunto reativo do agente m, Rm , e obtido nulificando o gradiente

de fm com respeito a xm . Ou seja, Rm (ym ) = {xm : xm fm (ym ) = 0}. Alem disso,
o processo iterativo Gm surge da selecao de um elemento de Rm . Logo, xm (k + 1) =
Gm (ym (k)) onde Gm e uma funcao tal que Gm (ym ) Rm (ym ). De acordo com a notacao
estabelecida, o processo iterativo do agente m em jogos quadraticos assume a forma:
xm (k + 1) = Gm (ym (k))
= [Am,m,m ]1 [
(7.15)
X
n6=m
Am,m,n xn (k) + bm,m ]
(7.16)
103
7. Teoria dos Jogos
onde ym = (x1 . . . xm1 xm+1 . . . xM )T e o vetor com as decisoes dos agentes adversarios ao agente m.
Agregando os processos iterativos (7.16) de todos os agentes, podemos expressar
o processo iterativo global G como sendo a solucao do sistema de equacoes lineares
abaixo:
Ax(k + 1) = Bx(k) b
(7.17)
onde A, B e b sao matrizes e vetores definidos como:
A1,1,1
0
...
0
b1,1
0
b2,2
A2,2,2 0 . . .
0
A = ..
, b = .. e
..
.. . .
.
.
.
.
0
.
0
0
. . . 0 AM,M,M
bM,M
0
A1,1,2 A1,1,3
...
A1,1,M
A2,2,1
0
A2,2,3
...
A2,2,M
B=
..
..
..
.
.
.
.
.
0
.
AM,M,1 AM,M,2 . . . AM,M,M 1
0
A solucao de (7.17) leva a um processo iterativo:
x(k + 1) = G(x(k)) = A1 [Bx(k) + b]
(7.18)
Com relacao à convergencia das decisoes dos agentes, se ela ocorre e para um ponto
Nash x :
x = G(x ) Ax = Bx + b
x = A1 Bx + A1 b
x = (I A1 B)1 A1 b = (A B)1 b
Nao e difcil mostrar que se |||A1 B||| < 1 para alguma norma-matricial ||| |||
induzida por uma norma-vetorial k k entao G induz um processo contrativo1 que, por
sua vez, garante convergencia do processo iterativo (7.18) para o ponto Nash x .
7.8.1
Exemplo
Objetivando exemplificar os conceitos apresentados, tomemos como exemplo um

jogo entre dois agentes cujos problemas sao dados abaixo:
P1 : Min f1 = 44.7590x21 28.8706x1 x2 + 10.2410x22 150x1 20x2 + 500
x1
P2 : Min f2 = 19.4886x21 34.4779x1 x2 + 25.5114x22 120x1 + 10x2 + 350
x2
Nao e difcil resolver os sistema de equacoes (7.18) e verificar que o ponto Nash e
u
nico, sendo dado por x = (2.0618 1.1972)T o que incorre um custo f1 (x ) = 300.4713
1
||G(y) G(x)k < ky xk
104
7. Teoria dos Jogos
ao agente 1 e f2 (x ) = 148.8665 ao agente 2. Pode-se ainda verificar que o jogo e

convergente ao ponto Nash qualquer que seja o conjunto de decisoes iniciais.
As curvas de nvel das funcoes objetivo dos agentes, juntamente com os conjuntos
reativos R1 (x2 ) e R2 (x1 ), ponto Nash e solucoes Pareto podem ser visualizados na
Figura 7.1. Uma trajetoria de decisoes tambem e ilustrada. Observe que existem
solucoes com valores melhores do que àqueles induzidos pelo ponto Nash, ou seja, as
solucoes Pareto produzem melhores resultados, todavia nao sao pontos estaveis para
agentes competitivos. A proposito, xP = (3.8531 3.5534) e um elemento do conjunto
pareto P, o qual induz custos f1 (xP ) = 249.50 e f2 (xP ) = 62.57 que incorrem custos
reduzidos a ambos os agentes se comparados aos custos produzidos pelo ponto Nash
x .
10
x2
9
R1
R2
Nash
10
x1
Figura 7.1: Curvas de nvel, conjuntos reativos, solucao Nash e pontos Pareto de um
jogo quadratico entre dois agentes.
7.9
Refer
encias
O texto de Aumann e Hart [4] e uma referencia padrao para a teoria dos jogos,
cobrindo a teoria, modelos e aplicacoes com enfoque economico. A referencia e recomendada para aqueles que desejam investigar a area mais a fundo e apreciar o espectro
de aplicacoes. O livro de Basar e Olsder [7] tambem e amplamente adotado. Este texto
trata de maneira rigorosa a teoria de jogos nao-cooperativos, sejam eles de natureza
estatica ou dinamica, discretos ou infinitos. Os autores apresentam a teoria e aplicacoes
com enfoque em engenharia de controle que podera ser particularmente desejavel aos
engenheiros de controle e eletricos. Mesterton-Gibbons [35] faz uma introducao suave
e gradual à teoria dos jogos procurando integrar modelagem de fenomenos biologicos
e formalismos matematicos. Os conceitos fundamentais sao apresentados por meio de
105
7. Teoria dos Jogos
exemplos ilustrativos sobre o comportamento humano e artificial, incluindo compartilhamento de recursos, estabelecimento de precos e taxas, e competicao sobre territorios.
A teoria dos jogos tem sido aplicada recentemente para facilitar o entendimento de
sistemas complexos e distribudos, bem como buscar polticas de controle que melhorem
o desempenho agregado. Por exemplo, a teoria pode ser empregada para modelar
problemas em robotica movel [33] e projetar polticas de alocacao de banda em redes
de computadores [46].
7.10
Exerccios
EX 7.1: Primeiramente considere o jogo matricial dado pela matriz:
0
1 2
0
4 .
A = 3
5 6
0
Encontre o vetor estocastico com a poltica de decisao do agente coluna resolvendo

o problema Px com um pacote de otimizacao linear tal como lp solve. Encontre
a solucao dual de Px diretamente a partir da solucao de Px . Repita os passos
anteriores para o agente linha. O jogo dado por A e justo?
Ex 7.2: Dois jogadores, A e B, escondem independentemente uma moeda de 5 ou

10 centavos. Se as moedas escondidas possuem a mesma denominacao, entao o
jogador A recebe ambas; se as moedas sao de denominacao diferente, entao o
jogador B recebe ambas.
i. Encontre as estrategias otimas.
ii. Qual dos jogadores tem vantagem?
iii. Resolva o problema para quaisquer denominacoes a e b.
Ex 7.3: Dois jogadores, A e B, escolhem independentemente um n
umero entre 1 e
100. Os jogadores empatam se eles escolhem o mesmo n
umero. De outra forma,
o jogador que escolheu o menor n
umero ganha, digamos x, a menos que o oponente
tenha escolhido precisamente o n
umero x + 1. Encontre a estrategia otima para
os jogadores. (Sugestao: utilize um pacote de programacao linear, tal como
lp solve).
EX 7.4: Considere um jogo onde dois agentes procuram minimizar funcoes custo que
dependem das decisoes do outro. Seja x RM o vetor de decisoes. Cada agente
m tem autoridade sobre a variavel xm e tem como objetivo resolver o problema:
Pm : Minimize fm (ym ) = 21 xT Am x + bTm x + cm
xm
onde ym = [xj : j 6= m]. Considere um jogo onde M = 2,

150
89.5180 28.8706
, c1 = 0, e
, b1 =
A1 =
20
28.8706
20.4820
106
7. Teoria dos Jogos
A2 =
38.9772 34.4779
34.4779
51.0228
, b2 =
120
0
, c2 = 0.
Se cada agente m busca iterativamente minimizar os seus custos, implementando

a decisao xm que minimiza fm em resposta aos valores de ym , podemos afirmar
que as iteracoes x(k) convergem para um ponto fixo x ? Um ponto e dito fixo
se as decisoes dos agentes nao se alteram. Tal ponto e tambem conhecido como
ponto Nash. Se existir um ponto Nash, este ponto e um u
nico? Podemos afirmar
que o ponto Nash e um ponto Pareto (solucao global otima)?
Captulo 8
Fluxo em Redes
Neste captulo nos concentraremos em problemas de programacao linear que apresentam uma estrutura de redes, ou seja, problemas cujas variaveis advem de valores a
serem definidos para os arcos de um grafo direcionado. Na literatura existem algoritmos especficos para resolver problemas desta classe de uma forma mais eficiente do que
com algoritmos de proposito geral. O problema mais geral desta classe e o problema
de fluxo em redes de custo mnimo, para o qual uma variedade de problemas praticos
podem ser reduzidos e resolvidos eficientemente.
Visando motivar o estudo da otimizacao em redes, a Secao 8.1 apresenta os problemas classicos de transporte e de alocacao. Ambos foram estudados extensivamente
na literatura e podem ser reduzidos ao problema de fluxo de custo mnimo. Na Secao
8.2 investigaremos o problema de fluxo maximo que corresponde a enviar a quantidade
maxima de fluxo de um vertice fonte s a um vertice destino t, enquanto que respeitando as capacidades dos arcos. Apresentaremos algumas aplicacoes de fluxo maximo,
o algoritmo de caminhos aumentantes e o Teorema de Fluxo-Maximo Corte-Mnimo.
A Secao 8.3 se concentra no modelo mais geral de fluxo de custo mnimo, descrevendo
aplicacoes, operadores de transformacao entre modelos e um algoritmo basico para
resolucao do problema. Por fim, a Secao 8.4 faz uma introducao à propriedade de
unimodularidade total de matrizes de incidencia de redes e suas implicacoes.
8.1
Dois Problemas Cl
assicos
No que segue apresentamos dois problemas classicos que podem ser reduzidos ao
problema de fluxo em redes de custo mnimo.
8.1.1
O Problema de Transporte
Neste problema nos sao dados um conjunto de fornecedores e um conjunto de clientes. Os fornecedores tem suas capacidades de producao limitadas, ja os clientes
possuem demandas a serem supridas. O custo unitario de transporte do deposito do
fornecedor si para o cliente tj e dado por cij . A Figura 8.1 traz uma ilustracao do problema de transporte. Desejamos entao encontrar a quantidade a ser produzida por cada
fornecedor e as quantidades a serem enviadas aos clientes de maneira que o custo total
108
8. Fluxo em Redes
seja o menor possvel, ao mesmo tempo que as restricoes de capacidade de producao e

de demanda sejam respeitadas. Os dados de uma instancia do problema sao:
S = {s1 , . . . , sm } e o conjunto de fornecedores;
T = {t1 , . . . , tn } e o conjunto de clientes;
ui e a capacidade de producao do fornecedor si ;
dj e a demanda do cliente tj ; e
cij e o custo unitario de transporte do fornecedor si para o cliente tj .
Clientes
Forncedores
(u1 )s1
c1n
c11
c12
t1 (d1 )
(u2 )s2
t2 (d2 )
(um )sm
tn (dn )
Figura 8.1: Problema de transporte.

O problema de encontrar a alocacao de producao e transporte entre fornecedores e
clientes que minimiza o custo agregado de transporte (problema de transporte) pode
ser formulado em programacao matematica:
Minimize
n
m P
P
cij xij
i=1 j=1
Sujeito a :
m
P
i=1
n
P
j=1
xij = dj
j = 1, . . . , n
xij ui
i = 1, . . . , m
xij 0
i = 1, . . . , m
j = 1, . . . , n
onde xij e a quantidade produzida/enviada pelo fornecedor si ao cliente tj . Uma

instancia exemplo do problema de transporte e dada nas Tabelas 8.1, 8.2 e 8.3.PObserve
m
que a capacidade
Pntotal de producao supera a demanda agregada dos clientes: i=1 ui =
284 > 275 = j=1 dj . De outra forma o problema seria infactvel. A solucao otima
109
8. Fluxo em Redes
para este problema tem custo 25919 sendo dada por:
x11 = 0
x13 = 39 ,
x14 = 87
x21
x22
x31
x32
= 56
, e
x33
=0
x34
=6
= 83
=0
=4
Tabela 8.1: Capacidade de producao dos fornecedores

Fornecedores s1 s2 s3
Capacidade
135 56 93
Tabela 8.2: Demanda dos clientes

Cliente
t1 t2 t3 t4
Demanda 62 83 39 91
Tabela 8.3: Custo unitario de transporte

Fornecedores
s2
s3
Cliente s1
t1
132
85 106
t2
+ 91
89
t3
97 + 100
t4
103 + 98
8.1.2
O Problema de Alocac
ao
O problema de alocacao (assignment problem) consiste em designar n pessoas a n

tarefas com vistas a maximizar algum criterio de competencia/aptidao. Seja cij o nvel
de competencia/aptidao da pessoa i ao executar a tarefa j. Podemos entao expressar
o problema em programacao matematica:
Maximize
n
n P
P
cij xij
i=1 j=1
Sujeito a :
n
P
i=1
n
P
xij = 1
j = 1, . . . , n
xij = 1
i = 1, . . . , n
j=1
xij {0, 1}
i = 1, . . . , n
j = 1, . . . , n
(8.1)
110
8. Fluxo em Redes
onde xij assume o valor 1 se a pessoa i e designada à tarefa j e 0 caso contrario. A

primeira restricao de (8.1) garante que cada tarefa tera exatamente uma pessoa alocada.
A segunda restricao forca cada pessoa a ficar responsavel por exatamente uma tarefa.
O poliedro definido pelas duas primeiras famlias de restricoes de (8.1) e as restricoes
0 xij 1, i, j, tem todos os verticies inteiros. Isto equivale a dizer que as solucoes
basicas da relaxacao contnua de (8.1) sao inteiras e, portanto, a relaxacao linear resolve
o problema de alocacao: basta substituir as restricoes de integralidade xij {0, 1}
com 0 xij 1 e aplicar o algoritmo Simplex. Esta propriedade advem da matriz de
restricoes N do problema ser totalmente unimodular, isto e, o determinante de qualquer
submatriz quadrada de N e 0, 1 ou 1. Mais à frente vamos estudar esta propriedade
em maiores detalhes.
8.2
O Problema de Fluxo M
aximo
Dada uma rede G = (V, A) com capacidade nos arcos, desejamos determinar o
fluxo maximo que pode ser enviado de um vertice s (fonte) a um vertice t (destino),
satisfazendo as restricoes de capacidade dos arcos e as equacoes de equilbrio de fluxo
em todos os vertices. Em programacao matematica, o problema de fluxo maximo e
expresso como:
Maximize v
Sujeito a :
para i = s
v
P
P
0
para todo i V {s, t}
xij
xji =
{j:(i,j)A}
{j:(j,i)A}
v para i = t
0 xij uij para cada (i, j) A
(8.2)
onde uij denota a capacidade de transporte do arco (i, j). Um vetor x = [xij : (i, j) A]
satisfazendo as restricoes de (8.2) e dito fluxo e o escalar v correspondente e dito valor
do fluxo.
O problema de fluxo maximo surge em aplicacoes e tambem como elemento-chave
de algoritmos para resolucao de problemas mais complexos. Por exemplo, podemos
encontrar um fluxo factvel para o problema de fluxo de custo mnimo (a ser estudado
na proxima secao), caso exista, resolvendo um problema de fluxo maximo. Outro
exemplo e o algoritmo primal-dual para fluxo de custo mnimo que a cada iteracao
resolve um problema de fluxo maximo [3].
Uma propriedade do problema de fluxo maximo e o Teorema Fluxo-Maximo CorteMnimo que diz que o valor do fluxo maximo de um vertice s para t e exatamente
igual a capacidade do corte s-t mnimo. Um corte [S, V S] e um corte s-t se s S e
denotamos por (S, S)
= {(i, j) A : i S, j S}
t S = V S. Para um corte [S, S]

S) = {(i, j) A :
o conjunto de arestas diretas atraves do corte, enquanto que (S,
e
i S, j S} denota o conjunto
das arestas reversas. A capacidade do corte [S, S]
P
=
definida como u[S, S]

a capacidade total
uij , ou seja, u[S, S] corresponde `
(i,j)(S,S)
das arestas diretas que cruzam o corte.
Uma aplicacao do Teorema Fluxo-Maximo Corte-Mnimo esta na computacao distribuda de modulos de um algoritmo complexo em um computador paralelo dual (com
111
8. Fluxo em Redes
dois processadores). Seja um algoritmo constitudo de modulos que podem ser executados concorrentemente. Conhecemos de antemao o custo computacional de executarmos
cada modulo i no processador 1, denotado por i , e o custo de ser executado no processador 2, denotado por i . Sabemos ainda o custo cij de comunicacao entre os modulos
i e j caso estes modulos sejam alocados a processadores distintos, sendo nulo o custo
de comunicacao caso eles sejam processados em um mesmo processador. Desejamos
alocar os modulos aos processadores de forma que a soma do custo de processamento
e de comunicacao seja o menor possvel.
Este problema pode ser modelado como um problema de corte mnimo em uma rede
nao-direcionada e, por sua vez, resolvido com um algoritmo para o problema de fluxo
maximo. Defina um vertice s representando o processador 1, um vertice t representando
o processador 2, e um vertice i para cada modulo i = 1, . . . , n. Para cada modulo i,
insira um arco (s, i) com capacidade usi = i , um arco (i, t) com capacidade uit = i , e
um arco (i, j) com capacidade uij = cij se os modulos interagem. A Figura 8.2 ilustra
a rede obtida para um problema cujos tempos de processamento estao na Tabela 8.4 e
cujos custos de comunicacao sao dados na Tabela 8.5.
Tabela 8.4:
i
i
i
Custo
1 2
3 2
5 5
de
3
6
6
processamento
4 5
2 7
4 2
Tabela 8.5: Custo de

1 2 3
1
5
2 5
1
3
1
4 1
1
5
10
comunicacao
4 5
1
1
10
1
Observe que existe uma correspondencia de 1-para-1 entre corte s-t na rede e
alocacao de modulos a processadores, sendo a capacidade do corte precisamente o
custo da alocacao. Seja A1 A2 = {1, . . . , n}, A1 A2 = , uma alocacao de modulos
aos processores 1 e 2, respectivamente. O custo desta alocacao e dado por:
X
X
X
i +
i +
cij
(8.3)
iA1
iA2
(i,j)A1 A2
com S = {s} A1 e S = {t} A2 .

O corte s-t correspondente a esta alocacao e (S, S)
Este corte contem um arco (i, t) para cada i A1 cuja capacidade e uit = i , um arco
(s, i) para cada i A2 cuja capacidade e usi = iP
, e um arcoP
(i, j) de capacidade
uij =
P
cij para cada (i, j) A1 A2 . Portanto u[S, S] = iA1 i + iA2 i + (i,j)A1 A2 cij .
Encontrando o corte de capacidade mnima estaremos produzindo uma alocacao de
112
8. Fluxo em Redes
custo mnimo. Para o exemplo da Figura 8.2, o corte mnimo esta indicado e este
induz uma alocacao A1 = {1, 2, 4} e A2 = {3, 5}, tendo custo de processamento total
igual a 7 + 8 + 3 = 18, que e precisamente a capacidade do corte s-t mnimo.
Corte
1
5
2
5
1
2
6
s
3
4
10
1
5
Figura 8.2: Alocacao balanceada de tarefas em dois processadores como um problema

de corte mnimo. A alocacao otima consiste em processar os modulos 1, 2 e 4 no
processador 1, deixando os modulos 3 e 5 no processador 2. O custo de processamento
dos modulos e igual 15 enquanto que o custo de comunicacao e 3, perfazendo um custo
total de 18 unidades. O custo total e a capacidade do corte s-t mnimo como indicado
na figura.
8.2.1
Fluxos e Cortes
O conceito de rede residual e chave no desenvolvimento de algoritmos para o problema de fluxo maximo1 . Dado um fluxo x para uma rede G, a capacidade residual rij
de um arco (i, j) A e a quantidade maxima de fluxo adicional que pode ser enviada
usando os arcos (i, j) e (j, i). Vamos assumir por simplicidade que o arco (j, i) sera um
elemento da rede sempre que o arco (i, j) fizer parte da rede. A capacidade residual
tem dois componentes: o componente uij xij (quantidade nao utilizada do arco (i, j))
e o componente xji (podemos cancelar o envio de xji unidades enviadas atraves do arco
(j, i)). Logo, rij = uij xij + xji . Denotamos por G(x) a rede residual que contem
apenas arcos com capacidade residual positiva. A Figura 8.3 traz um exemplo de rede
residual.
tem um conjunto de arcos diretos representado
Lembramos que um corte s-t [S, S]
S). A capacidade do
por (S, S) e um conjunto de arcos reversos denotado por (S,
sendo igual a soma da capacidade dos arcos diretos que
corte e denotada por u[S, S]
1
A nocao de rede residual sera estendida na proxima secao para resolver o problema de fluxo de
custo mnimo.
113
8. Fluxo em Redes
(xij , uij )
2
(2, 5)
(3, 4)
s
(5, 7)
rij
2
5
2
(0, 1)
(3, 3)
(0, 2)
4
Figura 8.3: Exemplo de rede residual G(x) obtida a partir de uma rede G e fluxo x.
atravessam o corte, ou seja:
=
u[S, S]
uij
(i,j)(S,S)
Obviamente, a capacidade de um corte s-t define um limite superior para a quantidade

de fluxo que pode ser enviada de s para t. O corte cuja capacidade e mnima dentre
todos os cortes s-t e dito corte mnimo.
e definida como a
A capacidade residual de um corte s-t e denotada por r[S, S]
soma das capacidades residuais dos arcos diretos do corte, isto e:
=
r[S, S]
rij
(i,j)(S,S)
Seja x um fluxo na rede. Adicionando as equacoes de conservacao de fluxo do modelo

(8.2) para os nos em S, obtemos:
v=
X
iS
{j:(i,j)A}
xij
{j:(j,i)A}
xji
(8.4)
Quando dois vertices u, v S, entao xuv aparece na equacao de equilbrio de u e xuv

aparece na equacao de equilbrio de v, dessa forma cancelando um ao outro em (8.4).
Isto nos leva a concluir que a expressao (8.4) pode ser
O mesmo ocorre se u, v S.
simplificada:
X
X
v=
xij
xji
(8.5)
(i,j)(S,S)
(j,i)(S,S)
A primeira expressao no lado direito de (8.5) corresponde ao fluxo dos nos de S para
enquanto que a segunda nos da o fluxo dos nos de S para S. Logo, o
os nos de S,
que e precisamente
lado direito de (8.5) e o fluxo lquido atraves do corte s-t [S, S]
114
8. Fluxo em Redes
v. Substituindo xij uij na primeira expressao e xij 0 na segunda, obtemos a

desigualdade:
X
v
uij = u[S, S]
(8.6)
(i,j)(S,S)
A expressao significa que o valor de qualquer fluxo x e menor ou igual a capacidade de

qualquer corte s-t. Qualquer fluxo deve atravessar todos os cortes s-t, portanto, seu
valor nao pode exceder a capacidade de qualquer um deles. Isto nos leva a deduzir que:
: [S, S]
e um corte s-t de G}
v min{u[S, S]
(8.7)
A expressao (8.7) nos diz que se encontrarmos um fluxo x cujo valor v iguala a capacidade de algum corte s-t, entao x e um fluxo maximo. Tal propriedade pode ser definida
em termos das capacidades residuais. Suponha que x e um fluxo e seu valor e v. Seja
x um fluxo de valor v + v onde v 0. Neste caso, a desigualdade (8.6) implica:
X
v + v
uij
(8.8)
(i,j)(S,S)
Substituindo (8.5) em (8.8), obtemos:

X
X
uij
xij +
v
(i,j)(S,S)
(i,j)(S,S)
(i,j)(S,S)
(uij xij + xji )
xji
(j,i)(S,S)
[Assumimos que (i, j) A (j, i) A]
rij
(i,j)(S,S)
= r[S, S]
(8.9)
Assim, conclumos que para qualquer fluxo x de valor v em uma rede G, a quantidade
adicional de fluxo que pode ser enviada de um no s para um no t e menor ou igual a
capacidade residual de qualquer corte s-t.
8.2.2
Algoritmo de Caminhos Aumentantes
Um caminho p de s para t na rede residual G(x) e dito caminho aumentante. A

capacidade do caminho aumentante e denotada por (p) e definida como a capacidade residual do arco (i, j) de menor capacidade residual em p. Matematicamente,
(p) = min{rij : (i, j) p}. Considere a rede residual G(x0 ) para um fluxo x0 nulo
dada na Figura 8.4. O caminho p0 = (1, 2, 4, 5) e um caminho aumentante com capacidade (p0 ) = min{r12 , r24 , r45 } = min{4, 3, 5} = 3. Por definicao, um caminho
aumentante tem capacidade nao nula2 . Logo, se G(x) possui um caminho aumentante podemos enviar fluxo adicional de s para t e, portanto, x nao pode ser um fluxo
maximo. O algoritmo de caminhos aumentantes iterativamente busca um caminho
aumentante p e envia a quantidade de fluxo correspondente a (p) ate que nao haja
caminho aumentante. O pseudo-codigo do algoritmo segue abaixo.
2
Arcos da rede residual tem capacidade residual nao nula.
115
8. Fluxo em Redes
rij
3
4
3
2
2
3
2
5
Figura 8.4: Rede residual G(x0 ) para fluxo x0 nulo.

Algoritmo: Caminhos Aumentantes
x=0
Enquanto G(x) contem caminho aumentante faca
Encontre um caminho p de s para t em G(x)
(p) = min{rij : (i, j) p}
Envie a quantidade (p) de fluxo ao longo de p,
atualize x e obtenha a rede residual G(x)
Fim-enquanto
O comportamento do algoritmo pode ser ilustrado com a rede residual da Figura
8.4. Enviando a quantidade (p0 ) = 3 de fluxo ao longo de p0 , obtemos o fluxo x1 com
rede residual G(x1 ) dada na Figura 8.5.
3
3
4
2
1
2
3
2
3
3
2
3
6 t
2
G(x1 )
2
5
3
x1
Figura 8.5: Rede residual G(x1 ) para fluxo x1 .

Para a rede residual G(x1 ), o caminho p1 = (1, 2, 3, 5, 4, 6) e um caminho aumentante com capacidade (p1 ) = min{1, 1, 2, 3, 2} = 1. Enviando a quantidade (p1 ) ao
longo de p obtemos o fluxo x2 e a rede residual G(x2 ) conforme Figura 8.6.
116
8. Fluxo em Redes
3
3
4
1
4
1
2
1
G(x2 )
x2

O caminho p2 = (1, 3, 5, 6) e aumentante em G(x2 ) e sua capacidade residual e
(p2 ) = min{2, 1, 2} = 1. Enviando (p2 ) unidades atraves de p2 obtemos o fluxo x3 e
a rede residual G(x3 ) dada na Figura 8.7.
Corte Mnimo
3
4
1
4
6 t
1
1
1
1
2
G(x3 )
1
3
x3

A rede residual G(x3 ) nao possui caminho aumentante, acarretando a finalizacao
do algoritmo. Observe que os vertices alcancaveis a partir de s em G(x3 ) sao os
forma uma corte s-t em G tal
elementos do conjunto S = {1, 2, 3}. Note que [S, S]
= 5 e precisamente o valor v 3 do fluxo enviado de s para t
que a capacidade u[S, S]
3
segundo o fluxo x : p0 enviou 3 unidades, p1 enviou 1 unidade e p2 enviou 1 unidade,
e um corte mnimo e o
perfazendo um total de 5 unidades enviadas. Portanto [S, S]
3
3
=v .
fluxo x e um fluxo maximo: u[S, S]
Teorema 8.1 (Caminho Aumentante) Um fluxo x e maximo se e somente se a rede
residual G(x ) n
ao contem caminho aumentante.
Prova: Se a rede residual G(x ) contem um caminho aumentante, entao obviamente
x nao pode ser maximo. Por outro lado, se a rede residual nao contem caminho
117
8. Fluxo em Redes
aumentante, entao o conjunto de vertices alcancaveis a partir de s, denotado por S,

tal que:
define um corte s-t [S, S]
0 = r[S, S]
X
=
rij
(i,j)(S,S)
(i,j)(S,S)
(uij xij + xji )
e, portanto,
=
u[S, S]
uij
(i,j)(S,S)
(i,j)(S,S)
(i,j)(S,S)
= v
(xij xji )
xij
xji
(j,i)(S,S)
do corte [S, S]
iguala o valor do fluxo induzido
Conclumos que a capacidade u[S, S]
por x , dessa forma demonstrando que o fluxo e maximo.

Qual e o tempo de execucao do algoritmo de caminhos aumentantes? Podemos
estabelecer um limite superior para o n
umero de iteracoes do algoritmo. Seja u =
max{uij : (i, j) A} a capacidade maxima dos arcos, assumindo que as capacidades
sao finitas e inteiras. Entao o fluxo maximo tem como limite superior o valor nu com
n = |V | pois o corte [{s}, V {s}] tem capacidade maxima (n 1)u. Uma vez que todo
caminho aumentante p tem capacidade nao nula e inteira, conclumos que (p) 1 e o
n
umero maximo de iteracoes do algoritmo de caminhos aumentantes e nu. Uma busca
em grafos (largura ou profundidade) pode ser realizada em tempo O(m + n), o que nos
leva a deduzir que o tempo de execucao do algoritmo e limitado por O(mnu).
8.2.3
Implicac
oes Combinat
orias do Problema de Fluxo
M
aximo
Alguns resultados com implicacoes combinatorias surgem a partir do problema de

fluxo maximo. O Teorema do Fluxo-Maximo Custo-Mnimo mostra que o problema de
encontrar um corte mnimo pode ser reduzido ao problema de fluxo maximo3 .
Teorema 8.2 (Integralidade de Fluxo) Se as capacidades de todos os arcos s
ao inteiros,
ent
ao o problema de fluxo maximo tem valor inteiro.
Prova: Por inducao no n
umero de caminhos aumentantes podemos demonstrar o
resultado. Na iteracao 0, quando o fluxo inicial x0 e nulo, as capacidades residuais dos
arcos de G(x0 ) sao inteiras e o valor v 0 do fluxo e nulo e portanto inteiro.
3
Observe que existe um n

umero combinatorio de cortes s-t. Qual e o n
umero de cortes s-t?
118
8. Fluxo em Redes
Considere a iteracao k 1 do algoritmo de caminhos aumentantes e suponha,

por inducao, que as capacidades dos arcos de G(xk ) sao inteiras e o valor do fluxo v k
e inteiro. Entao a capacidade (pk ) do caminho aumentante pk em G(xk ) e inteira.
Enviando a quantidade (pk ) ao longo de pk obtemos um fluxo xk+1 com quantidades
inteiras, uma rede residual G(xk+1 ) com capacidades inteiras e um valor v k+1 = v k +
(pk ) tambem inteiro.
Teorema 8.3 (Fluxo-maximo corte-mnimo) O valor do fluxo maximo v que pode ser
do corte s-t de
enviado de um vertice s para um vertice t iguala a capacidade u[S, S]
menor capacidade.
Prova: Seja x o fluxo maximo obtido com o algoritmo de caminhos aumentantes e
v o seu valor. Seja ainda S o conjunto dos vertices alcancaveis em G(x) a partir de
tem capacidade u[S, S]
= v. Uma vez que
s. Segundo o Teorema 8.1, o corte [S, S]
v min{u[U, U ] : [U, U ] e um corte s-t}, conclumos que v = min{u[U, U ] : [U, U ] e um
corte s-t}.
Tomando como base os resultados acima estabelecidos, podemos deduzir propriedades acerca da conexidade de vertices em grafos. Dados um grafo direcionado G = (V, A)
e dois vertices distintos s e t, desejamos determinar o menor n
umero mnimo de arcos
que devem ser removidos de maneira a interromper todos os caminhos de s para t. Este
n
umero e conhecido como conexidade-arco e sera denotado aqui por s,t . Para o caso
direcionado, observe que s,t nao e necessariamente igual a t,s . Podemos nos fazer
valer dos Teoremas 8.2 e 8.3 para calcular a conexidade-arco. Inicialmente, note que
s,t e maior ou igual ao n

umero maximo de caminhos arco-disjuntos de s para t. (E
necessario remover pelo menos um arco de cada um desses caminhos para desconectar
s e t.) Podemos calcular o n
umero maximo de caminhos arco-disjuntos definindo a
capacidade uij = 1 para todo (i, j) A e calculando o fluxo maximo de s para t.
Pelo teorema da integralidade de fluxo, o fluxo maximo de s para t corresponde a um
conjunto de caminhos arco-disjuntos. Pelo teorema do fluxo-maximo corte-mnimo,
de um corte s-t mnimo [S, S].
Da conclumos que o
s,t iguala a capacidade u[S, S]
n
umero maximo de caminhos disjuntos de s para t e exatamente o n
umero mnimo de
arcos que devem ser removidos de maneira a desconectar s e t, que e precisamente a
conexidade-arco s,t .
Outra propriedade de interesse e a conexidade-vertice entre dois vertices distintos
s e t. Mas antes de discutirmos esta propriedade, vamos definir a propriedade quebra
de vertices sobre um grafo G = (V, A), a qual produz um grafo G = (V , A ) como
segue: V = {i, i : i V } e A = {(i, i ) : i V } {(i , j) : (i, j) A}. A conexidadevertice entre s e t e definida como o menor n
umero de vertices, distintos de s e t, que
devem ser removidos de forma a quebrar todos os caminho de s para t. Vamos assumir
que (s, t) 6 A. Seja s,t a conexidade-vertice entre s e t. Note que s,t e maior ou
igual ao n
umero maximo de caminhos vertice-disjuntos de s para t. Para calcular s,t ,
tomemos o grafo G obtido a partir da quebra de vertices de G. Definindo ui,i = 1 para
todo i V e ui ,j = para todo (i, j) A, o fluxo maximo de s para t em G nos
da, pelo Teorema 8.2, o conjunto maximo de caminhos vertice-disjuntos de s para t.
Pelo Teorema 8.3, deduzimos que a conexidade-vertice s,t iguala o n
umero maximo de
caminhos vertice-disjuntos que, por conseguinte, iguala a capacidade de um corte s-t
119
8. Fluxo em Redes
Em outras palavras, o n
mnimo [S, S].
umero maximo de camimhos vertice-disjuntos e
igual ao n
umero mnimo de vertices que devem ser removidos de maneira de desconectar
4
s de t .
8.3
O Problema de Fluxo de Custo Mnimo
Um universo amplo de problemas teoricos e praticos podem ser transformados em

problemas de fluxo de custo mnimo. Os problemas apresentados acima sao dois exemplos. Os dados que formam uma instancia do problema de fluxo de custo mnimo
sao:
um grafo direcionado G = (V, A) consistindo em um conjunto de vertices (ou
nos) e um conjunto de arcos;
o custo unitario cij de transporte atraves do arco (i, j);
o limite inferior lij e superior uij para fluxo atraves do arco (i, j); e
a quantidade de fluxo bi que deve ser injetada ou consumida pelo no i; se bi > 0,
entao i e um no fornecedor; se bi < 0, entao i e um no consumidor; e se bi = 0,
entao i e um no de transporte.
Em programacao matematica, o problema de fluxo de custo mnimo e expresso
como:
P
Minimize
cij xij
(i,j)A
Sujeito a :
{j:(i,j)A}
xij
{j:(j,i)A}
lij xij uij ,
xji = bi ,
iV
(8.10)
(i, j) A
A primeira famlia de restricoes de (8.10) e conhecida por equacao de conservacao de

fluxo. Em sntese, a igualdade impoe a restricao de que a quantidade de fluxo que sai
do no i menos a quantidade que entra deve ser igual a bi . Quando bi > 0, o fluxo
de sada lquido deve ser igual a esta quantidade. Quando bi < 0, o fluxo de entrada
lquido deve ser igual a bi . Por fim, quando bi = 0, a quantidade que entra deve ser
precisamente igual à quantidade que sai do no i.
As seguintes classes de problemas podem ser convertidas em problemas de fluxo de
custo mnimo:
1) Fluxo m
aximo em grafos: neste problema e dado um grafo direcionado G =
(V, A), um no fonte s, um no destino t e capacidades de transporte uij para os
arcos de G; deseja-se encontrar fluxos para os arcos tal que a quantidade de fluxo
enviada de s para t seja maximizada, mas sem violar as capacidades dos arcos e
sem acumulacao de fluxo nos vertices do conjunto V {s, t}.
portanto o corte
Note que somente arcos do tipo (i, i ) podem aparecer no corte mnimo [S, S],
mnimo de arcos em G corresponde a um corte mnimo de vertices em G.

4
120
8. Fluxo em Redes
2) Caminhos mnimos em grafos: e dado um grafo direcionado G = (V, A),

pesos cij para os arcos, um vertice fonte s e um vertice destino t; busca-se um
caminho de s para t tal que a soma dos pesos das arestas do caminho seja a menor
possvel.
3) Problema de alocac
ao: conforme visto na Secao 8.1.
4) Problema de transporte: conforme discutido na Secao 8.1.
5) Fluxo em redes com func
ao custo convexa: este problema e uma variacao
do problema de fluxo de custo mnimo onde a funcao custo de transporte cij (xij )
atraves de cada arco (i, j) e convexa, mas nao necessariamente linear e igual
a cij xij como na versao padrao do problema; podemos, entretanto, resolver o
problema com custo convexo de forma abitrariamente aproximada linearizando
por partes a funcao custo.
8.3.1
Transformac
oes
Ha um conjunto de transformacoes que tipicamente sao u

teis quando se trabalha
com problemas de fluxo de custo mnimo. Por exemplo, e possvel converter um problema de fluxo de custo mnimo cujos arcos sao nao direcionados em outro problema
de fluxo de custo mnimo cujos arcos sao direcionados. Podemos tambem eliminar o
limite inferior lij dos arcos sem maiores dificuldades. Logo, se voce tem que resolver
um problema onde certos arcos tem limites inferiores, mas voce dispoe de um algoritmo
que so aceita limites superiores, entao e possvel reduzir o problema a outro problema
equivalente aceito pelo algoritmo. Abaixo apresentamos algumas transformacoes que
serao exemplificadas por meio de figuras.
Convertendo Arestas em Arcos
Considere o arco (i, j) da rede ilustrada na Figura 8.8. Assumindo que lij = 0 e
cij 0, e facil verificar que uma solucao otima do problema de fluxo de custo mnimo
tera necessariamente fluxo em uma direcao ou outra, mas nao em ambas5 . Assim
podemos transformar a aresta nao direcionada em dois arcos com sentidos opostos,
cada um deles com o custo e capacidade da aresta.
Seja xij o fluxo no arco nao direcionado, cij o custo unitario de transporte em
qualquer direcao, e uij a capacidade de transporte. Transformamos este arco nao direcionado {i, j} em dois arcos direcionados, um arco (i, j) e um arco (j, i). O fluxo
atraves de (i, j) e denotado por xij , enquanto o custo unitario fica cij = cij e a capacidade uij = uij . O fluxo atraves de (j, i) e denotado por xji , sendo o custo unitario
cji = cij e a capacidade uji = uij .
Para estabelecermos a equivalencia, seja xij = um fluxo no arco nao-direcionado
em uma solucao otima na rede original. Podemos assumir que o fluxo de unidades
e na direcao (i, j) ou (j, i). Sem perda de generalidade, suponha que unidades sao
5
A transformacao nao e v
alida se cij < 0 ou lij > 0: se lij > 0 ent
ao nao sabemos em que direcao
o fluxo dever
a satisfazer esta restricao; se cij < 0 ent
ao nao podemos garantir que o fluxo otimo sera
em apenas uma direcao.
121
8. Fluxo em Redes
enviadas de i para j. Fazendo xij = e xji = 0 na rede modificada, obtemos um fluxo

equivalente e com mesmo custo. Seja agora um fluxo otimo na rede modificada com
valores xij e xji . Podemos assumir que o fluxo atraves de (i, j) ou atraves de (j, i) e
nulo. Sem perda de generalidade, suponha que xij = enquanto que xji = 0. Podemos
entao obter um fluxo equivalente na rede original fazendo xij assumir o valor e na
direcao de i para j. Ambos os fluxo induzem a mesma parcela de custo na funcao
objetivo. Portanto, mostramos que a tranformacao produz um problema equivalente.
(cij , uij ) = (
cij , u
ij )
(
cij , u
ij )
xij
bi
j
x
ij
bj
bi
bj
j
xji
(cji , uji ) = (
cij , u
ij )
Figura 8.8: Transformacao de arestas em arcos.
Removendo Limites Inferiores

Para eliminarmos o limite inferior de um arco (i, j) basta pre-enviar a quantidade lij
atraves do arco, reduzir o suprimento do no i de lij unidades (bi bi lij ), aumentar
em lij unidades a quantidade de fluxo que deve emanar do no j (bj bj + lij ), e
finalmente reduzir a capacidade do arco (i, j) em lij unidades. Note que o custo final
deve ser acrescido de uma constante cij lij de forma a refletir o envio antecipado do
fluxo.
A remocao de limite inferior e ilustrada na Figura 8.9. Neste exemplo, o fluxo na
rede original e denotado por xij , onde o custo de transporte e cij , o limite inferior e lij e
a capacidade dada por uij . As acumulacoes de fluxo na rede original sao denotadas por
bi e bj . Entao o fluxo na rede modificada passa a ser denotado por xij , com capacidade
uij = uij lij , custo unitario cij = cij , e acumulacoes de fluxo bi = bi lij e bj = bj + lij .
O fluxo na rede original, xij , e o fluxo na rede modificada, xij , obedecem a relacao
xij = xij + lij .
(cij , uij ) = (
cij , u
ij lij )
(
cij , lij , u
ij )
bi
bj
x
ij
bi = bi lij
bj = bj + lij
xij = x
ij lij
Figura 8.9: Remocao de limite inferior nos arcos.
Removendo Capacidade de Arcos

A Figura 8.10 ilustra como que um arco com capacidade pode ser substitudo por
facil verificar
dois arcos sem capacidade por meio da insercao de um no auxiliar. E
que o fluxo xik atraves do arco (i, k) da rede modificada corresponde precisamente ao
fluxo xij atraves do arco (i, j) da rede original. Note que os fluxos satisfazem a relacao
122
8. Fluxo em Redes
xik + xjk = uij , portanto xjk e o resduo de capacidade de transmissao atraves do arco
(i, j) (slack).
(cik , uik ) = (
cij , ) (cjk , ujk ) = (0, )
(
cij , u
ij )
bi
bi = bi
bj
xik
x
ij
xjk
bk =
uij
bj = bj + u
ij
Figura 8.10: Eliminando capacidade de arcos.
8.3.2
Um Exemplo
Na Figura 8.11 e ilustrado um problema de fluxo de custo mnimo, consistindo em

enviar 10 unidades de fluxo do no 1 (produtor) para o no 4 (consumidor). Os arcos
solidos indicam os arcos da rede, enquanto que os arcos tracejados indicam a solucao
otima do problema.
2
(cij , uij ) = (3, 6)
(5, 7)
6
b1 = 10
6
4
4
(7, 8)
b4 = 10
4
3
(4, 10)
Figura 8.11: Exemplo de problema de fluxo de custo mnimo. As linhas tracejadas

correspondem ao fluxo otimo.
Em geral, o problema de fluxo de custo mnimo especificado na forma (8.10) pode
ser colocado de forma mais compacta como:
Min cT x
S.a : N x = b
lxu
x R|A|
onde c e vetor de custo unitario de transporte, N e a matriz de incidencia do grafo, b e
o vetor com as taxas de injecao e consumo de fluxo, l e o vetor com limites inferiores,
u e o vetor de limites superiores, e x e o vetor com o fluxo dos arcos. Para o problema
123
8. Fluxo em Redes
dado na Figura 8.11, os dados para uma formulacao compacta sao:

1
2
N=
3
4
10
b=
0
10
8.3.3
(1, 2) (1, 3) (2, 4) (3, 4)

1
1
0
0
1
0
1
0
0
1
0
1
0
0
1
1
0
0
l=
0
0
7
8
u=
6
10
5
7
c=
3
4
x12
x13
x=
x24
x34
Redes Residuais
No projeto e implementacao de algoritmos e conveniente expressar o fluxo em termos de incrementos em relacao a um fluxo factvel, em vez de expressa-lo em termos
absolutos. Aqui sera introduzida a nocao de rede residual ou rede de fluxo remanescente que descreve a capacidade de transmissao incremental. Existe uma relacao de
um-para-um entre a formulacao do problema na rede original e na rede residual, de
maneira que uma solucao factvel em uma formulacao esta diretamente relacionada
com uma solucao na outra formulacao e ambas induzem o mesmo custo.
|A|
Dados uma rede G = (V, A) e um fluxo x0 R+ , a rede residual e denotada por
G(x0 ) e descreve a capacidade incremental de fluxo relativa ao fluxo x0 ja transportado
atraves da rede. Considere o arco (i, j) e o fluxo inicial x0ij . Ha duas possibilidades:
1) podemos enviar uma quantidade adicional uij x0ij de fluxo atraves do arco (i, j),
incorrendo um custo unitario cij ; e
2) podemos enviar de volta uma quantidade x0ij atraves do arco (j, i), a custo cij
por unidade.
Uma ilustracao de rede residual G(x0 ) associada a um fluxo x0 em uma rede G =
(V, A) e dada na Figura 8.12. Abaixo listamos os passos para computo da rede residual
G(x0 ) tomando como base um fluxo inicial x0 :
1) substitua cada arco original (i, j) por dois arcos: (i, j) e (j, i);
2) o arco (i, j) tem custo cij e capacidade residual rij = uij x0ij ;
3) o arco (j, i) tem custo cij e capacidade residual rji = x0ij .
Proposi
c
ao 8.1 Um fluxo x e factvel para a rede G se e somente se o fluxo correspondente x, definido por xij xji = xij x0ij e xij xji = 0, e factvel na rede residual
G(x0 ). Alem disso, cT x = cT x + cT x0 .
124
8. Fluxo em Redes
bi
(cij , uij )
i
x0ij
bj
j
(cij , uij x0ij )
bi
i
bj
(cij , x0ij )
Figura 8.12: Exemplo de rede residual.

Prova: Seja x um fluxo factvel para G. Seja x um fluxo residual para a rede G(x0 )
tal que x 0 e fazendo para todo (i, j) A:
xij xji = xij x0ij
xij xji = 0
(8.11)
(8.12)
A condicao 8.12 nos diz que apenas um dos arcos tem fluxo nao nulo. Se xij x0ij ,
entao faca xij = xij x0ij e xji = 0; uma vez que xij uij temos que xij uij x0ij = rij
e portanto xij satisfaz a restricao de capacidade do arco (i, j) na rede residual. Caso
contrario, se xij < x0ij , entao faca xji = x0ij xij e xij = 0; uma vez que 0 xij x0ij ,
segue que xji = x0ij xij 0 e xji < x0ij = rji , portanto xji satisfaz a restricao de
capacidade do arco (j, i) na rede residual. O desenvolvimento acima mostra que se
o fluxo x e factvel em G, entao o fuxo residual x obtido conforme (8.11) e (8.12) e
factvel na rede residual G(x0 ). De forma similar, pode ser mostrado que para um fluxo
residual x factvel em G(x0 ) o fluxo x obtido de maneira a satisfazer as equacoes (8.11)
e (8.12) e factvel para a rede original G.
Resta estabelecer a relacao entre o custo do fluxo x em G e o custo do fluxo x em
G(x0 ). Para um fluxo xij na rede G, o custo no par de arcos (i, j) e (j, i) na rede
residual G(x0 ) e cij xij + cji xji = cij xij cij xji = cij (
xij xji ) = cij (xij x0ij ) que segue
de (8.11). Logo, estabelecemos que cx = cx cx0 .
De acordo com a proposicao, podemos trabalhar com a rede residual G(x0 ) para
um fluxo x0 em vez de trabalhar com a rede original G. Uma vez conhecido um fluxo
otimo na rede residual podemos converte-lo em um fluxo otimo na rede original por
meio da proposicao.
Na Figura 8.13 e ilustrada uma rede G com fluxo x e sua respectiva rede residual
G(x).
8.3.4
Algoritmo de Cancelamento de Circuitos Negativos
Nesta secao apresentamos uma condicao necessaria e suficiente para otimalidade de

um fluxo e desenvolvemos um algoritmo que gera uma seq
uencia de solucoes convergente
para uma solucao otima que satisfaz as condicoes.
Teorema 8.4 (Condicao de Otimalidade) Um fluxo factvel x induz uma solucao
otima para o problema de fluxo de custo mnimo se, e somente se, a rede residual
G(x ) n
ao contem nenhum circuito de custo negativo.
Proof: Seja x um fluxo factvel e suponha que G(x) contem um ciclo de custo negativo.
Entao podemos enviar uma quantidade nao nula de fluxo ao longo do ciclo e reduzir o
125
8. Fluxo em Redes
b) Rede original G e fluxo x
b) Rede residual G(x)
b2 = 0
2
(cij , uij ) = (2, 4)
(3, 3)
xij = 3
b1 = 4
0 (1, 2)
(2, 3)
3
4 b4 = 4
(2, 2)
1
1
3
(3, 3)
(2, 1)
(1, 2)
(2, 1)
(1, 1)
(1, 5)
(2, 1)
(1, 4)
3
b3 = 0
Figura 8.13: Exemplo de rede residual.

custo corrente cT x induzido pelo fluxo x. Logo, x nao pode ser uma solucao otima e,
portanto, se x e um fluxo otimo entao obrigatoriamente G(x ) nao contem ciclo com
custo negativo.
Seja x um fluxo factvel tal que G(x ) nao contem ciclo negativo. Suponha que
existe um fluxo otimo x0 tal que x0 6= x . Entao podemos decompor o vetor diferenca
x0 x em no maximo |A| ciclos de incremento de fluxo com respeito ao fluxo x tal
que a soma dos custos ao longo destes ciclos equivale a cT (x0 x ). Uma vez que a
soma dos custos ao longo de cada um desses ciclos em G(x0 ) e nao negativa, deduzimos
que cT x0 cT x 0 cT x0 cT x . Mas como x0 e um fluxo otimo, cT x0 cT x .
Conclumos que cT x0 = cT x e x tambem e um fluxo otimo.
Um algoritmo pode ser obtido imediatamente a partir da condicao de otimalidade
estabelecida no Teorema 8.4. Basta encontrar um fluxo factvel x0 , obter a rede residual
G(x0 ), encontrar um ciclo w0 de custo negativo em G(x0 ) e enviar a quantidade maxima
de fluxo ao longo de w0 obtendo x1 e G(x1 ). Se G(x1 ) contem um ciclo de custo negativo,
entao repita o passo anterior, caso contrario pare, pois o fluxo corrente e uma solucao
otima para o problema em questao. Os passos do algoritmo sao dados abaixo.
Algoritmo: Cancelamento de Circuitos Negativos
Obtenha um fluxo viavel x
Enquanto G(x) contem um circuito negativo faca
Utilize um algoritmo para encontrar um circuito negativo w
= min{rij : (i, j) w}
Aumente o fluxo a longo do circuito w de unidades
e atualize G(x)
Fim-enquanto
Para aplicar o algoritmo sao necessarios dois algoritmos de suporte: um algoritmo

para encontrar fluxo factvel inicial e um algoritmo para encontrar ciclo negativo.
126
8. Fluxo em Redes
Como que se pode encontrar um fluxo factvel? Fazendo uso de um algoritmo de

fluxo maximo (enunciado na Secao 8.3) podemos encontrar um fluxo factvel. Deixamos
esses passos à cargo do leitor.
Como que se pode encontrar, caso exista, um ciclo de custo negativo na rede residual
G(xk ) correspondente a um fluxo xk ? Podemos fazer uso do algoritmo de BellmanFord [12] para caminhos mnimos em grafos direcionados com arcos de custo negativo,
ou utilizar uma versao modificada do algoritmo de programacao dinamica de FloydWarshall [12] que encontra caminhos mnimos para todos os pares de vertices.
Complexidade do Algoritmo
Um limite superior no n
umero de operacoes elementares executadas pelo algoritmo
pode ser facilmente estabelecido. Seja C = max{cij : (i, j) A} assumindo que cij 06
e seja U = max{uij : (i, j) A}. Entao mCU e um limite superior para o custo do
fluxo inicial, onde |A| = m. Alem disso, zero e um limite inferior para o custo do
fluxo otimo. Portanto, o algoritmo termina em O(mCU ) iteracoes onde |V | = n. Se
utilizarmos um algoritmo com tempo de execucao O(nm) para detectar circuitos negativos7 , verificamos que o tempo de execucao do algoritmo de cancelamento de circuitos
negativos e O(nm2 CU ). Podemos dizer que o algoritmo e de tempo polinomial?
Exemplo de Execuc
ao do Algoritmo
Aqui aplicamos o algoritmo de cancelamento de circuito negativo ao problema dado
na Figura 8.13. Tomando como fluxo inicial x0 = (x012 , x013 , x023 , x024 , x034 ) = (3, 1, 0, 3, 1),
obtemos a rede residual G(x0 ) dada na Figura 8.14. O ciclo de custo negativo w0 esta
indicado na figura com linhas tracejadas. Enviando o fluxo de (w0 ) unidades ao longo
de w0 , obtemos a rede residual G(x1 ) dada na Figura 8.15. Para esta rede residual
identificamos o circuito w1 , indicado por linhas tracejadas, com custo c(w1 ) = 1 e
capacidade (w1 ) = 1. Enviando a capacidade maxima ao longo de w1 , obtemos a
rede residual G(x2 ) ilustrada na Figura 8.16. A rede residual G(x2 ) contem um ciclo
de custo negativo w2 . Enviando (w2 ) = 1 unidades ao longo de w2 obtemos a rede
residual G(x3 ) indicada na Figura 8.17. Visto que G(x3 ) nao possui ciclo negativo,
conclumos que ela induz uma solucao otima. Para obter o fluxo otimo x3 a partir de
G(x3 ) podemos fazer uso da Proposicao 8.1. Obetmos entao x31,2 = 2, x31,3 = 2, x32,3 = 2,
x32,4 = 0 e x33,4 = 4.
8.4
Matrizes Totalmente Unimodulares
Considere o problema inteiro abaixo:

IP : Max cT x
S.a :
Ax b
x Zn+
6
Observe que sempre e possvel eliminar arcos com custo negativo; basta pre-enviar a quantidade
uij de fluxo atraves do arco (i, j) se cij < 0.
7
O algoritmo de Bellman-Ford encontra um ciclo de custo negativo em tempo O(nm).
127
8. Fluxo em Redes
G(x0 )
(3, 3)
(2, 1)
2
3
(1, 2)
(2, 3)
1
x0
(2, 1)
(1, 1)
(1, 4)
(2, 1)
Figura 8.14: Primeira iteracao do algoritmo de cancelamento de circuito negativo. A

figura mostra a rede residual G(x0 ), o circuito com custo negativo em linhas tracejadas
e o fluxo x0 . O circuito e dado por w0 = ((4, 2), (2, 3), (3, 4)) que tem custo c(w0 ) = 1
e capacidade maxima (w0 ) = 2.
cujos dados (A, b) sao inteiros com A Zmn . Sob quais condicoes podemos esperar
que a relaxacao linear LP de IP, {max cT x : Ax b, x Rn+ }, tera solucao inteira?
A partir da teoria da programacao linear, sabemos que as solucoes basicas podem ser
expressa na forma:
x = (xB , xN ) = (B 1 b, 0)
onde B e uma submatriz m m nao-singular da matriz (A, I) e I e uma matriz
identidade de dimensao m m.
Proposi
c
ao 8.2 (Condicao Suficiente) Se a base
otima B tem determinante det(B) =
1, ent
ao a relaxacao linear resolve IP.
Prova: Pela regra de Cramer, B 1 = adj(B)
onde adj(B) e a matriz adjunta de B 8 . As
det(B)
entradas de adj(B) sao produtos dos termos de B, portanto, adj(B) e uma matriz de
inteiros e det(B) = 1, o que nos leva a concluir que B 1 b e inteiro para qualquer b
inteiro.
Defini
c
ao 8.1 Uma matriz A e totalmente unimodular (TU) se toda a submatriz quadrada de A tem determinante 1, +1 ou 0.
Dois exemplos de matrizes que nao sao TU:
A1 =
1 1
1
1
1 1 0
A2 = 0 1 1
1 0 1
A matriz adjunta adj(B) e a transposta da matriz cofatora cof (B) de B, i.e, adj(B) = cof (B)T .
A entrada cof (B)ij e o determinante da matriz obtida a partir de B removendo a linha i e a coluna
j e multiplicando o resultado por (1)i+j .
8
128
8. Fluxo em Redes
pois det(A1 ) = 2 e det(A2 ) = 2. Dois exemplos de matrizes TU
0 1 0
1 1 1
0
0 1 1
1
0
0
1
A2 = 1 0 1
A1 =
0
1
0 1
1 0 0
0
0
1
0
1 0 0
sao:
0
1
1
1
0
0
1
1
0
0
Note que se A e TU entao aij {+1, 1, 0} para todo i, j.
Proposi
c
ao 8.3 Uma matriz A e TU se e somente se:
a matriz transposta AT e TU; e
a matriz (A, I) e TU.
A condicao suficiente dada pela proposicao a seguir e simples e nos permite verificar
que uma das matrizes acima e TU.
Proposi
c
ao 8.4 (Condicao suficiente) A matriz A e TU se:
i. aij {+1, 1, 0} para todo i, j;
ii. cada coluna contem no maximo dois coeficientes n
ao nulos,
m
P
i=1
|aij | 2; e
iii. existe uma particao (M1 , M2 ) do conjunto M das

P que cada coluna j que
P linhas tal
aij = 0.
aij
contenha dois coeficientes n
ao nulos satisfaz
iM1
iM2
Prova: Suponha que A nao e TU e seja B a menor submatriz quadrada de B para

a qual det(B) 6 {0, 1, 1}. B nao pode conter uma coluna com uma u
nica entrada
nao nula, pois B nao seria mnima. Portanto, B contem duas entradas nao nulas em
cada coluna. Pela condicao (iii), adicionamos as linhas de M1 e subtramos as linhas
de M2 de forma que obtemos o vetor nulo e, portanto, det(B) = 0, o que constitui uma
contradicao.
Retornando à questao de IP, fica claro que quando A e TU a relaxacao linear LP
de IP produz a solucao otima.
Proposi
c
ao 8.5 O programa linear max{cT x : Ax b, x Rn+ } tem solucao otima
inteira para um vetor b inteiro, para o qual existe uma solucao
otima de valor finito,
se e somente se A e TU.
A Figura 8.18 ilustra uma rede cuja matriz de incidencia e dada abaixo. Observe
que a matriz de incedencia N de um grafo direcionado G = (V, A) satisfaz as condicoes
suficientes estabelecidas pela Proposicao 8.4. Portanto, uma matriz de incidencia e
totalmente unimodular9 .
9
Basta fazer M1 = M e M2 = .
129
8. Fluxo em Redes
1
2
3
4
5
6
8.5
x12
1
-1
0
0
0
0
x14
1
0
0
-1
0
0
x23
0
1
-1
0
0
0
x31
-1
0
1
0
0
0
x32
0
-1
1
0
0
0
x35
0
0
1
0
-1
0
x36
0
0
1
0
0
-1
x45
0
0
0
1
-1
0
x51
-1
0
0
0
1
0
x53
0
0
-1
0
1
0
x65
0
0
0
0
-1
1
b(i)
=
=
=
=
=
=
3
0
0
-2
4
-5
Refer
encias
Sao in
umeras as aplicacoes de modelos e algoritmos de fluxo em redes, em particular os modelo de fluxo de custo mnimo. Neste captulo tivemos a oportunidade de
apreciar alguns problemas de cunho teorico-pratico. Tais algoritmos sao rotineiramente
aplicados na resolucao de subproblemas resolvidos como etapas de outros problemas
mais complexos. Nos exerccios, por exemplo, podemos descobrir uma restricao de eliminacao de sub-rota nao satisfeita por uma solucao candidata ao problema do caixeiro
viajante a partir da solucao de um problema de fluxo em redes.
Uma das referencias mais atuais e completas em fluxo em redes e o texto de Ahuja,
Magnanti e Orlin [3]. Nele sao apresentadas varias aplicacoes e algoritmos para problemas que tem incio com o problema de fluxo maximo, passam pelo problema de fluxo
de custo mnimo, e tambem tratam de generalizacoes envolvendo funcoes objetivo convexas, fluxos distintos (multicommodity network flow problems) e tambem relaxacao
Lagrangeana. Os algoritmos sao tratados de forma gradual, comecando com algoritmos inspirados em princpios intuitivos, cobrindo algoritmos praticos e algoritmos com
tempo de execucao polinomial.
Outro texto recomendado e o livro de Lawler [34] que, embora mais antigo, tem uma
abordagem mais sucinta e direta. Este tambem faz um aprofundamento na teoria de
Matroids que esta relacionada a matrizes totalmente unimodulares e algoritmos gulosos
8.6
Exerccios
EX 8.1: Obtenha o problema dual do problema de fluxo em redes.

EX 8.2: Formule o problema de caminhos mnimos de um vertice s para um vertice t
como um problema de fluxo em redes. Formule o problema de encontrar a arvore
de caminhos mnimos a partir de um vertice s para os demais vertices do grafo.
EX 8.3: Aplique o algoritmo de cancelamento de circuito negativo ao problema de
fluxo em rede de custo mnimo especificado na Figura 8.19. (Encontre um fluxo
viavel x0 , obtenha a rede residual G(x0 ) e depois obtenha fluxos x1 , x2 , . . . , x ate
que a rede residual G(x ) nao contenha nenhum circuito com custo negativo.)
EX 8.4: Demonstre a verdade ou falsidade da seguinte afirmacao: suponha que todas
as demandas e suprimentos (i.e., os valores de bi ) bem como as capacidades dos
130
8. Fluxo em Redes
arcos sao valores inteiros e pares, em um problema de fluxo em rede de custo

mnimo. Entao, existe um fluxo otimo x onde cada fluxo xi,j e um n
umero par.
EX 8.5: O conjunto de solucoes otimas para um problema qualquer de fluxo em redes, de custo mnimo, se altera se multiplicarmos o custo de cada arco por uma
constante k? O conjunto se altera se adicionarmos uma constante k?
EX 8.6: Em um problema de fluxo em redes, suponha que alem das capacidades dos
arcos os nos tambem apresentam limites superiores para o fluxo de entrada. Seja
wi o fluxo maximo de entrada para o no i, i V . Como que voce resolveria esta
generalizacao do problema de fluxo em redes?
EX 8.7: O problema de fluxo maximo em redes tem como dados uma rede G = (V, A),
a capacidade uij de transmissao para cada arco (i, j) A, um no origem s e um no
destino t. O problema se resume a encontrar o fluxo xij atraves de cada arco (i, j)
que maximize a quantidade de fluxo enviada de s para t, enquanto satisfazendo
às restricoes de capacidade nos arcos. Em programacao matematica, o problema
fica:
P
Maximize
xsj
Sujeito a :
{j:(s,j)A}
{j:(i,j)A}
xij
0 xij uij
{j:(j,i)A}
xji = 0
i V {s, t}
(i, j) A
Mostre como se pode encontrar um fluxo factvel para o problema de fluxo em

redes de custo mnimo fazendo uso do problema de fluxo maximo.
EX 8.8: No problema custo-mnimo fluxo-maximo definido em uma rede direcionada
G = (V, A), desejamos enviar o maior fluxo possvel do no origem s para o no
destino t, mas com o menor custo possvel. Em outras palavras, dentre todos os
fluxos maximos, encontre aquele de menor custo. Tarefas:
1) mostre como formular qualquer problema de fluxo em redes de custo mnimo
como um problema custo-mnimo fluxo-maximo;
2) mostre como o problema de custo-mnimo fluxo-maximo pode ser resolvido
por meio de uma reducao ao problema de custo mnimo.
EX 8.9: No problema de caminhos mnimos com pedagio e dado um grafo direcionado G = (V, A), o peso dos arcos cij correspondendo ao custo do combustvel
necessario para realizar o percurso da cidade i ate j, e o valor do pedagio pj
cobrado a cada cidade j. Desejamos encontrar um caminho de menor custo
(combustvel e pedagio) da cidade s ate a cidade t. Pedagio pj e coletado na
entrada e na sada da cidade j. Formule este problema como um problema de
fluxo em redes de custo mnimo.
EX 8.10: Para um grafo direcionado G = (V, E), o problema do caixeiro viajante
131
8. Fluxo em Redes
pode ser colocado em programacao matematica como:

P
PT : Minimize
cij xij
(i,j)E
Sujeito a :
{j:(i,j)E}
{j:(j,i)E}
xij = 1, i V
(8.13)
xji = 1, i V
(i,j)(S,V S)
xij 1, S V, 2 |S| |V | 2
xij {0, 1}, (i, j) E
(S, V S) = {(i, j) E : i S, j V S} e o corte de G induzido por S. Note

que a formulacao PT tem um n
umero exponencial de restricoes de eliminacao
de subrotas, assim nao e pratico explicitar as desigualdades de (8.13). Em vez
disso, metodos mais praticos ignoram a terceira famlia de restricoes de (8.13),
transformam a quarta famlia de retricoes em 0 xij 1 e adicionam restricoes
de eliminacao de sub-rotas sob demanda. Denote este problema simplificado por
PT .
Seja x R|E| uma solucao factvel para PT . Desenvolva um algoritmo eficiente para encontrar um corte (S, V S) tal que a solucao aproximada x nao
satisfaca uma restricao de eliminacao de sub-rota. O algoritmo deve tambem
indicar quando um corte nao existe.
EX 8.11: Obtenha o dual do problema de fluxo maximo.
EX 8.12: Considere um problema cujas restricoes sao dadas por:
x1
xn
xj
xj+1
1
0
zj , j = 1, . . . , n 1
zj , j = 1, . . . , n 1
(8.14)
Podemos afirmar que o sistema de equacoes (8.14) forma uma matriz totalmente
unimodular? Justique sua resposta.
EX 8.13: Mostre que o sistema de equacoes (8.15) induz uma matriz de restricoes
totalmente unimodular.
Li + R
i
n
P
yi
i=1
Li , R
i , yi
= yi , i = 1, . . . , n
= 1
(8.15)
0, i = 1, . . . , n
Este sistema de equacoes surge da linearizacao por partes de uma funcao nao
n
n
P
P
[ai1 Li + ai R
linear f (x), onde x =
[f (ai1 )Li + f (ai )R
i ], f (x)
i ], e
i=1
a0 < a1 < . . . < an [41].
i=1
132
8. Fluxo em Redes
G(x1 )
x1
(2, 1)
(2, 3)
1
(3, 1)
(3, 2)
(1, 2)
(2, 1)
(1, 3)
1
(1, 2)
(2, 1)
3
3
Figura 8.15: Segunda iteracao do algoritmo de cancelamento de circuito negativo.

A figura mostra a rede residual G(x1 ), o ciclo w1 = ((3, 2), (2, 1), (1, 3)) com custo
c(w1 ) = 1 e capacidade maxima (w1 ) = 1, e o fluxo x1 .
G(x2 )
x2
2
(2, 2)
(3, 2)
(2, 2)
1
(3, 1)
(1, 1)
(1, 1)
(1, 3)
(2, 2)
(1, 2)
3
2
3
Figura 8.16: Terceira iteracao do algoritmo de cancelamento de circuito negativo. Na

figura e dada a rede residual G(x2 ) e o respectivo fluxo x2 . Tambem e indicado o
circuito w2 = ((2, 3), (3, 4), (4, 2)) com custo c(w2 ) = 3 e capacidade (w2 ) = 1.
133
8. Fluxo em Redes
G(x3 )
x3
2
2
(3, 3)
(2, 2)
(2, 2)
(1, 2)
(1, 4)
(1, 1)
(2, 2)
Figura 8.17: Fluxo otimo x3 e rede residual G(x3 ). Nao ha ciclo de custo negativo.
0
2
0
3
4
2
5
4
Figura 8.18: Propriedade de unimodularidade das matrizes de incidencia de grafos.

Um arco sem no de origem indica fluxo injetado no no destino, enquanto que um arco
sem no de destino indica fluxo consumido pelo no origem.
134
8. Fluxo em Redes
b2 = 20
2
(0, 10)
(1, 10)
0
6
(6, 10)
10 1
(4, 10)
3
(1, 5)
(2, 10)
5
0
(8, 10)
8 10
(7, 15)
(9, 15)
(2, 15)
(cij , uij ) = (1, 10)
4
5
7
15
Figura 8.19: Grafo G = (V, A) com a especificacao do problema de fluxo em rede.
Captulo 9
Linguagens de Modelagem
Neste captulo apresentamos os elementos fundamentais de duas linguagens de modelagem que permitem especificar problemas de otimizacao em uma linguagem muito
semelhante à programacao matematica. Em particular, desenvolveremos os conceitos
basicos das linguagens AMPL e Mosel. Tais linguagens procuram separar o modelo dos
dados, dessa forma permitindo que um modelo possa ser utilizados na resolucao de diferentes instancias de uma mesma classe de problemas. Elas tambem sao responsaveis
pela parte de pre-processamento e interface com algoritmos de otimizacao, tais como
ILOG CPLEX, MINOS e XPress-MP.
9.1
Linguagem Mosel
A linguagem Mosel faz parte do pacote de software de otimizacao Xpress-MP.

Xpress-MP e uma ferramenta de software para modelagem matematica e solucao de
problemas de otimizacao linear (PL), quadratica (PQ) e linear inteira (PI). As ferramentas do Xpress-MP compreendem uma colecao de interfaces, objetivando atender
necessidades de usuarios diversos e permitindo a solucao de problemas bem como a integracao com outros produtos de software. Os dois componentes basicos do Xpress-MP
sao Xpress-Mosel e Xpress-Optimizer, mas ha outros componentes tambem relevantes
destacando-se Xpress-IVE, Console Xpress e Xpress-MP Libraries.
um ambiente para modelagem e solucao de problemas, tomando
1) Xpress-Mosel: E
como entrada um modelo que descreve um problema em programacao matematica
(PL, PQ, PI), escrito na linguagem de modelagem Mosel. Mosel permite separar
modelo dos parametros que definem uma instancia e tem facilidades de transferencia de dados. Por exemplo, dados podem ser transferidos atraves de arquivos
tipo texto e em formato ODBC.
2) Xpress-Optimizer: Optimizer e a parte central da ferramenta Xpress-MP, representando decadas de pesquisa e desenvolvimento de metodos de solucao de
problemas lineares, quadraticos e inteiros mistos. A ferramenta dispoe de algoritmos de pre-processamento para simplificacao de modelos, metodos de geracao
de cortes, etc.
136
9. Linguagens de Modelagem
3) Xpress-IVE: Xpress-IVE (The Xpress Interactive Visual Environment) e um ambiente para modelagem e solucao integrada de problemas de otimizacao em sistemas MS-Windows. IVE apresenta Mosel dentro de uma interface grafica amigavel
com editor embutido.
4) Console Xpress: Consiste em interfaces tipo texto para Mosel e Optimizer. Este
modulo permite a carga de modelos armazenados em arquivos tipo texto e resolucao de problemas, podendo ser executado em plataformas computacionais
diversas, incluindo Unix e MS-Windows. O Console Xpress pode ser aplicado em
ambientes de producao fazendo uso de arquivos shell-script.
5) Xpress-MP Libraries: Para implementacoes especializadas, bibliotecas XpressMP sao oferecidas para prover acesso direto a Mosel e Optimizer a partir de
codigo C/C++, Java e Visual Basic implementado e customizado pelo usuario.
A vantagem principal das bibliotecas e a possibilidade de interagir diretamente
com a funcionalidade de Xpress-MP e, dessa forma, desenvolver aplicacoes customizadas como, por exemplo, heursticas projetadas para problemas particulares
e algoritmos tipo branch-and-cut.
Uma versao limitada no n
umero de variaveis e restricoes, mas completa em termos
de funcionalidade, do Xpress-IVE pode ser obtida para uso academico e educacional
no site da Dash Optimization: http://www.dashoptimization.com.
9.1.1
Qual Interface Devemos Utilizar?
Esta decisao depende das necessidades do usuario.

Usuarios iniciantes devem preferencialmente utilizar Xpress-IVE, uma vez que esta
e a interface mais simples para o software Xpress-MP. O ambiente integrado permite
rapida modelagem ao mesmo tempo que facilita a comunicacao com os demais componentes do Xpress-MP
Ja em Ambientes de producao, a interface Console Xpress e mais adequada pois
esta permite que se desenvolva aplicacoes tipo batch. Console Xpress prove uma interface tipo texto poderosa para os componentes Xpress-MP, permitindo desenvolvimento
interativo e processamento batch de modelos de usuarios de plataformas diversas.
Por outro lado, as bibliotecas devem ser reservadas para os usuarios avancados
que desejem desenvolver e testar algoritmos (e.g., heursticas inteligentes e algoritmos
branch-and-bound).
9.1.2
Resolvendo um Problema
Aqui descrevemos os passos necessarios para se resolver um problema atraves da

interface Mosel. Considere o problema de programacao linear abaixo:
Maximize a + 2b
Sujeito a : 3a + 2b 400
a + 3b 200
a, b 0
Abaixo segue a especificacao do problema acima na linguagem Mosel.
137
model Simple
uses mmxprs
declarations
a: mpvar
b: mpvar
end-declarations
primeira := 3*a + 2*b <= 400
segunda := a + 3*b <= 200
lucro := a + 2*b
maximize(lucro)
writeln(O lucro
e:
, getobjval)
end-model
O modelo acima e quase auto-explicativo. A diretiva uses e utilizada para declarar

a biblioteca de otimizacao a ser utilizada. Na secao declarations sao declaradas as
variaveis do modelo. As restricoes, denominadas primeira e segunda, sao descritas na
seq
uencia sendo ambas as desigualdades do tipo . A funcao objetivo e denominada
lucro e utilizada pelo comando maximize, que executara o algoritmo de otimizacao
adequado para o problema, buscando uma solucao que respeite as restricoes e maximize
o lucro. No momento em que a solucao otima for encontrada, o valor da funcao objetivo
otima e impresso na sada padrao atraves da diretiva writeln.
A solucao de um problema em Mosel e um processo de 3 estagios consistindo em
i) compilar o programa modelo, ii) carregar o programa compilado, e iii) resolver o
programa. Os comandos que realizam estas tres etapas sao: compile, load, e run
respectivamente.
Abaixo ilustramos a execucao dos passos para se resolver o problema de interesse.
O modelo esta armazenado no arquivo simple.mos.
C:> mosel
** Xpress-Mosel **
c Copyright Dash Associates 1998-2002

> compile simple
Compiling simple
> load simple
> run
O lucro
e 171.429
Returned value: 0
Para obter informacoes sobre os comandos disponveis e parametros, simplesmente

digite o comando help na janela de entrada da interface Mosel.
9.1.3
Indo Mais Longe
O formato MPS e um padrao para representacao e armazenamento de problemas de

programacao matematica. Varios otimizadores aceitam problemas especificados neste
138
formato. Detalhes sobre o formato MPS podem ser obtidos nos apendices do manual de
usuario do GNU solver. Mosel e Xpress-optimizer nao podiam ser diferentes e ambos
suportam a entrada e sada de problemas no formato MPS. Para gerar o arquivo MPS
correspondendo ao problema escrito em Mosel, basta executar o comando:
> export -m simple.mps
Mosel tambem e capaz de gerar o problema no formato LP, que pode
ser resolvido com certos pacotes de otimizacao como, por exemplo,
(ftp://ftp.es.ele.tue.nl/pub/lp solve)
e
glpk
da
GNU
lp solve
(http://www.gnu.org/software/glpk/glpk.html).
Para gerar o arquivo LP
correspondente ao problema escrito em Mosel, execute o comando:
> export simple.lp
9.1.4
Trabalhando com o Optimizer
Nos casos anteriores, carregamos modelos dentro do ambiente Mosel e invocamos

optimizer como um modulo da biblioteca. Optimizer pode tambem ser executado
isoladamente. Ele aceita problemas armazenados em arquivos tipo matriz, em formato
MPS ou LP. Com um arquivo pb.mat valido, tudo que precisa ser feito e carregar a
matriz completamente no optimizer e maximizar/minimizar a funcao objetivo. Abaixo
segue a seq
uencia de comandos que carregam e resolvem um problema armazenado em
um arquivo tipo MPS:
C:> optimizer
Xpress-MP Integer Barrier Optimizer Release xx.yy
c Copyright Dash Associates 1998-2002

Enter problem name> simple
> readprob
..
.
> maxim
..
.
> writeprtsol (ou prtsol)
> quit
9.1.5
Construindo um Primeiro Modelo
Trataremos aqui de flexibilidades da modelagem com Mosel bem como a separacao

da estrutura do modelo e dos dados, que juntos formam uma instancia do problema.
Utilizaremos o problema da mochila para ilustrar tal flexibilidade.
Maximize
n
P
c i xi
i=1
Sujeito a :
n
P
i=1
ai x i b
xi {0, 1}, i = 1, . . . , n
139
Tabela 9.1: Dados do problema da mochila

Objeto Peso Valor
Camera
2
15
Colar
20
100
Vaso
20
90
Quadro
30
60
TV
40
40
Video
30
15
Bau
60
15
Tijolo
10
1
Considere a instancia do problema da mochila obtida com os dados da Tabela 9.1.

A especificacao Mosel do problema da mochila para os dados acima pode ser realizada como segue:
model mochila
uses mmxprs
declarations
camera, colar, vaso,
quadro, tv, video, bau,
tijolo : mpvar
end-declarations
camera is binary
colar is binary
vaso is binary
..
.
tijolo is binary
PesoTotal := 2*camera +
+ 40*tv + 30*video +
ValorTotal := 15*camera
+ 40*tv + 15*video +
20*colar + 20*vaso + 20*quadro

60*bau + 10*tijolo <= 102
+ 100*colar + 90*vaso + 60*quadro
10*bau + 1*tijolo
maximize(ValorTotal)
writeln(O valor da fun
ca
~o objetivo
e ,getobjval)
end-model
A construcao de modelos como visto acima e conveniente para problemas com um

n
umero pequeno de variaveis, mas isso pode se tornar inviavel em problemas de grande
porte. Foi tedioso, por exemplo, ter que especificar que cada variavel e binaria. E
usual na modelagem, mesmo de problemas pequenos, o uso de vetores de variaveis ou
variaveis subscritas, como tambem sao conhecidas. Tal poltica de modelagem facilita
enormemente a especificacao de modelos e futuras alteracoes. Abaixo segue a segunda
versao Mosel do problema da mochila.
140
model mochila2
uses mmxprs
declarations
Itens = 1..8
Peso: array(Itens) of real
Valor: array(Itens) of real
x : array(Itens) of mpvar
end-declarations
! Itens
Peso:= [2, 20, 20, 30, 40, 30,
60, 10]
Valor:= [15, 100, 90, 60, 40,
15, 10, 1]
! Todas as vari
aveis x s~
ao inteiras
forall(i in Itens) x(i) is binary
! Objetivo
ValorTotal := sum(i in Itens) x(i)*Valor(i)
! Restri
ca
~o de capacidade da mochila
PesoTotal := sum(i in Itens) x(i)*Peso(i) <= 102
ca
~o objetivo
e , getobjval)
forall(i in Itens) writeln(x(,i,) =,getsol(x(i)))
end-model
A modelagem com vetores trouxe algumas facilidades, dentre elas destacam-se:

1) Itens: e um conjunto indexado para os elementos do vetor.
2) forall: permite varrer elementos de um vetor indexado.
3) sum: permite somar elementos de um vetor indexado.
9.1.6
Usando Cadeias de Caracteres como Indices
O modelo anterior e consideravelmente mais simples do que o primeiro modelo para

o problema da mochila, mas sua interpretacao e mais difciltemos que traduzir os
identificadores em seus respectivos nomes. Contudo, podemos melhorar a legibilidade
do codigo Mosel por meio da seguinte substituicao:
Itens = {camera, colar, vaso, quadro,
tv, video, bau, tijolo}
9.1.7
141
Modelagem Vers
atil
Os exemplos acima sao apenas alguns de um n

umero de problemas similares, conhecidos como problemas da mochila. Seria u
til generalizar o modelo acima, permitindo
o aumento do n
umero de itens e a alteracao dos pesos/valores. Com o problema ja especificado em termos de vetores, as dificuldades estao no acoplamento do modelo com
os dados. Aqui introduzimos algumas definicoes que facilitam o entendimento dessas
questoes:
1) Modelos: sao geralmente especificados usando smbolos para representar as diversas variaveis de decisao, bem como o relacionamento entre as variaveis por meio
de desigualdades e igualdades.
2) Modelos Gen
ericos: sao obtidos atraves de uma descricao sistematica dessas restricoes e dos objetivos.
3) Inst
ancia: e o resultado da combinacao do modelo generico com um conjunto de
dados, a qual pode ser otimizada.
Modelo: mochila3.mos
model mochila3
uses mmxprs
declarations
Itens = set of strings
MAXWT: real
Peso: array(Itens) of real
Valor: array(Itens) of real
x : array(Itens) of mpvar
end-declarations
! Carregar os dados a partir de arquivos externos
initializations from mochila3.txt
Itens MAXWT Peso Valor
end-initializations
! Criar vari
aveis
forall(i in Itens) create(x(i))
! Todas as vari
aveis x s~
ao bin
arias
forall(i in Itens) x(i) is binary
! Objetivo
ValorTotal := sum(i in Itens) x(i)*Valor(i)
! Restri
ca
~o de capacidade de peso da mochila
PesoTotal := sum(i in Itens) x(i)*Peso(i) <= MAXWT
ca
~o objetivo
e , getobjval)
end-model
142
Arquivo de Dados: mochila3.txt

Itens: {camera, colar, vaso, quadro,
tv, video, bau, tijolo}
Peso: [2, 20, 20, 30, 40, 30, 60, 10]
Valor: [15, 100, 90, 60, 40, 15, 10, 1]
MAXWT: 120
9.2
Linguagem AMPL
AMPL pode ser vista como uma linguagem utilizada para descrever de uma forma
declarativa problemas de planejamento, escalonamento e distribuicao da producao e
muitos outros problemas conhecidos em geral como problemas de otimizacao em larga
escala ou programacao matematica. A notacao algebrica de AMPL e o seu ambiente de
comandos interativo foram projetados para auxiliar na formulacao de modelos, comunicar com uma variedade de pacotes de otimizacao e examinar o resultado de solucoes.
A flexibilidade de AMPL a torna ideal para prototipacao rapida e desenvolvimento de
modelos, enquanto que sua velocidade e generalidade proveem os recursos necessarios
para resolucao em regime de producao.
AMPL e um entre varios sistemas de modelagem para otimizacao que sao projetados tomando como base linguagens de modelagem algebricas. Essas linguagens
empregam uma notacao matematica muito semelhante à programacao matematica, tipicamente utilizada para descrever problemas de otimizacao como a minimizacao (ou
maximizacao) de uma expressao algebrica envolvendo variaveis de decisao algebricas,
estando estas subjeitas a restricoes expressas como igualdades e desigualdades entre
expressoes algebricas e variaveis de decisao. Interpretadores e interfaces para essas linguagem proveem suporte para simplificacao e analise de modelos. Algumas linguagens
tambem oferecem extensoes para descrisao de metodos algortmicos para atacar problemas difceis por meio da resolucao de subproblemas relacionados. MOSEL e AMPL
sao dois exemplos de linguagens de modelagem algebricas distribudas comercialmente.
AMPL foi projetada para combinar e estender as habilidades expressivas de linguagens de modelagem, mas sem perder a facilidade de ser utilizada em aplicacoes
elementares. AMPL e notavel pela simplicidade e naturalidade de sua sintaxe e pela
generalidade dos seus conjuntos e expressoes de indexacao. AMPL prove forte suporte
à validacao, verificacao e analise de solucoes otimas atraves de um conjunto de alternativas para apresentacao de dados e resultados. O pre-processador de AMPL e capaz de
executar automaticamente transformacoes que reduzem o tamanho do problema e substituem variaveis. AMPL se distingue ainda pela continuidade do seu desenvolvimento
que visa atender às necessidades dos usuarios. Adicoes recentes incluem construtores
de lacos e testes para escrita de scripts na linguagem de comandos AMPL, bem como
facilidades para definicao e manipulacao de varios problemas inter-relacionados.
No que segue apresentamos um exemplo de AMPL para o problema da mochila.
143
9.2.1
Modelo AMPL do Problema da Mochila
A descricao de um problema e feita atraves da especificacao de tres arquivos: o

arquivo com o modelo generico, o arquivo com os dados e o arquivo de comandos.
1) Modelo Gen
erico: Especificacao das variaveis, restricoes e funcao objetivo.
#---------------------------------------# Problema da Mochila
set Itens;
param c {j in Itens}; # c[j] e
o valor do item j
param w {j in Itens}; # w[j]
e o peso do item j
param b >= 0;
var x {j in Itens} integer >= 0, <= 1;
# Fun
ca
~o objetivo
maximize valor: sum{j in Itens} c[j]*x[j];
# restri
ca
~o capacidade da mochila
subject to mochila:
sum{j in Itens} w[j]*x[j] <= b;
2) Arquivo de Dados: Sao explicitados os parametros de uma instancia particular.

set Itens := camera colar vaso quadro
tv video bau tijolo;
param:
camera
colar
vaso
quadro
tv
video
bau
tijolo
w
2
20
20
30
40
30
60
10
c :=
15
100
9
60
40
15
10
1;
param b := 120;
3) Arquivo de Comandos: Diretivas para AMPL.
144
solve;
display
display
display
display
9.2.2
valor;
w;
c;
x;
Coment
arios
A linguagem AMPL rapidamente se tornou um padrao entre pesquisadores e engenheiros, hoje disponvel na maior parte dos pacotes de otimizacao. Ha um site exclusivamente dedicado à AMPL, http://www.ampl.com, onde estao depositados exemplos
alem de in
umeras informacoes e ponteiros. A proposito, existe um livro sobre AMPL e
suas aplicacoes bem como uma versao educacional da linguagem que pode ser empregada para resolver problemas com um n
umero pequeno de variaveis e restricoes.
9.3
Estudo de Caso: Aloca

c
ao de Rotas em Redes
de Computadores
Com a rapida evolucao da Internet em termos de desempenho e seguranca, surgiu a exigencia de maior qualidade dos servicos oferecidos pelas operadoras de telecomunicacoes. Novas polticas operacionais foram implementadas com estrategias de
diferenciacao de servicos, adicionando flexibilidade e eficiencia à infra-estrutura de comunicacoes. O gerenciamento da qualidade de servicos (QoS) desponta neste cenario
como uma alternativa vital ao sobre-provisionamento de recursos. Neste contexto, a
Engenharia de Trafego (ET) representa uma forma de aproveitar melhor os recursos de
rede existentes, com consequente reducao de custos [5].
Um elemento chave de suporte à ET em redes IP e a tecnologia Multiprotocol Label
Switching (MPLS). A tecnologia MPLS possibilitou a extensao das funcionalidades
do protocolo IP, favorecendo a implementacao da engenharia de trafego em redes IP
gracas à possibilidade de execucao do roteamento explcito sobre a arquitetura MPLS.
O roteamento explcito e a capacidade de encaminhamento de pacotes em caminhos
virtuais previamente definidos, os chamados Label Switched Paths (LSPs).
Busca-se portanto melhorar a eficiencia da rede atraves do uso parcimonioso de seus
recursos, num cenario de operacao dinamica, com um impacto mnimo na arquitetura
da infra-estrutura existente. Para tanto, faz-se necessaria a modelagem formal do problema de engenharia de trafego em programacao matematica e o projeto de algoritmos
eficientes.
9.4
Formulac
ao do Problema
Um modelo inicial foi proposto em [17] e depois estendido em [18] de forma a prover
uma poltica de admissao de requisicoes de transmissao (LSPs). Neste modelo busca-se
a maximizacao da vazao global dos fluxos de dados injetados em uma topologia de
rede. Para tanto sao configurados caminhos de menor distancia metrica entre origem
145
e destino dos fluxos de dados, bem como das larguras de bandas de LSPs, nos quais os
fluxos de dados serao encaminhados. Estas configuracoes devem respeitar as restricoes
de largura de banda dos enlaces e atraso fim-a-fim maximo de cada fluxo de dados. Do
ponto de vista da teoria de otimizacao, este problema e enquadrado como um problema
de caminhos mnimos sujeito `
a restricoes [23], sendo do tipo NP-completo [21].
Adotou-se uma poltica de diferenciacao de servicos que depende de um controle de
admissao e da configuracao de largura de banda dos LSPs, baseadas em parametros de
prioridade para cada fluxo de dados. Nesta poltica, na eminencia de congestionamento
da rede, os fluxos de baixa prioridade podem ter suas vazoes reduzidas ate zero (fluxos
rejeitados) para garantir os requisitos de QoS dos fluxos de alta prioridade.
A largura de banda a ser configurada nos LSPs e modelada em nveis, ou seja, cada
LSP sera configurado com um desses possveis nveis de largura de banda, necessarios à
alocacao dos fluxos de dados. Estes nveis podem variar de um valor igual a zero ate um
valor maximo desejado. A discretizacao das larguras de banda a serem configuradas nos
LSPs permite a formulacao do problema em programacao linear inteira, o que significa
um tratamento computacional menos complexo do que num problema nao-linear [44].
A formulacao do problema de ET proposto tem como objetivo definir as caractersticas topologicas e logicas da rede, a funcao objetivo, as variaveis de decisao e as
famlias de restricoes.
As caractersticas topologicas sao modeladas por um grafo direcionado G = (V, E),
onde V = {1, . . . , n} corresponde aos nos da rede e E = {1, . . . , m} aos enlaces de
transmissao. A capacidade de transmissao de um enlace (i, j) e ij Kbps, sendo o custo
administrativo cij correspondente ao atraso de transmissao provocado pelo mesmo. A
funcao objetivo visa maximizar a vazao global dos fluxos de dados injetados na rede.
As variaveis de decisao permitem a selecao do nvel de largura de banda a ser
configurado em cada LSP, alem da definicao do caminho entre a fonte e o destino do
fluxo de dados correspondente. As variaveis adotadas sao: ykl denominada seletor de
nvel e xkl
a ou nao roteado no enlace (i, j) para o l-esimo
ij que determina se o LSP k est
nvel de transmissao. Qualquer caminho que atenda as restricoes podera ser selecionado
pela solucao do problema.
As caractersticas logicas da rede sao como segue:
o n
umero de LSPs a serem configurados e K;
o n
umero de nveis de largura de banda a serem configurados no k-esimo LSP e
lk ; o n
umero de nveis e a largura de banda de cada fluxo sao definidos de acordo
com criterios administrativoso procedimento de otimizacao escolhe somente
um nvel para configurar cada LSP onde sera encaminhado o fluxo de dados
correspondente;
a taxa de transmissao a ser configurada no l-esimo (1 l lk ) nvel do k-esimo
LSP e lk sendo esta medida em Kbps;
o maximo atraso fim-a-fim permitido ao k-esimo LSP e hk sendo este medido em
ms.
o parametro k e introduzido na funcao objetivo para indicar a importancia do
k-esimo fluxo de dados, que sera encaminhado no k-esimo LSP, denominado
146
parametro de prioridade de admissao, o qual atua como elemento de differenciacao de servicos.

o parametro ij da a capacidade de transmissao do enlace (i, j).
O problema de engenharia de trafego (PET) pode ser colocado em programacao
matematica:
PET : Maximize
lk
K X
X
k lk ykl
(9.1)
k=1 l=1
Sujeita a :
lk
X
ykl = 1
k K
(9.2)
(i, j) E
(9.3)
k K
(9.4)
i V, k K, l Lk
(9.5)
(i, j) E, k K, l Lk
(9.6)
l=1
lk
K X
X
k=1 l=1
lk xkl
ij ij
lk
X X
(i,j)E l=1
{j:(i,j)E}
cij xkl
ij hk
xkl
ij
xkl
ij {0, 1}
k l
xkl
ji = bi yk
{j:(j,i)E}
ykl {0, 1}
k K, l Lk
(9.7)
onde: bki = 1 se i = sk , bki = 1 se i = dk , e bki = 0 caso contrario. E ainda

K = {1, . . . , K} e Lk = {1, . . . , lk }.
A restricao (9.2) garante que cada LSP sera configurado precisamente em um u
nico
nvel de transmissao. A restricao (9.3) impoe os limites de largura de banda dos enlaces.
A restricao (9.4) modela os limites maximos de atraso de cada LSP. A expressao (9.5)
garante que cada LSP k sera encaminhado em um caminho contnuo, nao paralelo do no
origem sk ate o destino dk . Finalmente as expressoes (9.6) e (9.7) definem as restricoes
Booleanas para as variaveis de decisao.
9.4.1
Formulac
ao em MOSEL
Abaixo apresentamos um modelo em linguagem Mosel para PET, mas omitimos detalhes das diretivas e truques de modelagem selecionados. O leitor podera recorrer ao
manual de usuario de Mosel e livros especializados [25] para maiores informacoes. Acreditamos que o modelo cobre elementos-chave da linguagem para modelagem avancada
que invariavelmente serao necessarios em aplicacoes teorico-praticas. Assumiremos que
o modelo ficara armazenado em um arquivo tipo texto denominado model.mos.
!-----------------------------------------------------------! Mosel formulation of the fully-fledged LSP-routing problem
model lsp
uses "mmxprs"
declarations
Node: set of integer
Arc: array(Node,Node) of integer
Arc_u: array(Node,Node) of integer
Arc_d: array(Node,Node) of integer
Lsp: set of integer
Level: set of integer
Lsp_s: array(Lsp) of integer
Lsp_d: array(Lsp) of integer
Lsp_p: array(Lsp) of integer
Lsp_delay: array(Lsp) of integer
Lsp_lbd: array(Lsp,Level) of integer
x: array(Lsp,Level,Node,Node) of mpvar
y: array(Lsp,Level) of mpvar
end-declarations
! Read in data from external file
initializations from "model.dat"
Node
Arc Arc_u Arc_d
Lsp Level
Lsp_s Lsp_d Lsp_p Lsp_delay Lsp_lbd
end-initializations
! Printing data
!------------------------------------------------fopen("f_data.txt",F_OUTPUT)
writeln
writeln("List of nodes")
writeln("-------------------------------------")
forall(i in Node)
writeln("node(",i,"): ",Node(i))
writeln
writeln("List of Arcs")
writeln("-------------------------------------")
forall(i in Node, j in Node | Arc(i,j)=1 )
writeln("arc: (",i,",",j,") u:",Arc_u(i,j)," delay: ",Arc_d(i,j))
writeln
writeln("List of Lsps")
writeln("-------------------------------------")
forall(k in Lsp)
writeln("lsp: (",k,"): ",Lsp(k),
" s: ",Lsp_s(k)," d: ",Lsp_d(k),
" p: ",Lsp_p(k))
writeln
writeln("List of bounds for Lsps")
147
148
writeln("-------------------------------------")
forall(k in Lsp) do
write("lsp: ",k," lbd:")
forall(l in Level)
write(" ",Lsp_lbd(k,l))
writeln
end-do
fclose(F_OUTPUT)
! Instantiate variables
forall(k in Lsp, l in Level, i in Node, j in Node | Arc(i,j)=1)
create(x(k,l,i,j))
forall(k in Lsp, l in Level)
create(y(k,l))
x(k,l,i,j) is_binary
y(k,l) is_binary
! Objective Function
Total_Performance := sum(k in Lsp, l in Level)
Lsp_p(k)*Lsp_lbd(k,l)*y(k,l)
! arc capacity
forall(i in Node, j in Node | Arc(i,j)=1)
sum(k in Lsp, l in Level) Lsp_lbd(k,l)*x(k,l,i,j) <= Arc_u(i,j)
! maximum delay
forall(k in Lsp)
sum(i in Node, j in Node, l in Level | Arc(i,j)=1)
Arc_d(i,j)*x(k,l,i,j) <= Lsp_delay(k)
! Network Flow Constraints
forall(k in Lsp, l in Level, i in Node | i<>Lsp_s(k) and i<>Lsp_d(k) )
sum(j in Node | Arc(i,j)=1) x(k,l,i,j)
- sum(j in Node | Arc(j,i)=1) x(k,l,j,i) = 0
sum(j in Node | Arc(Lsp_s(k),j)=1) x(k,l,Lsp_s(k),j)
- sum(j in Node | Arc(j,Lsp_s(k))=1) x(k,l,j,Lsp_s(k)) = y(k,l)
sum(j in Node | Arc(Lsp_d(k),j)=1) x(k,l,Lsp_d(k),j)
- sum(j in Node | Arc(j,Lsp_d(k))=1) x(k,l,j,Lsp_d(k)) = -y(k,l)
forall(k in Lsp)
sum(l in Level) y(k,l) = 1
maximize(Total_Performance)
exportprob(EP_MAX,"t1.txt",Total_Performance)
fopen("f_sol.txt",F_OUTPUT)
149
writeln
writeln(Solution Found)
writeln(------------------------)
if( getsol(y(k,l))<>0) then
writeln("y(",k,",",l,") = ",getsol(y(k,l)))
end-if
writeln
if( getsol(x(k,l,i,j))<>0) then
writeln("x(",k,",",l,",",i,",",j,") = ",getsol(x(k,l,i,j)))
end-if
writeln
writeln("objective: ",getobjval)
fclose(F_OUTPUT)
end-model
Inst
ancia Exemplo
Abaixo segue o conte
udo do arquivo model.dat com os parametros da instancia
a ser carregado quando da execucao do modelo model.mos dado acima. Observe
que em model.mos e feita referencia ao arquivo model.dat. A rede da instancia
exemplo esta ilustrada na Figura 9.1.
Lsp: [1 2 3 4 5 6 7 8 9 10
11 12 13 14 15 16 17 18 19 20 21]
Node: [1 2 3 4 5 6 7]
Arc: [ (1
(3
(4
(6
3)
4)
6)
7)
1
1
1
1
(3
(4
(6
(7
1)
3)
4)
6)
1
1
1
1]
(3
(4
(6
(7
1)
3)
4)
6)
(2 3) 1
(3 5) 1
(5 6) 1
(3 2) 1
(5 3) 1
(6 5) 1
Level: [0 1 2]
Arc_u: [(1
(3
(4
(6
3)
4)
6)
7)
100
100
100
100
Arc_d: [(1
(3
(4
(6
3)
4)
6)
7)
1
1
1
1
(3
(4
(6
(7
1)
3)
4)
6)
1
1
1
1]
100
100
100
100]
(2 3) 100
(3 5) 100
(5 6) 100
(2 3) 1
(3 5) 1
(5 6) 1
(3 2) 100
(5 3) 100
(6 5) 100
(3 2) 1
(5 3) 1
(6 5) 1
Lsp_s: [2 3 1 1 6 4 5 1 1 1 6 3 3 1 2 6 5 7 7 7 7]
Lsp_d: [5 1 4 5 5 2 2 2 2 6 2 1 6 4 4 2 4 5 3 2 1]
Lsp_p: [1 1 1 1 1 1 1 1 1 1 1 1 1 1 1 1 1 1 1 1 1]
150
Lsp_delay: [20 20 20 20 20 20 20 20 20 20 20
20 20 20 20 20 20 20 20 20 20]
Lsp_lbd: [(1 0) 0
(2 0) 0
(3 0) 0
(4 0) 0
(5 0) 0
(6 0) 0
(7 0) 0
(8 0) 0
(9 0) 0
(10 0) 0
(11 0) 0
(12 0) 0
(13 0) 0
(14 0) 0
(15 0) 0
(16 0) 0
(17 0) 0
(18 0) 0
(19 0) 0
(20 0) 0
(21 0) 0
(1 1) 8
(2 1) 10
(3 1) 14
(4 1) 5
(5 1) 1
(6 1) 3
(7 1) 8
(8 1) 11
(9 1) 9
(10 1) 1
(11 1) 2
(12 1) 13
(13 1) 1
(14 1) 6
(15 1) 14
(16 1) 4
(17 1) 5
(18 1) 4
(19 1) 5
(20 1) 6
(21 1) 2
(1 2) 16
(2 2) 20
(3 2) 28
(4 2) 11
(5 2) 2
(6 2) 6
(7 2) 17
(8 2) 22
(9 2) 18
(10 2) 3
(11 2) 5
(12 2) 26
(13 2) 2
(14 2) 13
(15 2) 28
(16 2) 9
(17 2) 10
(18 2) 8
(19 2) 10
(20 2) 13
(21 2) 4]
Figura 9.1: Rede exemplo do problema de alocacao de rotas.
9.4.2
Formulac
ao em AMPL
De forma similar à linguagem MOSEL, apresentamos abaixo um modelo AMPL do

problema de alocacao de rotas (arquivo model.amp) e os dados da instancia exemplo
(arquivo model.dat).
set
set
set
set
LSPS;
# Set of LSP
NODES;
# nodes of the communication network
ARCS within (NODES cross NODES); # set of arcs
LEVELS;
# various amounts for LSPs
param lk_u
param lk_d
{(i,j) in ARCS};
{(i,j) in ARCS};
# arc capacity
# arc delay
param
param
param
param
param
lsp_lbd {(k,l) in LSPS cross LEVELS}; # lbd_k^l

lsp_p
{k in LSPS};
# lsp priority
lsp_s
{k in LSPS};
# lsp source
lsp_d
{k in LSPS};
# lsp destination
lsp_delay {k in LSPS};
# lsp maximum delay transmission
#-------------------------------------------------------------var x { k in LSPS, l in LEVELS, (i,j) in ARCS} integer >=0, <=1;

var y { k in LSPS, l in LEVELS} integer >=0, <=1;
#-------------------------------------------------------------maximize total_effect:
sum{k in LSPS, l in LEVELS} lsp_p[k]*lsp_lbd[k,l]*y[k,l];
#-------------------------------------------------------------subject to Lk_Bound {(i,j) in ARCS}:
sum{k in LSPS, l in LEVELS} lsp_lbd[k,l]*x[k,l,i,j]
<= lk_u[i,j];
#-------------------------------------------------------------subject to Lsp_Delay {k in LSPS}:
sum{ (i,j) in ARCS, l in LEVELS }
lk_d[i,j]*x[k,l,i,j] <= lsp_delay[k];
#-------------------------------------------------------------subject to NetFlow_0 {k in LSPS, l in LEVELS,
i in NODES diff {lsp_s[k],lsp_d[k]} } :
sum{(i,j) in ARCS} x[k,l,i,j]
- sum{(j,i) in ARCS} x[k,l,j,i] = 0;
#-------------------------------------------------------------subject to NetFlow_s {k in LSPS, l in LEVELS } :
sum{(lsp_s[k],j) in ARCS} x[k,l,lsp_s[k],j]
- sum{(j,lsp_s[k]) in ARCS} x[k,l,j,lsp_s[k]] = 1*y[k,l];
#-------------------------------------------------------------subject to NetFlow_d {k in LSPS, l in LEVELS } :
sum{(lsp_d[k],j) in ARCS} x[k,l,lsp_d[k],j]
- sum{(j,lsp_d[k]) in ARCS} x[k,l,j,lsp_d[k]] = -1*y[k,l];
#-------------------------------------------------------------subject to Connection {k in LSPS} :
sum{l in LEVELS} y[k,l] = 1;
Inst
ancia Exemplo
set LSPS := 1 2 3 4 5 6 7 8 9 10
11 12 13 14 15 16 17 18 19 20 21;
set NODES := 1 2 3 4 5 6 7;
set ARCS :=
(1,3) (3,1) (2,3) (3,2)

(3,4) (4,3) (3,5) (5,3)
(4,6) (6,4) (5,6) (6,5)
151
152
(6,7) (7,6);
set LEVELS := 0 1 2;
param:
lk_u lk_d :=
1 3 100 1
3 1 100 1
2 3 100 1
3 2 100 1
3 4 100 1
4 3 100 1
3 5 100 1
5 3 100 1
4 6 100 1
6 4 100 1
5 6 100 1
6 5 100 1
6 7 100 1
7 6 100 1;
param: lsp_s
1
2
2
3
3
1
4
1
5
6
6
4
7
5
8
1
9
1
10 1
11 6
12 3
13 3
14 1
15 2
16 6
17 5
18 7
19 7
20 7
21 7
lsp_d
5
1
1
1
4
1
5
1
5
1
2
1
2
1
2
1
2
1
6
1
2
1
1
1
6
1
4
1
4
1
2
1
4
1
5
1
3
1
2
1
1
1
param lsp_lbd:
0
1
2 :=
1
0
8
16
2
0
10 20
3
0
14 28
4
0
5
11
5
0
1
2
6
0
3
6
7
0
8
17
8
0
11 22
9
0
9
18
10 0
1
3
lsp_p lsp_delay :=
20
20
20
20
20
20
20
20
20
20
20
20
20
20
20
20
20
20
20
20
20;
11
12
13
14
15
16
17
18
19
20
21
0
0
0
0
0
0
0
0
0
0
0
2
13
1
6
14
4
5
4
5
6
2
153
5
26
2
13
28
9
10
8
10
13
4;
Para agregar os dados ao modelo, realizar a otimizacao e, ao final, apresentar os

resultados, se faz necessario colocar diretivas em um arquivo de comandos (arquivo
run.cmd). O conte
udo do arquivo run.cmd segue abaixo.
solve;
display y;
display sum{k in LSPS, l in LEVELS}
lsp_p[k]*lsp_lbd[k,l]*y[k,l];
for {k in LSPS, l in LEVELS} {
display k;
display l;
display { (i,j) in ARCS } x[k,l,i,j];
}
9.5
Refer
encias
Para informacoes detalhadas e exemplos de uso avancado da linguagem AMPL, recomendamos o livro de Fourer, Gay e Kernighan [20]. Este texto apresenta a linguagem
por meio de exemplos que crescem em complexidade gradualmente sendo, portanto, recomendavel a todas as classes de usuarios. A leitura do livro e obrigatoria para aqueles
que desejam utilizar a linguagem na pratica e em pesquisa.
Da mesma forma que AMPL, o texto de Gueret, Prins e Sevaux [25] e uma das
referencias mais completas da linguagem MOSEL. Sao dados exemplos que variam
dos mais simples aos mais complexos juntamente com os respectivos modelos MOSEL.
Estes podem servir de base para a construcao de modelos adequados às necessidades
do usuario.
9.6
Exerccios
EX 9.1: Um conjunto de n tarefas devem ser executadas em uma u

nica maquina que
pode executar apenas uma tarefa de cada vez. Cada tarefa j leva pj horas para
ser finalizada. Dados os pesos das tarefas, wj = 1, . . . , n, em que ordem as tarefas
devem ser executadas de maneira a se minimizar a soma ponderada do incio das
tarefas?
154
1) Formule o problema de sequenciar as tarefas como um problema de programacao matematica inteira mista. (Sugestao: use variaveis xij = 1 se a
tarefa i precede j, e 0 caso contrario; e sj como o incio da tarefa j.)
2) Implemente o modelo desenvolvido em AMPL e/ou Xpress-MP. Encontre a
solucao otima para a instancia dada na Tabela 9.2
Tabela 9.2: Sequenciamento de tarefas
Tarefa j Peso wj Tempo pj
1
0.5
1.5
2
0.4
2.3
3
0.1
1.2
4
0.5
1.0
5
0.3
1.5
6
0.5
3.6
7
0.2
4.1
8
0.8
0.8
9
1.0
2.0
10
0.6
3.0
EX 9.2: Codifique em AMPL os exerccios EX 1.1, EX 1.3, EX 1.4, EX 1.5 e EX

1.6. Encontre as solucoes executando os respectivos modelos no servidor NEOS
(http://www-neos.mcs.anl.gov/neos/server-solvers.html).
Captulo 10
Fundamentos de Programac
ao
Inteira
Este captulo inicia o estudo da programacao inteira. Apos apresentarmos alguns
problemas motivadores, descrevemos formalmente alguns casos particulares de problemas de programacao inteira e apresentamos um roteiro para modelagem de problemas.
Ao final introduzimos conceitos fundamentais para formulacao eficaz de problemas, em
particular formas de comparacao e avaliacao da qualidade de formulacoes alternativas
para um problema.
O material a seguir e uma sntese do Captulo 1 do livro de Wolsey [44].
10.1
Introduc
ao
Uma variedade expressiva de problemas de cunho pratico e teorico podem ser formulados em programacao linear inteira, incluindo problemas combinatorios freq
uentemente encontrados em teoria dos grafos, problemas de logica, situacoes praticas compreendendo a logstica de empresas, entre outros. No que segue, delineamos dois problemas praticos tipicamente resolvidos por meio de modelos e algoritmos de programacao
inteira.
10.1.1
Escalonamento de Trens
Considere uma empresa de transporte ferroviario que deseja encontrar um escalonamento de seus trens, ou seja, rotas incluindo datas de partida, chegadas e tempos de
permanencia em estacoes ao longo das rotas. Um aspecto relevante e o fato de que as
rotas se repetem diariamente, justificando portanto a otimizacao dos escalonamento.
Dados acerca do problema tambem estao disponveis e devem ser levados em consideracao: os tempos de percurso de uma estacao para outra sao conhecidos; dois trens
nao podem trafegar na mesma linha, a menos que separados por alguns minutos; e para
facilitar conexoes, o horario de partida de um trem A deve suceder o horario de chegada
de um trem B por alguns minutos. Enfim, o problema e encontrar um escalonamento
factvel que minimize algum criterio economico.
156
10. Fundamentos de Programacao Inteira
10.1.2
Airline Crew Scheduling
O problema de alocar tripulacoes a voos sujeito a restricoes fsicas, temporais, de

seguranca e trabalhistas constitui uma tarefa ardua de grande impacto economico para
empresas aereas, tanto que a ind
ustria de aviacao comercial americana possui departamentos de pesquisa operacional responsaveis por problemas desta natureza. Dados
o itinerario dos voos para um tipo particular de aviao, um problema e projetar a escala semanal das tripulacoes, onde cada tripulacao deve ser designada para um perodo
consistindo de um conjunto de voos que satisfaca uma serie de restricoes. Dentre elas,
ressaltamos: o n
umero maximo de horas de voo, os perodos de descanso mnimo, e a
necessidade de que os voos sejam cclicos permitindo o retorno periodico das tripulacoes
às suas respectivas bases. O problema e encontrar uma escala das tripulacoes que minimize o custo total, que e funcao do tempo de voo, perodo de descanso e muitos outros
fatores.
10.2
um Problema Inteiro?
O Que E
Em palavras, um problema inteiro se refere ao problema de encontrar um vetor de

inteiros que minimize uma funcao linear deste vetor, ao mesmo tempo que restricoes
lineares sao satisfeitas. Formalmente, o problema de programacao linear pode ser
expresso em programacao matematica como segue:
PL :

M ax cT x : Ax 6 b, x > 0
onde x Rn1 , A Rmn , c Rn1 e b Rm1 . O problema geral de programacao

inteira pode ser divido em classes, dependendo da natureza das decisoes, da existencia
de variaveis contnuas e discretas e do tipo de restricoes. Abaixo apresentamos algumas
dessas classes.
10.2.1
Problema (Linear) Inteiro Misto
O problema inteiro misto nada mais e do que um problema de programacao linear

com variaveis discretas e outras contnuas, sendo expresso na forma:
P IM : M ax cT x + hT y
s.a : Ax + Gy 6 b
x > 0, y > 0 e y inteiro.
10.2.2
Problema (Linear) Inteiro
Nesta versao do problema, todas as variaveis devem ser inteiras:

P I : M ax cT x
s.a : Ax 6 b
x Zn+
157
10.2.3
Problema Linear Bin

ario
Uma versao particular do problema inteiro e o problema binario, no qual todas as

variaveis so podem assumir os valores 0 ou 1:
P IB : M ax cT x
s.a : Ax 6 b
x {0, 1}n
A relevancia de PIB surge do desenvolvimento de resultados teoricos e algoritmos
especficos para esta classe de problema. Um ponto interessante e o fato que um PI
pode ser reduzido em um problema equivalente do tipo PIB.
10.2.4
Problema de Otimizac
ao Combinat
oria
Problemas de natureza combinatoria compreendem aqueles em que se deseja encontrar um arranjo particular, dentre um n
umero comumente combinatorio e exponencial
de arranjos factveis, que minimize/maximize algum criterio de selecao para os diferentes arranjos. Seja N = {1, . . . , n} um conjunto finito, cj o custo de cada elemento
j de N , e F uma famlia de subconjuntos de N dita famlia de subconjuntos viaveis,
e.g., F 2N . Entao o problema de otimizacao combinatoria pode ser definido em
programacao matematica:
P OC : M axSN
X
jS
cj : S F
Freq
uentemente, POC pode ser formulado como PI ou PIB.
10.3
Programac
ao Linear e Arredondamento
Por que nao utilizar PL? Poderamos desconsiderar as restricoes de variaveis inteiras,
obter uma solucao otima x para PL e depois arredondar x de forma a se obter uma
solucao para PI, por exemplo. Infelizmente, esta abordagem nao funciona como mostra
o contra-exemplo abaixo:
M ax
x1 + 0.6x2
s.a : 50x1 + 31x2 6 250
3x1
2x2 > 4
x1 , x2 > 0 e inteiros
376 950
A solucao otima para PL, xP L = ( 193
, 193 ) = (1.94, 4.92), poderia ser arredondada para
a solucao xP L = (2, 4), que e bastante distante da solucao otima x = (5, 0). Uma
ilustracao e dada na Figura 10.1.
158
x2
(376/193, 950/193)
5
4
3
Fecho convexo
dos pontos inteiros
2
1
x
1
x1
Figura 10.1: Ilustracao da solucao obtida atraves de arredondamento
10.4
Formulac
ao de PIs e PIBs
A formulacao de um problema e tanto uma arte quanto uma ciencia. Existem

tecnicas e metodologias, contudo a experiencia e a intuicao continuam e provavelmente
continuarao a desempenhar um papel fundamental. Aqui apresentamos alguns passos
metodologicos para formulacao de problemas que sao exemplificados. A transcricao
de um problema em uma formulacao deve ser conduzida de uma forma sistematica,
mantendo sempre claro a distincao entre os dados do problema e as vari
aveis de decis
ao.
Passos sugeridos:
i. Defina quais variaveis sao necessarias
ii. Utilize as variaveis para definir restricoes tal que os pontos factveis correspondam
às solucoes viaveis da formulacao
iii. Utilize as variaveis para definir a funcao objetivo
Se as dificuldades persistirem, defina conjuntos de variaveis adicionais alternativas,
repetindo os passos metodologicos.
10.4.1
Exemplo 1: Formulando o Problema de Alocac

ao
No problema de alocacao, ha n pessoas para executar n tarefas, sendo cada pessoa

obrigatoriamente designada a precisamente a uma tarefa. Alguns indivduos sao menos
eficientes em certas tarefas, incorrendo um custo cij se a pessoa i executar a tarefa j.
Portanto o problema e encontrar a alocacao pessoa-tarefa de menor custo agregado.
Definindo as Vari
aveis
xij =
1
0
se a pessoa i e alocada à tarefa j

caso contrario
159
Definindo as Restric
oes
a) Cada pessoa i executa uma tarefa
n
X
xij = 1
i = 1, . . . , n
j=1
b) Cada tarefa j e executada por uma pessoa

n
X
xij = 1
j = 1, . . . , n
i=1
c) As variaveis sao 0-1

xij {0, 1}
i = 1, . . . , n j = 1, . . . , n
Definindo a Fun
c
ao Objetivo
Min
n X
n
X
cij xij
i=1 j=1
10.4.2
Exemplo 2: O Problema da Mochila
O problema da mochila e chave em varias aplicacoes teorico-praticas. Um exemplo

e o problema enfrentado por um investidor que dispoe de uma quantidade b para investimentos. Ha n projetos sob consideracao, sendo aj o custo estimado do projeto j e
cj e o retorno esperado. O objetivo do investidor se resume a encontrar um conjunto
de projetos tal que a quantidade de investimento nao exceda a quantidade disponvel
e, ao mesmo tempo, maximize o retorno.
Definindo as Vari
aveis
xj =
1
0
se o projeto j e selecionado
caso contrario
Defini
c
ao de Restric
oes
a) Limitacao de recursos:
n
P
aj x j 6 b
j=1
b) Variaveis sao 0-1: xj {0, 1} j = 1, . . . , n

Definindo a Fun
c
ao Objetivo
M ax
n
X
j=1
c j xj
160
10.4.3
Exemplo 3: O Problema de Cobertura por Conjuntos
O problema de cobertura por conjuntos define outra classe empregada com

freq
uencia na pratica. Para se ter uma ideia, o problema de escalonamento de tripulacoes pode ser resolvido por meio da decomposicao em sub-problemas, um dos
quais e um problema de cobertura por conjuntos, onde os elementos do conjunto base
(S) sao voos a serem operados pela empresa de transporte aereo e os sub-conjuntos
(Sj S) correspondem a configuracoes de tripulacoes viaveis. Aqui vamos considerar
o caso particular de localizacao de unidades de emergencia. Dado um certo n
umero
de regioes, o problema e decidir onde devemos instalar um conjunto de servicos de
emergencia. Para cada ponto possvel de instalacao de um centro, sabemos o custo
de instalacao e as regioes que a central de servicos pode atender (e.g., em menos de 8
minutos) Seja M = {1, . . . , m} o conjunto de regioes e N = {1, . . . , n} o conjunto de
possveis centrais de emergencia. Seja ainda Sj M o conjunto de regioes que podem
ser atendidas pela central j e cj o custo de instalacao. Entao, obtemos o seguinte
problema de otimizacao combinatoria:
X
[
P OC : M inT N {
cj :
Sj = M }
jT
jT
Formulando o Problema Como um PIB

Primeiro construmos a matriz A tal que aij = 1 se i Sj e aij = 0 caso contrario,
portanto A {0, 1}mn .
Definindo as Vari
aveis
xj =
1
0
se o central j sera instalada

caso contrario
oes
a) Pelo menos um centro deve servir a regiao i
n
X
aij xj > 1
para i = 1, . . . , m
j=1
b) As variaveis sao binarias

xj {0, 1}
para j = 1, . . . , n
Definindo a Fun
c
ao Objetivo
Min
n
X
j=1
c j xj
161
10.4.4
Exemplo 4: O Problema do Caixeiro Viajante (PCV)
Outro problema classico e o problema do caixeiro viajante, o qual consiste em

escolher uma ordem para um viajante partir da sua cidade base, digamos cidade 1,
visitar as demais n 1 cidades precisamente uma vez, e depois retornar à cidade base
de maneira que a distancia percorrida seja a menor possvel. Nos e dado um conjunto
de n cidades e o custo (distancia) cij do deslocamento da cidade i para a cidade j. A
tarefa e encontrar uma rota (circuito) que visite cada cidade precisamente uma vez que
seja de menor custo possvel. As aplicacoes sao diversar, em particular o roteamento
de veculos, a soldagem de pontos de contato em placas de circuitos integrados, e a
coleta de lixo sistematizada.
Definindo as Vari
aveis
xij =
1
0
se o viajante se desloca da cidade i para a cidade j

caso contrario
oes
a) O viajante deixa a cidade i exatamente uma vez:
n
P
xij = 1
i = 1, . . . , n
j=1
b) O viajante entra na cidade j exatamente uma vez:
n
P
xij = 1
j = 1, . . . , n
i=1
c) Restricoes de conectividade:
XX
S N, S 6=
xij > 1
iS j S
/
ou eliminacao de subrotas
X X
iS jS, j6=i
xij 6 |S| 1
S N, 2 6 |S| 6 n 1
A Figura 10.2 ilustra a restricao de conectividade.
Definindo a func
ao objetivo
Min
n X
n
X
i=1 j=1
cij xij
162
N S
Figura 10.2: Ilustracao da restricao de conectividade
10.5
Explos
ao Combinat
oria
Todos os problemas ate entao vistos sao combinatoriais: a solucao e um subconjunto

de um conjunto finito. Em princpio, tendo em vista que o conjunto de solucoes factveis
e finito, poderamos enumerar todas as solucoes factveis. As Tabelas 10.1 e 10.2
ilustram o crescimento do n
umero de solucoes factveis para alguns problemas. A
partir desta analise preliminar, podemos concluir que uma abordagem baseada em
enumeracao pode ser eficaz apenas em instancias pequenas.
Tabela 10.1: N
umero de solucoes em funcao do tamanho do problema
Tipo Problema
N
umero de solucoes
1 Alocacao (10.4.1)
n!
2 Mochila e cobertura
por conjuntos (10.4.2) e (10.4.3)
2n
3 Problema do caixeiro (10.4.4)
viajante assimetrico
(n 1)!
n
10
102
103
Tabela 10.2:
de
Crescimento
log2 n
n
n2
2n
3.32 3.16 102 103
6.64
10
104 1030
9.97 31.62 106 10301
funcoes
n!
3.6 106
9.3 10157
4 102567
163
10.6
Formulac
ao de Problemas Inteiros Mistos
(PIMS)
Modelos contendo variaveis discretas e contnuas apresentam propriedades sui generis, necessitando tratamento particular. Por exemplo, nos proximos captulos veremos
os cortes de Gomory que sao diferenciados dependendo do problema ser inteiro ou inteiro misto. No que segue sera apresentado um conjunto de truques de modelagem e
exemplos que podem ser u
teis.
10.6.1
Exemplo 1: Modelando Custos Fixos
Imagine a situacao onde se deseja modelar uma funcao nao-linear dada por:
h(x) =
f + px
0
se 0 < x 6 c
se x = 0
A funcao h(x) e ilustrada na Figura 10.3.
h(x)
Figura 10.3: Funcao com custo fixo
Defini
c
ao de uma vari
avel adicional (y)
y=
1
0
se x > 0
se x = 0
164
Introduzindo a func
ao objetivo e restri
c
oes
h(x) = f y + px
x 6 cy
y {0, 1}
x>0
O modelo matematico acima e valido apenas para o caso de minimizacao. Note tambem
que x = 0 e y = 1 podem ocorrer.
10.6.2
Exemplo 2: Localiza
c
ao de Dep
ositos sem Limites de
Capacidade
Mais um exemplo de problema classico que se preocupa com a localizacao de

depositos, e conseq
uentemente o custo de instalacao deste bem como a posicao estrategica dos mesmos, alem dos custos de transporte incorridos no transporte de mercadorias dos depositos aos clientes. Nos e dado um conjunto N = {1, . . . , n} de possveis
localizacoes de depositos, um conjunto M = {1, . . . , m} de clientes, o custo fixo fj para
a instalacao do deposito j, e custo de transporte cij caso o suprimento da demanda
do cliente i seja realizado pelo deposito j. Assim o problema consiste em decidir que
depositos serao instalados e quais depositos atenderao quais clientes, de maneira a
minimizar o custo total de instalacao e transporte.
Definindo as vari
aveis
yj =
1
0
se o deposito j sera construdo

caso contrario
xij e a fracao da demanda do cliente i suprida pelo deposito j

Definindo as restri
c
oes
a) Deposito j pode operar somente se instalado:
m
P
xij 6 myj
j = 1, . . . , n
i=1
b) A demanda do cliente i deve ser satisfeita:
n
P
xij = 1
i = 1, . . . , m
j=1
c) Variaveis 0-1:
yj {0, 1}
j = 1, . . . , n
0 6 xij 6 1
i = 1, . . . , m e j = 1, . . . , n
Especificando a func
ao objetivo
Min
n
X
j=1
f j yj +
m X
n
X
i=1 j=1
cij xij
165
Problema completo
Minimize
n
P
f j yj +
n
P
j=1
m
P
cij xij
i=1 j=1
j=1
Sujeito a :
n
m P
P
xij = 1
i = 1, . . . , m
xij 6 myj
j = 1, . . . , n
(10.1)
i=1
yj {0, 1}
0 6 xij 6 1
10.6.3
j = 1, . . . , n
i = 1, . . . , m e j = 1, . . . , n
Alternativas Discretas e Disjuntas
Uma area que tem recebido atencao de pesquisadores e esta tendo resultados promissores na pratica e a programacao disjuntiva, ou seja, modelagem e algoritmos com
base em disjuncoes. Para entender a programacao disjuntiva, suponha que x Rn
satisfaz
06x6ue
(10.2)
aT1 x 6 b1 ou aT2 x 6 b2
Em outras palavras, x deve satisfazer uma ou outra restricao linear, nao sendo necessario mas possvel que ele satisfaca ambas as restricoes. A regiao factvel de uma
disjuncao com duas restricoes e ilustrada na Figura 10.1. Note que a regiao factvel
nao e convexa.
x2
aT2 x = b2
Regiao Factvel
aT1 x = b1
x1
Figura 10.4: Regiao factvel nao convexa

Podemos representar as equacoes em (10.2), ou melhor, a disjuncao ou em programacao inteira mista? Sim e possvel. Seja M = maxi=1,2 {aTi x bi : 0 6 x 6 u}.
166
Primeiramente, introduzimos duas variaveis binarias, y1 e y2 , cuja semantica e explicitada abaixo:

1 se x satisfaz aT1 x 6 b1
y1 =
0 caso contrario

1 se x satisfaz aT2 x 6 b2
y2 =
0 caso contrario
Uma vez introduzidas as variaveis acima, podemos apresentar a formulacao completa:
aT1 x 6 b1 + M (1 y1 )
aT2 x 6 b2 + M (1 y2 )
y1 + y2 = 1
y1 , y2 {0, 1}
06x6u
Disjuncoes aparecem naturalmente em problemas de escalonamento. Suponha que as
tarefas 1 e 2 devem ser processadas em uma mesma maquina, mas nao simultaneamente.
Seja pi o tempo de processamento da tarefa i e ti o instante em que o processamento e
iniciado. Entao, podemos expressar a precedencia temporal de uma tarefa em relacao
a outra por meio de uma disjuncao:
t1 + p1 6 t2 ou t2 + p2 6 t1
10.7
Formulaco
es Alternativas
Nesta e na proxima secao tentaremos entender o que leva uma formulacao a ser
melhor do que outra. Ha situacoes em que uma formulacao e superior a outra, em
especial se leva a uma solucao algortmica mais eficiente.
Defini
c
ao 10.1 Um subconjunto do Rn descrito por um conjunto finito de restricoes
lineares P = {x Rn : Ax 6 b} e dito um poliedro.
Defini
c
ao 10.2 Um poliedro P Rn+p e uma formulacao para um conjunto X
Zn Rp se, e somente se, X = P (Zn Rp ).
Na Figura 10.5 sao ilustradas duas formulacoes equivalentes para o conjunto X =

{(1, 1), (2, 1), (3, 1), (1, 2), (2, 2), (3, 2), (2, 3)}.
10.7.1
Formulac
oes Equivalentes para o Problema da Mochila
Considere uma instancia do problema da mochila com n = 4, onde o conjunto

de solucoes factveis e X = {(0, 0, 0, 0), (1, 0, 0, 0), (0, 1, 0, 0), (0, 0, 1, 0), (0, 0, 0, 1),
(0, 1, 0, 1), (0, 0, 1, 1)}. Os poliedros abaixo induzem formulacoes validas para o conjunto X:
P1 = {x R4 : 0 6 x 6 1, 83x1
P2 = {x R4 : 0 6 x 6 1, 4x1
P3 = {x R4 : 0 6 x 6 1, 4x1
x1
x1
+ 61x2
+ 3x2
+ 3x2
+
x2
+ 49x3 + 20x4
+ 2x3 +
x4
+ 2x3 +
x4
+
x3
+
x4
6 100}
6
4}
6
4,
6
1,
6
1}
167
x2
x1
Figura 10.5: Formulacoes equivalentes alternativas
10.7.2
Localiza
c
ao de Dep
ositos sem Limites de Capacidade
Relembrando o problema de localizacao de depositos sem capacidade, considere um

deposito j e a restricao
m
X
yj {0, 1},
xij 6 myj ,
i=1
0 6 xij 6 1 para i M
(10.3)
Logicamente, estas restricoes expressam a condicao: se xij > 0 entao yj = 1. Podemos

entao utilizar o seguinte conjunto de restricoes alternativas:
0 6 xij 6 yj para i M
yj {0, 1}
(10.4)
Isto nos leva à formulacao alternativa:

Min
S.a :
n
m P
P
i=1 j=1
n
P
cij xij +
xij = 1
n
P
f j yj
j=1
i = 1, . . . , m
j=1
0 6 xij 6 yj
yj {0, 1}
(10.5)
i = 1, . . . , m e j = 1, . . . , n
j = 1, . . . , n
Qual das duas formulacoes do problema de localizacao de facilidades e melhor, a

formulacao (10.1) ou a formulacao (10.5)?
168
10.8
Formulaco
es Apertadas e Ideais
Ja observamos que o n
umero de formulacoes validas pode ser infinito. Dentre um
n
umero potencialmente infinito de formulacoes, qual e a melhor formulacao? Por exemplo, considere o conjunto e as formulacoes equivalentes ilustrados na Figura 10.6.
x2
3
P1
2
P2
P3
1
x1
Figura 10.6: Formulacoes alternativas

Conforme a figura 10.6, a formulacao P3 e ideal: podemos resolver o PL usando P3
(sem restricoes inteiras) e sempre obtermos um ponto extremo inteiro; portanto, com
P3 o problema pode ser resolvido em tempo polinomial.
Defini
c
ao 10.3 Dado um conjunto X Rn , o fecho convexo de X, denotado por
conv(X) e definido como:
conv(X) = {x : x e combinacao convexa dos elementos de X}
Proposi
c
ao 10.1 conv(X) e um poliedro.
Proposi
c
ao 10.2 Todos os pontos extremos de conv(X) pertencem a X.
Em princpio, podemos substituir o problema {M ax cT x : x X} por {M ax cT x :
x conv(X)}. Entao, qual e a dificuldade pr
atica em se realizar esta substituicao?
Tipicamente, necessitamos de um n
umero exponencial de desigualdades para descrever
o poliedro de conv(X) e, alem disso, nao existe uma caracterizacao simples dos mesmos.
Defini
c
ao 10.4 Dado um conjunto X Rn e duas formulacoes, P1 e P2 para X,
dizemos que P1 e melhor (mais apertada) do que P2 se P1 P2 .
169
10.8.1
Formulac
oes Equivalentes para o Problema da Mochila
Vamos relembrar as tres formulacoes alternativas para o problema da mochila sugerido na Secao 10.7.1.
P1 = {x R4 : 0 6 x 6 1, 83x1
P2 = {x R4 : 0 6 x 6 1, 4x1
P3 = {x R4 : 0 6 x 6 1, 4x1
x1
x1
+ 61x2
+ 3x2
+ 3x2
+
x2
+ 49x3 + 20x4
+ 2x3 +
x4
+ 2x3 +
x4
+
x3
+
x4
6 100 }
6
4 }
6
4
6
1
6
1 }
Podemos verificar que P3 P2 P1 . Primeiro vamos mostrar que P2 P1 :

25(4x1 + 3x2 + 2x3 + x4 ) 6 25 4
100x1 + 75x2 + 50x3 + 25x4 6 100
83x1 + 61x2 + 49x3 + 20x4 6 100x1 + 75x2 + 50x3 + 25x4 6 100
Portanto x P1 ; x P2 .
Agora mostraremos que P3 P2 : claramente, P3 P2 ; o ponto x = ( 21 , 0, 1, 0) P2
mas x
/ P3 . As relacoes de inclusao entre as tres formulacoes alternativas sao ilustradas
na Figura 10.7
P1
P2
P3
Figura 10.7: Formulacoes apertadas
10.8.2
Formulac
ao para o Problema de Localiza
c
ao de
Dep
ositos
As duas formulacoes so diferem quanto às restricoes que permitem suprimento de

clientes somente se um deposito estiver instalado. Relembrando as formulacoes.
X
P1 :
xij 6 myj
(10.6)
iM
P2 : xij 6 yj para i M
(10.7)
Claramente, (10.7) (10.6) e portanto P2 P1 . Considere o ponto x definido como:

x1j = 1, x2j = x3j = . . . . = xmj = 0
yj = m1
Verifica-se que o ponto x P1 , mas x

/ P2
170
10.9
Refer
encias
O texto apresentado neste captulo, incluindo estrutura, conte

udo e figuras, foi
traduzido do livro de Wolsey [44]. Planejamos estender o texto de forma a fazer uma
contribuicao original, atraves de outros exemplos praticos, formulacoes lineares por
partes e formulacoes de problemas nao lineares.
10.10
Exerccios
EX 10.1: Suponha que um investidor deseja investir em um conjunto S = {1, . . . , 7}

de acoes. Usando variaveis 0-1 formule as seguintes restricoes:
i. nao pode-se investir em todas as acoes;
ii. pelo menos uma acao deve ser selecionada;
iii. a acao 1 nao pode ser escolhida se a acao 3 e escolhida;
iv. a acao 4 pode ser escolhida apenas se a acao 2 e escolhida;
v. ambas as acoes 1 e 5 devem ser escolhidas ou, exclusivamente, nenhuma
delas; e
vi. pelo menos uma das acoes do conjunto {1, 2, 3} ou pelo menos duas acoes
do conjunto {2, 4, 5, 6}.
EX 10.2: Formule os seguintes problemas em programacao inteira mista:
i. u = min{x1 , x2 }, assumindo que 0 6 xj 6 C para j = 1, 2;
ii. v = |x1 x2 | com 0 6 xj 6 C para j = 1, 2; e
iii. o conjunto X {x } onde X = {x Z n : Ax 6 b} e x X.

EX 10.3: Sejam:
X1 = {x B4 : 97x1 + 32x2 + 25x3 + 20x4 6 139}
X2 = {x B4 : 2x1 + x2 + x3 + x4 6 3}
X3 = {x B4 : x1 + x2 + x3 6 2
x1 + x2 + x4 6 2
x1 + x3 + x4 6 2}
onde B = {0, 1}. Mostre que X1 = X2 = X3 .
EX 10.4: Considere a instancia do problema do caixeiro viajante simetrico conforme
Figura 10.8. As arestas omissas possuem um custo proibitivo. Encontre uma
solucao otima utilizando um pacote de software capaz de resolver problemas de
programacao inteira mista. (Sugestao utilize o software lp solve instalado no
diretorio: /home/pesquisa/camponog/lp solve 1.4.)
EX 10.5: Considere cada uma das relacoes logicas envolvendo variaveis 0-1. Expresse
estas relacoes como restricoes lineares, possivelmente atraves do uso de variaveis
0-1 adicionais, da forma mais apertada possvel:
171

5
2
1
2
1
6
1
2
4
8
2
1
3
Figura 10.8: Grafo da instancia do problema do caixeiro viajante

1) yij e igual a xi xj
2) Se x1 = 1 entao x2 + x3 = 1
3) x3 e 1 se e somente se x1 e 1 ou x2 e 1, mas nao ambas.
4) x1 e x2 podem assumir todos os valores 0-1 possveis, exceto x1 = 0 e x2 = 1.
EX 10.6: Seja a = (a0 , . . . , an ) uma seq
uencia de dgitos binarios como indicado. Por
exemplo, a = (001111011010) e uma seq
uencia com n = 11.
i. Como voce modelaria em programacao matematica o problema de calcular xj , j = 0, . . . , n, onde xj = j k e o comprimento da subsequencia
(ak , ak+1 , . . . , aj1 ) mais longa de 1s que termina em aj1 ? Defina x0 = 0.
Note que se aj1 = 0 entao xj = 0.
ii. Para esta mesma questao, suponha que voce deseja impor uma restricao
de que a subsequencia mais longa de 1 s seja no maximo l. Como voce
expressaria esta restricao em programacao matematica?
iii. Para esta mesma questao, suponha que voce deseja impor a restricao de
que cada subsequencia de 1 s tenha comprimento mnimo lmin , exceto ser
for uma subsequencia no extremo direito de a. Como voce expressaria esta
restricao em programacao matematica?
EX 10.7: Uma empresa de distribuicao de pacotes tem um conjunto de caminhoes,
motocicletas e outros veculos para entrega de pacotes. Seja M o n
umero de
pacotes a serem distribudos, onde cada pacote m tem um peso wm e deve ser
entregue no ponto pm . Seja N o n
umero de veculos da frota da empresa, tendo o
veculo n uma capacidade de transporte un . Suponha que e conhecida uma rota
rn para cada veculo n, sendo esta caracterizada por um conjunto de pacotes que
podem ser entregues pelo veculo n e onde cn e o custo para alocar o veculo a rn .
Como voce modelaria o problema de alocar veculos de forma que cada pacote
faca parte da rota de pelo menos um veculo alocado e tal que o custo total seja
o menor possvel?
EX 10.8: No problema de rede de abastecimento e dado um conjunto S =
{(x1 , y1 ), . . . , (xn , yn )} de localizacoes que deverao receber abastecimento. Dois
172
tubos mestres, um horizontal a ser instalado na altura y e um vertical a ser colocado na posicao x, terao como ponto de conexao a coordenada (x, y). Os pontos
de abastecimento de S deverao ser conectados ao tubo mestre horizontal (por um
tubo secundario vertical) ou ao tubo mestre vertical (por um tubo secundario
horizontal), conforme ilustrado na Figura 10.9.
Nosso problema e determinar o ponto de instalacao (x, y) e decidir como que
os pontos de abastecimento serao conectados (com o tubo mestre vertical ou
horizontal) de forma que a metragem total de tubos secundarios seja minimizada.
possvel colocar o proFormule este problema em programacao matematica. E
blema em um modelo inteiro misto?
Faca uso do modelo desenvolvido para resolver a instancia dada pela Figura
10.9, cujos pontos sao: (x1 , y1 ) = (239, 491); (x2 , y2 ) = (193, 455); (x3 , y3 ) =
(318, 478); (x4 , y4 ) = (276, 429); (x5 , y5 ) = (203, 406); (x6 , y6 ) = (149, 379);
(x7 , y7 ) = (151, 350); (x8 , y8 ) = (230, 340); (x9 , y9 ) = (325, 347); (x10 , y10 ) =
(383, 272); (x11 , y11 ) = (414, 360); (x12 , y12 ) = (440, 442); (x13 , y13 ) = (383, 506);
e (x14 , y14 ) = (463, 496).
(x13 , y13 )
(x14 , y14 )
(x1 , y1 )
(x3 , y3 )
(x2 , y2 )
(x4 , y4 )
(x12 , y12 )
(x5 , y5 )
(x6 , y6 )
(x, y) Mestre Horizontal

(x11 , y11 )
(x7 , y7 )
(x8 , y8 )
(x9 , y9 )
Mestre Vertical
(x10 , y10 )
Figura 10.9: Rede de abastecimento.
Captulo 11
Programac
ao Inteira: Relaxa
co
es e
Algoritmo Branch-and-Bound
Da mesma forma que em problemas de otimizacao diferenciaveis, e de grande valor
conhecermos condicoes sob as quais uma solucao candidata pode ter sua qualidade estimada em relacao à solucao otima, mesmo sem conhecermos a solucao otima. Este tipo
de estimacao e comumente obtido atraves da solucao otima de problemas mais faceis,
todavia com espaco de solucoes mais abrangente do que o espaco do problema em
questao. Estes problemas sao ditos relaxacoes, podendo ser obtidos por meio da desconsideracao de algumas restricoes, da desconsideracao das restricoes de integralidade,
e da simplificacao do problema.
Neste captulo investigaremos questoes relacionadas à otimalidade, diferentes tipos
de relaxacoes, e por fim apresentaremos o algoritmo de branch-and-bound que pode
ser visto como um procedimento de enumeracao implcita que faz uso de uma mais
relaxacoes.
O texto a seguir e uma sntese traduzida do livro texto de Wolsey [44].
11.1
Condico
es de Otimalidade
Inicialmente, considere o problema PI que segue:

PI :
z = Max {cT x : x X Zn }
Dado PI e uma solucao candidata x , como podemos provar que x e uma solucao
otima? Em outras palavras, procuramos condicoes de otimalidade que provem uma
condicao de parada para algoritmos. Um metodo que a primeira vista parece ingenuo,
consiste em encontrar um limite inferior z 6 z e um limite superior z > z tal que se
z = z, entao z e otimo. Tipicamente, algoritmos produzem duas seq
uencias de limites:
uma seq
uencia de limites superiores z 1 > z 2 > . . . > z t > z
uma seq
uencia de limites inferiores z 1 < z 2 < . . . < z k 6 z
Assim dado um > 0, podemos definir um criterio de parada como |z t z k | 6 .

No momento que o algoritmo termina, teremos certeza que a solucao candidata z e no
maximo unidades inferior à solucao otima. A habilidade de se estimar a qualidade
de uma solucao candidata e de fundamental importancia para otimizacao.
174
11.1.1
11. Programacao Inteira: Relaxacoes e Algoritmo Branch-and-Bound
Limite Primal
Encontrar uma solucao factvel pode ser uma tarefa facil ou ardua, dependendo
intrinsecamente do problema e da instancia particular. Qualquer solucao viavel x,
x X, induz um limite inferior (limite primal para o caso de maximizacao) ja que
cT x 6 cT x = z . No caso de problema NP-Completos, como o de encontrar um
circuito Hamiltoniano em um grafo, a busca de uma solucao factvel se resulta a resolver
o problema enquanto, por outro lado, encontrar uma rota factvel do problema do
caixeiro viajante e facil, estando a dificuldade em encontrar a rota mais curta.
11.1.2
Limite Dual
Um metodo para encontrar limites superiores faz uso de uma relaxacao do problema
original, ou seja, um problema mais simples cuja solucao otima nao e inferior à solucao
otima do problema original.
Defini
c
ao 11.1 Um problema (RP) z R = M ax{f (x) : x T Rn } e uma relaxacao
do problema (PI) z = M ax{c(x) : x X Rn } se:
i) X T
ii) f (x) > c(x) para todo x X.
Proposi
c
ao 11.1 Se (RP) e uma relaxacao de (PI) ent
ao z R > z.
11.2
Relaxa
c
ao Baseada em PL (Relaxac
ao Linear)
Defini
c
ao 11.2 Para o problema de programacao inteira M ax{cT x : x P Zn }
com formulacao P = {x Rn+ : Ax 6 b} a relaxacao em programacao linear e z P L =
M ax{cT x : x P }.
Exemplo:
z = M ax 4x1 x2
s.a : 7x1 2x2 6 14
x2 6 3
2x1 2x2 6 3
x Z2+
Limite inferior: observe que x = (2, 1) e factvel, portanto z > 7.
limite superior: a solucao otima da relaxacao linear e x =
portanto conclumos que z 6 8 6 59
, onde 8 = 59
.
7
7
20
,3
7
com z LP =
59
,
7
Proposi
c
ao 11.2 Sejam P1 , P2 duas formulacoes para o problema inteiro z =
M ax{cT x : x X Zn } sendo P1 mais apertada do que P2 (ou seja P1 P2 ).
Se ziP L = M ax{cT x : x Pi } para i = 1, 2 , ent
ao z1P L 6 z2P L .
175
Proposi
c
ao 11.3
(i) Se a relaxacao RP e infactvel, ent
ao o problema original PI e infactvel
(ii) Seja x uma solucao
otima para RP. Se x X Zn e f (x ) = c(x ), ent
ao x
e uma solucao
otima para PI.
11.3
Relaxa
c
ao Combinat
oria
Sempre que a relaxacao e um problema de otimizacao combinatoria, dizemos que

ela e uma relaxacao combinatoria. A seguir exemplificamos a relaxacao combinatoria
no problema do caixeiro viajante e no da mochila.
11.3.1
O Problema do Caixeiro Viajante
Lembrarmos incialmente a formulacao em programacao matematica do problema:

(P CV ) M inimize
s.a :
n X
n
X
cij xij
i=1 j=1
n
X
j=1
n
X
(11.1)
xij = 1
i = 1, .., n
(11.2)
xij = 1
j = 1, .., n
(11.3)
i=1
XX
S {1, . . . , n}, |S| > 2
xij > 1
iS j S
/
xij {0, 1}
(i, j) A
(11.4)
(11.5)
Eliminando a famlia de restricoes (11.4), obtem-se um problema de alocacao, conforme o problema de alocacao de pessoas a tarefas visto em captulo anterior. Note que
o problema de alocacao pode ser eficientemente resolvido fazendo uso de algoritmos
para fluxo em redes de custo mnimo.
11.3.2
O Problema da Mochila
O problema da mochila e expresso em programacao matematica na forma:

(P M ) M ax
s.a :
n
P
j=1
n
P
c j xj
aj x j 6 b
j=1
xj {0, 1}, j = 1, . . . , n
(11.6)
176
Uma primeira relaxacao pode ser obtida ao tomarmos os valores inteiros imediatamente
inferiores aos pesos dos objetos:
(RP1 ) M ax
s.a :
n
P
c j xj
j=1
n
P
aj xj 6 b
(11.7)
j=1
xj {0, 1}, j = 1, . . . , n
que por sua vez e equivalente ao problema:

(RP2 ) M ax
s.a :
n
P
c j xj
j=1
n
P
aj xj 6 b
(11.8)
j=1
xj {0, 1}, j = 1, . . . , n
11.4
Relaxa
c
ao Lagrangeana
Primeiramente, considere o problema em programacao inteira na forma abaixo:

(P I) z = M ax cT x
s.a : Ax 6 b
x X Zn
(11.9)
(11.10)
(11.11)
Como visto acima, uma relaxacao pode ser obtida ao eliminarmos o conjunto de restricoes {Ax 6 b}. Em vez de eliminar {Ax 6 b}, a relaxacao Lagrangeana incorpora
estas restricoes na funcao objetivo como segue:
(RL) z = M ax cT x + uT (b Ax)
s.a : x X
u>0
(11.12)
(11.13)
(11.14)
Proposi
c
ao 11.4 Seja z(u) = M ax {cT x + uT (b Ax) : x X}. Entao z(u) > z
para todo u > 0.
De acordo a Proposicao 11.4, a solucao otima do problema RL para u > 0 qualquer
induz um limite superior z(u) > z , onde z e o valor da solucao otima de PI. Nao
e difcil de se verificar que z(u) > cT x, para todo x P = {x : x X e Ax 6 b}:
cT x 6 cT x + uT (b Ax) uma vez que b Ax > 0 para x factvel e u > 0; ja que as
solucoes factveis de P I tambem fazem parte do espaco de solucoes factveis de RL,
verifica-se que z(u) > z . Uma vez que z(u) e um limite superior para z naturalmente
desejamos minimiza-lo, dando origem ao problema Lagrangeano dual:
LD :
M in z(u)
= M in M ax cT x + uT (b Ax)
u>0
u>0
s.a : x X
177
Um aspecto relevante do Lagrangeano dual e o fato do problema ser convexo mas nao
diferenciavel. Um algoritmo que pode ser usado para encontrar uma solucao aproximada para LD, e ate mesmo uma solucao otima quando certas condicoes sao satisfeitas,
e o algoritmo subgradiente. Este algoritmo opera de forma semelhante ao algoritmo
de descenso. Dada um vetor de multiplicadores de Langrange uk , o algoritmo encontra
um subgradiente dk que indica a direcao na qual os multiplicadores devem ser aumentados/diminudos. Assim, o iterando seguinte uk+1 = uk + k dk e obtido por meio do
passo k > 0. Em virtude da natureza nao-diferenciavel do problema, nao e possvel
obter condicoes como as de Armijo.
11.5
Algoritmo Branch-and-Bound
O algoritmo branch-and-bound (B&B) pode ser entendido como uma extensao

da estrategia de divisao e conquista para problemas de natureza inteira mista, ou seja,
divida um problema P em um conjunto de subproblemas {SPk } de forma que a solucao
de P possa ser obtida atraves da solucao dos subproblemas, resolva os subproblemas
e, no final, obtenha a solucao do problema de interesse. De acordo com o algoritmo
B&B, as divisoes sao feitas iterativamente, sempre observando que os subproblemas
devem ser mais faceis de serem resolvidos que o problema original, alem de se procurar
descartar subproblemas por meio de enumeracao implcitaisto equivale a dizer que,
de alguma forma, podemos garantir que a solucao otima nao e solucao de um certo
subproblema e, por conseguinte, podemos descarta-lo.
11.5.1
Estrat
egia de Divis
ao e Conquista
Considere o problema:
z = M ax{cT x : x S}
Como que o problema acima pode ser quebradoem subproblemas menores e depois
recombinadosde maneira a se obter uma solucao para o problema original? Abaixo
enumeramos algumas proposicoes que servem de regras gerais para que a quebra seja
feita de uma forma sistematica e com embasamento teorico.
Proposi
c
ao 11.5 Seja S = S1 . . . SK uma decomposicao de S em K conjuntos
menores. Seja tambem z k = M ax{cT x : x Sk } para k = 1, . . . , K. Entao, z =
M axk z k .
Uma maneira tpica de se ilustrar a estrategia de divisao e conquista, obedecendo
as premissas da Proposicao 11.5, e por meio de uma arvore de enumeracao.
Exemplo: Para S {0, 1}3 , podemos construir a arvore de enumeracao da Figura
11.1. Claramente S = S0 S1 , onde S0 = {x S : x1 = 0} e S1 = {x S :
x1 = 1}. Estendendo este princpio a mais um nvel, podemos subdividir cada um dos
subproblemas em subproblemas ainda menores, fazendo S0 = S00 S01 e S1 = S10 S11 ,
onde Si1 i2 = {x Si1 : x2 = i2 }.
178
S
x1 = 1
x1 = 0
S0
S1
Figura 11.1: Arvore

de enumeracao
S
x1 = 0
x1 = 1
S0
S1
x2 = 0
x2 = 1 x2 = 0
x2 = 1
S00
S01
S11
S10
Figura 11.2: Arvore

de enumeracao
Na Figura 11.3 ilustramos a arvore de enumeracao completa. Note que uma folha
da arvore Si1 i2 i3 e nao-vazia se, e somente se, x = (i1 , i2 , i3 ) S. Portanto, as folhas
da arvore correspondem precisamente às solucoes candidatas que seriam examinadas
se fosse conduzida uma enumeracao completa.
11.5.2
Enumera
c
ao Implcita
Enumeracao completa e inviavel para problemas praticoso n

umero de nos cresce
exponencialmente. Necessitamos de uma alternativa que vai alem da simples divisao do
problema em subproblemas. Uma abordagem frequentemente encontrada na pratica
consiste em se utilizar os limites de {z k } de uma forma inteligente, tanto os limites
superiores quanto os inferiores. A proposicao 11.6 explicita formalmente como que os
limites inferiores e superiores (primais e duais) podem ser empregados de maneira a se
realizar enumeracao impltica.
Proposi
c
ao 11.6 Seja S = S1 . . . SK uma decomposicao de S em K subconjuntos,
z k = M ax{cT x : x Sk } para k = 1, . . . , K, z k um limite superior para z k e z k um
limite inferior para z k .
Entao:
a) z = M ax{z k : k = 1, . . . , K} define um limite superior para z
179
S
x1 = 0
x1 = 1
S0
S1
x2 = 0
x2 = 1 x2 = 0
x2 = 1
S00
S01
S11
x3 = 0
S10
x3 = 1
S000 S001 S010 S011 S100 S101 S110
S111
Figura 11.3: Arvore

de enumeracao completa, explcita
b) z = M ax{z k : k = 1, . . . , K} define um limite inferior para z
Exemplo de corte por otimilidade (maximiza

c
ao)
Vamos ilustrar o funcionamento do algoritmo de branch-and-bound em um problema
qualquer. Seja S o conjunto inicial contendo todas as solucoes do problema, conforme
Figura 11.4, sendo o limite inferior lb = 13 e o limite superior ub = 27. Dividindo o
espaco de solucoes em dois subconjuntos, S = S1 S2 , e calculando os limites superiores
e inferiores para S1 e S2 , verifica-se que a solucao obtida em S1 e otima para o problema
restrito ao conjunto S1 , ja que l1 = u1 = 20. Portanto, o ramo (S, S1 ) foi eliminado por
otimalidade. O no da arvore de enumeracao correspondente ao conjunto S2 de solucoes
tera de ser examinado uma vez que o limite superior u2 = 25 > 20 = l1 .
ub = 27
S
27
27
S 13
lb = 13
S1
S 13
25
20
20
S2
15
S1
20
25
S2
15
20
eliminado por otimalidade
Figura 11.4: Eliminacao por otimalidade
Exemplo de corte por limite (maximiza

c
ao)
Considere um problema semelhante ao acima, onde S foi dividido em dois subproblemas tais que S = S1 S2 conforme Figura 11.5. Limites inferiores e superiores
180
tambem foram computados e estao indicados ao lado de cada no da arvore de enumeracao. Note que l2 > u1 , o que significa que a melhor solucao possvel de ser obtida
no espaco de solucoes S1 e inferior a melhor solucao primal encontrada ate o momento.
Portanto, podemos eliminar a busca a partir de S1 dessa forma eliminando muitas
solucoes de forma implcita. Este corte e ilustrado na figura.
27
S
27
S
13
25
20
S1
S2
18
21
13
25
20
S1
S2
18
21
eliminado por limite
Figura 11.5: Eliminacao por limite
Exemplo de situac
ao sem possibilidade de corte
Agora tome como exemplo a arvore de enumeracao dada à esquerda da Figura 11.6.
Note que o limite superior de S e maior do que o limite superior obtido em S1 e em
S2 , podemos entao substituir o limite anterior de 40 para 37, ja que S = S1 S2 . O
melhor limite inferior obtido ate entao e 13 que, neste momento, se torna o melhor
limite primal para o problema, como ilustrado na arvore à direita. Todavia, ambos os
nos S1 e S2 devem ser quebrados em subproblemas menores.
40
37
37
24
S1
13
S2
13
24
37
S1
S2
13
Nenhum ramo da arvore pode ser eliminado
Figura 11.6: Nenhum ramo da arvore pode ser eliminado
Conclus
oes
Baseado nos exemplos acima, podemos listar tres razoes para cortar ramos da
arvore:
i) Cortando por razao de otimalidade: zt = M ax{cT x : x St } foi resolvido
ii) Cortando por meio dos limites: z t < z
iii) Cortando devido à infactibilidade do subproblema: St =
181
Lembramos aqui que os limites primais (inferiores) sao obtidos com solucoes
factveis, enquanto que os limites duais (superiores) sao obtidos atraves de relaxacao
imediata a aplicacao da tecnica de enumeracao com base nas ideias
ou dualidade. E
acima apresentadas. No entanto, as seguintes questoes sao de relevancia:
i. Que problema de relaxacao ou dual deve ser empregado para obter-se limites supe` vezes podemos tirar vantagem da estrutura do problema na concepcao
riores? As
de procedimentos de dualidade como, por exemplo, a relaxacao Lagrangeana das
restricoes de grau 1 do problema do caixeiro viajante.
ii. Como devemos decompor S em S1 . . . SK ? Nao e incomum se fazer valer de
uma heurstica que explora a natureza particular de um problema.
iii. Em que ordem devemos examinar os subproblemas? Duas estrategias empregadas
sao a busca em profundidade (depth-first search) e a busca pelo melhor ramo
(best-first search).
11.5.3
Algoritmo Branch-and-Bound (B&B)
B&B e um metodo de enumeracao implcita para resolver problemas de programacao

inteira que utiliza programacao linear para calcular os limites duais. Ilustramos o funcionamento do algoritmo atraves de um exemplo. Consideraremos o problema exemplo
abaixo:
S : z = M ax 4x1 x2
s.a : 7x1 2x2 6 14
x2 6 3
2x1 2x2 6 3
x Z2+
A aplicacao do algoritmo B&B ao problema pode ser ilustrada atraves dos passos a
seguir.
Bounding: Obtemos o primeiro limite superior ao resolvermos a relaxacao linear,
R(S), obtendo z = 59
com (x1 , x2 ) = ( 20
, 3). Assumimos que z = .
7
7
Branching: Uma vez que z < z, devemos quebrar S em subproblemas. Uma ideia e
quebrar S no ponto onde uma variavel e fracionaria, fazendo:
S1 = S {x : xj 6 xj }
S2 = S {x : xj > xj }
Claramente, S = S1 S2 . Estas operacoes do algoritmo B&B podem ser observadas na Figura 11.7, onde a quebra foi feita com a variavel x1 , fazendo x1 6 2
ou x1 > 3. A lista de nos ativos passa a ser L = {S1 , S2 }.
Escolhendo um n
o: A lista de nos ativos L = {S1 , S2 } contem dois conjuntos. Arbitrariamente, escolhemos S1 .
182

59/7
S
x1 > 3
x1 6 2
S1
S2
Figura 11.7: Quebra do primeiro no da arvore de enumeracao B&B

Bounding: Resolvemos a relaxacao linear R(S1 ) associada a S1 , ou seja, resolvemos
o problema de programacao linear abaixo:
S1 : z 1 = M ax 4x1 x2
s.a : 7x1 2x2
x2
2x1 2x2
x1
6 14
6 3
6 3
6 2
cuja solucao otima e (x11 , x12 ) = (2, 21 ) que por sua vez induz o limite superior
.
z = 15
2
Branching: Quebramos S1 em dois conjuntos: S11 = S1 {x : x2 6 0} e S12 = S1 {x :
x2 > 1}, o que faz com que a lista de nos ativos se torne L = {S2 , S11 , S12 }. O
resultado desta subdivisao esta indicado na Figura 11.8.
59/7
S
x1 > 3
x1 6 2
S1
x2 6 0
S11
15/2
S2
x2 > 1
S12
Figura 11.8: Dividindo S1 em S11 e S12

Escolhendo um n
o: Arbitrariamente escolhemos o no identificado por S2 dentre a
lista de nos ativos L = {S11 , S12 , S2 }.
183
Bounding: Resolvemos a relaxacao linear R(S2 ), correspondendo à relaxacao do problema:

S2 : z2 = M ax 4x1 x2
s.a : 7x1 2x2 6 14
x2 6 3
2x1 2x2 6 3
x1
> 3
x Z2+
Uma vez que o problema S2 e infactvel, ou seja, z 2 = , podemos cortar o no
S2 em funcao da inviabilidade.
Escolhendo um n
o: A lista de nos ativos passou a ser L = {S11 , S12 }. Arbitrariamente escolhemos S12 .
Bounding: Resolvemos a relaxacao R(S12 ) do problema cujo espaco de solucoes
factveis e S12 = S {x : x1 6 2 e x2 > 1}, obtendo a solucao x12 = (2, 1) a
qual gera o limite superior z 12 = 7. Ja que a solucao obtida para R(S12 ) e inteira, produzimos o primeiro limite inferior, ou seja, underlinez12 = 7 que pode
ser propagado para os demais nos da arvore. Portanto o no S12 foi cortado por
otimalidade como esta indicado na Figura 11.9.
59/7
S
x1 > 3
x1 6 2
15/2
S1
x2 6 0
S2
x2 > 1
cortado devido à infactibilidade
S11
S12
7
cortado por otimalidade
Figura 11.9: Cortando o no S12 por meio da condicao de otimalidade

Escolhendo um n
o: Apenas S11 esta ativo.
Bounding: Observe primeiramente que S11 = S {x : x1 6 2, x2 = 0}. Resolvendo
a relaxacao linear R(S11 ), obtemos a solucao x11 = ( 32 , 0) a qual produz o limite
superior z 11 = 6. Levando em conta que z 11 = 6 < 7 = z, o no e cortado.
Escolhendo um n
o: Ja que a lista esta vazia, conclumos que a solucao otima e x =
(2, 1) com z = 7.
184
11.6
Refer
encias
Este captulo e uma compilacao traduzida, incluindo figuras e exemplos, do Captulo

7 do livro texto de Wolsey [44].
11.7
Exerccios
EX 11.1: Aplique o algoritmo Branch-and-Bound ao problema abaixo descrito.

Faca uso de um pacote de otimizacao linear como, por exemplo, lp solve na
resolucao das relaxacoes lineares. Desenhe a arvore B&B e escreva os limites
(superior e inferior) para cada no. Tente pre-processar o problema, em outras
palavras, tente simplifica-lo.
M aximize 77.9x1 + 76.8x2 + 89.6x3 + 97.1y1 + 31.3y2
Sujeito a :
60.9x1 + 68.9x2 + 69.0x3 56.9y1 + 22.5y2
86.8x1 + 32.7x2 + 24.3x3 + 13.8y1 12.6y2
10.9x1 + 3.6x2 40.8x3 + 43.9y1 + 7.1y2
x1 , x2 , x3 > 0 e inteiro
y1 , y2 > 0
= x0
= 86.5
6 77.3
6 82.3
EX 11.2: (Dual Lagrangeano) Considere o problema da mochila 0-1:

max : 10x1 + 4x2 + 14x3
s.t. :
3x1 + x2 + 4x3 6 4
x1 , x2 , x3 {0, 1}
Questoes:
Qual e o valor da solucao otima para a relaxacao linear do problema?
Construa o problema dual Lagrangeano, atraves da dualizacao da restricao

3x1 + x2 + 4x3 6 4. Qual e o valor otimo da variavel dual e o correspondente
valor dual otimo?
Por que os valores otimos nos dois casos acima sao iguais?
EX 11.3: Considere o problema de programacao inteira dado por:

P : Maximize 17x1 + 12x2
Sujeito a: 10x1 + 7x2 6 40
x1 + x2 6 5
x1 6 4
x2 6 5
x1 , x2 > 0
x1 , x2 Z
Tarefas:
185
i. Aplique o algoritmo de branch-and-bound e obtenha a solucao otima de P .

Ilustre o funcionamento do algoritmo.
ii. Denotando por u1 e u2 os multiplicadores para a primeira e segunda restricao, respectivamente, obtenha o subproblema Lagrangeano L(u1 , u2 ) dualizando as duas primeiras restricoes. Obtenha tambem o Lagrangeano dual
LD. Para u1 = 0.5 e u2 = 1, calcule o limite superior induzido pela relaxacao
(i.e., resolva o subproblema Lagrangeano). Resolva a relaxacao contnua de
P (programacao linear). Compare a solucao da relaxacao contnua com o
limite calculado para u1 = 0.5 e u2 = 1.
186
Captulo 12
Algoritmos de Planos de Corte e
Desigualdades Fortes
Aqui iniciaremos o estudo de algoritmos branch-and-cut (planos de corte) que adicionam desigualdades validas à relaxacao linear ate que se obtenha uma solucao inteira.
Em outras palavras, o algoritmo branch-and-cut se assemelha ao algoritmo branch-andbound mas procura aproximar o poliedro inteiro (o fecho convexo das solucoes inteiras)
de uma forma iterativa. Estudaremos ainda os chamados cortes de Gomory, que podem
ser aplicados a qualquer problema linear inteiro (ou misto), e cortes especficos para
alguns problemas de interesse.
12.1
Introduc
ao a Planos de Corte
Inicialmente, lembramos o problema inteiro na sua forma geral:

IP :
M ax{cT x : x X},
onde X = {x : Ax 6 b, x Zn+ }
Um resultado de significancia pratica e teoria pode ser resumido na propoposicao a

seguir.
6 b, x > 0} e um poliedro.
Proposi
c
ao 12.1 conv(X) = {x : Ax
Este resultado nos diz que, pelo menos em teoria, IP pode ser reformulado como um
problema de programacao linear:
LP :
6 b, x > 0}
M ax{cT x : Ax
Note que qualquer ponto extremo de LP e uma solucao otima de IP . Para alguns problemas, tal como o problema de fluxo em redes, conhecemos uma descricao completa
de conv(X). Em geral, e particularmente para problemas NP-difceis, nao ha esperanca de se encontrar uma descricao completa de conv(X), mesmo porque esta pode
conter um n
umero exponencial de restricoes. Dado um problema NP-difcil, aqui nos
preocupamos em encontrar uma aproximacao para conv(X) para uma dada instancia,
podendo esta aproximacao ser construda gradualmente à medida que se insere novas
restricoes validas e nao triviais, preferencialmente desigualdades que toquem no poliedro que descreve conv(X). O conceito fundamental que ja utilizamos informalmente e
o de desigualdade valida, agora formalizado pela definicao abaixo.
188
12. Algoritmos de Planos de Corte e Desigualdades Fortes
Defini
c
ao 12.1 Uma desigualdade T x 6 0 e uma desigualdade valida para X Rn
se T x 6 0 para todo x X.
Surgem imediatamente duas questoes relevantes:
a) Quais desigualdades sao boas e
uteis?
b) Se conhecemos uma famlia de desigualdades para um certo problema, como
podemos utiliza-las de uma forma eficaz?
Ambas as questoes acima serao respondidas nas proximas secoes, cujas respostas implicam diretamente na eficacia de uma abordagem por planos de cortes.
12.2
Exemplos de Desigualdades V
alidas
No que segue, apresentamos atraves de exemplos alguns tipos de desigualdades

validas que expressam condicoes logicas.
12.2.1
Um conjunto 0-1 puro
Considere o conjunto da mochila 0-1 onde o conjunto de solucoes factveis X (i.e.,

as solucoes que satisfazem a restricao knapsack) e dado por:
X = {x B 5 : 3x1 4x2 + 2x3 3x4 + x5 6 2}
Para x2 = x4 = 0, temos que a desigualdade 3x1 + 2x3 + x5 6 2 se torna impossvel de
ser satisfeita. Portanto, conclumos que uma solucao factvel deve satisfazer x2 +x4 > 1.
Se x1 = 1 e x2 = 0, entao a desigualdade que resulta 2x3 3x4 + x5 6 5 nao
podera ser satisfeita. Portanto x1 6 x2 e uma desigualdade valida, podendo esta ser
introduzida na formulacao de X. A partir das deducoes desenvolvidas podemos propor
uma formulacao revisada para o problema em questao:
X = {x B 5 : 3x1 4x2 + 2x3 3x4 + x5 6 2
x2 + x4 > 1
x1 6 x2 }
12.2.2
Um Conjunto 0-1 Misto
O exemplo de conjunto de solucoes mistas (contnuas e discretas) consiste no conjunto X:

X = {(x, y) : x 6 9999y, 0 6 x 6 5, y B}
facil verificar que a desigualdade x 6 5y e valida.
E
189
12.2.3
Um Conjunto Inteiro Misto
Considere o conjunto
X = {(x, y) : 0 6 x 6 10y, 0 6 x 6 14, y Z+ }
O leitor pode se convencer da validade da desigualdade
x 6 14 4(2 y)
O espaco de solucoes factveis X juntamente com a desigualdade valida e ilustrado na
Figura 12.1.
y
3
x 6 6 + 4y
(14,2)
x6y
(10,1)
10
12 14 16
Figura 12.1: Espaco de solucoes factveis e desigualdade valida x 6 14 4(2 y)
12.2.4
Conjunto Combinat
orio
Seja X o conjunto dos vetores de incidencia de problemas de emparelhamento

(matchings), mais precisamente:
X
|E|
X = {x Z+ :
xe 6 1
para todo i V }
e(i)
onde G = (V, E) e um grafo nao direcionado, e (i) = {e E : e =

(i, j) para algum j V }. Seja ainda T V um conjunto qualquer com cardinalidade
mpar. O n
umero de arestas tendo ambos os extremos em T e no maximo (|T | 1)/2,
portanto obtemos a desigualdade:
X
eE(T )
xe 6
|T | 1
2
190
propcio mencionarmos que conv(X) pode ser obtido atraves da insercao de todas as
E
desigualdades da forma acima, isto e, conv(X) e precisamente o poliedro dado por:
P
|E|
conv(X) = {x R+ :
xe 6 1
i V
Pe(i)
|T |1
T V, |T | mpar e |T | > 3}
eE(T ) xe 6
2
12.2.5
Arredondamento Inteiro
Considere a regiao X = P Z4 e P = {x R4+ : 13x1 + 20x2 + 11x3 + 6x4 > 72}.

Dividindo a desigualdade por 11, obtemos a seguinte desigualdade valida para P :
13
20
11
6
72
x1 + x2 + x3 + x4 >
11
11
11
11
11
uma vez que x > 0, podemos arredondar
proximo:
20
13
x1 + 11
x2 + x3
11
2x1
+ 2x2
+ x3
2x1
+ 2x2
+ x3
2x1
+ 2x2
+ x3
os coeficientes de x para o inteiro mais

+
+
+
+
Note que um inteiro que e maior ou igual a 6 +
12.2.6
6
11
x4
x4
x4
x4
6
11
72
> 11
72
> 11
72
> 11
> 7
deve ser maior ou igual a 7.
Arredondamento Inteiro Misto
Considere o mesmo exemplo anterior mas com a adicao de uma variacao contnua.
Seja X = P (Z4 R) onde
P = {(y, s) R4+ R+ : 13y1 + 20y2 + 11y3 + 6y4 + s > 72}
Novamente dividindo a desigualdade por 11, obtemos
13
y
11 1
13
y
11 1
+
+
20
y
11 2
20
y
11 2
+
+
11
y
11 3
11
y
11 3
+
+
6
y
11 4
6
y
11 4
s
11
>
>
72
11
72s
11
Podemos observar que:

72
= 7
2y1 + 2y2 + y3 + y4 > 11
726
2y1 + 2y2 + y3 + y4 > 11 = 6
se s = 0
se s = 6
Isto sugere que a desigualdade abaixo e valida:

2y1 + 2y2 + y3 + y4 + s > 7
para algum . A desigualdade acima pode ser verificada como valida para > 16 .
12.3
Teoria de Desigualdades V
alidas
A presente secao aprofunda os conceitos sobre desigualdades validas apresentados

por meio de exemplos nas secoes anteriores.
12.3.1
191
Desigualdades V
alidas para Problemas Lineares
Dado um poliedro P = {x : Ax 6 b, x > 0} e uma desigualdade T x 6 0 , a

primeira questao e se a desigualdade (, 0 ) e valida para P . A proposicao abaixo
prove condicoes que garantem a validade de (, 0 ).
Proposi
c
ao 12.2 T x 6 0 e valida para P = {x : Ax 6 b, x > 0} 6= se, e somente
se,
a) existe u > 0 e v > 0 tal que uT A v T = T e uT b 6 0 , ou
b) existe u > 0 tal que uT A > T e uT b 6 0
Prova (b ) Se existe u > 0 tal que uT A > T e uT b 6 0 , entao para qualquer x P ,
Ax 6 b uT Ax 6 uT b
T x 6 uT Ax 6 uT b 6 0
(, 0 ) e uma desigualdade valida.
12.3.2
Desigualdades V
alidas para Problemas Inteiros
Proposi
c
ao 12.3 A desigualdade y 6 b e valida para X = {y Z : y 6 b}.
Exemplo: Podemos utilizar a Proposicao 12.2 para gerar desigualdades validas para
um poliedro dado pelas restricoes abaixo:
7x1 2x2
x2
2x1 2x2
x
6
6
6
>
14
3
3
0, x inteiro
(12.1)
(12.2)
(12.3)
(12.4)
37
i) Multiplicamos as restricoes por um vetor de pesos nao negativos u = ( 27 , 63
, 0) e
obtemos a desigualdade valida:
2x1 +
121
1
x2 6
63
21
ii) Reduzimos os coeficientes do lado esquerdo ao inteiro mais proximo e obtemos:

2x1 + 0x2 6
121
21
iii) Uma vez que o lado esquerdo so pode assumir valores inteiros, podemos reduzir
o valor do lado direito ao inteiro mais proximo, obtendo a desigualdade
2x1 6
5
121
= 5 x1 6
x1 6 2
21
2
192
12.3.3
Procedimento Chv
atal-Gomory para Gerac
ao de Desigualdades V
alidas
O procedimento CG (Chvatal-Gomory) e uma formalizacao dos passos ilustrados na

Secao 12.3.1 que permite gerar todas as desigualdades validas de um problema inteiro.
Seja X = P Zn o conjunto de solucoes onde P = {x Rn+ : Ax 6 b} e um poliedro, e
A Rmn e uma matriz com colunas {a1 , a2 , . . . , an }. Dado u Rm
+ , o procedimento
consiste dos passos que seguem.
n
P
uT aj xj 6 uT b e valida para P uma vez que u > 0 e
Passo 1: A desigualdade
j=1
n
P
aj x j 6 b
j=1
n
P
uT aj xj 6 uT b e valida para P ja que x > 0.
j=1
n
P
uT aj xj 6 uT b e valida para P uma vez que x e inteiro,
j=1
e portanto
n
P
uT aj xj e inteiro
j=1
Importante: um fato surpreendente e que o procedimento acima e capaz de gerar

todas as desigualdades validas para o problema inteiro.
Teorema 12.1 Toda desigualdade valida para X pode ser obtida por meio da aplicacao
de um n
umero finito de vezes do procedimento Chvatal-Gomory.
12.4
O Algoritmo de Planos de Corte
Suponha que X = P Zn e que uma famlia F de desigualdades validas T x 6

0 , (, 0 ) F, seja conhecida para X. Tipicamente F contem um n
umero muito
grande de elementos (possivelmente exponencial) que nao podem ser introduzidas na
formulacao a priori. Alem disso, do ponto de vista pratico, nao estamos interessados
em encontrar uma representacao completa do fecho convexo, conv(X), mas sim uma
boa aproximacao em torno da solucao otima.
Abaixo descreveremos o algoritmo basico de planos de corte para IP , max{cT x; x
X}, que gera cortes
uteis a partir de F
Inicializa
ca
~o Defina t = 0 e P 0 = P
Itera
ca
~o t Resolva o problema linear z t = M ax{cT x : x P t }
Seja xt a solu
ca
~o
otima
Se xt Zn , pare pois xt
e uma solu
ca
~o o
tima para IP
t
n
Se x
/ Z , encontre uma desigualdade (, 0 ) F
tal que T xt > 0
Se uma desigualdade (, 0 ) foi encontrada,
ent~
ao fa
ca P t+1 = P t {x : T x 6 0 },
incremente t e repita
Caso contr
ario, pare.
193
Se o algoritmo termina sem encontrar uma solucao inteira, pelo menos P t = P {x :

6 i0 , i = 1, 2, . . . , t} e uma formulacao mais apertada do que P . Podemos entao
proceder a partir de P t com um algoritmo de branch-and-bound.
iT
12.5
Algoritmo de Planos de Corte Usando Cortes

de Gomory Fracion
arios
Aqui consideraremos o problema inteiro:

M ax{cT x : Ax = b, x > 0 e inteiro}
O princpio basico e resolver a relaxacao linear e encontrar uma base otima; a partir
desta base se escolhe uma variavel basica que nao seja inteira, e entao geramos uma
desigualdade Chvatal-Gomory associada a esta variavel basica visando corta-la, ou
seja, elemina-la do poliedro de relaxacao. Supomos que, dada uma base otima, o
problema pode ser reescrito na forma:
P
M ax
aoo +
aoj xj
jN
PB
auj xj = auo para u = 1, . . . , m
Sujeito a: xBu +
jN B
x > 0 e inteiro
onde 1) aoj 6 0 para j N B, 2) auo > 0 para u = 1, . . . , m, e 3) N B e o conjunto de

variaveis nao basicas, portanto {Bu : u = 1, . . . , m} N B = {1, . . . , n}.
Se a solucao basica otima x nao for inteira, entao deve existir uma linha u tal que
auo
/ Z. Escolhendo esta linha, o corte de Chvatal-Gomory para a linha u fica:
X
(12.5)
xBu +
auj xj 6 auo
jN B
Reescrevendo (12.5) de forma a eliminar xBu , obtemos:

X
xBu = auo
auj xj
(12.6)
jN B
auo
auj xj +
jN B
jN B
jN B
auj xj 6 auo
(auj auj ) xj > auo auo
De uma forma mais compacta, podemos reescrever o corte (12.8) como:

X
fuj xj > fuo
(12.7)
(12.8)
(12.9)
jN B
onde fuj = auj auj e fuo = auo auo . Uma vez que 0 6 fuj < 1 e 0 < fuo < 1,
e xj = 0 para toda a variavel j N B na solucao x , a desigualdade (12.9) corta a
solucao corrente x .
194
12.5.1
Exemplo
Considere o problema inteiro a seguir

z = M ax 4x1 x2
s.a. : 7x1 2x2
x2
2x1 2x2
x1 ,
x2
6
6
6
>
14
3
3
0, inteiros
(12.10)
Apos adicionarmos variaveis de folga x3 , x4 e x5 , podemos aplicar o metodo simplex

e obter a solucao otima
z = M ax
s.a :
59
7
x1
4
x
7 3
1
x
7 3
2
x
7 3
x2
x1 , x2 ,
x3 ,
71 x4
+ 72 x4
+ x4
+ 10
x + x5
7 4
x4 ,
x5
= 20
(= 2.8571)
7
= 3
= 23
(= 3.2857)
7
> 0 e inteiros
(12.11)
, 3, 27
, 0, 0)
/ Z5+ , portanto usamos a
A solucao otima da relaxacao linear e x = ( 20
7
7
primeira linha de (12.11), na qual a variavel basica x1 e fracionaria, para gerar o corte
x1 + 17 x3 + 27 x4 6 20
x1 6 2
7
x1 + s = 2, x1 =
20
7
71 x3 27 x4 20
71 x3 27 x4 + s = 2
7
s = 2 20
+ 17 x3 + 72 x4
7
1
6
s = 7 + 7 x3 + 27 x4
com s, x3 , x4 > 0 e inteiros.
Adicionando a variavel s e o corte s = 76 + 71 x3 + 72 x4 , podemos obter a nova solucao

otima:
z = M ax
s.a :
15
2
x1
1
x
2 5
1
x
2 5
x5
x4 + 21 x5
x1 , x2 , x3 , x4 ,
x5 ,
x2
x3
+
+
3s
s
s
5s
6s
s
= 2
= 12
= 1
= 52
> 0 e inteiros.
(12.12)
A solucao otima da relaxacao linear acima (12.12), x = (2, 21 , 1, 52 , 0, 0), continua fracionaria uma vez que x2 e x4 sao fracionarios. A aplicacao do corte de Gomory fracionario na segunda linha produz:
x2 + 12 x5 + 1s 6 21
x2 x5 + s 6 0
x2 x5 + s + t = 0, t > 0
( 21 + 21 x5 s) x5 + s + t = 0
t 21 x5 = 12 , t > 0
195
Apos adicionarmos a variavel t > 0 e o corte t 21 x5 = 21 e reotimizarmos, obtemos

a tabela simplex:
z = M ax 7
s.a :
x1
x2
x3
x4
x5
x1 , x2 , x3 , x4 , x5 ,
+
+
3s
s
s
5s
6s
s,
=
t =
2t =
+ t =
t =
t >
2
1
2
2
1
0 e inteiros
A solucao obtida e otima pois os valores de todas as variaveis sao inteiros. A solucao
otima e x = (2, 1, 2, 2, 1) cujo valor da funcao objetivo e z = 7.
12.6
Desigualdades Disjuntivas
Seja X = X 1 X 2 , onde X i Rn+ , uma disjuncao (uniao) de dois conjuntos X 1 e

X . Alguns resultados importantes serao enunciados abaixo.
P
Proposi
c
ao 12.4 Se nj=1 ji xj 6 0i e uma desigualdade valida para X i , i = 1, 2,
ent
ao a desigualdade
n
X
j xj 6 0
2
j=1
e valida para X se j 6 min{j1 , j2 } para j = 1, . . . , n e 0 > max{01 , 02 }
Proposi
c
ao 12.5 Se P i = {x Rn+ : Ai x 6 bi } para i = 1, 2 s
ao poliedros n
ao-vazios,
ent
ao (, 0 ) e uma desigualdade valida para conv(P 1 P 2 ) se e somente se existem
u1 , u2 > 0 tal que:
T 6 uT1 A1
T 6 uT2 A2
0 > uT1 b1
0 > uT2 b2
12.6.1
Exemplo
Sejam P 1 = {x R2 : x1 + x2 6 1, x1 + x2 6 5} e P 2 = {x R2 : x2 6 4,
2x1 + x2 6 6, x1 3x2 6 2} dois poliedros. Fazendo u1 = (2, 1) e u2 = ( 25 , 12 , 0) e
depois aplicando a Proposicao 12.5 obtemos:

1 1
T 1
= 1 3
uT1 b1 = 7
u1 A = 2 1
1 1
0
1

1 = 1 3
uT2 b2 = 7
uT2 A2 = 25 12 0 2
1 3
Isto nos permite obter a desigualdade x1 + 3x2 6 7 valida para P 1 P 2 . A Figura

12.2 ilustra esta desigualdade.
196
x_2
7
6
5
4
3
2
1
10
11
x_1
Figura 12.2: Desigualdades disjuntivas
12.6.2
Desigualdades Disjuntivas para Problemas 0-1
Especializando ainda mais, podemos nos restringir a problemas 0-1, onde X =

P Zn {0, 1}n e P = {x Rn : Ax 6 b, 0 6 x 6 1}. Seja P 0 = P {x Rn : xj = 0}
e P 1 = P {x Rn : xj = 1} para algum j {1, . . . , n}.
Proposi
c
ao 12.6 A desigualdade (, 0 ) e valida para conv(P 0 P 1 ) se existe ui Rm
+,
n
1
vi R+ , wi R+ para i = 0, 1 tal que
T
T
0
0
6
6
>
>
uT0 A + v0 + w0 ej
uT1 A + v1 w1 ej
uT0 b + 1T v0
uT1 b + 1T v1 w1
Prova: Aplique a Proposicao 12.5 com P 0 = {x Rn+ : Ax 6 b, x 6 1, xj 6 0} e

P 1 = {x Rn+ : Ax 6 b, x 6 1, xj 6 1}

Exemplo
Considere a seguinte instancia do problema da mochila
Max 12x1 + 14x2 + 7x3 + 12x4
s.a : 4x1 + 5x2 + 3x3 + 6x4 6 8
x B4
cuja solucao linear otima e x = (1, 0.8, 0, 0). Uma vez que x2 = 0.8 e fracionario,
escolhemos j = 2 e definimos P 0 e P 1 , e procuramos a desigualdade (, 0 ) que e violada
conforme a Proposicao 12.6. Para isso, resolvemos um problema de programacao linear
maximizando T x 0 sobre o poliedro que descreve os coeficientes das desigualdades
validas dadas pela Proposicao 12.6.
197
Max 1.01 + 0.82 0

s.a :
1
1
2
2
6 4u0 + v10
6 4u1 + v11
6 5u0 + v20 + w0
6 5u1 + v21 w1
3 6 3u0 + v30
3 6 3u1 + v31
4 6 6u0 + v40
4 6 6u1 + v41
0 > 8u0 + v10 + v20 + v30 + v40

0 > 8u1 + v11 + v21 + v31 + v41 w1
u0 , u1 , v 0 , v 1 , w 0 , w 1 > 0
Objetivando tornar o espaco de solucoes factveis limitado, devemos introduzir um
criterio de normalizacao. Duas possibilidades sao:
Pn
a)
j=1 j 6 1
b) 0 = 1
Obtemos entao a seguinte desigualdade de corte:

1
x1 + x2 6 1.
4
Para P 0 , a desigualdade e uma combinacao das restricoes x1 6 1 e x2 6 0 com v10 = 1 e
w0 = 41 respectivamente. Para P 1 , ela e uma combinacao da desigualdade 4x1 + 5x2 +
3x3 + 6x4 6 8 e x2 6 1 com u1 = 14 e w1 = 1, respectivamente.
12.7
Exerccios
EX 12.1: Para os tres conjuntos X abaixo, encontre algebricamente uma desigualdade valida cuja adicao nos da conv(X). Verifique graficamente que a adicao da
desigualdade nos da conv(X).
i. X = {x B2 : 3x1 4x2 6 1}
ii. X = {(x, y) R+ B : x 6 20y, x 6 7}
iii. X = {(x, y) R+ Z+ : x 6 6y, x 6 16}

EX 12.2: Em cada um dos exemplos abaixo, sao dados um conjunto X e um ponto x
ou (x, y). Encontre uma desigualdade valida para X que corte (elimine) o ponto.
i. X = {(x, y) R2+ B : x1 +x2 6 2y, x1 6 1; x2 6 1} e (x1 , x2 , y) = (1, 0, 1/2)
198
ii. X = {(x, y) R+ Z+ : x 6 9, x 6 4y} e (x, y) = (9, 9/4)
iii. X = {(x1 , x2 , y) R2+ Z+ : x1 + x2 6 25, x1 + x2 6 8y} e (x1 , x2 , y) =

(20, 5, 25/8)
iv. X = {x Z5+ : 9x1 + 12x2 + 8x3 + 17x4 + 13x5 > 50} e x = (0, 25/6, 0, 0, 0)
v. X = {x Z4+ : 4x1 + 8x2 + 7x3 + 5x4 6 33} e x = (0, 0, 33/7, 0)
EX 12.3: Prove que a desigualdade y2 + y3 + 2y4 6 6 e valida para X = {y Z4+ :

4y1 + 5y2 + 9y3 + 12y4 6 34}
EX 12.4: Considere o problema de programacao inteira abaixo:
P : Maximize 17x1 + 12x2
Sujeito a: 10x1 + 7x2 6 40
x1 + x2 6 5
x1 6 4
x2 6 5
x1 , x2 > 0
x1 , x2 Z
Aplique o algoritmo de planos de corte ao problema P . Para tanto, tome a
relaxacao contnua do problema e encontre a solucao usando programacao linear
(Simplex). Se a solucao obtida e inteira, entao pare. Caso contrario, produza
um corte de Gomory, insira na formulacao e repita os passos acima. Se voce nao
encontrar a solucao inteira otima apos inserir quatro cortes de Gomory, entao
pare e indique a solucao encontrada.
Para cada iteracao, mostre o dicionario do Simplex, indique qual variavel basica
fracionaria sera utilizada para gerar o corte de Gomory, e mostre o corte gerado.
Captulo 13
Programac
ao com Restri
co
es
L
ogicas
200
13. Programacao com Restricoes Logicas
Captulo 14
Programac
ao Din
amica: Domnio
Discreto
Uma tecnica poderosa para resolver problemas de decisao sequencial e de controle
consiste em quebra-los em subproblemas menores, mais faceis de serem resolvidos.
Quando quebramos um problema em subproblemas do mesmo tipo, tipicamente podemos produzir algoritmos recursivos, frequentemente empregados para resolver problemas computacionais. Dois paradigmas de concepcao de algoritmos por meio de quebra
sao:
Divis
ao e Conquista: Este paradigma e amplamente adotado na concepcao de algoritmos tipicamente encontrados na Ciencia da Computacao, podendo ser dividido
em tres etapas:
quebre o problema em duas metades;
resolva cada metade separadamente; e
combine as metades de forma a obter uma solucao completa

O algoritmo de intercalacao ou merge-sort, por exemplo, ordena uma cadeia de n
n
umeros em (n log n) operacoes de comparacao segundo o princpio de divisao e
conquista. O algoritmo constroi implicitamente uma arvore de subproblemas,
tendo profundidade log2 n e largura n. Uma vez que o custo computacional para
solucao dos subproblemas em cada nvel e linear, o algoritmo ordena a cadeia em
(n log n) operacoes elementares.
Programa
c
ao Din
amica: Este paradigma consiste em quebrar um problema em uma
seq
uencia de decisoes que sao tomadas em estagios. Em outras palavras, o paradigma segue os passos:
remova um elemento do problema;
resolva o problema menor; e
use a solucao do problema menor para adicionar o elemento removido de

maneira adequada, produzindo uma solucao para o problema maior.
202
14. Programacao Dinamica: Domnio Discreto
Este tipo de abordagem e comum em problemas de controle otimo, como sera abordado
` vezes e possvel conceber uma solucao
em mais detalhes no captulo seguinte. As
analtica fechada para cada estagio o que resulta em um algoritmo eficiente, mas mesmo
nos casos onde apenas uma solucao iterativa pode ser obtida, a programacao dinamica
pode resultar em uma solucao algortmica eficaz. Alguns aspectos importantes sobre
DP (Programacao Dinamica) sao:
1) problemas cujas instancias apresentam uma ordem da esquerda para a direita,
como cadeias de smbolos e vertices de polgonos, sao candidatos a uma solucao
por DP;
2) sem uma ordem, DP pode resultar em um algoritmo de tempo exponencial; e
3) DP produz uma solucao otima global.
As secoes abaixo apresentam o formalismo de programacao dinamica de uma forma
informal, atraves de exemplos. Comecamos com o problema de calcular os n
umeros
de Fibonacci, que ilustra a economia computacional que pode ser obtida por meio da
programacao dinamica. O exemplo seguinte mostra como DP pode ser empregada na
solucao do problema mochila, exemplificando uma maneira de se obter uma solucao
otima a partir dos valores otimos das funcoes objetivo. O terceiro exemplo trata da
identificacao da subseq
uencia de smbolos mais longa, enquanto que o u
ltimo exemplo
apresenta a solucao para um problema complexo de edicao de cadeias de smbolos.
Este u
ltimo problema e suas generalizacoes tem aplicacoes em sistemas operacionais,
casamento de padroes e sequenciamento de DNA.
14.1
Um Exemplo de Programac
ao Din
amica
Programacao dinamica e uma tecnica difcil de entender mas cuja solucao, uma vez
obtida, e de facil compreensao. Em algoritmos para problemas como o de ordenacao
de n
umeros, corretude e mais facil de verificar do que eficiencia. Este nao e o caso
de problemas de otimizacao, onde deseja-se provar que um algoritmo sempre produz
uma solucao otima. Algoritmos gulosos, heursticas que executam uma busca local
sao eficientes mas apenas ocasionalmente encontram uma solucao otima. Algoritmos
baseados em enumeracao, por outro lado, avaliam direta- ou indiretamente todas as
possveis solucoes e portanto encontram a solucao otima, todavia o custo computacional
pode ser proibitivo.
Programacao Din
amica combina estes dois universos (algoritmos gulosos e de enumeracao): a tecnica sistematicamente considera todas as possveis decisoes e sempre
seleciona a otima, armazenando as consequencias de todas as decisoes ate o presente
estagio, e usando estas informacoes de uma forma sistematica, o trabalho computacional pode ser minimizado.
A melhor maneira de aprender DP e por meio de exemplos.
14.1.1
203
Calculando N
umeros de Fibonacci
A sequencia de Fibonacci e dada por

Fk = Fk1 + Fk2
F0 = 0
F1 = 1
A serie de Fibonacci foi inicialmente proposta e estudada por um matematico no
contexto de reproducao animal. Ela apresenta aplicacoes em Teoria dos N
umeros e
Computacao. Uma vez que a formula e recursiva, podemos desenvolver um algoritmo
recursivo para calcular Fk .
Algoritmo F (k)
if k = 0
return 0
else
if k = 1
return 1
else
return F (k 1) + F (k 2)
Qual e a complexidade do algoritmo? Para calcularmos o n
umero de operacoes elementares, inicialmente obtemos uma recorrencia:

T (n) = 1
para n = 0, 1
T (n) = T (n 1) + T (n 2) para n 2
Limite inferior para T (n):
T (n)
=
..
.
T (n 2) + T (n 2)
2T (n 2)
4T (n 4)
8T (n 6)
k
2 T (n 2k)
Note que
(14.1)
(14.2)
(14.3)
(14.4)
(14.5)
(14.6)
n1
2
n1
n/2
portanto, T (n) 2 2 T (n) (2 ). Conlcumos entao que o algoritmo recursivo e ineficiente, levando um tempo exponencial para calcular Fk . Voce pode mostrar
que o algoritmo executa em tempo (2n )? Veja a arvore de recursao dada na Figura
14.1.
Podemos desenvolver um algoritmo mais eficiente, de tempo linear se armazenarmos
os valores das instancias menores e nao recalcularmos os seus valores. O algoritmo
alternativo e dado abaixo.
n 2k = 1 k =
204

F(6)
F(4)
F(5)
F(3)
F(2)
F(1)
F(2)
F(1)
F(1)
F(2)
F(1)
F(0)
F(1)
F(2)
F(3)
F(3)
F(4)
F(0)
F(2)
F(1)
F(1)
F(1)
F(0)
F(0)
F(0)
Figura 14.1: Arvore

de recursao do algoritmo recursivo para calculo do n
umero de
Fibonacci
Algoritmo Fb (n)
F0 = 0
F1 = 1
for i 2 to n
Fi Fi2 + Fi1
Return Fn
Uma vez que calculamos os n

umeros de Fibonacci, comecando com os menores e armazenando os resultados, teremos ja calculado os valors de Fi1 e Fi2 quando computarmos o valor de Fi . O algoritmo e executado em tempo (n).
14.2
Programac
ao Din
amica para o Problema da
Mochila
Inicialmente relembramos o problema da mochila:

P : z = M ax
s. a :
n
P
j=1
n
P
j=1
c j xj
aj x j b
xj {0, 1}, j = 1, . . . , n
onde os coeficientes {aj }nj=1 e b sao inteiros positivos.

Imagine que o lado direito da desigualdade assume um valor que varia de 0 ate b,
o que define estagios do problema de programacao dinamica, cujas solucoes otimas sao
x0 , . . . , xk , . . . , xb . Isto nos leva a definir o problema Pk (), a sua respectiva solucao
205
otima xk () e o seu respectivo valor objetivo fk () como segue:

Pk () : fk () = M ax
s. a :
k
P
j=1
k
P
j=1
c j xj
aj x j
xj {0, 1}, j = 1, . . . , k
Em palavras, Pk () e o problema da mochila restrito aos k primeiros itens e uma
mochila de capacidade . Assim, z = fn (b) nos da a solucao otima para P . Nos resta
entao obter uma recursao que permite calcular fk () em termos dos valores de fs (u)
com s k e u .
O que podemos dizer sobre a solu
c
ao
otima x para o problema Pk ()
com valor fk ()? Claramente, xk = 0 ou xk = 1. Considerando cada caso, temos:
Caso 1) Se xk = 0, entao conclumos que a solucao otima satisfaz fk () = fk1 ()
Caso 2) Se xk = 1, entao conclumos que a solucao otima satisfaz fk () = ck +fk1 (ak )
Combinando os casos (1) e (2), obtemos a recorrencia abaixo:
fk () = M ax{fk1 (), ck + fk1 ( ak )}
(14.7)
Definindo-se os valores iniciais como f0 () = 0 para 0, pode-se utilizar a recorrencia

(14.7) para calcular sucessivamente os valores de f1 , f2 , . . . , fn para todos os valores
inteiros de {0, . . . , b}.
A questao que resta e como encontrar a solucao otima associada ao valor otimo.
Podemos manter um indicador pk () que assume valor 0 se fk () = fk1 (), e valor 1
caso contrario. A solucao pode entao ser encontrada por meio dos passos abaixo:
se pn (b) = 0, entao como fn (b) = fn1 (b), definimos xn = 0 e continuamos o
processo com o valor fn1 (b);
se pn (b) = 1, entao fn (b) = cn + fn1 (b an ), definimos xn = 1 e repetimos este
procedimento para fn1 (b an );
apos n iteracoes, obteremos a solucao otima.
14.2.1
Complexidade do Algoritmo
Calculando o n
umero de operacoes necessarias para obtermos z = fn (b), verificamos
que o calculo de fk () para = 0, 1, . . . , b e k = 1, . . . , n necessita de um n
umero
constante de operacoes. O algoritmo roda em tempo (nb), sendo portanto pseudopolinomial. O algoritmo tem tempo de execucao polinomial se b O(log n), ja que b
pode ser representado em notacao binaria com k bits, ou seja, b 2k .
Exemplo: Considere a instancia do problema da mochila que segue abaixo.
z = Maximize 10x1 + 7x2 + 25x3 + 24x4
sujeito a:
2x1 + x2 + 6x3 + 5x4 7
206
Para se aplicar DP, calculamos os valores de f0 (). A proxima coluna (k = 1) e

calculada usando a formula (14.7). O resultado completo da aplicacao do algoritmo
de programacao dinamica esta ilustrado na Tabela 14.1. Nela sao dados os valores
da funcao objetivo de cada subproblema e as decisoes relativas à insercao do item do
estagio na mochila.
Tabela 14.1: Tabelas DP para o Problema da Mochila
0
1
2
3
4
5
6
7
f0
0
0
0
0
0
0
0
0
f1
0
0
10
10
10
10
10
10
f2
0
7
10
17
17
17
17
17
f3
0
7
10
17
17
17
25
32
f4
0
7
10
17
17
24
31
34
p1
0
0
1
1
1
1
1
1
p2
0
1
0
1
1
1
1
1
p3
0
0
0
0
0
0
1
1
p4
0
0
0
0
0
1
1
1
Relembrando que fk () = M ax{fk1 (), ck + fk1 ( ak )}, podemos reconstruir

a solucao otima:
p4 (7) = 1 x4 = 1
p3 (7 5) = p3 (2) = 0 x3 = 0
p2 (2) = 0 x2 = 0
p1 (2) = 1 x1 = 1
A solucao otima e x = (1, 0, 0, 1) e f (x ) = 34.
14.3
Elementos de um Algoritmo DP: Sequ

encia
Crescente Mais Longa
Aqui ilustramos os elementos basicos de um algoritmo de programacao dinamica.

Essencialmente, um algoritmo DP pode ser projetado em tres passos:
1) Formule uma resposta como uma relacao de recorrencia
2) Mostre que o n
umero de valores distintos de cada recorrencia e limitada por um
polinomio (de preferencia de baixa ordem)
3) Especifique uma ordem para avaliar a recorrencia de forma que sempre se faca
calculos sobre valores ja conhecidos.
Problema: dada uma sequencia de n n
umeros, e.g. (9, 5, 2, 8, 7, 3, 1, 6, 4), deseja-se
encontrar a subsequencia mais longa cujos n
umeros estao em ordem crescente.
No problema em consideracao, a sequencia mais longa para s = (9, 5, 2, 8, 7, 3, 1, 6, 4)
e de comprimento 3, podendo ser a subseq
uencia s1 = (2, 3, 4) ou a subseq
uencia
s2 = (2, 3, 6).
207
Se estivessemos procurando uma sequencia contg

ua, o problema seria facilmente
resolvido. Qual seria o n
umero de solu
c
oes candidatas? O n
umero de solucoes
candidatas pode ser calculado pela recorrencia:
T (n) = n + (n 1) + (n 2) + . . . + 1
n(n 1)
=
T (n) (n2 )
2
(14.8)
(14.9)
Para a situac
ao sob considerac
ao, qual
e o n
umero de possveis solu
c
oes
candidatas?

n
n
n
(14.10)
+ ... +
+
T (n) =
n
2
1

n
X
n
(14.11)
=
k
k=1
= (1 + 1)n
(pelo Binomio de Newton)
n
= 2 T (n) (2n )
(14.12)
(14.13)
Nao e difcil construir um algoritmo com tempo de execucao (n2 ) para encontrar a
subseq
uencia mais longa de uma cadeia de n smbolos. Tomando como base o n
umero
de possveis solucoes para a versao do problema onde a subcadeia nao e necessariamente
contg
ua, (2n ), nos parece totalmente inviavel enumerar todas as possveis solucoes.
Veremos a seguir que, apesar do n
umero elevado de solucoes candidatas, podemos
projetar um algoritmo DP de tempo (n2 ).
14.3.1
Construindo um Algoritmo
Suponha que para a seq

uencia s = (s1 , s2 , . . . , sn1 ) conhecemos o comprimento
lk , k {1, . . . , n 1}, da sequencia mais longa que termina no elemento sk de s .
Como podemos encontrar a sequ
encia mais longa em (s1 , . . . , sn )? Isto pode
ser realizado por meio da recorrencia:
ln = M ax{lk + 1 : sk sn , k = 1, . . . , n 1}
para a qual um algoritmo e dado a seguir.
Algoritmo LS(s)
l0 0
s0 0
p0 0 // predecessor, pi
e o
ndice do elemento que aparece
imediatamente antes de si na sequ^
encia que termina em si .
for k = 1 to n do
lk = M axj=0,...,k1 {lj + 1 : sj < sk }
pk = ArgM axj=0,...,k1 {lj + 1 : sj < sk }
return M ax{lk : k = 1, . . . , n}
208
O funcionamento do algoritmo durante o calculo da seq

uencia mais longa da cadeia
s = (9, 5, 2, 8, 7, 3, 1, 6, 4) e ilustrado na Tabela 14.2. O comprimento da cadeia mais
longa e, portanto, 3 = M ax{li : i = 1, . . . , n} tendo como solucao a subcadeia que
termina no elemento 4 ou a subcadeia que termina no elemento 6.
Tabela 14.2: Tabelas DP para o Problema de Subseq
uencia Mais Longa
Sequencia si
Comprimento li
Predecessor pi
0
0
0
1
9
1
0
2
5
1
0
3
2
1
0
4
8
2
2
5
7
2
2
6
3
2
3
7
1
1
0
8
6
3
6
9
4
3
6
Qual
e o tempo de execuc
ao do nosso algoritmo? Podemos determinar o
tempo de execucao atraves da recorrencia T (n) = T (n 1) + n, o que nos leva a
concluir que T (n) (n2 ). Utilizando estruturas de dados como dicionarios de uma
forma inteligente e possvel encontrar a sequencia mais longa em tempo (n log n).
14.4
Edi
c
ao Autom
atica de Cadeias de Smbolos
(Approximate String Matching)
Uma tarefa importante em processamento de texto e a busca por ocorrencias de

uma palavra no texto. Infelizmente, palavras nao sao escritas corretamente, surgindo
portanto a questao: Como poderamos efetuar uma busca pela cadeia mais
pr
oxima de um padr
ao fornecido pelo usu
ario? Mais formalmente, seja P uma
cadeia padrao e T , uma cadeia que representa o texto. A distancia entre P e T e o
menor n
umero de operacoes de edicao necessarias para transformar T em P , sendo as
operacoes permitidas:
a) Substituicao - dois smbolos podem diferir: KAT CAT
b) Insercao - adiciona-se um smbolo de P que nao aparece em T : CT CAT
c) Delecao - elimina-se um caracter de T que nao aparece em P : CAAT CAT
Exemplo: P = abcdef ghijkl pode ser mapeado para T = bcdef f ghixkl usando tres
operacoes: insercao do caracter a antes de b, delecao de um caracter f , e substituicao
do caracter x pelo caracter j.
14.4.1
Projeto de um Algoritmo DP
Que informacao seria necessaria para tomarmos a decisao final? Isto e, o que deve
acontecer na u
ltima posicao de T ? Possibilidades
209
a) o u
ltimo caracter pode ser emparelhado com o u
ltimo caracter de P , se eles
sao identicos
b) de outra forma, o u
ltimo caracter pode ser substitudo
c) as outras operacoes sao de delecao e insercao
Seja D[i, j] a distancia, isto e, o menor n
umero de operacoes para emparelhamento
entre < P1 , P2 , . . . , Pi > e < T1 , T2 , . . . , Tj >. Entao, D[i, j] e o mnimo das tres
possveis formas de estender as sub-cadeias.
1) Se (Pi = Tj ), entao D[i, j] D[i 1, j 1] (emparelhamento). Caso contrario,
D[i, j] D[i 1, j 1] + 1 (substituicao).
2) D[i, j] D[i 1, j] + 1, o que significa que ha um caracter adicional na cadeia de
busca P , portanto pagamos o custo de uma insercao e nao avancamos o ponteiro
do texto T .
3) D[i, j] D[i, j 1] + 1, o que significa que ha um caracter extra na cadeia T ,
portanto pagamos o custo de uma delecao em T e nao avancamos o ponteiro de
P.
Entretanto, ainda falta especificar as condicoes iniciais. A inicializacao correta dos
valores e crtica para que o algoritmo retorne o resultado correto. Por exemplo, o valor
D[0, j] corresponde a emparelhar os j primeiros smbolos do texto com nenhum caracter
do padrao P .
a) Se desejamos um emparelhamento entre todo o padrao P e todo o texto T , entao
D[0, j] e o custo de eliminarmos j smbolos de T . Assim, D[0, j] = j para
j = 1, . . . , |T |.
b) Se desejamos emparelhar P com qualquer subcadeia de T , entao o custo de iniciarmos o emparelhamento na posicao j do texto deve ser o mesmo de iniciarmos
na posicao 1. Assim, D[0, j] = 0 para j = 1, . . . , |T |.
Em ambos os casos, D[i, 0] = i pois nao podemos eliminar smbolos de P sem pagarmos
o preco de delecao. Antes de apresentarmos o algoritmo, assumimos que m = |T | e
n = |P |.
Algoritmo EditDistance(P, T )
for i = 0 to n do D[i, 0] = i
for j = 0 to m do D[0, j] = j
fori = 1 to n do
forj = 1 to m do
D[i, j] = M in(D[i 1, j 1] + matchcost(Pi , ti ), D[i 1, j] + 1, D[i, j 1] + 1)
Fim algoritmo
210
Qual
e a complexidade do algoritmo? A partir do pseudo-codigo do algoritmo
EditDistance fica claro que o tempo de execucao e da ordem (mn).
Exemplo: A tabela abaixo traz o resultado da operacao EditDistance(P, T ) para
P = abcdef ghijkl e T = bcdef tghixkl.
A Figura 14.2 traz em forma tabular o valores D[i, j], i = 0, . . . , n e j = 1, . . . , m,
calculados pelo algoritmo de programacao dinamica. Abaixo listamos as operacoes
executadas pelo algoritmo, conforme n
umeros 1 ate 13 indicadas na figura.
1) insert (custo 1)
2) match (custo 0)
3) match (custo 0)
4) match (custo 0)
5) match (custo 0)
6) match (custo 0)
7) delete (custo 1)
8) match (custo 0)
9) match (custo 0)
10) match (custo 0)
11) substitute x j (custo 1)
12) match (custo 0)
13) match (custo 0)
14.5
Exerccios
EX 14.1: Implemente o algoritmo que calcula a distancia entre uma cadeia de smbolos
padrao p = (p1 , p2 , . . . , pn ) e um texto t = (t1 , t2 , . . . , tm ) em qualquer linguagem
(e.g., awk, shell script, C/C++, Pascal ou ate mesmo Matlab). Produza uma
versao onde p pode aparecer em qualquer posicao de t e outra onde o emparelhamento deve ser perfeito. Ilustre a execucao dos algoritmos implementados
para uma/duas instancias.
211
P
a
b
c
d
e
f
g
h
i
j
k
l
T
0
1
2
3
4
5
6
7
8
9
10
11
12
b
1
12
1
2
3
4
5
6
7
8
9
10
11
c
2
2
3
2
1
2
3
4
5
6
7
8
9
10
d
3
3
3
4
2
1
2
3
4
5
6
7
8
9
e
4
4
4
3
5
2
1
2
3
4
5
6
7
8
f f
5 6
5 6
5 6
4 5
3 4
6
2 77 3
1 2
2 2
3 3
4 4
5 5
6 6
7 7
g
7
7
7
6
5
h
8
8
8
7
6
i
9
9
9
8
7
x
10
10
10
9
8
4 5 6 7
38 4 5 6
9
2 3 4 5
10
3 2 3 4
4 3 2 311
5 4 3 3
6 5 4 4
7 6 5 5
k
11
11
11
10
9
8
7
6
5
4
12
4
3
4
l
12
12
12
11
10
9
8
7
6
5
5
13
4
3
Figura 14.2: Valores D[i, j] calculados pelo algoritmo DP ao calcular a distancia de

edicao mnima entre o padrao P = abcdef ghijkl e o texto T = bcdef f ghixkl
EX 14.2: Considere a seguinte tecnica de compressao de texto. Nos e dada uma tabela
com m cadeias de smbolos, cada uma de comprimento maximo k. Desejamos
representar uma cadeia de dados s = (s1 , . . . , sn ) usando apenas cadeias da tabela. Por exemplo, se nossa tabela contem (a, ba, abab, b) e a cadeia de dados e
bababbaababa, entao a melhor forma de codifica-la e (b, abab, ba, abab, a), consumindo um total de 5 palavras. Desenvolva um algoritmo de tempo O(nmk) para
encontrar a codificacao otima. Assuma que os smbolos elementares (e.g., a e b)
aparecem como cadeias na tabela. Ilustre o funcionamento do seu algoritmo em
pelo menos dois exemplos.
EX 14.3: Desejamos quebrar uma sequencia de N palavras em linhas de comprimento
A. Seja w1 , . . . , wN as palavras e L1 , . . . , LN os respectivos comprimentos destas palavras. Em uma versao simples do problema (desconsiderando hifenacao e
custos nao lineares), as palavras sao separadas por espacos brancos de comprimento b, mas espacos brancos podem ser alongadas ou reduzidos se necessario,
de forma
desde
Pk que uma linha wi , wi+1 , . . . , wi+k tem comprimento A exato,
que
e (k + 1)|b b|, onde
j=0 Li+j < A. O custo associado com a linha
b = (A Li . . . Li+k )/(k + 1) e o tamanho medio dos brancos, exceto se a
linha e a u
ltima linha, sendo neste caso o custo igual a zero se b b. Tarefas:
a) Coloque este problema no formalismo de programacao dinamica. Sugestao:
considere os subproblemas de separar as sequencias wi , . . . , wN , i = 1, . . . , N
de forma otima.
212
b) Proponha um algoritmo de programacao dinamica e faca a implementacao

em uma linguagem de programacao (e.g., C, Java, Pascal, awk, etc.).
c) Qual e a complexidade (tempo de execucao) do algoritmo desenvolvido em
termos dos parametros dos dados?
d) Teste o algoritmo, indicando os resultados obtidos.
EX 14.4: O problema de caminhos mnimos sob restricao pode ser definido como segue. Dado um grafo direcionado G = (V, A), onde um custo cij e um comprimento
wij estao associados com cada arco (i, j) A. Desejamos encontrar o caminho de
menor comprimento ligando um vertice s a um vertice t tal que o custo dos arcos
ao longo do caminho nao supera o montante B. Assuma que todos os valores sao
inteiros positivos. Tarefas:
a) Formule o problema de forma recursiva.
b) Desenvolva um algoritmo de programacao dinamica. Qual e a complexidade
do algoritmo?
c) Implemente o algoritmo em uma linguagem de programacao.
d) Ilustre o comportamento do algoritmo em pelo menos dois exemplos. (Sugestao: escolha um grafo com cerca de 15 vertices e rode o algoritmo para
diferentes s, t e valores B.)
EX 14.5: Sao dadas duas seq
uencias de caracteres do alfabeto = {A, . . . , Z},
sendo x = (x1 , . . . , xn ) uma seq
uencia com n caracteres e y = (y1 , . . . , ym ) uma
seq
uencia com m caracteres. Desejamos encontrar subseq
uencias nao necessariamente contguas xs = (xi1 , . . . , xik ) de x e ys = (yj1 , . . . , xjk ) de y que sejam
identicas e de maior comprimento possvel, ou seja, queremos maximizar k enquanto que xs = ys .
Por exemplo, para x = (A, B, C, B, D, A, B) e y = (B, D, C, A, B, A) as subseq
uencias de maior comprimento sao: (B, D, A, B), (B, C, B, A) e (B, C, A, B).
i. Projete um algoritmo eficiente para encontrar o comprimento k da subcadeia mais longa de x e y. Qual e o tempo de execucao do seu algoritmo?
Quanta memoria e necessaria para executar o algoritmo? Modifique o seu
algoritmo para que ele tambem produza uma sub-cadeia xs = ys de maior
comprimento. Qual e o tempo de execucao deste algoritmo?
ii. Suponha que voce quer obter todas as sub-cadeias mais longas. Como que
voce resolveria este problema?
iii. Exemplique/ilustre a execucao do seu algoritmo para as cadeias x e y dadas
acima.
EX 14.6: Prof. Kunz foi contratado pela Empresa XYZ para planejar uma festa
otimizada. A empresa esta organizada hierarquicamente com o presidente na
raiz da arvore. O departamento de recursos humanos definiu um n
umero real para
cada membro da empresa correspondendo ao caracter social de cada indivduo.
Seja rm R+ o ndice social da pessoa m. Para que a festa seja divertida
213
para todos os convidados, o presidente nao quer que os chefes imediatos de cada
convidado estejam na festa.
Tarefas:
i. Projete um algoritmo para encontrar um subconjunto S = {1, . . . , N } dos
membros da empresa que satifaca a restricao imposta pelo presidente e que
maximize a somatoria do ndices sociais dos convidados. Qual e o tempo de
execucao do algoritmo? Quanta memoria e utilizada pelo algoritmo? Ilustre
o funcionamento do algoritmo para a hierarquia dada na Figura 14.3. Os
valores rm sao dados em ordem de identificador: 0.9715, 0.1711, 0.1360,
0.7552, 0.3132, 0.4633, 0.3394, 0.0096, 0.3338, 0.2468, 0.9941, 0.9056, 0.3498,
0.2781, 0.0929, 0.2405, 0.9016, 0.3242, 0.5727, 0.1851, 0.7379, 0.1118, 0.3838,
0.8624, 0.8571, 0.8194, 0.2457, 0.8976, 0.6041, 0.1397, 0.1613, 0.8832, 0.9786,
0.6013, 0.3618, 0.2314.
ii. Como que o Prof. Kunz poderia fazer para garantir que o presidente e um
dos convidados?
1
10
21
31
11
12
23
22
32
13
14
24
25
33
15
17
16
26
27
28
34
20
19
18
29
30
35
36
Figura 14.3: Hierarquia da empresa XYZ

EX 14.7: No jogo dos palitos, n = 21 palitos sao colocados sobre a mesa. Voce e
o jogador 1. Seja mk {1, . . . , n} o n
umero de palitos na mesa no incio da
iteracao k. Seja jk {1, 2} o jogador da vez na iteracao k. O valor de j1 e
decidido arbitrariamente (os jogadores decidem quem comeca retirando palitos).
O seu oponente e o jogador 2. A cada iteracao k, o jogador da vez retira lk palitos
tal que lk {1, 2, 3} e lk mk . O jogador que retirar o u
ltimo palito da mesa
perde o jogo.
Formule o jogo dos palitos como um problema de programacao dinamica. Encontre uma poltica de controle otima para o jogador 1, ou seja, encontre uma
funcao (mk ) = lk que dado o n
umero de palitos na mesa na iteracao k retorna
o n
umero de palitos a serem removidos.
214
Captulo 15
Programac
ao Din
amica: Domnio
Contnuo
Este captulo se concentra na aplicacao de programacao dinamica onde as variaveis
de decisao sao contnuas, sujeitas a um sistema de equacoes dinamicas que descreve
o comportamento de um sistema ao longo do tempo, e tambem susceptveis a perturbacoes estocasticas. Problemas de controle, como o problema classico de regulacao e
problemas de inventario se enquandram dentro deste formalismo e podem ser resolvidos
de forma otima por meio da programacao dinamica. As proximas secoes exemplificam
o uso da programacao dinamica na solucao do problema de regulacao. Conceitos de
contrabilidade e observabilidade sao tambem apresentados.
15.1
Introduc
ao
Trataremos aqui de situacoes onde as decisoes sao tomadas em estagios. O resultado

de cada decisao nao pode ser completamente antecipado em virtude de perturbacoes
estocasticas ou eventos nao-determinsticos, mas pode ser predito com certo grau de
acuracidade antes que uma decisao seja tomada. O objetivo e minimizar um certo
custouma expressao matematica do que e considerado um resultado indesejavel.
Um aspecto crucial e que decisoes nao podem ser vistas isoladamente, uma vez que
se deve balancear o desejo de baixo custo imediato e a possibilidade de altos custos no
futuro. A cada estagio, as decisoes sao ordenadas de acordo com o custo imediato e o
custo esperado no futuro. Programacao dinamica estocastica captura esta relacao de
compromisso. Tal compromisso surge ainda em outros domnios, como o formalismo de
aprendizagem por reforco no qual um agente procura aprender uma poltica de tomada
de decisao que maximiza o ganho amortizado. Neste universo, a questao de balancear
o ganho imediato e futuro tambem desempenha um papel crucial. Ha situacoes onde
deve-se pagar um preco alto neste instante se desejamos acumular ganhos futuros.
Existe uma variedade muito grande de problemas que podem ser tratados por DP.
Aqui nos concentraremos na sua aplicacao no controle
otimo de sistemas dinamicos.
O modelo basico do problema apresenta dois elementos essenciais: 1) um sistema
dinamico discreto e 2) uma funcao custo que e aditiva no tempo. O sistema dinamico
216
15. Programacao Dinamica: Domnio Contnuo
e da forma:
k = 0, 1, . . . , N 1
xk = fk (xk , uk , wk )
onde:
(15.1)
k: ndices discretos no tempo;

xk : estado do sistema no instante tk ;
uk : variavel de decisao ou controle para o instante tk ;
wk : parametro randomico (perturbacao); e
N : horizonte ou n
umero de vezes que o controle e aplicado.
A funcao custo e aditiva, no sentido de que o custo incorrido na iteracao k, denotado
por gk (xk , uk , wk ), se acumula no tempo. O custo total e dado por:
gN (xN ) +
N
1
X
gk (xk , uk , wk )
(15.2)
k=0
onde gN (xN ) e o custo terminal no fim do processo.

No entanto, porque temos elementos estocasticos, o custo e em geral uma variavel
randomica e nao pode ser simplesmente otimizada. Devemos, portanto, otimizar o
custo esperado (i.e., a esperanca matematica do custo)
E{gn (xn ) +
N
1
X
gk (xk , uk , wk )}
(15.3)
k=0
importante ressaltar que o valor esperado (15.3) e calculado com respeito à disE
tribuicao conjunta das variaveis randomicas w1 , w2 , . . . , wN 1 . Note tambem que a
otimizacao e sobre os controles u0 , u1 , . . . , uN 1 , que correspondem às variaveis cujos
valores podem ser definidos pelo controlador.
15.1.1
Exemplo: Controle de Invent

ario
Considere o problema de solicitar um certo item de produto a cada um de N perodos

de maneira a atender uma demanda estocastica. Aqui, adotamos a notacao abaixo:
xk : estoque no incio do k-esimo perodo;
uk : quantidade de produto; e
wk : demanda durante o perodo k obedecendo uma certa distribuicao de probabilidades.
Assumimos que w0 , w1 , . . . , wN 1 sao variaveis randomicas independentes e que o
excesso de demanda e suprido tao logo itens adicionais sejam adquiridos. Portanto, o
estoque evolui de acordo com a expressao abaixo:
xk+1 = xk + uk wk
O custo incorrido no perodo k apresenta dois componentes:
(15.4)
217
a) custo r(xk ) representando a penalidade por estoque positivo (custo de estocagem)

ou estoque negativo (demanda nao atendida); e
b) custo cuk correspondente ao custo de adquisicao de uk unidades, onde c e o custo
unitario.
Ha tambem um custo terminal R(xN ) para o estoque residual no fim dos N perodos.
Portanto, o custo total em N perodos e:
E{R(xN ) +
N
1
X
[r(xk ) + cuk ]}
(15.5)
k=0
Desejamos minimizar (15.5) por meio da escolha de u0 , u1 , . . . , uN 1 sujeito à restricao uk 0 para todo k.
15.1.2
Distinc
ao Entre Otimizac
ao Open-Loop e ClosedLoop
Sob otimizacao open-loop (em malha aberta), escolhemos todos os valores

u0 , u1 , . . . , uN 1 de uma so vez, no instante t0 . Por outro lado, sob otimizacao closedloop (em malha fechada), postergamos a ordem uk ate o u
ltimo momento, no instante
tk quando conhecemos xk . Uma vez que nao ha onus em postergarmos a decisao uk ,
podemos tirar vantagem da informacao que se torna disponvel.
Otimizacao em malha fechada e de importancia fundamental em programacao
dinamica e aqui sera objeto de estudo. Portanto, as decisoes serao tomadas em estagios,
que podem ser postergadas para aprimorar a qualidade das decisoes. Na otimizacao
em malha fechada nao estamos interessados em encontrar valores numericos para os
pedidos, mas sim uma estrategia de controle
otima para selecao de uk a cada perodo
k dado o valor em estoque xk . Essa e a diferenca entre uma acao e uma estrategia (lei
ou regra de controle).
Matematicamente, em otimizacao por malha fechada, procuramos uma sequencia
de funcoes k , k = 0, 1, . . . , N 1, mapeando a quantidade em estoque xk para uma
ordem uk de forma a minimizar o custo esperado.
k (xk ) = quantidade a ser solicitada no instante tk se o estoque e xk
(15.6)
Uma sequencia = (0 , 1 , . . . , N 1 ) sera referenciada como poltica ou lei de controle.

Para cada , o correspondente custo para um estoque inicial x0 e:
J (x0 ) = E{R(xn ) +
N
1
X
[r(xk ) + ck (xk )]}
(15.7)
k=0
Um problema tpico de programacao dinamica e:

M in J (x0 )
Para o problema de inventario que esta sendo considerado, uma estrategia otima e
da forma:

sk xk se xk < sk
k (xk ) =
0 caso contrario
onde sk e um limiar determinado a partir dos dados do problema.
218
15.2
O Problema
Din
amica
B
asico
de
Programac
ao
O problema basico de decisao para um n

umero finito de estagios e sob incerteza
estocastica e bastante geral, sendo este objeto de estudo no presente captulo. O
problema basico pode ser caracterizado pelos dados abaixo:
a) um sistema dinamico discreto
xk+1 = fk (xk , uk , wk )
k = 0, 1, . . . , N 1
(15.8)
b) o controle uk deve pertencer a um conjunto nao vazio Uk (xk ) Ck o qual depende

do estado corrente xk ; e
c) a perturbacao randomica wk e caracterizada pela distribuicao de probabilidades Pk (|xk , uk ) que depende explicitamente de xk e uk , mas nao depende das
perturbacoes anteriores wk1 , . . . , w0 (propriedade Markov).
Consideramos as classes de polticas (tambem conhecidas por leis de controle) que
consistem de sequencias de funcoes:
= (0 , 1 , . . . , N 1 )
(15.9)
onde k e uma funcao que mapeia o estado xk no controle uk = k (xk ), tal que k (xk )
Uk (xk ) para todo xk Sk . Tais polticas sao ditas admissveis pois respeitam as
restricoes impostas nas variaveis de controle.
Dado um estado x0 e uma poltica admissvel = (0 , . . . , N 1 ), o sistema de
equacoes
xk+1 = fk (xk , k (xk ), wk )
k = 1, . . . N 1
(15.10)
torna xk e wk em variaveis randomicas com distribuicoes bem definidas. Portanto,
dadas funcoes gk , o custo esperado pode ser expresso como segue:
J = Ewk {gN (xN ) +
N
1
X
gk (xk , k (xk ), wk )}
k=0
k = 0, 1, . . . , N 1
(15.11)
Note que (15.11) e uma quantidade bem definida. Dado um estado inicial x0 , uma
poltica otima e aquela que minimiza o custo:
J (x0 ) = M in J (x0 )
15.2.1
(15.12)
O Valor da Informac
ao
Com polticas de malha fechada e possvel de se induzir um custo reduzido, essencialmente ao tirar-se vantagem da informacao adicional (i.e., o valor do estado corrente).
A reducao no custo em relacao às polticas de malha aberta e conhecida como valor da
informacao.
15.3
219
O Algoritmo de Programac
ao Din
amica
A tecnica de programacao dinamica tem como base o princpio da otimalidade. O

nome e devido a Bellman, que foi responsavel por muitas contribuicoes neste domnio,
um dos precurssores da programacao dinamica.
15.3.1
Princpio da Otimalidade
Seja = (o , . . . , N 1 ) uma poltica otima para o problema basico, e assuma

que quando adotamos , um dado estado xi ocorre no instante i com probabilidade
positiva. Considere o subproblema em que a partir de xi no instante i desejamos
minimizar o custo restante (cost-to-go) de i ate N . Formalmente o cost-to-go e dado
por:
N
1
X
E{gN (xN ) +
gk (xk , k (xk ), wk )}
(15.13)
k=i
Entao a poltica truncada (i , i+1 , . . . , N 1 ) e otima para (15.13).

O princpio da otimalidade sugere que uma poltica otima pode ser construda de
uma forma gradual, primeiro construindo uma poltica para o u
ltimo estagio e, depois, estendendo a solucao do subproblema para os dois u
ltimos estagios e assim por
diante ate construirmos uma solucao (poltica) completa, cobrindo todos os estagios.
A programacao dinamica e baseada nessa ideia.
15.3.2
O Algoritmo de Programac
ao Din
amica
Considere o problema de inventario apresentado anteriormente. Abaixo desenvolvemos um algoritmo para determinar a poltica otima que comeca no u
ltimo estagio e
procede para tras.
Perodo N-1 : Independentemente do que aconteceu no passado, devemos minimizar
cuN 1 + E{R(xN )}, que pode ser escrito como:
cuN 1 + EwN 1 {R(xN 1 + uN 1 wN 1 )}
(15.14)
Levando em conta o custo de armazenamento/nao suprimento no perodo N 1, o

custo otimo para o u
ltimo perodo (mais o custo terminal) e:
JN 1 (xN 1 ) = r(xN 1 ) + M inuN 1 0 [cuN 1 + E {R(xN 1 + uN 1 wN 1 )}] (15.15)
Naturalmente, JN 1 e uma funcao de xN 1 . JN 1 pode ser calculada analiticamente
ou numericamente, neste u
ltimo caso uma tabela e utilizada para armazenamento de
JN 1 . No processo de calcularmos JN 1 obtemos a poltica otima N 1 (xN 1 ) para o
u
ltimo perodo, onde N 1 (xN 1 ) assume o valor uN 1 que minimiza (15.15).
220
Perodo N-2 : Deve ser evidente que devemos minimizar nao apenas o custo do perodo
N 2 mas sim a soma das parcelas abaixo:
O custo esperado +
O custo esperado
= r(xN 2 ) + cuN 2
do perodo N-2
do perodo N-1, utilizando-se
+E{JN 1 (xN 1 )}
uma poltica otima para N-1
(15.16)
Usando-se a equacao xN 1 = xN 2 + uN 2 wN 2 , o u
ltimo termo pode ser escrito
como JN 1 (xN 2 + uN 2 wN 2 ). Portanto, se comecarmos com xN 2 , o custo otimo
para os dois u
ltimos perodos e denotado por JN 2 (xN 2 ) e dado pela expressao que
segue:

JN 2 (xN 2 ) = r(xN 2 ) + M inuN 2 0 cuN 2 + EwN 2 {JN 1 (xN 2 + uN 2 wN 2 )}
(15.17)
Novamente, JN 2 (xN 2 ) e calculado para cada valor xN 2 . Simultaneamente, obtemos
uma poltica de controle otimo N 2 (xN 2 ).
Observa
c
oes: Enquanto que o problema de inventario necessita de uma otimizacao
sobre o conjunto de polticas, o algoritmo DP decompoe o problema em uma sequencia
de minimizacoes feita sobre um conjunto de controles. Cada uma dessas minimizacoes
e muito mais simples do que o problema original.
15.4
Sistemas Lineares com Custo Quadr

atico
Esta secao desenvolve um algoritmo de programacao dinamica para resolver o problema de controle que tem como sistema dinamico equacoes lineares, uma funcao de
erro quadratica, e um horizonte de tempo finito. Consideramos o caso especial de um
sistema linear na forma:
xk+1 = Ak xk + Bk uk + wk
k = 0, 1, . . . , N 1
tendo como custo a funcao quadratica dada por:

(
)
N
1
X
T

T
T
E wk x N Q N x N +
x k Q k x k + uk R k uk
k=0
k = 0, . . . , N 1
(15.18)
(15.19)
Neste modelo, xk e uk sao vetores (coluna) de dimensao n e m respectivamente, e as

matrizes Ak , Bk , Qk e Rk sao de dimensoes apropriadas. Assumimos que as matrizes
Qk sao simetricas e positiva semi-definidas, Qk = Qk T e Qk 0, e as matrizes Rk sao
simetricas e positiva definidas, Rk = Rk T e Rk > 0. Os controles uk sao irrestritos. As
perturbacoes wk sao variaveis randomicas com distribuicao de probabilidades independentes de xk e uk . Alem disso, as perturbacoes apresentam media nula E[wk ] = 0 e
variancia finita.
O problema descrito acima e uma formulacao popular do problema de regulacao,
no qual deseja-se manter o estado do sistema proximo da origem.
Duas generalizacoes do problema acima:
221
a) Perturbacao com media diferente de zero e aproximacao de trajetoria

(
)
N
1
X

E (xN xN )T QN (xN xN ) +
(xk xk )T Qk (xk xk ) + uk T Rk uk
k=0
onde xk descreve a trajetoria desejada.

b) Problema que surge quando Ak e Bk sao matrizes aleatorias com distribuicoes
conhecidas.
15.4.1
Aplicando o Algoritmo de Programac

ao Din
amica
Aplicando o algoritmo DP, obtemos

JN (xN ) = xN T QN xN
(15.20)
e
Jk (xk ) = M inuk E{xk T Qk xk + uk T Rk uk + Jk+1 (Ak xk + Bk uk + wk )}
(15.21)
Uma vez que o cost-to-go Jk e uma funcao quadratica, a lei de controle otima e uma
funcao linear do estado. Escrevendo a equacao (15.21) para k = N 1, obtemos
JN 1 (xN 1 ) = M inuN 1 E{xN 1 T QN 1 xN 1 + uN 1 T RN 1 uN 1 +
+(AN 1 xN 1 + BN 1 uN 1 + wN 1 )T QN
(AN 1 xN 1 + BN 1 uN 1 + wN 1 )}
(15.22)
Usando o fato de que E{wN 1 } = 0, podemos reescrever (15.22) como

xN 1 T QN 1 xN 1 + M inuN 1 {uN 1 T RN 1 uN 1 +
+uN 1 T BN 1 T QN BN 1 uN 1 + 2xN 1 T AN 1 T QN BN 1 uN 1 }+
+xN 1 T AN 1 T QN AN 1 xN 1 + E{wN 1 T QN wN 1 }
(15.23)
Diferenciando (15.23) e forcando o gradiente para zero, produzimos:
JN 1 (xN 1 ) =
(RN 1 + BN 1 T QN BN 1 )uN 1 = BN 1 T QN AN 1 xN 1
(15.24)
Ja que (RN 1 + BN 1 T QN BN 1 ) e positiva definida, esta admite uma inversa e, portanto:

1
uN 1 = (RN 1 + BN 1 T QN BN 1 ) BN 1 T QN AN 1 xN 1
(15.25)
Substituindo-se (15.25) em (15.23) obtemos:

JN 1 (xN 1 ) = xN 1 T KN 1 xN 1 + E{wN 1 T QN wN 1 }
1
(15.26)
KN 1 = AN 1 T [QN QN BN 1 (BN 1 T QN BN 1 + RN 1 ) BN 1 T QN ]AN 1 + QN 1

(15.27)
Nao e difcil de se verificar que KN 1 e uma matriz simetrica e positiva semi-definida.
222
Uma vez que JN 1 e uma funcao quadratica positiva semi-definida (salvo uma constante inconsequente), podemos prosseguir de forma similar e obter a partir da equacao
(15.21) uma lei de controle otima para o estagio N 2. Procedendo desta forma
podemos obter uma lei de controle otima para cada estagio k. Esta lei toma a forma:
k (xk ) = Lk xk
(15.28)
onde as matrizes de ganho Lk sao dadas pela equacao:

1
Lk = (Bk T Kk+1 Bk + Rk ) Bk T Kk+1 Ak
(15.29)
e as matrizes simetricas e positiva definidas Kk sao produzidas pela recorrencia abaixo:

KN = QN
(15.30)
1
Kk = Ak T [Kk+1 Kk+1 Bk (Bk T Kk+1 Bk + Rk ) Bk T Kk+1 ]Ak + Qk
(15.31)
A regra de controle (15.28) e simples e atrativa para implementacao em aplicacoes de

engenharia: o estado corrente xk alimenta a entrada por meio da matriz de ganho Lk .
wk
xk
xk+1 = Ak xk + Bk uk + wk
uk
Lk
Figura 15.1: Estrutura do sistema linear com controle otimo de realimentacao
15.4.2
A Equac
ao de Riccati e seu Comportamento Assint
otico
A equacao (15.31) e conhecida como equacao de Riccati. Ela desempenha um papel

importante na teoria de controle. Suas propriedades ja foram estudadas amplamente.
Uma propriedade importante da equacao de Riccati e que a solucao Kk converge para
uma solucao K quando k se Ak , Bk , Qk e Rk sao constantes e iguais a A, B,
Q e R, respectivamente. A solucao K satisfaz a equacao algebrica de Riccati.
1
K = AT [K KB(B T KB + R) B T K]A + Q
(15.32)
Esta propriedade indica que para o sistema

xk+1 = Axk + Buk + wk
k = 0, 1, . . . , N 1
(15.33)
223
e um n
umero grande de estagios N , podemos aproximar a lei de controle (15.28) com
a lei de controle ( , , . . . , , ) onde
(x) = Lx
e
(15.34)
L = (B T KB + R) B T KA
(15.35)
onde K e uma solucao para a equacao algebrica de Riccati (15.32).

Defini
c
ao 15.1 Um par (A, B), sendo A uma matriz n n e B uma matriz n m, e
dito controlavel se a matriz n nm
[B, AB, A2 B, . . . , An1 B]
(15.36)
tem posto completo, ou seja, se as linhas s

ao linearmente independentes.
Pode-se demonstrar que se um par (A, B) e controlavel, entao para qualquer estado
inicial x0 existe uma sequencia de vetores u0 , u1 , . . . , un1 que forca o estado xn do
sistema
xk+1 = Axk + Buk
(15.37)
para a origem no instante n. Isto pode ser demonstrado como segue:
x1 = Ax0 + Bu0
x2 = Ax1 + Bu1 = A2 x0 + ABu0 + Bu1
..
.
(15.38)
xn = An x0 + An1 Bu0 + An2 Bu1 + . . . + ABun2 + Bun1

ou, equivalentemente,
xn A x0 = [B, AB, A B, . . . , A
n1
B]
un1
un2
..
.
u0
(15.39)
Se (A, B) e controlavel, a matriz [B, AB, . . . , An1 B] tem posto completo e como resultado da equacao (15.39) podemos posicionar xn em qualquer lugar do Rn .
A proposicao a seguir mostra que para um sistema estacionario controlavel e matrizes constantes Q, R, a solucao da equacao de Riccati converge para uma matriz
simetrica positiva semi-definida a partir de qualquer matriz inicial.
Proposi
c
ao 15.1 Para simplificar a notacao, revertemos o ndice k e, portanto, Pk
corresponde `
a matriz Knk . Seja A uma matriz n n, B uma matriz n m, Q uma
matriz n n simetrica positiva semi-definida, e R uma matriz m m simetrica positiva
definida. Considere a equacao de Riccati discreta que segue:
1
Pk+1 = AT [Pk Pk B(B T Pk B + R) B T Pk ]A + Q,
k = 0, 1, . . .
(15.40)
sendo que a matriz inicial P0 e arbitraria, mas simetrica positiva definida. Vamos
assumir que o par (A, B) e controlavel. Vamos assumir ainda que Q = C T C para uma
matriz C tal que o par (AT , C T ) e controlavel. Entao:
224
a) Existe uma matriz simetrica positiva definida P tal que para qualquer matriz
inicial P0
lim Pk = P
k
Alem disso, P e a solucao u

nica da equacao algebrica de Riccati: P = AT [P
T
1 T
P B(B P B + R) B P ]A + Q.
b) O sistema resultante em malha fechada e estavel, i.e., os autovalores da matriz
1
D = A + BL onde L = (B T P B + R) B T P A est
ao estritamente dentro do
crculo unit
ario.
15.5
Exerccios
EX 15.1: Um certo material e submetido a uma sequencia de dois fornos, conforme a

Figura 15.2. As variaveis sao:
x0 : temperatura inicial do material;
xk (k = 1, 2): temperatura do material na sada do forno k; e
uk1 (k = 1, 2): temperatura interna no forno k.

Assumimos o modelo dinamico da forma:
xk+1 = (1 )xk + uk
k = 0, 1
Onde e um parametro constante e conhecido, sendo que (0, 1). O objetivo

e que a temperatura x2 se aproxime de um valor desejado T , ao mesmo tempo
que se minimiza a energia despendida. Esse objetivo pode ser expresso atraves
da funcao objetivo que segue:
r(x2 T )2 + u0 2 + u1 2
sendo r uma constante positiva. O sistema e determinstico. Aplique o algoritmo
basico de programacao dinamica e obtenha uma regra de controle otima para
operacao do sistema de fornos.
x0
Forno #1
u0
x1
Forno #2
x2
u1
Figura 15.2: Sistema de fornos para aquecimento de materiais

EX 15.2: Verifique que as matrizes Kk , k = N, N 1, . . .,0, sao simetricas e positiva definidas. Utilize o metdo de inducao matematica para desenvolver uma
demonstracao formal.
225
EX 15.3: Uma maquina pode estar em um de dois estados: quebrada ou em operacao.

Se ela trabalha durante uma semana, entao o lucro total obtido e $100. Se ela
quebra durante a semana, entao o lucro e nulo. Se a maquina esta em operacao no
incio da semana e executamos uma manutencao preventiva, a probabilidade dela
falhar durante a semana e 0.4, caso contrario (se nao executamos a manutencao)
a probabilidade de falha sobe para 0.7. Contudo, a manutencao preventiva custa
$20. Quando a maquina esta quebrada no incio da semana, ela pode ser reparada a um custo de $40, podendo neste caso falhar durante a semana com uma
probabilidade 0.4, ou substituir a maquina quebrada por uma nova a um custo de
$150, sendo a probabilidade de falha nula neste caso. Encontre uma poltica de
reparo, substituicao e manutencao preventiva que maximize o custo total durante
quatro semanas. Assuma que na primeira semana a maquina esta em operacao.
EX 15.4: No jogo dos palitos, n = 21 palitos sao colocados sobre a mesa. Voce e
o jogador 1. Seja mk {1, . . . , n} o n
umero de palitos na mesa no incio da
iteracao k. Seja jk {1, 2} o jogador da vez na iteracao k. O valor de j1 e
decidido arbitrariamente (os jogadores decidem quem comeca retirando palitos).
O seu oponente e o jogador 2. A cada iteracao k, o jogador da vez retira lk palitos
tal que lk {1, 2, 3} e lk mk . O jogador que retirar o u
ltimo palito da mesa
perde o jogo.
Formule o jogo dos palitos como um problema de programacao dinamica. Encontre uma poltica de controle otima para o jogador 1, ou seja, encontre uma
funcao (mk ) = lk que dado o n
umero de palitos na mesa na iteracao k retorna
o n
umero de palitos a serem removidos.
EX 15.5: No jogo par-mpar voce devera rolar dois dados. Se a soma dos valores dos
dados for mpar voce ganha R$ 100, caso contrario voce perde R$ 110. Ha dois
dados, A e B, que podem ser escolhidos a cada vez. Voce rola um dos dados,
observa o resultado e depois rola novamente qualquer um dos dados.
Os dados sao distintos, apresentando as seguintes

P (A = 1) = 0.1 P (A = 2) = 0.1
P (A = 4) = 0.3 P (A = 5) = 0.1

P (B = 1) = 0.23 P (B = 2) = 0.1
P (B = 4) = 0.1 P (B = 5) = 0.24
probabilidades:
P (A = 3) = 0.3
P (A = 6) = 0.1
P (B = 3) = 0.23
P (B = 6) = 0.1
Encontre uma poltica de controle otima para este jogo que, dado o valor sk dos
dados na iteracao k, decide qual dado deve ser rolado com o intuito de maximizar
os ganhos. Observe que temos apenas tres iteracoes: s0 = 0 e o valor no incio
do jogo; s1 e igual ao resultado do primeiro dado; e s2 e igual a soma dos valores
dos dois dados.
EX 15.6: Para o pendulo invertido ilustrado na Figura 15.3, a dinamica do movimento
= (0, 0, 0, 0) pelas equacoes
pode ser aproximada em torno do estado (y, y,
, )
diferenciais abaixo :
(M + m)
y + ml = u
(15.41)
2l 2g + y
= 0
226

onde M = 10Kg, m = 0.5Kg, g = 9.8m/s2 , e l = 50cm. Realizar as seguintes
tarefas:
i. Fazendo x1 = y, x2 = y,
x3 = , x4 = e x = (x1 , x2 , x3 , x4 ), obter um
sistema de equacoes diferenciais
x = Ax + Bu
(15.42)
equivalente ao sistema de equacoes (15.41).

ii. Inicialmente, vamos desenvolver o modelo discretizado de (15.42). A partir
da definicao de derivada, temos que:
x(t + T ) x(t)
T 0
T
x(t)
= lim
Para uma constante de amostragem T , a equacao acima pode ser aproximada

fazendo:
x(t)T
= x(t + T ) x(t) x(t + T ) = x(t)T
+ x(t)
x(t + T ) = [Ax(t) + Bu(t)]T + x(t)
x(t + T ) = (I + T A)x(t) + T Bu(t)
Para t = 0, T, 2T, . . . , e estado inicial x(0), podemos expressar a aproximacao discretizada da seguinte forma:
x((k + 1)T ) = (I + T A)x(kT ) + T Bu(kT ),
k = 0, 1, . . .
(15.43)
Obtenha a aproximacao discretizada (15.43) correspondente ao modelo

contnuo (15.41). Utilize uma constante de tempo T = 0.1s. Para matrizes Q = I e R = 0.1I, horizonte de tempo finito N = 6, e condicao
inicial x(0) = [ 0.2 0 0.5 0 ]T , aplique a tecnica LQR de tempo finito para encontrar uma poltica de controle otima. Obtenha a trajetoria
(x(0), x(T ), . . . , x(N T )) induzida pela lei de controle otima . Calcule o
valor de J0 (x(0)) produzido por .
iii. Repita os passos do item anterior, mas desta vez utilize a lei de controle
obtida se assumirmos que o horizonte de tempo e infinito. Compare o custo
induzido pelas polticas de controle e .
EX 15.7: No jogo par-mpar voce devera rolar dois dados. Se a soma dos valores dos
dados for mpar voce ganha R$ 100, caso contrario voce perde R$ 110. Ha
dois dados, A e B, que podem ser escolhidos a cada vez. Voce rola um dos
dados, observa o resultado e depois rola novamente qualquer um dos dados.
Os dados sao distintos, apresentando as seguintes probabilidades:

P (A = 1) = 0.1 P (A = 2) = 0.1 P (A = 3) = 0.3
P (A = 4) = 0.3 P (A = 5) = 0.1 P (A = 6) = 0.1

P (B = 1) = 0.23 P (B = 2) = 0.1 P (B = 3) = 0.23
P (B = 4) = 0.1 P (B = 5) = 0.24 P (B = 6) = 0.1
227
m
V
mg
M H V
Figura 15.3: Pendulo invertido

Encontre uma poltica de controle otima para este jogo que, dado o valor sk
dos dados na iteracao k, decide qual dado deve ser rolado com o intuito de
maximizar os ganhos. Observe que temos apenas tres iteracoes: s0 = 0 e o
valor no incio do jogo; s1 e igual ao resultado do primeiro dado; e s2 e igual
a soma dos valores dos dois dados.
228
Captulo 16
Programac
ao N
ao-Linear Restrita:
Fundamentos e Condico
es de
Otimalidade
Os primeiros captulos do livro se concentraram na minimizacao de funcoes de
m
ultiplas variaveis, onde foram apresentadas condicoes necessarias e suficientes para
que um ponto definisse um otimo local, para problemas em geral e com estrutura
particular, como os problemas convexos. Algoritmos de descenso e de Newton foram
desenvolvidos para resolver tais problemas e tambem encontrar a solucao de sistemas de
equacoes nao lineares. Tanto no caso de minimizacao de funcoes quanto na programacao
dinamica no domnio contnuo, nao se considerou a possvel presenca de funcoes que
caracterizam a regiao factvel. O presente captulo da incio ao estudo dos problemas
de minimizacao de funcoes nao-lineares sob restricoes. Serao apresentados conceitos
fundamentais, exemplos e condicoes de otimalidade local de uma forma gradual.
16.1
Teoria da Otimizac
ao N
ao-Linear sob Restrico
es
Aqui nos concentraremos no problema de minimizar uma funcao sujeita a restricoes.

A formulacao geral do problema e dada abaixo:
P : Minimize f (x)
Sujeito a :
ci (x) = 0
ci (x) 0
x Rn
iE
iI
(16.1)
onde as funcoes f e ci , i I E, sao suaves e de valor real, E e o conjunto dos ndices

das restricoes de igualdade e I e o conjunto dos ndices das desigualdades.
O conjunto de solucoes factveis e definido por:
= {x Rn : ci (x) = 0, i E e ci (x) 0, i I}.
(16.2)
230
16. Programacao Nao-Linear Restrita: Fundamentos e Condicoes de Otimalidade
Assim, podemos reescrever o problema P de uma forma mais compacta:

P : Minimize f (x)
Sujeito a : x
(16.3)
Nas proximas secoes desenvolveremos uma caracterizacao matematica das solucoes para
o problema (16.3).
16.1.1
Solu
c
ao Local Solu
c
ao Global
Ja verificamos que uma solucao global e difcil de ser encontrada, mesmo na ausencia
de restricoes. Esta situacao pode ser melhorada com a introducao de restricoes: as
restricoes podem reduzir o n
umero de mnimos locais. Entretanto, restricoes podem
tornar o problema muito mais difcil. Como um exemplo, considere o problema abaixo:
P1 : Minimize kxk2 2
Sujeito a :
kxk2 2 1
(16.4)
Sem a restricao, P1 e um problema quadratico convexo com um minimizador u

nico
x = 0. Quando a restricao e introduzida, qualquer vetor x com kxk2 = 1 define uma
solucao. Existe um n
umero infinito de solucoes (e portanto um n
umero infinito de
mnimos locais) quando n 2.
O exemplo a seguir mostra que a introducao de uma restricao produz um grande
n
umero de mnimos locais que nao formam um conjunto conexo:
P2 : Minimize (x2 + 100)2 + 0.01x21
Sujeito a :
x2 cos x1 0
(16.5)
Sem a restricao, P2 tem uma solucao otima no ponto (0, 100). Com a restricao, temos
otimos locais proximos dos pontos:
(x1 , x2 ) = (k, 1)
para k = 0, 1, 2,
(16.6)
Dizemos que um vetor x e um

otimo local do problema (16.3) se x e se existe
uma vizinhanca N em torno de x , N = {x Rn : kx x k } para > 0, tal que
f (x) f (x ) para todo x N .
16.1.2
Suavidade das Func

oes
A suavidade da funcao objetivo e das restricoes e uma caracterstica importante

na caracterizacao das solucoes. Ela garante que a funcao objetivo e as restricoes se
comportam de uma forma previsvel, pelo menos localmente, dessa forma permitindo
que algoritmos tomem decisoes corretas com respeito às direcoes de busca. Tipicamente, fronteiras nao suaves podem ser descritas por uma colecao de restricoes suaves.
Considere a regiao da Figura 16.1.
231
x2
1
Regiao Factvel
1
x1
Figura 16.1: Fronteiras nao suaves

A regiao factvel pode ser descrita por uma u
nica restricao nao-suave:
kxk1 = |x1 | + |x2 | 1
(16.7)
tambem pode ser descrita pelas seguintes restricoes suaves:

x1 + x2
x1 x2
x1 + x2
x1 x2
1
1
1
1
(16.8)
Problemas sem restricoes e nao-suaves podem às vezes ser reformulados como problemas suaves com restricoes. Considere o problema abaixo:
P3 : f (x) = M ax{x2 , x}
(16.9)
Podemos obter uma formulacao suave para P3 por meio da adicao da variavel t:
P3 : Minimize t
Sujeito a :
tx
t x2
16.2
(16.10)
Exemplos
Para qualquer ponto factvel x, a desigualdade i I e dita ativa se ci (x) = 0 e

inativa se ci (x) > 0.
232
16.2.1
Uma Restric
ao de Igualdade
Considere o problema abaixo:

P4 : Minimize x1 + x2
Sujeito a :
(16.11)
2
2
x1 + x2 2 = 0 (c1 (x) = 0)
O espaco de solucoes fact veis e o c rculo de raio 2, com o centro na origem, conforme
a Figura 16.2.
x2
c1 (x )
c1 (x )
2
x
x1
x
c1 (x )
c1 (x )
Figura 16.2: Espaco de solucoes

A solucao otima e obviamente x = (1, 1). A partir de qualquer outro ponto do
crculo, podemos mover a solucao dentro do conjunto de solucoes factveis e, ao mesmo
tempo, reduzir o valor da funcao objetivo. Nao e difcil de se verificar que no ponto
x = x ,
f (x) = 1 c1 (x)
(16.12)
para algum 1 . Para o caso em questao, 1 = 12 , conforme segue:
f (x ) = [1, 1]T
c1 (x ) = [2x1 , 2x2 ]T = [2, 2]T
1 = 12
Podemos obter a equacao (16.12) a partir da serie de Taylor. Para manter factibilidade em torno do ponto x, c1 (x + d) = 0, deduzimos que:
c1 (x + d) c1 (x) + c1 (x)T d = c1 (x)T d
(16.13)
Portanto, a direcao mantem factibilidade com respeito a c1 , quando d satisfaz:

c1 (x)T d = 0
(16.14)
233
Similarmente, a direcao de descenso deve reduzir o valor de f , portanto:

0 > f (x + d) f (x) f (x)T d
(16.15)
Conclumos entao que uma direcao de descenso d deve satisfazer as equacoes (16.14)
e (16.15). A Figura 16.3 ilustra uma direcao d que satisfaz ambas as condicoes. A
condicao necessaria de otimaliade para o problema P4 e que nao exista d satisfazendo
as equacoes (16.14) e (16.15) simultaneamente.
c1 (x)
f (x)
= {x : c1 (x) = 0}
x
d
f (x)
Figura 16.3: Direcoes de descenso

A u
nica possibilidade para que nao exista d satisfazendo as equacoes (16.14) e
(16.15) e que f (x) = 1 c1 (x), ou seja, o gradiente de f no ponto x deve ser linearmente dependente de c1 (x).
Embora a condicao (16.12) pareca ser necessaria para que x seja uma solucao otima
do problema P4 , ela nao e suficiente. Por exemplo, o ponto x = (1, 1) com 1 = 21
satisfaz a condicao f (x) = 1 c1 (x), visto que f (x) = [1, 1]T e c(x) = [2, 2]T .
Mas este ponto nao e uma solucaona verdade, este ponto maximiza o valor de f sobre
o c rculo.
16.2.2
Uma Restric
ao de Desigualdade
Considere uma alteracao simples de P4 , obtida ao substituir-se a restricao de igualdade por uma desiguladade:
Sujeito a :
2 x21 x22 0
(16.16)
A regiao fact vel e dada na Figura 16.4.

Podemos observar que o ponto x = (1, 1) continua sendo uma solucao otima,
como no caso da restricao de igualdade. Se x nao e um ponto otimo, entao devemos
ser capazes de encontrar um passo d que, ao mesmo tempo, retenha factibilidade e
decresca o valor da funcao objetivo. A direcao d decresce o valor de f se f (x)T d < 0.
Entretanto, para manter factibilidade, d deve satisfazer:
0 c1 (x + d) c1 (x) + c1 (x)T d c1 (x) + c1 (x)T d 0
234
x2
f (x )
c1 (x )
f (x )
d
x
x1
Figura 16.4: Restricao de desigualdade

Ao considerarmos uma direcao d que satisfaz ambas as condicoes, ou seja,
f (x)T d < 0
(16.17)
c1 (x) + c1 (x)T d 0
(16.18)
podemos levar em conta dois casos.
Caso I: x est
a estritamente dentro do crculo, c1 (x) > 0
Neste caso, qualquer vetor d satisfaz a condicao (16.18) se kdk for pequeno o suf (x)
ficiente. Em particular, sempre que f (x) 6= 0, a direcao d = c1 (x). kf
satisfaz
(x)k
(16.17) e (16.18). A u
nica situacao onde esta direcao falha e quando f (x) = 0.
Caso II: x est
a na fronteira do crculo, de forma que c1 (x) = 0
Portanto, as condicoes (16.17) e (16.18) se tornam:
f (x)T d < 0
(16.19)
c1 (x)T d 0
(16.20)
A primeira das condicoes (16.19) define um meio-espaco aberto, enquanto que a segunda
(16.20) define um meio-espaco fechado, como ilustrado na Figura 16.5.
Ja a Figura 16.6 ilustra uma regiao vazia. Pela figura, e facil de verificar que as
duas regioes, R1 = {d : f (x)T d < 0} e R2 = {d : c1 (x)T d 0}, nao se interceptam
apenas quando f (x) e c1 (x) apontam na mesma direcao, ou seja,
f (x) = 1 c1 (x)
para algum 1 0
(16.21)
235
Regiao de descenso
R1 = {d : f (x)T d < 0} x
f (x)
Regiao de factibilidade
c1 (x)
R2 = {d : c1 (x)T d 0}
R1 R2 6=
Regiao de descenso e factibilidade
Figura 16.5: Regiao de descenso nao vazia

Note que o sinal do multiplicador 1 importa. No caso anterior (restricao de
igualdade), aceitavamos 1 negativo, permitindo que f (x) e c1 (x) apontassem em
direcoes opostas.
Considera
c
oes Finais
As condicoes dos casos I e II podem ser expressas de uma forma simplificada, usando
a funcao Lagrangeana:
L(x, 1 ) = f (x) 1 c1 (x), 1 0
(16.22)
x L(x, 1 ) = f (x) 1 c1 (x) = 0
(16.23)
As condicoes ficam, portanto, definidas como:

f (x) = 1 c1 (x) para algum 1 0
1 c1 (x) = 0
(16.24)
As condicoes (16.24) implicam que o multiplicador Lagrangeano 1 pode ser estritamente positivo apenas quando a restricao correspondente c1 esta ativa. No caso I,
temos c1 (x ) > 0 e a condicao (16.24) se reduz a 1 = 0 e f (x) = 0, como esperado.
No caso II, 1 pode assumir qualquer valor nao negativo, portanto (16.24) se torna
(16.21).
16.2.3
Duas Desigualdades
Adicionamos uma restricao ao problema P5 e obtemos:

Sujeito a :
2 x21 x22 0
x2 0
(16.25)
236

R1 R2 6=
R2 = {d : c1 (x)T d 0}
x
R1 = {d : f (x)T d < 0}
f (x)
c1 (x)
Figura 16.6: Regiao de descenso vazia

para o qual a regiao factvel e o meio-disco ilustrado na Figura 16.7.
x2
R = {x : 2 x21 x22 0
x2 0}
c2 (x)
f (x)
c1 (x)
x1
Figura 16.7: Meio disco
facil verificarmos que a solucao otima e ( 2, 0), um ponto onde ambas as

E
restricoes estao ativas. Usando os argumentos da secao anterior, podemos concluir
que d e uma direcao de descenso, de primeira ordem, se as seguintes condicoes sao
satisfeitas:
ci (x)T d 0 , i I
(16.26)
f (x)T d < 0
(16.27)
A partir da Figura (16.8), podemos verificar que nenhuma direcao d satisfaz as

equacoes (16.26) e (16.27) simultanemamente no ponto x = ( 2, 0).
Vamos definir o Lagrangeano para o problema P5 :
L(x, ) = f (x) 1 c1 (x) 2 c2 (x)
237
R2 = {d : c2 (x)T d 0}
c2 (x)
f (x)
c1 (x)
x
R1 = {d : c1 (x)T d 0}
R3 = {d : f (x)T d < 0}
Figura 16.8: Regiao de descenso vazia

onde = (1 , 2 ) e um vetor com os multiplicadores de Lagrange. Quando nenhuma
direcao de descenso de primeira ordem existe no ponto x , temos que:
x L(x , ) = 0
para algum 0
(16.28)
Ao aplicarmos a condicao de complementaridade a ambas as restricoes, obtemos:

1 c1 (x ) = 0
2 c2 (x ) = 0
(16.29)
Para x = ( 2, 0) temos que:
f (x ) =
1
1

0
2 2
, c1 (x ) =
.
, c2 (x ) =
1
0
Portanto, e facil verificar que x L(x , ) = 0 quando selecionamos como:
2 2
Vamos
agora examinar o comportamento do Lagrangeano em outros pontos. Para
x = ( 2, 0), novamente ambas as restricoes estao ativas. Contudo, f (x) nao esta na
regiao definida por R = {d : ci (x)T d 0 , i = 1, 2}. Ver Figura 16.9.
O ponto d = (1, 0) e uma direcao de descenso de primeira ordem, a qual satisfaz
as condicoes (16.26) e (16.27). Note que:
f (x) =
1
1
c1 (x) =
2x1
2x2

2 2
,
0
c2 (x) =
0
1
238

x2
R = {x : 2 x21 x22 0
x2 }
c2 (x)
f (x)
c1 (x)
x
2
x1
Figura 16.9: Ambas as restricoes

Para x = (1, 0), apenas a restricao c2 esta ativa. Linearizando as restricoes e a
funcao objetivo, uma direcao de descenso deve satisfazer as seguintes desigualdades:
c1 (x) + c1 (x)T d 0
1 + c1 (x)T d 0
c2 (x) + c2 (x)T d 0
c2 (x)T d 0
(16.30)
T
f (x) d < 0
f (x)T d < 0
Nao precisamos nos preocupar com a primeira desigualdade, pois podemos multiplicar
d por uma constante pequena ate que 1 + c1 (x)T d 0.
Observando que,

0
1
e c2 (x) =
f (x) =
1
1
e facil verificar que o vetor d = ( 21 , 14 ) satisfaz (16.30) e portanto e uma direcao de

descenso.
16.3
Condico
es de Otimalidade de Primeira Ordem
Os tres exemplos anteriores sugerem que um n

umero de condicoes sao importantes
na caracterizacao de uma solucao para o problema (16.1):
a) x L(x, ) = 0
b) i 0 para toda a desigualdade ci (x)
c) Condicao de complementaridade i ci (x) = 0
Em geral, o Lagrangeano de um problema de otimizacao com restricoes e definido como:
X
L(x, ) = f (x)
i ci (x)
(16.31)
iEI
O conjunto ativo A(x) para qualquer ponto factvel x e a uniao do conjunto E com os
ndices das desigualdades ativas, ou seja:
A(x) = E {i I : ci (x) = 0}
239
O vetor ci (x) e tipicamente chamado de normal à restricao ci no ponto x, pois este

poss vel, entretanto,
vetor e usualmente perpendicular à fronteira de ci no ponto x. E
que ci (x) desapareca devido à representacao algebrica de ci , de forma que o termo
i ci (x) se anula para qualquer valor de i e, assim, nao desempenha nenhuma funcao
no gradiente do Lagrangeano. Por exemplo, suponha que a restricao de igualdade em
P4 (16.11) seja substituda por:
c1 (x) = (x21 + x22 2)2 = 0
Neste caso, teramos c1 (x) = 0 para qualquer ponto factvel x. Em particular, a
condicao f (x) = 1 c1 (x) nao e mais valida no ponto otimo x = (1, 1).
Tipicamente assumimos que as restricoes satisfazem uma condicao chamada qualificacao de restricao, que garante que o comportamento degenerado visto acima nao
ocorrera. Uma condicao de qualificacao de restricao e dada abaixo.
Defini
c
ao 16.1 Dados um ponto x e seu conjunto ativo A(x ), dizemos que a
condicao linear independence constraint qualification (LICQ) e satisfeita se os gradientes das restricoes ativas {ci (x ) : i A(x )} s
ao todos linearmente independentes.
Note que se LICQ e satisfeita, nenhum gradiente de uma restricao ativa pode assumir valor 0. Com base na condicao LICQ, podemos definir condicoes necessarias de
otimalidade para o problema geral de otimizacao nao-linear sob restricoes:
Minimize f (x)
Sujeito a :
ci (x) = 0 i E
ci (x) 0 i I
x Rn
(16.32)
As condicoes a serem dadas abaixo formam a base de algoritmos a serem vistos

nos proximos captulos. Elas sao chamadas de condicoes de primeira ordem, pois
consideram as propriedades dos gradientes da funcao objetivo e das restricoes.
Teorema 16.1 (Condicoes necess
arias de primeira ordem) Suponha que x e uma
solucao local para (16.32) e que a condicao LICQ e satisfeita por x . Entao existem
multiplicadores de Lagrange , com componentes i , i E I, tal que as seguintes
condicoes s
ao satisfeitas no ponto (x , ):
x L(x , )
ci (x )
ci (x )
i
i ci (x )
=
=
0
0
0
0
0
para
para
para
para
todo
todo
todo
todo
iE
iI
iI
iE I
(16.33)
As condicoes (16.33) sao conhecidas como Karush-Kuhn-Tucker Conditions (KKT

Conditions).
Uma vez que a condicao de complementaridade, i ci (x ) =
240
0 para todo i E I, implica que os multiplicadores de Lagrange associados às restricoes inativas devem ser nulos, podemos reescreve-la como:
X
0 = x L(x , ) = f (x )
i ci (x )
(16.34)
iA(x )
Observa
c
ao: Para um dado problema (16.32), podem existir varios vetores satisfazendo (16.33). Todavia, quando a condicao LICQ e satisfeita, a solucao e u
nica.
16.3.1
Exemplo

Minimize (x1 23 )2 + (x2 12 )4
Sujeito a :
1 x1 x2
1 x1
x2
0
1
x1 x2
1
x1
x2
(16.35)
A regiao factvel e ilustrada na Figura 16.10.

x2
1
Regiao factvel
1
2
x1
Curvas de nvel para f (x)

1
Figura 16.10: Regiao factvel

Com base na figura, podemos nos convencer que a solucao otima e x = (1, 0).
Apenas a primeira e a segunda desigualdades estao ativas em x , A(x ) = {1, 2}.

1
1
1
f (x ) =
, c2 (x ) =
, c1 (x ) =
12
1
1
Portanto, as condicoes KKT sao satisfeitas para = ( 34 , 41 , 0, 0).
16.4
241
Exerccios
EX 16.1: Use as condicoes KKT para mostrar que o problema abaixo possui um
n
umero infinito de otimos locais:
Minimize kxk2
Sujeito a :
kxk2 1, onde k k e a norma Euclidiana.
EX 16.2: O problema abaixo possui um n
umero finito ou infinito de otimos locais?
Use as condicoes KKT para justificar a sua resposta.
Minimize (x2 + 100)2 + 0.01x1 2
Sujeito a :
x2 cos(x1 ) 0
EX 16.3: Quais sao as dificuldades para se resolver o problema abaixo com software
de otimizacao?
Minimize |x| + y 2
x, y
Sujeito a : x2 = 1
Proponha uma formulacao alternativa equivalente para o problema.
EX 16.4: Quais sao as dificuldades para se resolver o problema abaixo com software
de otimizacao?
Minimize Max {|yk dk | : k = 1, 2, 3}
x1 , x2
onde yk = x1 + x2 k, k = 1, 2, 3, e d = (1, 1.5, 1.2). Proponha uma formulacao
alternativa equivalente para o problema.
EX 16.5: Seja f : Rn Rn uma funcao nao-linear contnua e diferencialmente
contnua. Prof. Kunz dispoe de um pacote de otimizacao de funcoes nao-lineares
contnuas que resolve problemas da forma:
Minimize g(x)
x Rn
onde g : Rn R e uma funcao contnua e diferenciavel. Prof. Kunz afirma
que se pode utilizar o pacote de software para encontrar uma raiz para f, ou
seja, x Rn tal que f (x) = 0. Voce concorda ou discorda do Prof. Kunz? Se
voce discorda, mostre porque nao podemos utilizar o pacote de software. Se voce
concorda, mostre como que uma raiz pode ser encontrada.
EX 16.6: Seja f : R R uma funcao nao-linear contnua e diferencialmente contnua.
Prof. Kunz dispoe de um pacote para solucao de sistemas de equacoes e desigualdades nao-lineares, que encontra, caso exista, uma solucao x para:
g(x) < 0
h(x) = 0
242
onde g : R R e h : R R sao funcoes contnuas e diferenciaveis. Prof. Kunz

afirma que se pode utilizar o pacote de software para encontrar um mnimo local
para f (x). Voce concorda ou discorda do Prof. Kunz? Se voce discorda, mostre
porque nao podemos utilizar o pacote de software. Se voce concorda, mostre
como que um mnimo local pode ser encontrado.
EX 16.7: Desenvolva as condicoes KKT para o problema abaixo e obtenha as equacoes
que devem, necessariamente, ser satisfeitas por um mnimo local:
Minimize
n
X
c i xi +
i=1
Sujeito a :
n
X
n
X
gi (xi )
i=1
xj 6 b
i=1
xi > 0, i = 1, . . . , n
onde gi (xi ), i = 1, . . . , n, sao funcoes diferenciaveis.
Captulo 17
Programac
ao N
ao-Linear:
Fundamentos de Algoritmos
Aqui iniciamos a discussao de algoritmos para a solucao do problema geral de
otimizacao sob restricoes.
P : M inimize f (x)
x Rn
Sujeito a :
ci (x) = 0
ci (x) 0
(17.1)
iE
iI
Onde, a funcao objetivo f e as restricoes ci sao funcoes suaves com valores reais, I
e E sao conjuntos de ndices finitos para as restricoes de desigualdade e igualdade,
respectivamente. No captulo anterior desenvolvemos condicoes que caracterizam as
solucoes otimas (Karush-Kuhn-Tucker Conditions). Algoritmos, para serem eficientes,
devem levar em conta propriedades e a estrutura das funcoes que aparecem em (17.1).
Algumas classes de problemas, para os quais existem algoritmos especializados, sao:
a) Programacao Linear
b) Programacao Quadratica
c) Programacao Nao-Linear
A grande maioria dos algoritmos para otimizacao nao-linear e iterativa: eles geram
uma seq
uencia xk de solucoes aproximadas que esperamos que seja convergente a uma
solucao otima local x . Os algoritmos utilizam informacoes sobre a solucao corrente
xk , bem como as derivadas de f e ci , i E I, no processo de obtencao do proximo
iterando, xk+1 .
Estudo Inicial de um Problema
recomendavel o estudo inicial de um problema, no sentido de que simplificacoes
E
podem ser encontradas:
a) Um exame das restricoes pode indicar que a regiao factvel e vazia;
244
17. Programacao Nao-Linear: Fundamentos de Algoritmos
b) A funcao objetivo pode ser ilimitada;

c) Talvez seja possvel identificar quais restricoes estarao ativas na solucao otima,
permitindo o emprego direto das condicoes KKT.
Um aspecto relevante durante a modelagem e a escolha de um algoritmo se refere
aos tipos de restricoes:
Restric
oes Duras Aquelas que devem ser satisfeitas para que os resultados sejam
significativos, e.g. a restricao de que x 0 para que uma outra restricao tal como
x 2 tenha significado; as restricoes duras podem ate mesmo nao ser definidas
fora da regiao de factibilidade.
Restric
oes Flexveis Aquelas que sao definidas mesmo na regiao infactvel.
17.1
Categorizando Algoritmos de Otimizac

ao
17.1.1
O M
etodo da Func
ao Penalidade
Podemos atacar o problema (17.1) por meio da combinacao da funcao objetivo e

das restricoes em uma funcao penalidade, e resolvendo uma seq
uencia de problemas
irrestritos. Se apenas restricoes de igualdade estao presentes, isto e (I = ), entao a
funcao de penalidade pode tomar a forma:
f (x) +
1 X 2
c (x)
2 iE i
(17.2)
Onde > 0 e chamado de parametro de penalidade. Minimizamos a funcao acima,

sem restricoes, para uma serie decrescente de valores de , ate que uma solucao do
problema original seja encontrada.
17.1.2
O M
etodo de Barreiras
Adicionamos à funcao objetivo, termos que sao insignificantes quando x esta seguramente no interior da regiao factvel mas que tendem a + quando x se aproxima
da fronteira da regiao factvel. Se apenas desigualdades estao presentes, a funcao de
barreira logartmica tem forma:
f (x)
log ci (x)
(17.3)
iI
Onde > 0 e dito parametro de barreira.

O minimizador da funcao (17.3) tende para uma solucao do problema original à
medida que se aproxima de zero, sob certas condicoes. Novamente, a estrategia e
encontrar um minimizador aproximado para uma seq
uencia decrescente de valores de
.
17.1.3
245
O M
etodo Lagrangeano Aumentado
Neste metodo procura-se combinar as propriedades da funcao Lagrangeana (17.4)

e da penalidade quadratica (17.2).
L(x, y) = f (x)
i ci (x),
iEI
i 0, i I
(17.4)
Quando o problema (17.2) possui apenas restricoes de igualdade, a funcao Lagrangeana

aumentada toma a forma:
L(x, , ) = f (x)
i ci (x) +
iE
1 X 2
c (x)
2 iE i
(17.5)
Metodos baseados na funcao (17.5) procedem fixando a alguma estimativa dos

multiplicadores de Lagrange otimos e a um valor positivo, depois encontram um valor
x que aproximadamente minimize L(x, , ). O iterando x e utilizado para recalcular
o valor de , permitindo que talvez seja decrescido.
17.1.4
M
etodo Seq
uencial Linear
Esses metodos minimizam, a cada iteracao uma certa funcao Lagrangeana sujeito
a uma linearizacao das restricoes.
17.1.5
Programac
ao Quadr
atica Seq
uencial
A ideia aqui e modelar o problema (17.1) como um subproblema quadratico a

cada iteracao e definir uma direcao de busca como solucao deste subproblema. Mais
especificamente, no caso de existirem apenas restricoes de igualdade, definimos a direcao
de busca pk a cada iterando (xk , k ) como a solucao do problema abaixo.
M inimize
p
Sujeito a :
1 T
p Wk p
2
+ fkT p
(17.6)
Ak p + ck = 0
O objetivo do problema e uma aproximacao da funcao Lagrangeana e as restricoes sao
uma linearizacao das restricoes do problema (17.1). O iterando seguinte e obtido por
meio de uma busca ao longo da direcao pk , obtida a partir da solucao de (17.6), ate
que uma certa funcao merito seja decrescida. Programacao Quadratica Seq
uencial e
considerado um dos metodos mais eficientes na pratica.
17.2
Eliminac
ao de Vari
aveis
Uma abordagem natural e tentar eliminar restricoes de maneira a se obter um

problema irrestrito, ou pelo menos eliminar algumas restricoes e se obter um problema
246
simplificado. Abaixo, ilustramos o procedimento de eliminacao de restricoes em um

exemplo simples:
M inimize f (x) = f (x1 , x2 , x3 , x4 )
Sujeito a :
(17.7)
x1 + x23 x3 x4 = 0
x2 + x4 + x3 = 0
Nao ha risco algum em definirmos:

x1 = x3 x4 x23
x2 = x4 + x23
(17.8)
E trabalhamos com o problema irrestrito:

M inimize f (x3 x4 x23 , x4 + x23 , x3 , x4 )
x3 , x4
(17.9)
O problema (17.9) pode ser resolvido com os metodos estruturados no incio da

disciplina.
17.2.1
Exemplo: Problemas Que Podem Surgir
M inimize x2 + y 2
Sujeito a :
(x 1)3 = y 2
(17.10)
A Figura 17.1 mostra as curvas de nvel para a funcao objetivo e a restricao, a qual
mostra que a solucao otima e (x, y) = (1, 0).
Considere a tentativa de eliminarmos a variavel y e resolvermos o problema irrestrito
abaixo:
M ininize h(x) = x2 + (x 1)3
(17.11)
Claramente h(x) se x . O que aconteceu?

Ao eliminarmos a restricao ignoramos que a restricao (x 1)3 = y 2 implicitamente
impoe a restricao x 1 que esta ativa na solucao otima. Este exemplo ilustra que
a eliminacao de restricoes nao-lineares pode resultar em erros que sao difceis de se
identificar.
17.2.2
Elimina
c
ao de Restric
oes Lineares
Vamos considerar a minimizacao de uma funcao nao-linear sujeita a um conjunto

de igualdades lineares.
M inimize f (x)
Sujeito a :
(17.12)
Ax = b
Onde A Rmn e m n. Suponha que rank(A) = m. Sob essas condicoes, podemos encontrar um subconjunto de m colunas de A que sao linearmente independentes.
247
(x1)^3=y^2
x^2+y^2=4
x^2 + y^2 =1
x*
(1,0)
(2,0)
Figura 17.1: Curvas de nvel das funcoes x2 + y 2 e y 2 = (x 1)3

Podemos reunir essas colunas linearmente independentes na matriz B, definindo uma
matriz P Rnn de permutacao que move as colunas linearmente independentes para
as primeiras colunas de A. Em outras palavras,
AP =
B N
(17.13)
onde N denota as n m colunas restantes.

Definimos os subvetores xB Rm e xN Rnm de forma que:
T
P x=
xB
xN
(17.14)
E dizemos que xB sao as variaveis basicas e xN as variaveis nao-basicas. Notando

que P P T = I, podemos reescrever a restricao Ax = b como:
b = Ax
= AP P T x
= (AP )(P T x)

xB
B N
=
xN
= BxB + N xN
(17.15)
A partir dessa formula, deduzimos que as variaveis basicas sao dadas por:
xB = B 1 b B 1 N xN
(17.16)
248
Podemos entao computar um ponto factvel para as restricoes Ax = b escolhendo

qualquer valor de xN , e entao definindo xB de acordo com a formula (17.16). O problema (17.2) e portanto equivalente ao problema irrestrito que segue abaixo:
1

B b B 1 N xN
M in f (xN ) = f (P
)
(17.17)
xN
Exemplo: Considere o problema abaixo
M inimize
Sujeito a :
sin (x1 + x2 ) + x23 + 31 (x4 + x45 +
x6
)
2
8x1 6x2 + x3 + 9x4 + 4x5 = 6

3x1 + 2x2 x4 + 6x5 + 4x6 = 4
(17.18)
Definimos a matriz P de forma a reordenar os componentes de x como xT =

(x3 , x6 , x1 , x2 , x4 , x5 )T , obtemos:
0 0 1 0 0 0
0 0 0 1 0 0
1 0 0 0 0 0
P =
(17.19)
0
0
0
0
1
0
0 0 0 0 0 1
0 1 0 0 0 0

1 0 8 6 9 4
(17.20)
AP =
0 4 3 2 1 6
A matriz base B e diagonal, portanto facil de se inverter. Com base em (17.16),
obtemos:
x
1

x2
6
x3
8 6 9 4
(17.21)
+
= 3 1 1 3
x3
1
x6
4
2
4
2
x4
Substituindo-se x3 e x6 em (17.18), obtemos o seguinte problema irrestrito:
2
M inimize f (x1 , x2 ,x4 , x5 ) = sin (x1 + x2 ) + (8x1 6x2 + 9x
4 + 4x5 6)

1
3
1
1
3
1
x1 , x2 , x4 , x5
+ 3 x4 + x45 ( 2 + 8 x1 + 4 x2 8 x4 + 4 x5 )
(17.22)
17.2.3
Os Efeitos das Desigualdades
Eliminacao de variaveis nao e sempre recomendada na presenca de igualdades e

desigualdades. Considere o problema a seguir:
M inimize sin (x1 + x2 ) + x23 + 31 (x4 + x25 + x26 )
Sujeito a :
8x1 6x2 + x3 + 9x4 + 4x5 = 6
3x1 + 2x2 x4 + 6x5 + 4x6 = 4
x1 , x2 , x3 , x4 , x5 , x6 0
(17.23)
249
Apos eliminarmos as variaveis x3 e x6 , conforme desenvolvimento anteiro, obteremos

o seguinte conjunto de restricoes:
(x1 , x2 , x4 , x5 ) 0
8x1 6x2 + 9x4 + 4x5 6
3
x + 12 x2 14 x4 + 32 x5 1
4 1
(17.24)
Portanto, o custo de eliminarmos as igualdades foi tornar as desigualdades muito

mais complicadas.
250
Captulo 18
Programac
ao Quadr
atica
Um problema de otimizacao com funcao objetivo quadratica e restricoes lineares e
dito problema de programacao quadratica. Por si so esta classe de problemas e relevante
mas tambem desempenha um papel fundamental em metodos gerais de otimizacao naolinear sob restricoes como, por exemplo, programacao quadratica seq
uencial.
Na sua forma geral, o problema quadratico e expresso como segue:
PQ : Minimize q(x) = 21 xT Gx + dT x
Sujeito a :
aTi x = bi , i E
aTi x bi , i I
(18.1)
onde G e uma matriz simetrica nn, E e I sao conjuntos finitos de ndices de restricoes,
e d, x e ai , i E I, sao vetores coluna com n elementos.
Problemas PQ podem ser resolvidos em um n

umero finito de iteracoes, mas o esforco
computacional depende significativamente das caractersticas da funcao objetivo e do
n
umero de restricoes de desigualdade. Se a matriz Hessiana G e positiva semi-definida,
entao dizemos que (18.1) e um problema quadratico convexo e, neste caso, a solucao do
problema e comparavel à resolucao de um problema de programacao linear. Problemas
quadraticos nao-convexos, quando G e uma matriz indefinida, sao muito mais difceis
de serem resolvidos.
Neste captulo nos concentramos na busca de uma solucao para problemas
quadraticos convexos (ou pontos estacionarios para problemas nao-convexos). O
captulo esta organizado como segue. A Secao 18.1 apresenta o problema de investimento com maximizacao dos retornos e minimizacao dos riscos, o qual pode ser colocado como um problema de programacao quadratica. A Secao 18.2 desenvolve uma
solucao do problema quadratico quando apenas restricoes de igualdade estao presentes. A Secao 18.3 discute brevemente as classes de algoritmos para resolver o problema
quadratico na presenca de desigualdades, bem como condicoes de otimalidade. A Secao
18.4 apresenta do algoritmo de conjunto ativo que generaliza o algoritmo simplex para
programacao linear.
252
18.1
18. Programacao Quadratica
Exemplo: Otimizac
ao de Portofolio
Considere um problema de aplicacoes em fundos de acoes cujas informacoes acerca

dos investimentos sao:
Ha um conjunto N = {1, . . . n} de possveis investimentos.
O investimento i e modelado por uma variavel aleatoria ri com distribuicao normal, tendo valor esperado i = E[ri ] e variancia i2 = E[(ri i )2 ] conhecidos.
Quanto maior o valor da variancia i2 , maior o risco do investimento i.
O investidor deseja aplicar o montante disponvel nos diferentes investimentos sendo
xi a fracao a ser aplicada no investimento i. Da surgem as restricoes:
n
X
xi 0,
i = 1, . . . , n
(18.2)
xi = 1
(18.3)
i=1
Para medir a qualidade de um plano de investimentos (portofolio), que corresponde

ao vetor x Rn , devemos obter uma medida do retorno esperado, sendo este dado por:
R=
n
X
x i ri
(18.4)
i=1
Levando em consideracao que uma variavel aleatoria nao pode ser otimizada diretamente, podemos medir a qualidade do investimento de acordo com o valor esperado,
obtendo portanto a expressao:
E[R] = E[
n
X
i=1
= xT
x i ri ] =
n
X
i=1
xi E[ri ] =
n
X
xi i
i=1
(18.5)
onde = (1 , . . . , n ).
A variancia do retorno total esperado pode ser calculada a partir do coeficiente de
correlacao ij entre pares de variaveis, conforme a expressao:
ij =
E[(ri i )(rj j )]
para todo par i, j
i j
(18.6)
O coeficiente de correlacao ij mede a tendencia de duas variaveis aleatorias ri e rj

tenderem na mesma direcao1 . Dois investimentos que crescem/decrescem juntos tem
1
E[(ri i )(rj j )] e difinido como a covariancia das variaveis aleat

orias ri e rj . Note que se ri
e rj s
ao independentes, ent
ao E[(ri i )(rj j )] = E[(ri i )]E[(rj j )] = 0. Note ainda que
se ri = rj ent
ao E[(ri i )(rj j )] = E[(ri i )2 ] = i2 e, portanto, ij = 1. O coeficiente de
correlacao consiste da normalizacao da covariancia. A correlacao e maxima quando |ij | = 1 e mnima
quando ij = 0.
253
` medida que ij se aproxima de 1, mais similares sao os investicorrelacao positiva. A

mentos i e j. Investimentos que tendem a se mover em direcoes opostas apresentam
correlacao negativa.
Portanto, a variancia do investimento total R e dada por :
E[(R E[R])2 ] =
n X
n
X
xi i j ij xj
i=1 j=1
= xT Gx
(18.7)
sendo a matriz simetrica G Rnn definida como:

Gij = i j ij
(18.8)
A matriz G e positiva semi-definida, todavia nao desenvolveremos uma demonstracao. Estamos interessados em um portofolio cujo retorno total xT seja alto ao
mesmo tempo que a variancia xT Gx seja pequena. No modelo proposto por Markowitz,
combina-se estes dois objetivos em uma u
nica funcao usando o chamado par
ametro
de tolerancia de risco denotado por k. Entao, resolvemos o problema abaixo.
Maximize xT kxT Gx
Sujeito a :
n
P
xi = 1
(18.9)
i=1
x0
O problema (18.9) expressa o desejo de maximizar o retorno e simultaneamente minimizar os riscos incorridos nos investimentos. As restricoes garantem que o vetor x Rn
induz um portofolio.
18.2
Propriedades de Problemas Quadr

aticos com
Apenas Restri
co
es de Igualdade

PQEC : Minimize q(x) = 21 xT Gx + dT x
Sujeito a :
Ax = b
(18.10)
onde: x Rn ; A Rmn ; b Rm , d Rn ; e G Rnn tal que G = GT . Assumimos que

A tem posto completo, ou seja, rank(A) = m. Aplicando as condicoes de otimalidade
de primeira ordem (KKT Conditions), deduzimos que um par solucao multiplicadorLagrange (x, ) deve satisfazer as restricoes abaixo:

Gx + d (T A)T = 0
(18.11)
Ax b =
0
Reescrevendo (18.11) em termos da solucao otima x e do vetor com os multiplicadores de Lagrange , temos:
254
G AT
A
0

d
b
(18.12)
Podemos novamente reescrever (18.12) em uma outra forma que facilita a computacao.
Fazendo x = x + p onde x e uma estimativa da solucao otima, obtemos:

g
p
G AT
(18.13)
=
A 0
onde:
c = Ax b
g = d + Gx, e
p = x x
(18.14)
Lema 18.1 Seja A uma matriz m n, m n, tal que rank(A) = m. Seja Z uma
matriz que define uma base para N ull(A), ou seja, N ull(A) = {Zu : u Rnm }. Se a
matriz Hessiana reduzida Z T GZ e positiva definida, ent
ao a matriz KKT:

G AT
(18.15)
K=
A 0
e n
ao singular e, portanto, o par (x , ) satisfazendo (18.12) e u
nico.
Prova: Se existe (p, ) satisfazendo:

p
G AT
=0
A 0
Entao temos que:
0=
T
G AT
A 0

= pT Gp
Uma vez que Ap = 0, segue que p N ull(A) e p = Zu. Portanto:

uT Z T GZu = 0
e da segue que u = 0 pois Z T GZ tem posto completo (a matriz e positiva definida).
Isto nos leva a concluir que Gp + AT = 0 GZu + AT = 0 AT = 0 = 0
pois as colunas de AT sao linearmente independentes. Portanto, a u
nica solucao de
Kz = 0 e z = 0 e, consequentemente, K e nao singular.
Se (x , ) satisfaz (18.12), entao:

d
x
G AT
d
x
G AT
=
=
b
A 0
b
A
0

d
x
=
K
b
Portanto, o par (x , ) e u
nico pois K e nao singular.
Corol
ario 18.1 Se as condicoes do Lema 18.1 s
ao satisfeitas, ent
ao o vetor x que
satisfaz (18.12) e a solucao global u
nica do problema quadratico (18.10).
255
Exemplo 1
Considere a instancia de PQEC dada a seguir:
Minimize
Sujeito a :
q(x) = 3x21 + 2x1 x2 + x1 x3 + 2.5x22

+2x2 x3 + 2x23 8x1 3x2 3x3
(18.16)
x1 + x3 = 3
x2 + x3 = 0
Podemos reescrever (18.16) na forma (18.10), fazendo:

8
6 2 1
3
1 0 1
e b=
G = 2 5 2 , d = 3 , A =
0
0 1 1
3
1 2 4
A solucao otima x e os multiplicadores de Lagrange otimos sao:

2
3
e =
x = 1
2
1
(18.17)
(18.18)
No exemplo acima, a matriz G e positiva definida e a matriz base do espaco nulo de A

pode ser definida como:

T
Z = 1 1 1
(18.19)
18.2.1
Resolvendo o Sistema KKT
Aqui discutiremos como resolver eficientemente o sistema KKT (18.12) ou (18.13).

A matriz do sistema (18.12), aqui definida por K, pode ser indefinida e portanto a
fatoracao de Cholesky pode nao ser aplicavel. Se K e uma matriz positiva definida,
entao K = LLT onde L e uma matriz triangular inferior, o que nos levaria a obtencao
da solucao u
nica por meio de substituicao direta e retro-substituicao apos o computo
do fator Cholesky L. Caso K nao seja positiva definida, podemos entao utilizar a
eliminacao de Gauss ou a fatoracao LU , encontrando matrizes triangulares L e U tal
que K = LU . Neste u
ltimo caso podemos tambem calcular uma solucao rapidamente
atraves da retro-substituicao e substituicao direta. Vale lembrar que toda a matriz
quadrada nao singular possui uma fatoracao LU .
18.3
Problemas Quadr
aticos Sob Restrico
es
Existem tres grandes classes de algoritmos

1) M
etodo Cl
assico de Conjunto Ativo: pode ser aplicado tanto a problemas
convexos quanto nao-convexos.
2) M
etodo de Projec
ao de Gradiente: tentativa de acelerar o processo de
solucao do metodo de conjunto ativo.
3) M
etodo de Ponto Interior
256
18.3.1
Condi
c
oes de Otimalidade
Relembrando o problema quadratico, desejamos resolver o problema:

Minimize q(x) = 12 xT Gx + dT x
Sujeito a :
aTi x = bi , i E
aTi x bi , i I
(18.20)
Para um ponto otimo x de (18.20), definimos conjunto ativo A(x ) como os ndices
das restricoes que sao satisfeitas com igualdade, ou seja,
A(x ) = {i E I : aTi x = bi }
Desenvolvendo as condicoes KKT para (18.20), obtemos:
X
Gx + d
i ai = 0
(18.21)
(18.22)
iA(x )
aTi x = bi , i A(x )
aTi x bi , i I A(x )
i 0, i I A(x )
(18.23)
(18.24)
(18.25)
Note que se conhecessemos o conjunto de restricoes ativas para o ponto x , A(x ),

entao a solucao de (18.1) se reduziria a encontrar uma solucao do sistema KKT dado
por (18.22)(18.25) que, por sua vez, consiste em se resolver um sistema de equacoes
lineares. Este e o princpio utilizado pelos metodos de conjunto ativo.
18.4
O M
etodo de Conjunto Ativo para Problemas
Quadr
aticos Convexos
Se conhecessemos A(x ) a priori para o ponto otimo x , poderamos resolver (18.1)

por meio dos metodos desenvolvidos para PQ contendo apenas restricoes de igualdade,
conforme formulacao (18.10).
Ja encontramos um metodo de conjunto ativo, o Simplex. Simplex inicia com um
chute para o conjunto ativo (variaveis basicas) e se o chute e incorreto entao o Simplex
iterativamente faz uso de multiplicadores de Lagrange e gradientes de forma a remover
um elemento de A(x ) e introduzir um novo elemento. O metodo de conjunto ativo
para PQ (Programacao Quadratica) difere do Simplex no sentido de que o primeiro
nao necessariamente vai de um vertice da regiao factvel para outro. Alguns iterandos
podem se encontrar em outros pontos da fronteira e ate mesmo no interior. O metodo
de conjunto ativo para PQ pode ser implementado de tres formas:
1) Metodo Primal
2) Metodo Dual
3) Metodo Primal-dual
257
Aqui nos concentraremos no metodo primal, o qual inicia computando uma solucao
factvel x0 e segue gerando iterandos factveis2 . O metodo encontra um passo que transforma o iterando corrente no proximo iterando por meio da solucao de um subproblema
quadratico, no qual um subconjunto das restricoes e imposto como igualdades. Tal subconjunto e referido como conjunto de trabalho e denotado por Wk na k-esima iteracao.
Wk consiste de todas as restricoes de igualdade i E juntamente com algumas, nao
necessariamente todas, as desigualdades ativas.
Dado um iterando xk e um conjunto de trabalho Wk , primeiramente verificamos se
xk minimiza q(x) no subespaco definido pelo conjunto de trabalho Wk . Em caso negativo, calculamos um passo p por meio da solucao do subproblema quadratico tomando
como restricoes de igualdade todas as restricoes do conjunto ativo.
Primeiramente, expressamos o subproblema em termos do passo p, definido por:
p = x xk
gk = Gxk + d
(18.26)
e atraves da substituicao de x na funcao objetivo do problema (18.20) definimos:

1
q(x) = q(xk + p) = pT Gp + gkT p + c
2
(18.27)
onde c = 21 xTk Gxk + dT xk e um termo constante. Uma vez que podemos remover a
constante c da funcao objetivo, sem modificar a solucao do problema, podemos escrever
o subproblema quadratico a ser resolvido na k-esima iteracao como segue:
SPk : Minimize
Sujeito a :
1 T
p Gp
2
aTi p
+ gkT p
= 0,
(18.28)
i Wk
Denotamos a solucao de (18.28) por pk . Note que para cada i Wk o termo aTi x nao
se altera à medida que movemos na direcao pk , uma vez que aTi (xk + pk ) = aTi xk = bi .
Portanto uma vez que as restricoes em Wk sao satisfeitas por xk , elas tambem sao
satisfeitas no ponto xk + pk , qualquer que seja o valor .
Suponha, por um momento, que a solucao otima pk para (18.28) e nao nula. Temos
entao que decidir quao longe seguiremos na direcao dada por pk . Se xk + pk e factvel
com respeito a todas as restricoes, entao definimos xk+1 = xk + pk . Caso contrario,
definimos:
xk+1 = xk + k pk
(18.29)
onde k e o maior passo com valor entre [0, 1) tal que todas as restricoes sao satisfeitas.
Podemos definir uma formula explicita para k considerando apenas as restricoes i
/
Wk , pois toda restricao i Wk sera satisfeita com certeza.
Se aTi pk 0 para algum i
/ Wk , entao para todo k 0 temos que aTi (xk +
k pk ) aTi xk bi , portanto a restricao sera satisfeita.
2
Surge a quest
ao de como encontrar um iterando inicial x0 que seja factvel para o problema (18.20).
De que forma voce encontraria x0 ?
258
Se aTi pk < 0 para algum i

/ Wk , temos que aTi (xk + k pk ) bi somente se:
k
bi aTi xk
aTi pk
(18.30)
Uma vez que k deve ser o maior possvel dentro da faixa [0, 1) e tal que as restricoes
sejam respeitadas, obtemos a seguinte definicao:

bi aTi xk
T
:i
/ W k , ai p k < 0
(18.31)
k = min 1, min
aTi pk
A restricao i na qual o mnimo de (18.31) e obtido e chamada de restricao bloqueante.
Note que e possvel que k seja zero, uma vez que podemos ter uma restricao i que seja
ativa para xk mas nao seja um membro de Wk .
Se k < 1, ou seja, o passo ao longo de pk foi bloqueado por alguma restricao que nao
pertence a Wk , entao um novo conjunto de trabalho Wk+1 e construdo adicionando-se
uma restricao bloqueante a Wk .
Continuamos este processo iterativo, adicionando restricoes ao conjunto de trabalho,
ate que se atinja um ponto x que minimiza o objetivo quadratico sob o conjunto
. E
facil reconhecer tal ponto x pois o subproblema SPk tera uma
de trabalho W
solucao pk = 0. Uma vez que pk = 0 satisfaz as condicoes de otimalidade (18.13) do
subproblema SPk , temos que:
P
i = g
ai
iW
(18.32)
= G
x+d
i, i W
. Segue, portanto, que
para algum conjunto de multiplicadores de Lagrange
satisfazem as condicoes KKT (18.22), isso se definirmos os multiplicadores das
x e
como zero.
restricoes que nao aparecem em W
Uma vez que o controle imposto no comprimento do passo garante a factibilidade
de x com respeito a todas as restricoes, temos que a segunda e a terceira condicao
KKT, (18.23) e (18.24) respectivamente, sao tambem satisfeitas por x.
Agora devemos examinar os sinais dos multiplicadores das restricoes de desigualdade
, ou seja, os ndices i W
I. Se todos estes
contidas no conjunto de trabalho W
multiplicadores sao nao-negativos, a quarta condicao KKT (18.25) e satisfeita e x e um
ponto KKT para o problema original. Se G e positiva semi-definida entao x e tambem
um mnimo local.
j , j W
I e negativo, a condicao (18.25) nao
Por outro lado, se um multiplicador
e satisfeita, entao a funcao objetivo q(x) pode ser reduzida se removermos a restricao
. Neste caso removeremos j de W
para todo j tal que j < 0 e resolvemos um
j de W
novo subproblema (18.28).
O pseudo-codigo completo do algoritmo e dado na seq
uencia.
Algoritmo de Conjunto Ativo
259
Encontre um ponto factvel x0

Defina W0 como um subconjunto das restricoes ativas para x0
Para k = 0, 1, 2, . . .
Resolva o subproblema SPk
Se pk = 0
i que satisfazem (18.32)
Calcule os multiplicadores de Lagrange
= Wk
Defina W
i 0 para todo i Wk I
Se
Pare, a solucao x = xk e otima
Caso contrario
j : j Wk I}
Defina j = argmin {
xk+1 xk
Wk+1 Wk {j}
Fim-Se
Caso contrario (pk 6= 0)
Calcule k a partir de (18.31)
xk+1 xk + k pk
Se ha restricoes bloqueantes
Obtenha Wk+1 adicionando uma restricao bloqueante a Wk
Caso contrario
Wk+1 Wk
Fim-Se
Fim-Se
Fim-Para
18.4.1
Exemplo
Vamos aplicar o algoritmo de conjunto ativo ao problema bidimensional ilustrado

na Figura 18.1 e definido por:
Minimize q(x) = (x1 1)2 + (x2 2.5)2
Sujeito a :
x1 2x2 + 2
0
x1 2x2 + 6 0
x1 + 2x2 + 2 0
x1 , x2
0
(18.33)
Numeramos as restricoes de 1 ate 5.

Itera
c
ao 0: Para esse problema e facil de encontrar um ponto factvel. Digamos que
o ponto inicial e x0 = (2, 0), para o qual as restricoes 3 e 5 estao ativas, portanto W0 = {3, 5}. Note que poderamos ter escolhido W0 = {3}, W0 = {5} e
ate mesmo W0 = , mas cada uma dessas opcoes afetaria o comportamento do
algoritmo.
260
x2
Curva de nvel
da funcao objetivo
(2, 2)
x1 2x2 + 6 = 0
(2)
(1)
(0, 1)
(4, 1)
(4)
(3)
(5)
x1
(2, 0)
Figura 18.1: Regiao factvel e curvas de nvel da funcao objetivo.

Uma vez que x0 corresponde a um vertice da regiao factvel, ele e obviamente
um minimizador da funcao objetivo com respeito ao conjunto de trabalho W0 , ou
seja, a solucao de (18.28) com k = 0 e pk = 0 e, portanto, x1 = x0 . Podemos
entao utilizar (18.32) para encontrar equacoes associadas com as restricoes ativas.
A partir da substituicao dos dados de nosso problema em (18.32) obtemos:

1
2
3 +
0
1
5 =
2
5
(18.34)
3,
5 ) = (2, 1)
cuja solucao e (
Podemos agora remover a restricao 3 do conjunto ativo uma vez que esta apresenta
o multiplicador mais negativo, portanto, W1 = {5}.
Itera
c
ao 1: Iniciamos a iteracao 1 buscando uma solucao de SPk para k = 1, a qual
e p1 = (1, 0). A formula de comprimento de passo (18.31) produz 1 = 1, e um
novo iterando x2 = (1, 0) e obtido.
Nao ha restricoes bloqueantes, portanto W2 = W1 = {5}.
Itera
c
ao 2: Descobrimos no incio da iteracao 2 que a solucao de (18.28) e novamente
p2 = 0, implicando em x3 = x2 = (1, 0). A partir de (18.32) deduzimos que
5 = 5. Assim,
o multiplicador de Lagrange para a u
nica restricao ativa e
eliminamos a restricao 5 do conjunto de trabalho obtendo W3 = .
Itera
c
ao 3: A iteracao 3 tem incio com a solucao do problema irrestrito, pois W3 =
, para o qual obtemos a solucao p3 = (0, 2.5). A formula (18.31) nos da o
comprimento do passo 3 = 0.6 e um novo iterando x4 = (1, 1.5). Ha apenas
uma restricao bloqueante: a restricao 1. Da deduzimos que W4 = {1}.
261
Itera
c
ao 4: A solucao de (18.28) com k = 4 produz p4 = (0.4, 0.2), e o proximo passo
e de comprimento 1. Nao ha restricoes bloqueantes o que deixa o conjunto de
trabalho na sua forma: W5 = {1}. O novo iterando e x5 = (1.4, 1.7).
Itera
c
ao 5: Finalmente, resolvemos SPk com k = 5 o que nos leva a obter a solucao
1 = 1.25. Portanto
p5 = 0. A formula (18.32) nos da o multiplicador de Lagrange
uma solucao foi encontrada.
A solucao otima e x = (1.4, 1.7). A Figura 18.2 ilustra a trajetoria de iterandos,
desde o ponto inicial x0 ate a solucao otima x .
x2
Curva de nvel
da funcao objetivo
(2, 2)
x5
(1)
x1 2x2 + 6 = 0
(2)
x4
(0, 1)
(4, 1)
(4)
x0 , x1
(5)
x2 , x3
(3)
x1 + 2x2 + 2 = 0
(2, 0)
x1
Figura 18.2: Seq

uencia de iterandos.
18.5
Exerccios
EX 18.1: Para o problema abaixo, P , execute as seguintes tarefas:

i) resolva o problema quadratico abaixo graficamente ou utilizando um pacote
do site http://www-neos.mcs.anl.gov/neos/server-solvers.html;
ii) ilustre graficamente o espaco de solucoes factveis e a solucao encontrada;
iii) verifique as condicoes de otimalidade de primeira ordem (as condicoes KKT);
e
iv) aplique o algoritmo de conjunto ativo e verifique que a solucao obtida confere
com àquela obtida no item (i).
262
P : Maximize f (x) = 2x1 + 3x2 + 4x1 2 + 2x1 x2 + x2 2

Sujeito a :
x1 x2 0
x1 + x2 4
x1
3
EX 18.2: O problema de encontrar a menor distancia de um ponto x0 a um hiperplano
{x : Ax = b} onde A e uma matriz com posto de linha completo, A Rmn e
rank(A) = m, portanto n m, pode ser formulado como o problema quadratico
abaixo:
Minimize 21 (x x0 )T (x x0 )
Sujeito a :
Ax = b
Mostre que os multiplicadores de Lagrange otimos sao:
1
= (AAT ) (b Ax0 ).
Usando , encontre a solucao otima x . (Sugestao: aplique as condicoes KKT.)
EX 18.3: Partindo do ponto inicial x0 = (3, 0) e com conjunto ativo A0 = {2} aplique
o algoritmo de conjunto ativo e encontre a solucao global otima do problema:
Minimize k(x1 , x2 )k2
Sujeito a :
c1 (x) = x1 + x2 2 0
c2 (x) = 3 x1 23 x2 0
EX 18.4: Considere o problema de encontrar x Rn tal que:
Minimize kxk
Sujeito a :
Ax = b
onde A Rmn . Prof. Kunz afirma que nao faz sentido resolver este problema
quando ha mais equacoes do que variaveis, ou seja, quando m > n. Voce concorda
ou discorda? Justifique a resposta.
EX 18.5: Prof. Kunz desenvolveu um algoritmo para resolver problemas quadraticos
dados por:
PQ : Minimize q(x) = 12 xT Qx + dT x + c
Sujeito a :
Ax b
onde Q Rnn e uma matriz simetrica e positiva definida, Q = QT e Q > 0.

Suponha que voce tem um problema identico a PQ , exceto que a matriz Q 6= QT .
Prof. Kunz afirma que seu algoritmo e capaz de resolver o problema em questao.
Se voce discorda do Prof. Kunz de um contra-exemplo. Se voce concorda, mostre
como que o algortimo de Kunz pode ser utilizado.
263
EX 18.6: Considere o problema de programacao quadratica:

m
P : Minimize
w, b, e
Sujeito a :
cX 2
1 T
e
w w+
2
2 i=1 i
yi = wT (xi ) + b + ei , i = 1, . . . , m
onde:
c e uma constante positiva;
(x) : Rn Rp e um funcao dada, tipicamente uma funcao nao-linear de

x Rn ;
(xi , yi ) Rn R, i = 1, . . . , m, sao pares entrada-sada de uma funcao f (x)
desconhecida que estamos tentando aproximar por f(x, w, b) = wT (x) + b;
ei = yi f(xi , w, b) = yi (wT (xi ) + b) e o erro de aproximacao para o
i-esimo par; e
w Rp e b R sao os parametros que definem a aproximacao f.
Fazendo uso do Lagrangeano de P , mostre que a solucao otima de P satisfaz a

relacao:

0
b
0
1T
=
y
1 Q + c1 I
com y = (y1 , . . . , ym )T , 1 = (1, . . . , 1)T , = (1 , . . . , m )T e Qij = (xi )T (xj ) =

k(xi , xj ) para i, j = 1, . . . , m. Este tipo de aproximacao e conhecido como Support
Vector Machine. A funcao k(x, x ) e denominada de kernel. Dois tipos de kernel
sao:
i. polinomio de ordem q: k(x, x ) = (1 + xT x )q
ii. kernel de base radial: k(x, x ) = exp(
kxx k22
)
2 2
EX 18.7: Considere a matrix (n + 1) (n + 1) conhecida por matrix de borda dada

por:

A u
(18.35)
G=
uT a
onde A e uma matriz n n, u Rn1 e a R. Conhecendo A1 , desejamos
encontrar uma forma rapida de calcular G1 . Seja a inversa de G estruturada
como:

B q
1
(18.36)
G =
qT b
Fazendo B = A1 +bA1 uuT A1 e b = 1/(auT A1 u), encontre q tal que (18.36)
defina a inversa de G.
264
Captulo 19
Programac
ao N
ao-Linear sob
Restri
c
oes: Algoritmos
Os captulos anteriores apresentaram fundamentos de otimizacao nao-linear sob
restricoes, estabelecendo condicoes de otimalidade local de primeira ordem e desenvolvendo algoritmos para resolver problemas quadraticos. Este captulo tem foco em
algoritmos para resolver problemas gerais desta classe de problemas.
19.1
Algoritmos
Aqui nos concentraremos em algoritmos para resolver (encontrar solucoes otimas

locais) o problema geral de programacao nao-linear:
Minimize f (x)
x n
Sujeito a :
ci (x) = 0,
ci (x) 0,
(19.1)
iE
iI
onde as funcoes sao suaves. Uma classe importante de algoritmos, a serem vistos a
seguir, busca uma solucao para (19.1) atraves da solucao de uma seq
uencia de subproblemas irrestritos.
19.2
O M
etodo de Barreira Logartmica
Os metodos de barreira logartmica resolvem uma serie de problemas irrestritos,

aproximando o problema original, que no limite se tornam equivalentes ao problema
original. O metodo de barreira usa uma funcao de penalidade (barreira) que cresce
rapidamente à medida que o ponto corrente se aproxima da fronteira da regiao de
factibilidade, dessa forma garantindo factibilidade da solucao corrente. A cada iteracao,
a penalidade e reduzida para permitir que a solucao otima seja alcancada.
266
19. Programacao Nao-Linear sob Restricoes: Algoritmos
19.2.1
Propriedades das Func

oes de Barreira Logartmica
Iniciamos a discussao por meio de uma ilustracao das funcoes de barreira para
problemas com apenas restricoes de desigualdade.
Minimize f (x)
x
Sujeito a : ci (x) > 0, i I
(19.2)
A regiao de factibilidade estrita e definida por

F 0 = {x Rn : ci (x) > 0, para todo i I}
(19.3)
Assumimos que F 0 e nao-vazia para o proposito desta discussao. Funcoes barreira para
este problema tem as seguintes propriedades:
a) elas sao infinitas em qualquer lugar, menos em F 0 .
b) elas sao suaves dentro de F 0 .
c) O valor delas se aproxima de à medida que x se aproxima da fronteira de F 0 .
A funcao barreira mais importante e a funcao barreira logartmica, que para o conjunto
de restricoes ci (x) > 0, i I, assume a forma:
X
log ci (x)
(19.4)
iI
onde log(y) denota o logaritmo natural de y. Para o problema (19.2), a funcao combinada objetivo-barreira e dada por:
X
P (x, ) = f (x)
log ci (x)
(19.5)
iI
onde > 0 e dito parametro barreira. Daqui em diante, vamos nos referir a P (x, )
como funcao barreira logartmica do problema (19.2).
Exemplo 1
Considere o problema abaixo em uma variavel.
Minimize
Sujeito a :
x
x > 0
1x > 0
(19.6)
Para o qual temos:

P (x, ) = x log x log (1 x)
(19.7)
A Figura 19.1 ilustra P (x, ) para = 1.0, 0.4, 0.1, 0.01. Naturalmente, para valores
pequenos de , a funcao P (x, ) se aproxima da funcao objetivo f na maior parte
da regiao factvel; a funcao P (x, ) tende para + nas proximidades da fronteira.
267
0.4
0.1
=
0
0.1
0.2
0.3
0.4
0.5
0.6
0.7
0.8
0.01
0.9
Figura 19.1: Curvas de nvel da funcao P (x, ) = x log x log(1 x) para

{0.01, 0.1, 0.4, 1}
Na Figura 19.1, a curva P (x, 0.01) e quase indistinguvel de f (x) para a resolucao da
figura, mas a funcao tende para + nos extremos.
evidente que quando 0, o minimizador x() de P (x, ) se aproxima da
E
solucao x = 0 do problema (19.6). Uma vez que o minimizador x() de P (x, )
esta dentro de F 0 , podemos em princpio executar uma busca utilizando algoritmos de
minimizacao irrestritos. Infelizmente, o minimizador x() torna-se progressivamente
mais difcil de ser encontrado à medida que 0.
Exemplo 2
Minimize
Sujeito a :
x1 +

1 2
2
x1 [0, 1]
x2 [0, 1]
+ x2

1 2
2
(19.8)
Para o qual a funcao barreira e:

2
P (x, ) = (x1 + 12 )2 + x2 21
[log x1 + log (1 x1 ) + log x2 + log (1 x2 )]
(19.9)
As curvas de nvel da funcao (19.9) sao ilustradas na Figura 19.2 para os valores = 22,
= 5 e = 2. A partir da figura, observamos que as curvas de nvel se aproximam
da curva de uma parabola à medida que 0. As curvas de nvel que envolvem
o minimizador, (x1 = 0, x2 = 21 ), nos casos onde = 22 e = 5 nao sao muito
alongadas, sendo quase elpticas. Neste caso podemos aplicar metodos de minimizacao
268
irrestrita sem maiores problemas. Para o valor = 2, entretanto, as curvas de nvel sao
mais alongadas e menos elpticas quando o minimizador x() e deslocado em direcao à
fronteira da funcao barreira. O carater alongado das curvas de nvel indica normalizacao
pobre, acarretando baixo desempenho de metodos de otimizacao irrestritos, como por
exemplo, o algoritmo de descenso.
0.8
0.6
= 22
0.4
0.2
0.2
0.4
0.6
0.8
0.4
0.6
0.8
0.4
0.6
0.8
0.8
0.6
= 5
0.4
0.2
0.2
0.8
0.6
0.4
= 2
0.2
0.2
Figura 19.2: Curvas de nvel da funcao P (x, ) = (x1 +

(log x1 + log(1 x1 ) + log x2 + log(1 x2 )) para {22, 5, 2}
19.2.2
1 2
)
2
+ (x2
1 2
)
2
Algoritmo Baseado na Func

ao Barreira Logartmica
Os algoritmos baseados na funcao barreira logartmica procuram aproximar os minimizadores de P (x, ) para uma seq
uencia decrescente de valores .
Algoritmo Log-Barrier (Esbo
co)
269
Dados o > 0, toler^

ancia > 0 e um ponto inicial xS0
Para k = 0, 1, 2, ... fa
ca
Encontre um minimizador aproximado xk para P (., k )
tomando como ponto de partida xSk e
terminando com kP (xk , k )k 6 .
Se o crit
erio final de converg^
encia foi satisfeito ent~
ao pare,
retorne a solu
ca
~o aproximada xk .
Escolha um novo par^
ametro barreira k+1 (0, k ).
Escolha um novo ponto inicial fazendo xSk+1 = xk .
Fim-Para
Para garantir que o metodo de Newton convirja rapidamente para o minimizador

x(k ), as seguintes tecnicas podem ser utilizadas:
a) Utilize tecnicas que garantem convergencia global, como busca direcional e mecanismos de regiao de confianca. Essas tecnicas devem garantir que os iterandos
permanecam dentro da regiao factvel F 0 .
b) Um ponto inicial xSk promissor para P (x, k ) pode ser obtido extrapolando-se ao
longo do caminho definido pelos minimizadores xk1 , xk2 , . . ..
Varias heursticas foram propostas para a escolha do parametro de barreira k+1 a
cada iteracao. Um ingrediente tpico e fazer escolhas ambiciosas para k+1 (digamos
k+1 = 0.2k ou k+1 = 0.1k ) se o problema de minimizacao P (x, k ) nao foi tao
difcil de ser resolvido na u
ltima iteracao e se um ponto inicial xSk+1 pode ser produzido
com certa confianca.
O algoritmo basico descrito acima ainda nao se tornou um algoritmo de uso geral,
nao permitindo que uma resposta definitiva sobre a qualidade das heursticas seja dada
sem testes extensivos.
19.2.3
Propriedades da Func
ao Log-Barrier e Algoritmo Geral
Teorema 19.1 Suponha que f e ci , i I, sejam convexas em (19.2) e a regiao

factvel F 0 seja n
ao-vazia. Seja {k } uma sequencia decrescente, e assuma que o
conjunto de solucoes M para o problema (19.2) seja n
ao-vazio e limitado. Entao as
seguintes afirmacoes s
ao verdadeiras:
i) Para qualquer > 0, P (x, ) e convexo em F 0 e admite um minimizador x()
(n
ao necessariamente u
nico) em F 0 . Qualquer minimizador x() e tambem um
minimizador global para P (x, ).
ii) Qualquer seq
uencia de minimizadores x(k ) tem uma subseq
uencia convergente,
e todos os possveis pontos de acumulacao pertencem a M .
iii) f (x(k )) f e P (x(k ), k ) f para qualquer seq
uencia de minimizadores
{x(k )}.
270
Para problemas mais gerais, o resultado correspondente e mais local por natureza.
Dada uma solucao local x bem comportada do problema (19.2), isto e, uma solucao
x que satisfaca as condicoes suficientes de segunda-ordem, as restricoes e ainda as
condicoes de complementaridade, a funcao barreira P (x, ) apresenta um minimizador
proximo de x para valores suficientemente pequenos de .
Teorema 19.2 Suponha que F 0 e uma regiao n
ao-vazia e que x e uma solucao para o
problema (19.2), o qual satisfaz as condicoes KKT (Karush-Kuhn-Tucker) para algum
. Suponha tambem que a condicao LCG de qualificacao de restricoes seja garantida, bem como a condicao de complementaridade estrita e as condicoes suficientes de
segunda ordem.
Entao, as afirmacoes abaixo s
ao verdadeiras:
i) Existe uma funcao vetorial x() contnua, u
nica e diferenci
avel, definida para
todo suficientemente pequeno em funcao de que x() e um minimizador local
de P (x, ) em uma certa vizinhanca de xk , tal que lim0 x() = x .
ii) Para a funcao x() em (i), o estimador () dos multiplicadores de Lagrange
definidos por
i ()
,i I
(19.10)
ci (x())
convergem para `
a medida que 0.
iii) A matriz Hessiana 2xx P (x, ) e positiva definida para todo suficientemente
pequeno.
A trajetoria cp definida por
cp {x() : > 0}
(19.11)
e frequentemente referenciada como Caminho Central (ou Caminho Central Primal).
19.2.4
Manipulando Restric
oes de Igualdade
Ate este momento assumimos que o problema apresenta apenas restricoes de desigualdade e que F 0 e nao-vazio. Aqui discutimos um procedimento que nos permite
aplicar a tecnica de Barreira Logartmica ao problema geral 19.1.
Nao podemos simplesmente reescrever ci (x) = 0 como duas desigualdades ci (x) > 0
e ci (x) > 0, ja que isto tornaria F 0 vazio. Uma forma de tratar as restricoes de
igualdade e incluir termos quadraticos de penalidade para estas restricoes na funcao
objetivo. Se assumimos, por um momento, que o coeficiente da penalidade quadratica
e 1 , onde e o parametro barreira, entao a funcao barreira logartmica/penalidade
quadratica a ser minimizada para cada valor e:
B(x, ) f (x)
X
iI
log ci (x) +
1 X 2
c (x)
2 iE i
(19.12)
Como esperado, as propriedades desta funcao combinam as propriedades da funcao

barreira logartmica e da funcao penalidade quadratica.
271
O algoritmo geral apresentado na secao 19.2.2 pode ser estendido de forma que
reducoes sucessivas de e minimizacoes aproximadas de B(x, ) nos levam a uma
solucao para 19.1.
19.3
M
etodo Lagrangeano Aumentado
Este metodo tende a produzir sub-problemas menos mal-condicionados do que aqueles gerados pelo metodo de barreira logartmica. As implementacoes podem ser construdas a partir de software padrao para otimizacao irrestrita. O metodo de multiplicadores e a base de implementacoes praticas de alta qualidade, como Lancelot por
exemplo.
19.3.1
Motivac
ao e Estrutura do Algoritmo
Consideramos inicialmente o problema com restricoes de igualdade:

Minimize f (x)
Sujeito a : ci (x) = 0, i E
(19.13)
A funcao penalidade quadratica Q(x; ) penaliza as violacoes das restricoes elevando

ao quadrado as infactibilidades e normalizando-as com o fator 1 . Mas a penalidade
Q(x; ) apresenta problemas de condicionamento. Nesse sentido, a funcao Lagrangeana
aumentada busca evitar problemas de condicionamento ao introduzir explicitamente os
estimadores dos multiplicadores de Lagrange à funcao penalidade quadratica. A funcao
Lagrangeana aumentada e definida como:
def
LA (x, ; ) = f (x)
i ci (x) +
iE
1 X 2
c (x)
2 iE i
(19.14)
Primeiramente, vamos nos lembrar da funcao Lagrangeana padrao e da funcao de

penalidade quadratica.
L(x, ) = f (x)
Q(x; ) = f (x) +
i ci (x)
(19.15a)
iE
1 X 2
c (x)
2 iE i
(19.15b)
Observa-se que a funcao Lagrangeana aumentada (19.14) difere da funcao Lagrangeana padrao devido à presenca da penalidade quadratica, e tambem difere da funcao
penalidade quadratica (19.15a) devido à presenca do termo com os multiplicadores de
Lagrange. Assim, LA e uma combinacao de (19.15a) e (19.15b).
Diferenciando-se LA com respeito à x, obtem-se:

X
ci (x)
ci (x)
(19.16)
x LA (x, ; ) = f (x)
i
iE
272
A seguir, vamos desenvolver um algoritmo que fixa o parametro barreira a um

certo valor k > 0 na k-esima iteracao, semelhante ao algoritmo apresentado na secao
(19.2.2), fixa na estimativa corrente k , e executa minimizacao com respeito a x.
Usando xk para denotar o minimizador aproximado de LA (x, ; ) e fazendo uso de
certos resultados teoricos, podemos deduzir que
i ki
ci (xk )
para todo i E
k
(19.17)
Rearranjando (19.17), obtemos:

ci (xk ) k i ki
para todo i E
(19.18)
Portanto, podemos concluir que se k e proximo do multiplicador otimo , entao a

infactibilidade em xk sera muito menor do que k , nao sendo mais proporcional a k .
Como poderamos atualizar a estimativa k de uma iteracao para a seguinte, de
forma que a estimativa gradualmente se aproxime de , tendo como base a informacao
corrente? A equacao (19.17) sugere a formula:
k+1
= ki
i
ci (xk )
para todo i E
k
(19.19)
A discussao acima nos leva a um algoritmo geral:

Algoritmo Lagrangeano Aumentado
Dados 0 > 0, toler^
ancia 0 > 0, ponto inicial x0s e 0
Para k = 0, 1, 2, . . .
Encontre um minimizador aproximado xk para LA (., k ; k ),
partindo de xks
Se o teste de converg^
encia final
e satisfeito,
ent~
ao pare e retorne a solu
ca
~o aproximada xk
Atualize os multiplicadores de Lagrange utilizando a f
ormula
ci (xk )
k+1
k
i = i k para i E
Escolha novas penalidades k+1 (0, k )
Defina o ponto inicial para a pr
oxima itera
ca
~o como xk+1
= xk
s
19.3.2
Exemplo

Minimize x1 + x2
Sujeito a :
x21 + x22 2 = 0
(19.20)
Para o problema (19.20), a funcao Lagrangeana Aumentada correspondente e:

LA (x, ; ) = x1 + x2 (x21 + x22 2) +
1 2
(x1 + x22 2)2
2
(19.21)
273
Sabemos que a solucao otima x = (1, 1) e que o multiplicador de Lagrange otimo e

= 21 . Suponha que na iteracao k, temos k = 1 enquanto que a estimativa do multiplicador de Lagrange e k = 52 . O Minimizador de LA (x, 0.4; 1) e aproximadamente
xk = (1.02; 1.02), que e mais proximo de x do que o minimizador de Q(x; 1), que
e aproximadamente (1.1, 1.1).
1.5
0.5
0.5
1.5
1.5
0.5
0.5
1.5
Figura 19.3: Curvas de nvel da funcao LA (x, 0.4, 50)
19.3.3
Extens
ao para Restric
oes de Desigualdade
O primeiro passo para tratar o problema geral e substituir as desigualdades ci (x) >
0, i I, por
ci (x) si = 0, si > 0 para todo i I
(19.22)
Podemos tratar das restricoes si > 0, i I, diretamente no subproblema Lagrangeano
de maneira a eliminarmos as variaveis de folga si , i I. Por razoes de simplicidade,
vamos assumir que nao ha restricoes de igualdade (E = ). A introducao das variaveis
de folga produz o seguinte problema:
Minimize f (x)
x, s
Sujeito a : ci (x) si = 0, si > 0, i I
(19.23)
Ao estabelecermos a funcao Lagrangeana aumentada em termos das restricoes ci (x)

si = 0 e aplicando as restricoes si > 0 explicitamente, obtemos o seguinte subproblema
a ser resolvido na iteracao k do algoritmo apresentado na secao 19.3.1:
Minimize
LA (x, ; ) = f (x)
iI
x, s
Sujeito a : si > 0 para todo i I
i (ci (x) si ) +
1
2
iI
(ci (x) si )2
(19.24)
274
Note que cada si ocorre em dois termos de (19.24), que de fato e uma funcao convexa com respeito às variaveis de folga. Podemos portanto executar uma minimizacao
explcita em (19.24) com respeito a cada si . A derivada parcial da funcao objetivo de
(19.24) com respeito a si e:
1
ki (ci (x) si )
(19.25)
k
O minimizador irrestrito de (19.24) com respeito a si ocorre quando as derivadas parciais sao nulas, ou seja,
si = ci (x) k ki
(19.26)
Se o minimizador irrestrito e menor do que 0, entao porque (19.24) e convexa, o valor
otimo de si e 0. Resumindo, obtemos os valores otimos para si :

si = max ci (x) ki , 0 para todo i I
(19.27)
Podemos utilizar a formula (19.27) para eliminarmos s do subproblema (19.24).

Isolando-se si em (19.24), temos que:
1
(ci (x) si )2 =
ki (ci (x) si ) +
2
1
ki ci (x) + 2 c2i (x),
2 (ki )2 ,
se ci (x) ki 6 0
caso contrario
Definimos a funcao (t, ; ) cujos argumentos sao escalares, de maneira a representar a logica de (??)
1
t + 2 t2 , se t 6 0
(19.28)
(t, ; ) =
2
caso contrario
2 ,
e utilizando-se a funcao , pode-se expressar o subproblema transformado como:
P
(ci (x), ki ; k )
Min LA (x, ; ) = f (x) +
(19.29)
iI
x
A definicao (19.29) de LA e uma extensao natural do Lagrangeano aumentado para

caso de desigualdades. Com esta extensao podemos aplicar o algoritmo delineado na
Secao (19.3.1) para o caso de desigualdades, mas com uma pequena modificacao: tao
logo uma solucao aproximada xk de (19.29) seja obtida, utilizamos a formula abaixo
para atualizar os multiplicadores de Lagrange:

ci (xk )
k+1
k
i = max i
,0
para todo i I
(19.30)
k
Observa
c
oes: Cada funcao (ci (x), i ; ) e continuamente diferenciavel com respeito
a x, mas ha em geral uma descontinuidade na segunda derivada com respeito a x sempre
que ci (x) = i para algum i I. Entretanto, quando a condicao de complementaridade e satisfeita (se apenas um dos termos i e ci (x ) e nulo), o minimizador xk de
cada subproblema (19.29) usualmente nao e proximo da regiao de descontinuidade.
19.3.4
275
Propriedades do Lagrangeano Aumentado
Dois resultados encontrados na literatura justificam o uso do Lagrangeano aumentado e dos algoritmos desenvolvidos.
Quando o valor exato dos multiplicadores de Lagrange sao conhecidos, entao
a solucao otima x do problema (19.13) e tambem um minimizador estrito de
LA (x, ; u) para u suficientemente pequeno.
Embora nao conhecamos na pratica, os resultados mostram que podemos
obter uma solucao x muito proxima de x ao minimizarmos LA (x, ; u), mesmo
quando u nao esta particularmente proximo de zero, desde que seja uma boa
estimativa de .
19.4
Programac
ao Linear Sequencial
A ideia principal por tras da programacao linear sequencial (PLS) esta na geracao
de um passo por meio da minimizacao do Lagrangeano sujeito a uma linearizacao das
restricoes.
Aqui nos concentraremos no problema de optimizacao nao-linear sob restricoes de
igualdade, por razoes de conveniencia. Para o problema (19.13), o subproblema PLS
assume a forma:
Minimize Fk (x)
x
Sujeito a : ci (xk )T (x xk ) + ci (xk ) = 0 i E
Existem diferentes escolhas para Fk (x). Os primeiros metodos definiam:
X
Fk (x) = f (x)
ki cki (x)
(19.31)
(19.32)
iE
onde:
ki e a estimativa corrente de i ; e
cki (x) e a diferenca entre ci (x) e sua linearizacao no ponto xk , ou seja,
k
k T
k
ck
i (x) = Ci (x) ci (x ) ci (x ) (x x )
(19.33)
possvel mostrar que à medida que xk se aproxima de x , os multiplicadores de

E
Lagrange associados com (19.31) convergem para os multiplicadores otimos. Portanto,
tomamos os estimadores de k dados em (19.33) como os multiplicadores do subproblema (19.31) na iteracao anterior.
Com o intuito de se obter convergencia a partir de pontos iniciais remotos, os
metodos PLS mais populares utilizam o Lagrangeano aumentado com Fk :
Fk (x) = f (x)
X
iE
ki cki (x) +
1 X k
[
c (x)]2
2 iE i
(19.34)
276
onde e um parametro positivo de penalidade.

Metodos PLS sao utilizados em problemas de larga-escala, sendo o modelo (19.34)
incorporado na funcao objetivo em implementacoes bem-sucedidas como MINOS. Uma
vez que as computacoes a cada passo exigem a minimizacao do subproblema nao-linear
(19.31), varias iteracoes se fazem necessarias e portanto, varias avaliacoes de funcoes e
restricoes para gerar um novo iterando. Mesmo assim, o n
umero de iteracoes e menor
do que em outros metodos.
O ponto fraco dos metodos PLS e a exigencia de resolver os subproblemas com
grande exatidao, para garantir que os multiplicadores de Lagrange sejam de boa qualidade. Apesar da programacao quadratica sequencial ser considerada superior, algoritmos classicos como Minos que implementam o metodo PLS estao entre os melhores
algoritmos.
19.5
Programac
ao Quadr
atica Sequencial
Um dos metodos mais eficientes para resolver problemas de optimizacao nao-linear

sob restricoes y programacao quadratica sequencial (SQP, sequential quadratic programming), produz passos para o iterando corrente por meio da solucao de problemas quadraticos. Diferentemente de programacao linear sequencial, que e mais eficaz
quando as restricoes sao lineares, SQP e robusto em problemas com nao-linearidades
significativas nas restricoes.
19.5.1
O m
etodo SQP Local
Vamos iniciar a discussao considerando o problema nao-linear com restrico es de

igualdade:
M inimize
f (x)
Sujeito a :
(19.35)
C(x) = 0
Onde f : Rn R e c : Rn Rm sao funcoes suaves. Problemas que contem
apenas restricoes de igualdade nao sao muito comuns na pratica, mas um entendimento
de 19.35e crucial para o desenvolvimento de algoritmos para o caso geral.
A ideia de SQP advem do uso de um modelo quadratico de aproximacao de 19.35
em torno do iterando xk . A solucao deste subproblema nos da o proximo iterando,
xk+1 .
O desafio esta em se projetar o subproblema quadratico de forma que se obtenha
um bompasso para o problema 19.35, dessa forma induzindo convergencia rapida e
robusta para um mnimo local.
Talvez a forma mais simple de se obter o metodo SQP e deriva-lo da aplicacao do
metodo de Newton para as condicoes KKT.
A partir da aplicacao das condicoes KKT, sabemos que o Lagrangeano de 19.35 e
dado por:
L(x, ) = f (x) T C(x)
(19.36)
Utilizaremos A(x) para denotar a matriz Jacobiana das restricoes, ou seja:
A(x)T = [C1 (x), ..., Cm (x)]
277
(19.37)
onde Ci (x) e o i-esimo componente de C(x). Especializando-se as condicoes KKT para

o caso de igualdades, obtemos um sistema com n + m equacoes e n + m variaveis x e :

f (x) A(x)T
=0
(19.38)
F (x, ) =
C(x)
Um algoritmo consiste em se utilizar o metodo de Newton para o sistema nao-linear

19.38. A matriz Jacobiana de 19.38 e dada por:

W (x, ) A(x)T
(19.39)
A(x)
0
onde W denota a matriz Hessiana do Lagrangeano:
W (x, ) = 2xx L(x, )
O passo de Newton a partir do iterando (xk , k ) e obtido como segue:

xk+1
xk
Pk
=
+
k+1
k
P
onde Pk eP resolvem o sistema KKT abaixo:

Wk ATk
Pk
fk + ATk k
=
Ak
P
Ck
(19.40)
(19.41)
(19.42)
F (xk + Pk , k + Pk ) F (xk , k ) + F (xk , k )[Pk , P ]T = 0

Pk
= F (xk , k )
F (xk , k )
P
equivalente a 19.42.
A iteracao definida por 19.42 e conhecida como metodo de Newton-Lagrange,
sendo bem-definida quando F e uma matriz nao-singular. A nao-singularidade desta
matriz e uma consequencia das condicoes estabelecidas abaixo.
Condi
c
ao: 19.5.1
i. A matriz Jacobiana das restricoes Ak tem posto de linha completo.
ii. A matriz Wk e positiva definida no espaco tangente das restricoes, i.e., dT wk d > 0
para todo d 6= 0 tal que Ak d = 0.
A premissa (1) advem da condicao de cualificacao de independencia das restricoes.
A premissa (2) e satisfeita quando (x, ) e proximo do otimo (x , ) e as condicoes
suficientes de segunda-ordem sao satisfeitas pela solucao.
Sob as condicoes acima estabelecidas, o algoritmo de Newton 19.41 e 19.42 converge
quadraticamente para o otimo local, constituindo um otimo algoritmo para resolver problemas nao-lineares sob restricoes de igualdade, isto se o ponto inicial x0 esta proximo
do otimo local x .
278
19.5.2
Linhas Gerais do M
etodo SQP
Ha uma abordagem alternativa a iteracao 19.41, 19.42. Para o iterando (xk , k )

definimos o problema quadratico abaixo:
1 T
P Wk P
2
M in
P
+ fkT P
(19.43)
Sujeito a :
(19.44)
Ak P + Ck = 0
Se as condicoes 19.5.1 sao satisfeitas, entao 19.43 possui uma solucao u

nica (Pk , k )
que satisfaz:
Wk Pk + fk ATk k = 0
(19.45)
Ak Pk + Ck = 0
(19.46)
Uma observacao importante e que Pk e k podem ser identificados com a solucao

das equacoes de Newton 19.42.
Se subtrairmos Ak k de ambos os lados da primera equacao de 19.42, obtemos:

Wk Pk ATk P = fk + ATk k
Ak Pk = Ck

Wk Pk ATk P ATk k = fk
Ak Pk = Ck
Wk Pk ATk (P + k ) = fk
Ak Pk = Ck
Mas k+1 = k + P , portanto obtemos:
Wk ATk
Ak
0

Pk
k+1
fk
Ck
(19.47)
Portanto, devido a nao-singularidade da matriz de coeficientes, temos que P = Pk e

k+1 = k . Vamos nos referir a este resultado como equivalencia entre SQP e o metodo
de Newton: se as condicoes 19.5.1 sao garantidas, entao o proximo iterando (xk+1 , k+1 )
pode ser definido em termos de:
i. a solucao do problema quadratico 19.43 ou
ii. o iterando gerado pelo metodo de Newton 19.41, 19.42.
Essas interpretacoes alternativas sao muito u
teis.
A interpretacao em termos do metodo de Newton facilita a analise, enquanto que
a estrutura do SQP nos permite derivar algoritmos praticos no ambito de restricoes de
igualdade.
Na sua forma mais simples, o metodo SQP pode ser especificado como segue:
279
ALGORITMO 19.5.2 (Algoritmo SQP local)

Escolha um ponto inicial (x0 , 0 )
Para k = 0, 1, 2, ..., faca
Calcule fk , fk , Wk = W (xk k ), Ck , eAk
Resolve o problema 19.43, obtendo Pk ek
xk+1 xk + Pk
k+1 k
Se o criterio de convergencia e satisfeito
Pare e retorne a solucao aproximada (xk+1 , k+1 )
Fim-se
Fim-para
facil de se estabelecer um resultado de convergencia local para este algoritmo,
E
uma vez que sabemos que este e equivalente ao metodo de Newton aplicado ao problema
F (x, ) = 0. Mais especificamente, se as condicoes 19.5.1 sao satisfeitas pela solucao
(x , ) de 19.35, se f e c sao duas vezes diferenciaveis satisfazendo a condicao Lipschitz,
e se o ponto (x0 , 0 ) e suficientemente proximo de (x , ),entao os iterandos gerados
pelo algoritmo acima convergem quadraticamente para (x , ).
19.5.3
Restric
oes de desigualdade
O algoritmo SQP geral pode ser facilmente estendido para o caso geral de programacao nao-linear:
M inimizef (x)
(19.48)
Sujeito a :
Ci (x) = 0,
iE
(19.49)
Ci (x) 0,
(19.50)
Para definir o subproblema, agora linearizamos tanto as restricoes de igualdade

quanto as de desigualdade de forma a se obter:
M inimize
1 T
P Wk P + fkT P
2
(19.51)
Sujeito a :
Ci (xk )T P + Ci (xk ) = 0
iE
(19.52)
Ci (xk ) P + Ci (xk ) 0
(19.53)
Podemos entao utilizar um dos algoritmos de programacao quadratica existente na

literatura, tal como o algoritmo de conjuntos ativos.
Um metodo SQP local segue portanto do algoritmo 19.5.2, com uma pequena modificacao: o passo Pk e a estimativa do multiplicador de Lagrange k+1 sao definidos
conforme solucao do problema 19.51.
O resultado a seguir mostra que esta abordagem eventualmente identifica o conjunto
ativo otimo para o problema 19.48.
280
Teorema 19.5.3.1 Suponha que x e uma solucao para 19.48. Assuma que a matriz
Jacobiana Ak do conjunto de restricoes ativas no ponto x possui posto de linha cheio,
e que dT W d > 0 para todo d 6= 0 tal que A d = 0, e que complementaridade estrita e
garantida. Entao se (xk , k ) e suficientemente pr
oximo de (x , ), existe uma solucao
local do subproblema 19.51 cujo conjunto ativo Ak e identico ao conjunto ativo A(x )
do problema n
ao-linear 19.48 no ponto x .
19.5.4
Implementac
ao de SQP
Existema pelo menos duas formas de se implementar SQP.

A primera abordagem resolve a cada iteracao o subproblema quadratico 19.51, tomando o conjunto ativo na solucao deste subproblema como uma estimativa
do conjunto ativo otimo. Essa abordagem e denotada por IQP (InequalityConstrained QP), a qual tem tido sucesso na pratica. A dificuldade esta em
resolver um problema quadratico a cada iteracao, mas pode ser mitigado se utilizamos um bom ponto de partida para a solucao (hot-start).
A segunda abordagem seleciona um subconjunto das restricoes a cada iteracao para
atuar como conjunto de trabalho, resolvendo apenas subproblemas com igualdades, ignorando-se as demais restricoes. O conjunto de trabalho e atualizado a
cada iteracao atraves de regras baseadas nos estimadores dos multiplicadores de
Lagrange. Esta abordagem, denotada por EQP, tem a vantagem de tratar apenas
de subproblemas quadraticos com restricoes de igualdade, o que e computacionalmente mais facil.
19.6
Exerccios
EX 19.1: Aplique o algoritmo de barreiras para resolver o problema abaixo e ilustre

graficamente as suas iteracoes:
Minimize f (x) = 3x1 2x2
Sujeito a :
g1 (x) = 1 x1 + 2x2
g2 (x) = 2 x1 + x2
g3 (x) = 6 2x1 + x2
g4 (x) = 5 x1
g5 (x) = 16 2x1 x2
g6 (x) = 12 x1 x2
g7 (x) = 21 x1 2x2
g8 (x) = 10 x2
g9 (x) = x1
g10 (x) = x2
0
0
0
0
0
0
0
0
0
0
Passos sugeridos:
1) Encontre uma solucao inicial x0 que pertenca ao interior da regiao factvel
281
2) Obtenha a funcao barreira b(x; ) = f (x)

3) Execute o algoritmo abaixo:
P10
k=1
log(gk (x))
Seja x0 o iterando inicial

Seja 1 a penalidade inicial, por exemplo 1 = 10
Seja t = 1 o n
umero de iteracao
Seja > 0 um n
umero proximo de zero definindo o criterio de parada
Repita enquanto a condicao de parada nao for satisfeita
Encontre o mnimo xt de b(x, t ) usando como ponto inicial xt1
Se kxt xt1 k < , entao pare e retorne a solucao xt
Faca t+1 (0, t ), por exemplo faca t+1 = 0.7t
Fim-repita
Observa
c
ao: se o algoritmo for implementado em Matlab, faca uso da funcao
fminsearch e tambem reduza o parametro de tolerancia TolX para 108 .
EX 19.2: Elipsoides sao conjuntos convexos com amplo emprego em otimizacao convexa [27]. Alem da conveniencia computacional, eles podem ser empregados
para aproximar outros conjuntos convexos ou nao convexos. Uma representacao
padrao de um elipsoide E e:
E = {x : (x x0 )T A1 (x x0 )}
onde A = AT e uma matriz positiva definida, e x0 Rn e o centro do elipsoide.
A Figura 19.4 da uma ilustracao de elipsoide no R2 . Os eixos doelipsoide tem
direcoes dadas pelos autovetores de A, com comprimento dado por i onde i e o
autovalor
associado ao i-esimo autovetor. O volume do elipsoide e proporcional a
p
det(A). Note que i > 0 pois A e positiva definida. Note tambem que det(A) =
det(U T U ) = det(U T )det()det(U
) onde U 1 = U T e = diag(1 , . . . , n ).
Qn
Logo, det(A) = det() = i=1 i (pois det(U T ) = 1/det(U )). Em verdade, um
elipsoide E pode ser representado equivalentemente nas formas abaixo:
p
1) E = {x : (x x0 )T A1 (x x0 )}, com volume det(A).
2) Imagem de uma bola unitaria sob uma transformacao afim: E = {Bu + x0 :
kuk 1} com volume det(B).
3) Pre-imagem de uma bola unitaria sob uma transformacao afim: E = {x :
kAx bk 1} com volume det(A1 ).
4) Subnvel de um conjunto quadratico degenerado: E = {x : f (x) 0} onde

T
f (x) = xp
Cx + 2dT x + e com C = C T positiva definida, e dT C 1 d < 0, e
volume det(A).
Mostre como se pode converter entre representacoes.
282
x0
Figura 19.4: Elipsoide
Refer
encias Bibliogr
aficas
[1] E. Aart and J. Korst. Simulated Annealing and Boltzmann Machines. Wiley, New
York, 1989.
[2] M. Agarwal. A systematic classification of neural-network-based control. IEEE
Control Systems Magazine, 17(2):7593, 1997.
[3] R. K. Ahuja, T. L. Magnanti, and J. B. Orlin. Network Flows. Prentice-Hall,
Upper Saddle River, New Jersey, 1993.
[4] R. J. Aumann and S. Hart. Handbook of Game Theory with Economic Applications,
volume 1. North-Holland, Amesterdan, 1992.
[5] D. O. Awduche, J. Malcom, J. Agogbua, J. ODell, and J. McManus. Requirements
for traffic engineering over MPLSrequest for comments, September 1999.
[6] S. N. Balakrishnan and R. D. Weil. Neurocontrol: A literature survey. Mathematical Modeling and Computing, 23:101117, 1996.
[7] T. Basar and G. J. Olsder. Dynamic Noncooperative Game Theory. Society for
Industrial and Applied Mathematics, 1999.
[8] M. S. Bazaraa, H. D. Sherali, and C. M. Shetty. Nonlinear Programming Theory
and Algorithms. John Wiley, 1993.
[9] D. P. Bertsekas. Nonlinear Programming. Athena Scientific, 1995.
[10] A. E. Bryson and Y.-C. Ho. Applied Optimal Control. Blaisdell, 1969.
[11] V. Chvatal. Linear Programming. W. H. Freeman, 1983.
[12] T. H. Cormen, C. E. Leiserson, and R. L. Rivest. Introduction to Algorithms. MIT
Press, Cambridge, Massachusetts, 1990.
[13] L. Costa and P. Oliveira. Evolutionary algorithms approach to the solution of
mixed integer non-linear programming problems. Computers and Chemical Enginnering, 25:257266, 2001.
[14] Charles Darwin. On the origin of species by means of natural selection, or the
preservation of favoured races in the struggle for life. 1859.
[15] L. Davis. Handbook of Genetic Algorithms. Van Nostrand Reinhold, 1991.
284
Referencias Bibliograficas
[16] J. E. Dennis and J. J. More. Quasi-Newton methods, motivation and theory.

SIAM Review, pages 4688, 1977.
[17] R. A. Dias, E. Camponogara, J.-M. Farines, R. Willrich, and A. Campestrini.
Implementing traffic engineering in MPLS-based IP networks with lagrangean relaxation. In Proceedings of the 8th IEEE Symposium on Computers and Communications, 2003.
[18] R. A. Dias, J.-M. Farines, E. Camponogara, R. Willrich, and A. Campestrini. Engenharia de trafego dinamica em redes IP com tecnologia mpls: otimizacao baseada
em heursticas. In Anais do XXII Simp
osio Brasileiro de Redes de Computadores,
2004.
[19] P. J. Flemming and R. C. Purshouse. Evolutionary algorithms in control systems
engineering: a survey. Control Engineering Practice, 10:12231241, 2002.
[20] R. Fourer, D. M. Gay, and B. W. Kernighan. AMPL: A Modeling Language for
Mathematical Programming. Duxbury Press, 2002.
[21] M. R. Garey and D. S. Johnson. Computers and Intractability: A Guide to the
Theory of NP-Completeness. W. H. Freeman and Company, 1979.
[22] Philip E. Gill, Walter Murray, and Margaret H. Wright. Practical Optimization.
Academic Press, October 1981.
[23] M. Girish, B. Zhou, and J.Q. Hu. Formulation of the traffic engineering problems
in MPLS based IP networks. In Proceedings of the IEEE Symposium on Computers
and Communications, 2000.
[24] D. Goldberg. Genetic Algorithms in Search, Optimization, and Machine Learning.
Addison Wesley, 1989.
[25] C. Gueret, C. Prins, and M. Sevaux. Applications of optimization with Xpress-MP.
Dash Optimization, Englewood Cliffs, NJ, 2002.
[26] M. Hagan and H. Demuth. Neural networks for control. In Proceedings of the American Control Conference, pages 16421656, San Diego, CA, June 1999. Invited
Tutorial.
[27] H. Hindi. A tutorial on convex optimization. In Proceedings of American Control
Conference, pages 32523265, Boston, Massachusetts, June 2004.
[28] J. Holland. Adaptation in Natural and Artificial Systems. University of Michigan
Press, 1975.
[29] K. J. Hunt, D. Sbarbaro, R. Zbikowski, and P. J. Gawthrop. Newural networks
for control systems a survey. Automatica, 28:10831112, 1992.
[30] N. Karmakar. A new polynomial-time algorithm for linear programming. Combinatorica, pages 373395, 1984.
285
[31] S. Kirkpatrick. Optimization by simulated annealing: Quantitative studies. Journal of Stastical Physics, 34:975986, 1984.
[32] S. Kirkpatrick, C. D. Gelatt, and M. P. Vecchi. Optimization by simulated annealing. Science, 220:671680, 1983.
[33] S. M. LaValle. Robot motion planning: a game-theoretic foundation. Algorithmica,
26:430465, 2000.
[34] E. L. Lawler. Combinatorial Optimization: Networks and Matroids. Holt, Rinehart
and Winston, New York, 1976.
[35] M. Mesterton-Gibbons. An Introduction to Game-Theoretic Modelling. American
Mathematical Society, 2000.
[36] N. Metropolis, A. Rosenbluth, M. Rosenbluth, A. Teller, and E. Teller. Simulated
annealing. Journal of Chemical Physics, 21:10871092, 1953.
[37] M. Minsky and S. Papert. Perceptrons. MIT Press, 1969.
[38] T. M. Mitchell. Machine Learning. McGraw-Hill, 1997.
[39] J. Nocedal and S.J. Wright. Numerical Optimization. Springer-Verlag, 1999.
[40] D. A. Pomerlau. Robot Learning, chapter Knowledge-based training of artificial
neural networks for autonomous robot driving, pages 1943. Kluwer Academic
Publishers, 1993.
[41] H. D. Sherali. On mixed-integer zero-one representations for separable lowersemicontinuous piecewise-linear functions. Operations Research Letters, 28:155
160, 2001.
[42] R. J. Vanderbei. Linear Programming: Foundations and Extensions. Kluwer
Academic Publishers, second edition, 2001.
[43] H. P. Williams. Model Building in Mathematical Programming. John Wiley, 4th
edition, 1999.
[44] L. A. Wolsey. Integer Programming. John Wiley & Sons, 1998.
[45] S. J. Wright. Primal-Dual Interior-Point Methods. Society for Industrial and
Applied Mathematics, 1997.
[46] H. Yaiche, R. R. Mazumdar, and C. Rosenberg. A game theoretic framework for
bandwidth allocation and pricing in broadband networks. IEEE/ACM Transactions on Networking, 8(5):667678, October 2000.
286
Ap
endice A
Exerccios Resolvidos
288
A. Exerccios Resolvidos
A.1
Introduc
ao `
a Otimizac
ao
EX 1.1: Seja x o n
umero de unidades do produto x a serem produzidas, enquanto
y e o n
umero de unidades do produto y. O problema pode ser colocado em
programacao matematica como:
Maximize x + y
x, y
Sujeito a:
50x + 24y
30x + 33y
x
y

B
I
40 60
35 60
75 30
95 90
= 2400
= 2100
=
45
=
5

d
.
0
eb=
a) Basta fazer A =

d
B
podemos reduzir o problema em consie b =
b) Fazendo A =
g
F
deracao ao problema de mnimos quadrados.

B
d
c) Faca A =
eb=
.
2F
2g
EX 1.2:
d) Primeiramente, a funcao a ser minimizada pode ser colocada na forma

kA1 x b1 k2 + kA2 x b2 k2 + kA3 x b3 k2 , onde

1 0
0
0
2 0
, b1 = 0 ,
A1 = 0
0
3
0 0

A2 = 1 1 1 , b2 = [1],

A3 = 1 4 0 , b3 = [2].
Por fim, basta fazer
b1
A1
A = A2 e b = b2
b3
A3
para se obter um problema de mnimos quadrados.

EX 1.3: O problema de encontrar a altura e raio da lata pode se expresso em programacao nao-linear com restricoes:
P : M inimize f (r, h) = 2(r2 + 2rh)
r, h
Sujeito a :
r2 h 500
possvel eliminar a restricao de desigualdade? O problema e do tipo convexo?
E
Pode-se obter uma solucao fechada para o problema, sem fazer uso de um metodo
de otimizacao?
289
EX 1.4: Seja (xm , ym ), m = 1, . . . , M , as coordenadas das caixas de abastecimento e

seja yt a linha onde o tubo mestre sera implantado. Em programacao matematica,
o problema pode ser colocado como:
Minimize f (yt ) =
M
P
m=1
yt
|yt ym |
possvel transQuais sao as dificuldades para se resolver o problema acima? E

forma-lo em um problema de programacao linear? Sera que a solucao yt obtida por mnimos quadrados, em vez de norma-1, resultara na mesma solucao
aPsolucao por mnimos quadrados consiste na minimizacao da funcao f (yt ) =
M
2
m=1 (ym yt ) .
EX 1.5: Seja xij = 1 se a posicao (i, j) do tabuleiro e ocupada por uma rainha e,
caso contrario, xij = 0. Seja n = 8 o n
umero de colunas e tambem de linhas do
tabuleiro. O problema pode entao ser colocado em programacao linear inteira:
Maximize
n
n P
P
xij
i=1 j=1
Subjeito a:
n
P
i=1
n
P
xij 1,
j = 1, . . . , n
xij 1,
i = 1, . . . , n
xi,i+k 1
k = 0, . . . , n 2
xi+k,i 1
k = 1, . . . , n 2
xi,ni+1k 1
k = 0, . . . , n 2
xi+k,ni+1 1
k = 1, . . . , n 2
j=1
nk
P
i=1
nk
P
i=1
nk
P
i=1
nk
P
i=1
xij {0, 1}
i = 1, . . . , n
j = 1, . . . , n
EX 1.6: Sendo z(x, y) o vetor de decisao, o problema e encontrar z tal que:

kz z1 k = d1
kz z2 k = d2
Equivalentemente, podemos expressar o problema como:
k(x, y) (x1 , y1 )k2 = d21
k(x, y) (x2 , y2 )k2 = d22
290
A.2
Minimiza
c
ao de Funco
es com o M
etodo de Descenso
EX 2.1: Pode-se verificar que:

400(x2 x21 )x1 2 + 2x1

200(x2 x21 )
f (x) =
1200x21 400x2 + 2 400x1

400x1
200
f (x) =
400x31 400x1 x2 2 + 2x1

200x2 200x21
e que
2
Observando que f (x) 0 para qualquer x, o menor valor que esta pode assumir
e f (x ) = 0. Uma vez que x = (1, 1) e tal que f (x ) = 0, conclumos que x e
um otimo global. Note que para x1 6= 1 ou x2 6= x21 tem-se f (x) > 0, portanto x
e u
nico. Pode-se calcular o gradiente e a Hessiana no ponto x , obtendo:
f (x ) =
0
0
e f (x ) =
802 400
400 200
Logo, x satisfaz as condicoes necessarias e suficientes pois f (x ) = 0 e 2 f (x )

e positiva definida.
EX 2.2: Primeiramente, obtemos o gradiente de f :
f (x) =
8 + 2x1
12 4x2
= 0 x1 = 4 e x2 = 3.
Dessa forma, x = (4, 2) e o u

nico ponto que satisfaz as condicoes de otimalidade
de primeira ordem. Calculando a Hessiana neste ponto, obtemos
2
f (x ) =
2 0
0 4
Sendo 2 f (x ) indefinida, conclumos que x nao e um ponto maximo nem

mnimo local.
EX 2.3: f1 (x) = c e 2 f1 (x) = 0. f2 (x) = 12 Ax + 12 AT x e 2 f2 (x) = 21 AT + 12 A.
Se A for simetrica, entao f2 (x) = Ax e 2 f2 (x) = A.
Como exemplo, seja f2 (x) dada pela matriz:
A=
a11 a12
a21 a22
291
Entao fica facil de verificar que:

x1
a11 a21
+
f2 (x) =
x2
a12 a22

x1
2a11
a12 + a21
, e
=
x2
a12 + a21
2a22

a11 a21
a11 a12
2
+
f2 (x) =
a12 a22
a21 a22

2a11
a12 + a21
=
a12 + a21
2a22

EX 2.4:
a11 a12
a21 a22

x1
x2
a) h(x1 + (1 )x2 ) = f (x1 + (1 )x2 ) + g(x1 + (1 )x2 ) f (x1 ) +

(1 )f (x2 ) + g(x1 ) + (1 )g(x2 ) = h(x1 ) + (1 )h(x2 ), logo h(x) e
convexa.
b) h(x) = f (x) g(x) pode nao ser convexa. Para f (x) = x e g(x) = x2
obtemos h(x) concava.
c) h(x) = f (x)2 nao e necessariamente convexa. Para f (x) = x2 30 pode-se
verificar que h(x) nao e convexa.
d) Para f (x) = x verifica-se f (x) 0 no domnio x 0. Contudo, h(x) e uma
funcao concava no domnio x 0.
EX 2.5: Para o problema definido por
Q=
0, 9561 0, 6888
0, 6888 0, 6044
eb=
1
2
o algoritmo de descenso produziu a seguinte lista iterandos

54, 5022
6, 1911
19, 3641
19, 1041
19, 1750
19, 1736
19, 1739
19, 1739
30, 3585
8, 4746
24, 8628
25, 0717
25, 1599
25, 1611
25, 1615
25, 1615
que esta ilustrada na Figura ??. Na implementacao, o passo do algoritmo foi

calculado de forma otima, simplesmente fazendo a derivada da funcao f (xk +
k pk ) = f (k ) igual zero.
EX 2.7: Seja A = (I Q)2 0. Note que A = AT e, portanto, existe uma fatorizacao
A = U T U onde U 1 = U T , = diag(1 , . . . , n ) e i , i = 1, . . . , n, sao os
292
autovalores de A. Logo, temos:

xT (I Q)2 x = xT Ax
= xT U T U x
= z T z
n
X
=
zi2 i
=
=
=
=
[z = U x]
i=1
zi2 max{
(A)}
max{ (A)}z T z
max{ (A)}(xT U T U x)
max{ (A)}kxk2
max{ (I Q)2 }kxk2
EX 2.8: Fazendo Q = U T U onde = diag((Q)), basta verificar que (I k Q)2 =

(I k U T U )2 = (U T U k U T U )2 = [U T (I k )U ]2 = U T (I k )U U T (I
k )U = U T (I k )2 U . Portanto, os autovalores de (I k Q)2 ) sao iguais a
(1 k i )2 .
EX 2.12: As respostas sao dadas abaixo.
i. Prof. Kunz esta correto. Note que f (x) = 2/(ex ex )2 . Observe ainda que
f (x) = 0 apenas quando x ou x , ou seja, limx f (x) =
limx f (x) = 0. Logo nao existe mnimo local pois f (x) = 0 e condicao
necessaria.
ii. Correto, pois todo mnimo local x de uma funcao contnua diferenciavel deve
satisfazer a condicao necessaria f (x) = 0.
iii. Prof. Kunz se equivocou. Considere a funcao f (x) = x3 4x2 10x.

Apesar de f admitir um mnimo local x = 3.594118, limx f (x) = .
Conclumos que f nao admite um ponto de otimo global; a funcao e ilimitada
por baixo.
iv. A afirmacao esta incorreta. Para f (x) = x3 tem-se f (x) = 3x2 e f (x) = 6x.
Para x = 0 verificamos que f (x) = 0 e f (x) = 0 (x satisfaz as condicoes
necessarias de segunda ordem) contudo x nao e um mnimo local. Para
qualquer x > 0 podemos verificar que f (x x) < f (x) e, da, deduzimos
que existe x = x x na vizinhanca de x com valor inferior.
v. Prof. Kunz esta correto. A condicao f (x) 0 para todo x implica f

ser convexa. Uma vez que as condicoes necessarias de primeira ordem sao
tambem suficientes conclumos que a afirmacao procede.
x
2
vi. Observe que f (x) = x+2
e e f (x) = 6+4x+x
ex . Note que para
3
x
x4
x R = [1, ), f (x) > 0 f e convexa. Assim, se existir um mnimo

local x R entao obrigatoriamente x e um mnimo global. Prof. Kunz esta
correto.
293
vii. Prof. Kunz se equivocou nesta afirmacao. Seja f (x, y) = x2 + y 2 e g(x, y) =

x + y o que implica h(x, y) = x2 + y 2 + x + y. Note que h e convexa e
podemos encontrar um mnimo global (
x, y) fazendo:

x = 1/2
2
x+1
=0
h(
x, y) =
y = 1/2
2
y+1
Apesar de (
x, y) ser um mnimo global para h, (
x, y) nao e mnimo local de
f , muito menos ainda um mnimo de g que nao tem mnimo local.
294
A.3
M
etodo de Newton
EX 3.1: Para encontrarmos as regioes de convergencia e divergencia podemos, inicialmente, descobrir a regiao em que o metodo de Newton tem comportamento
cclico. Para funcao f (x) = arctan(x), o operador de Newton e definido por
xk+ = xk
arctan(xk )
f (xk )
= xk
f (xk )
1/(1 + x2k )
(A.1)
Seja x um iterando qualquer e x+ o iterando seguinte. Para que o metodo de

Newton entre em laco infinito, se faz necessario que |x+ x | = |x x | sendo
f (x ) = 0. Ha duas possibilidades: (i) x+ x = x x , que implica x+ = x
e portanto x define uma raiz; (ii) x+ x = (x x ). Vamos entao analisar
o segundo caso, quando x+ x = x + x . Substituindo (A.1) e sabendo que
x = 0, deduzimos que:
x (1 + x2 ) arctan(x) = x 2x (1 + x2 ) arctan(x) = 0
(A.2)
Portanto, um ponto em que o metodo de Newton entra em ciclo infinito e precisamente uma solucao para (A.2). As solucoes de (A.2) sao
1.39174520027073, 0 e 1.39174520027073. Logo, o metodo de Newton diverge
para x0 (, 1.39174520027073) (1.39174520027073, ) e converge para
x0 (1.39174520027073, 1.39174520027073). O metodo entra em ciclo infinito
para x0 {1.39174520027073, 1.39174520027073}.
EX 3.2: Com x(0)
=
(1, 1) o metodo converge para x
=
(0)
(0.69684555124075, 0.28559372228403). Com x
= (1, 1) o metodo converge para x = (0.69684555124075, 0.28559372228403). Com x(0) = (1, 1) e
x( 0) = (1, 1) o metodo nao converge. As solucoes do sistema de equacoes
nao-lineares estao ilustradas na Figura A.1.
EX 3.3: Seja F (x) = 0 o sistema de equacoes nao-lineares no espaco das variaveis x.
A partir de um iterando inicial x0 , o metodo de Newton e dado por:
xk+1 = xk F (xk )1 F (xk ),
k = 0, 1, . . .
Seja x = H(y) uma funcao de y onde H(y) = Sy. A solucao do sistema F pode
ser colocado no espaco de y como:
G(y) = 0, onde G(y) = F (H(y))
Portanto,
G(y) = F (H(y) = x F (x).y H(y) = F (x).S
O metodo de Newton em y fica:

y k+1 =
=
=
=
=
=
y k G(y k )1 G(y)
y k [F (Sy k )S]1 F (Sy k )
y k S 1 F (Sy k )1 F (Sy k )
S 1 xk S 1 F (xk )1 F (xk )
S 1 [xk F (xk )1 F (xk )]
S 1 xk+1
[Por inducao xk = Sy k ]
295
1
x
0.8
log(x2 + 2x2 + 1) 1/2 = 0
0.6
0.4
O
0.2
2
x2x1 + 0.2 = 0
0.2
0.4
0.6
0.8
1
1
0.8
0.6
0.4
0.2
0.2
0.4
0.6
0.8
1
x
Figura A.1: Solucoes do sistema de equacoes nao-lineares
Logo xk+1 = Sy k+1 como se esperava.

EX 3.4: Seja x uma solucao do sistema de equacoes lineares. Existe solucao pois
rank(A) = m. Seja B Rmnm uma base do espaco nulo de A. Entao podemos
escrever qualquer solucao x como x = x + By, o que nos leva a colocar P na
forma abaixo:
P : Minimize f (y) = k
x + By ck2
nm
yR
Logo, reduzimos P a um problema P sem restricoes.
Note que f (y) = 2B T x +2B T By2B T c e 2 f (y) = 2B T B. Uma vez que B tem
posto de coluna completo, conclumos que 2 f (y) e positiva definida. Logo, todo
ponto estacionario satisfaz as condicoes suficientes de otimalidade de segunda
ordem e, uma vez que f (y) e convexa, conclumos que todo ponto estacionario
define um otimo global. Para encontrar um otimo global basta resolver o sistema
de equacoes lineares f (y) = 0.
EX 3.5: As razes da equacao sao r1 = 1, 259921, r2 = 0, 629961 1, 09112i e r3 =
0, 629961 + 1, 09112i. O fractal obtido com o procedimento esta ilustrado na
Figura ??.
EX 3.6: (x, y) define um ponto estacionario se f (x, y) = 0. Logo,
f (x, y) =
2x + y + 1
2y + x + 2
0
0
(A.3)
296
o que nos leva a concluir que:

2( 1)
4 2
4
y =
4 2
x =
Portanto, dado || 6= 2 o ponto estacionario e uma funcao de dado por:

" 2(1) #

x()
4 2
=
4
y()
4 2
Para {2, 2} o sistema de equacoes (A.3) nao tem solucao e nao ha ponto
estacionario.
Para verificar quais desses pontos sao mnimos locais, precisamos verificar a Hessiana de f nos pontos estacionarios. A Hessiana e dada por:

2
2
f=
2
Para (x(), y()) ser um ponto estacionario, este deve satisfazer as condicoes
necessarias de segunda ordem. Isto significa que 2 f (x(), y()) deve ser positiva
semi-definida, em outras palavras, os autovalores de 2 f devem ser nao negativos.
Para tanto, 2 f > 0 || 2.
Uma vez que para || = 2 nao existe ponto estacionario, todo mnimo local
(x(), y()) satisfaz || < 2 e, consequentemente, satisfaz as condicoes suficientes
de segunda ordem. Alem disso, f (x) se torna convexa e todo ponto estacionario
e um mnimo local que por sua vez e um mnimo global.
EX 3.8: Analisamos cada uma das funcoes separadamente.
1) Observando que f (x, y) = (4x(x2 4), 2y) podemos calcular os pontos
estacionarios fazendo f = 0. Da conclumos que os pontos estacionario
sao z1 = (0, 0), z2 = (2, 0), z3 = (2, 0). Observando que f (x, y) 0 para
todo (x, y), podemos concluir que z2 e z3 sao mnimos globais.
Calculando a Hessiana de f , obtemos

12x2 16 0
2
f=
0
2
No ponto (0, 0) verificamos que 2 f (0, 0) e indefinida implicando que (0, 0)
nao e um mnimo local, nem um mnimo global.
A funcao f e ilimitada por cima e nao possui maximo local.
2) Calculando o gradiente de f obtemos

4x(y x2 )2 2x
f =
2(y x2 )
297
Forcando f (x, y) = 0 descobrimos que y = x2 x = 0 e y = 0. O u

nico
ponto estacionario e (0, 0). A partir da Hessiana

12x2 4y 2 4x
2
f=
4x
2
e possvel verificar que no ponto (0, 0) a Hessiana:

2 0
2
f (0, 0) =
0 2
e indefinida. Com isso (0, 0) nao constitui ponto de mnimo nem maximo
local.
298
A.4
Otimizac
ao Black-Box
EX 4.2: O problema da bi-particao maxima e essencialmente o problema de corte

maximo em grafos que foi demonstrado, na sua versao de decisao, ser NPCompleto. Portanto, o problema da bi-particao maxima e NP-Difcil.
EX 4.3: O problema de corte mnimo entre dois verticies s e t pode ser resolvido com
um algoritmo de fluxo maximo. O fluxo maximo que pode ser enviado de s para
t e precisamente a capacidade do corte mnimo (S, V S) entre s e t (s S
e t V S). Uma vez que o corte mnimo em G tem s S e outro vertice
t V S, t 6= s, podemos calcular o corte mnimo resolvendo |V | 1 problemas
de fluxo maximo: para cada t V {s}, calcule o corte mnimo Ct = (St , V St )
entre s e t; seja t = Argmin{w(Ct ) : t V {s}}. O corte mnimo em G e
C = C t .
Uma vez que o problema de fluxo maximo pode ser resolvido em tempo polinomial, conclumos que o problema da bi-particao mnima pode ser resolvido em
tempo polinomial. Logo este problema pertence a classe P .
EX 4.4: Qualquer algoritmo para os problemas da bi-particao maxima e mnima pode
ser empregado para resolver o respectivo problema quando os pesos sao variaveis
aleatorias. Basta observar que
X
X
E[w(S, V S)] = E[
w(u, v)] =
E[w(u, v)].
(u,v)(S,V S)
(u,v)(S,V S)
Ou seja, simplesmente substitumos w(u, v) por E[(u, v)].
299
A.5
Treinamento de Redes Neurais
EX 5.1: Desejamos implementar as operacoes logica AND, NAND, OR e NOR para

entradas logicas x1 e x2 . Para tanto, basta definir os pesos w0 , w1 e w2 como
segue:
AND: w0 = 1.5, w1 = 1 e w2 = 1. A sada do perceptron sera 1 somente se
wT x = 1.5 + x1 + x2 > 0 x1 = x2 = 1; caso contrario a sada sera 1.
NAND: w0 = 1.5, w1 = 1 e w2 = 1. A sada do perceptron sera 1 somente

se wT x = 1.5 x1 x2 > 0 x1 x2 = 0; caso contrario a sada sera 1.
OR: w0 = 0, w1 = 1 e w2 = 1.
NOR: w0 = 0.5, w1 = 1 e w2 = 1.
EX 5.2: Seja T o n
umero de exemplos de treinamento. O problema de treinar a rede
neural pode ser colocado em programacao matematica como segue:
P : Minimize
4
T P
P
(ykt otk+6 )2
t=1 k=1
Sujeito a:
otk = xtk
nettk =
P4
m=1
wm,k otm
nettk = w5,k ot5 + w6,k ot6

otk = (nettk )
k = 1, . . . , 4
t = 1, . . . , T
k = 5, 6
t = 1, . . . , T
k = 7, . . . , 10
t = 1, . . . , T
k = 5, . . . , 10
t = 1, . . . , T
Para qualquer exemplo de treinamento t {1, . . . , T }, temos que:

P4
t
k = 5, 6
nettk =
m=1 wm,k xm
t
t
ok
= (netk )
k = 5, 6
P4
t
= ( m=1 wm,k xm )
otk
= (nettk )
k = 7, . . . , 10
t
t
= (w5,k o5 + w6,k o6 )
P
P
= (w5,k ( 4m=1 wm,5 xtm ) + w6,k ( 4m=1 wm,6 xtm ))
Logo, P pode ser colocado como um problema de otimizacao irrestrita:

Min
T X
4
X
t=1 k=1
"
ykt
w5,k+6 (
4
X
m=1
wm,5 xtm )
+ w6,k+6 (
4
X
m=1
wm,6 xtm )
!#2
cujas variaveis sao representadas pelo vetor: w = [wk,5 , wk,6 : k = 1, . . . , 4]

[w5,k , w6,k : k = 7, . . . , 10] R16 .
300
A.6
Programac
ao Linear
EX 6.1: Uma vez que b1 < 0, vamos tomar o problema auxiliar para encontrar uma
solucao factvel:
Maximize x0
Sujeito a :
x1 x2 x3 x0 2
2x1 x2 + x3 x0
1
x0 , x1 , x2 , x3 0
Tomando o dicionario inicial como se os elementos bi s fossem todos nao negativos,
obtemos:
Max =
x0
w1 = 2 +x1 +x2 +x3 +x0
w2 =
1 2x1 +x2 x3 +x0
Realizando pivoteamento em x0 e na restricao mais negativa, temos que x0 =
w1 + 2 x1 x2 x3 e substituindo no dicionario obtemos:
Max
= 2 +x1 +x2 +x3 w1

x0 =
2 x1 x2 x3 +w1
w2 =
3 3x1
2x3 +w1
que passa ser factvel para o problema auxiliar. Fazendo x1 entrar na base, a
variavel w2 deve sair da base pois 3/3 = 1 < 2/1 = 1. Logo, x1 = 1 2x3 /3 +
w1 /3 w2 /3 e substituindo no dicionario acima obtemos o dicionario:
Max
= 1
x2 +x3 /3 2w1 /3 w2 /3
x0 =
1 x2 x3 /3 +2w1 /3 +w2 /3
x1 =
1
2x3 /3 +w1 /3 w2 /3
Fazendo x2 entrar na base, a variavel x0 deve sair da base. Sendo x2 = 1 x0

x3 /3 + 2w1 /3 + w2 /3, fazemos as devidas substiuicoes para obter o dicionario:
Max
=
x0
x1 = 1 2x3 /3 +w1 /3 w2 /3
x2 = 1 x3 /3 +2w1 /3 +w2 /3 x0
Note que o dicionario corrente e factvel para o problema original, logo basta remover a coluna correspondente à variavel auxiliar x0 , substituir a funcao objetivo
original e continuar deste ponto em diante. Calculamos a funcao objetivo como
segue:
f =
=
=
=
2x1 6x2
2(1 2x3 /3 + w1 /3 w2 /3) 6(1 x3 /3 + 2w1 /3 + w2 /3)
2 4x3 /3 + 2w1 /3 2w2 /3 6 + 6x3 /3 12w1 /3 6w2 /3
4 + 2x3 /3 10w1 /3 8w2 /3
301
O dicionario para o problema original toma a forma:

Max
= 4 +2x3 /3 10w1 /3 8w2 /3

x1 =
1 2x3 /3
+w1 /3 w2 /3
x2 =
1 x3 /3 +2w1 /3 +w2 /3
Au
nica variavel que deve entrar na base e x3 . A variavel que sai da base e x1
pois 3/2 < 3. Substituindo x3 = 3/2 3x1 /2 + w1 /2 w2 /2 na linha da funcao
objetivo e na segunda u
ltima do dicionario, teremos
=
=
=
=
x2 =
=
=
=
4 + 2x3 /3 10w1 /3 8w2 /3

4 + 2(3/2 3x1 /2 + w1 /2 w2 /2)/3 10w1 /3 8w2 /3
4 + 1 x1 + w1 /3 w2 /3 10w1 /3 8w2 /3
3 x1 3w1 3w2
1 x3 /3 + 2w1 /3 + w2 /3
1 (3/2 3x1 /2 + w1 /2 w2 /2)/3 + 2w1 /3 + w2 /3
1 1/2 + x1 /2 w1 /6 + w2 /6 + 2w1 /3 + w2 /3
1/2 + x1 /2 + w1 /2 + w2 /2
Portanto o dicionario fica:

Max = 3
x1 3w1 3w2
x3 = 3/2 3x1 /2 +w1 /2 w2 /2
x2 = 1/2 +x1 /2 +w1 /2 +w2 /2
O dicionario acima induz uma solucao otima, dada por:
x1 = 0, x2 = 1/2, x3 = 3/2
cujo valor para a funcao objetivo e 3.
EX 6.2: A solucao otima e x1 = 4 e x2 = 8 com funcao objetivo f (x) = 28.
EX 6.4: Considere o problema de programcao linear dado por:
O dicionario inicial e:
Maximize x1 + x2
Sujeito a :
3x1 + x2 6
x1 , x2 0
D1 : = 0 +x1 +x2
w1 = 6 3x1 x2
Fazendo x1 entrar na base, obtemos o dicionario:
D2 : = 2 w1 /3 +2x2 /3
x1 = 2 w1 /2 x2 /3
Por fim, fazendo x2 entrar na base obrigatoriamente x1 sai da base, resultando

no dicionario:
D3 : = 6 w1 2x1
x2 = 6 w1 3x1
302
EX 6.5: Seja xi a variavel que saiu da base e xk a variavel que entrou na base. Denote
por B o conjunto dos ndices das variaveis basicas; e N o conjunto dos ndices
das variaveis nao basicas. Entao, a seguinte equacao pertencia ao dicionario:
X
X
xi = bi
a
ij xj = bi
a
ij xj a
ik xk
jN
Portanto:
jN {k}
xk = bi /
aik
jN {k}
a
ij xj xi /
aik
onde bi 0 e a
ik > 0. Sabemos tambem que o custo reduzido de xk e ck > 0.
(Caso contrario, xk nao entraria na base.) No dicionario resultante, a variavel xi
tera custo reduzido dado por:
ci = ck /
aik < 0
implicando que xi nao e uma variavel candidata para entrar na base na proxima
iteracao.
EX 6.6: O problem pode ser colocado na forma:
P : Maximize cT x
Sujeito a :
Ax
Ax
Ix
Ix
x
b
a
u
l
Assumindo que A Rmn e utilizando multiplicadores duais w1 , w2 Rm e

v1 , v2 Rn , obtemos o problema dual:
D : Minimize w1T b w2T a + v1T u v2T l
Sujeito a :
w1T A w2T A + v1T I v2T I cT
w 1 , w 2 , v1 , v2 0
que pode ser expresso como:
D : Minimize bT w1 aT w2 + uT v1 lT v2
Sujeito a :
AT w1 AT w2 + v1 v2 c
w 1 , w 2 , v1 , v2 0
EX 6.7: Resolvendo o dual:
D : Minimize 2y1 + y2
Sujeito a :
y1 +2y2
y1 y2
y1 +y2
y1
y2
2
6
0
0
0
303
obtemos a solucao y1 = 3 e y2 = 3. Aplicando o Teorema da Folga Complementar,

podemos verificar que:
(y1 + 2y2 2)x1 =
=
(y1 y2 + 6)x2 =
=
(y1 + y2 0)x3 =
(x1 x2 x3 + 2)y1 =
=
(2x1 x2 + x3 1)y2 =
=
(3 + 2 3 2)0
10=0
(3 3 + 6)1/2
0 1/2 = 0
(3 + 3 0)3/2 = 0
(0 1/2 3/2 + 2)3
03=0
(2 0 1/2 + 3/2 1)3
03=0
EX 6.9: Nao e necessario. Basta analisar o posto da matriz A. Ha tres possibilidades:

i. Se rank(A) < rank([A|b]), entao nao existe solucao para o sistema de
equacoes lineares e, portanto, o problema e infactvel.
ii. Se rank(A) = rank([A|b]) = n, entao o sistema de equacoes lineares tem
solucao u
nica, podendo ser obtida atraves de metodos de solucao de equacoes
lineares como, por exemplo, metodo de Gauss e fatoracao SVD.
iii. Se rank(A) = rank([A|b]) < n, entao existem infinitas solucoes para o
sistema de equacoes lineares e faz sentido realizar otimizacao. Neste caso,
a analise deve ser refinada. Seja x uma solucao para Ax = b e seja N uma
base para o espaco nulo de A, ou seja, null(A) = {N y : y Rnrank(A) }.
Podemos reescrever o problema como segue:
Min cT x
S.a: Ax = b
Min cT (
x + N y)
S.a: A(
x + N y) = b
Min cT x + cT N y
S.a: A
x + AN y = b
Min cT N y
S.a: b + 0 = b
Min cT N y
Logo o problema tem um n

umero infinito de solucoes otimas, quando cT N =
0, ou o problema e ilimitado caso cT N 6= 0.
Assim, o problema pode ser resolvido facilmente considerando os tres casos acima.
EX 6.10: Duas formulacoes em programacao linear, P1 e P2 , sao dadas para o pro-
304
blema P . Segue a formulacao P1 :

P1 : Min
m
P
dj
j=1
S.a :
dj aTj x bj dj , j = 1 . . . , m
dj 0, j = 1, . . . , m
lxu
sendo A =
aT1
aT2
..
.
aTm
e aj Rn1 , j = 1 . . . , m.
Segue a formulacao P2 :
P2 : Min
m
P
(e+
j + ej )
j=1
S.a :
aTj x bj = e+
j ej , j = 1 . . . , m
+
ej , ej 0, j = 1, . . . , m
lxu
305
A.7
Teoria dos Jogos
EX 7.1: Aplicando o formalismo apresentado, pode-se verificar que a estrategia otima

do agente coluna e
x1 = 1/4, x2 = 3/4, e x3 = 0
enquanto que a estrategia otima do agente linha e
y1 = 3/4, y2 = 1/4, e y3 = 0
O jogo nao e justo tendo valor 0.75, o que indica uma ligeira vantagem para o
agente coluna.
EX 7.2: Seja A o jogador linha e B o jogador coluna. A matriz do jogo pode ser
expressa como:

5
5
A=
10 10
i. Quais sao as estrategias otimas?
Seja y5 (y10 ) a probabilidade do jogador A esconder a moeda de 5 centavos
(10 centavos). Seja x5 (x10 ) a probabilidade do jogador B esconder a moeda
de 5 centavos (10 centavos). Resolvendo o problema, pode-se verificar que:
x = (x5 , x10 ) = (1/2, 1/2)
y = (y5 , y10
) = (2/3, 1/3)
ii. Qual dos jogadores tem vantagem?

Nenhum dos jogadores tem vantagem, pois o valor do jogo e z = w = 0.
iii. Resolva o problema para quaisquer denominacoes.
Tomemos primeiramente a matriz A do jogo como sendo

a
a
A=
b b
O problema do agente coluna (x) pode ser colocado nas formas equivalentes:
Px : Max v
S.a:
axa axb + v 0
bxa + bxb + v 0
xa + xb
= 1
xa , xb 0
Px : Max v
S.a:
axa axb + v + w1
= 0
bxa + bxb + v +
+ w2 = 0
xa + xb
= 1
xa , xb , w 1 , w 2 0
O problema pode ser resolvido por meio dos passos a seguir.
306
1) v = axa + axb w1
2)
bxb =
=
=
(a + b)xb =
xb =
bxa v w2
bxa + axa axb + w1 w2
(a + b)xa axb + w1 w2
(a + b)xa + w1 w2
xa + (w1 w2 )/(a + b)
3)
xa + xb = 1 xa + (xa + (w1 w2 )/(a + b)) = 1
2xa = 1 + (w2 w1 )/(a + b)
1 w2 w1
xa = +
2 2(a + b)
4)
xb = xa + (w1 w2 )/(a + b)
1 w2 w1 w1 w2
+
+
=
2 2(a + b)
a+b
1 w1 w2
w1 w2
=
+2
2 2(a + b)
2(a + b)
1 w1 w2
+
=
2 2(a + b)
5) Podemos deduzir a partir dos itens (1), (3) e (4) que
v = axa + axb w1
= a(xb xa ) w1
1 w1 w2 1 w2 w1

) w1
= a( +
2 2(a + b) 2 2(a + b)
(w1 w2 )
= a
w1
(a + b)
(bw1 + aw2 )
=
a+b
6) Fazendo w1 = 0 e w2 = 0 variaveis nao basicas, podemos concluir a
partir do desenvolvimento acima que v 0. Tomando o dicionario:
xa
xb
v
= 0
= 12
= 21 +
= 0
bw1
a+b
w1
2(a+b)
w1
2(a+b)
bw1
a+b
+
+
aw2
a+b
w2
2(a+b)
w2
2(a+b)
aw2
a+b
observamos que = v (dependencia linear da equacao objetivo e da

u
ltima linha) e a solucao otima difere apenas de qual variavel e basica
(v, w1 ou w2 ). Logo, xa = 12 e xb = 12 . Assim, a estrategia otima do
agente coluna (x) e xa = 21 e xb = 12 , induzindo o jogo a ter valor v = 0.
307
7) Para obtermos a estrategia otima do jogador linha (y), vamos tomar o

dual de Px :
Py : Min u
S.a:
aya byb + u 0
aya + byb + u 0
ya + yb
= 1
ya , yb 0
Uma vez que v = 0, segue que u = 0. Observando que xa > 0 e
xb > 0, temos pelo Teorema da Folga Complementar que:
aya byb = 0
aya + byb = 0 yb = 1 ya .
ya + yb = 1
b
Logo, podemos concluir que ya = a+b
e yb =
estrategias otimas para denominacoes a e b sao:

x = 1
xa = 12
b
y =
a
yb =
b
a+b
a
a+b
a
.
a+b
Em sntese, as
308
A.8
Fluxo em Redes
EX 8.1: O problema de fluxo em redes de custo mnimo (primal) pode ser especificado
como segue para uma rede G = (N, A):
P
P : Minimize
cij xij
(i,j)A
Sujeito a:
{j:(i,j)A}
xij
xij uij
xij lij
xji = b(i)
{j:(j,i)A}
iN
(i, j) A
(i, j) A
O dual de P pode ser expresso como:

P
P
P
b(i)yi +
uij wij
D : Maximize
lij vij
iN
(i,j)A
(i,j)A
Sujeito a:
yi yj + wij vij cij

yi R
wij , vij 0
EX 8.2:
(i, j) A
iA
(i, j) A
a) Formule o problema de caminhos mnimos de um vertice s para um

vertice t como um problema de fluxo em redes. Seja G = (N, A) um grafo
direcionado e wij o peso da aresta (i, j) A. Defina a capacidade de cada
arco como a unidade: uij = 1, (i, j) A. Defina o limite inferior para o
fluxo de cada arco: lij = 0, (i, j) A. Defina o custo de cada arco como
o seu peso: cij = wij , (i, j) A. Defina o fluxo injetado em cada no:
b(s) = 1, b(t) = 1 e b(i) = 0, i N {s, t}. O fluxo otimo em G e
precisamente um caminho mnimo de s para t.
b) Formule o problema de encontrar a arvore de caminhos mnimos a partir de

um vertice s para os demais vertices do grafo. Seja G = (N, A) um grafo
direcionado e wij o peso da aresta (i, j) A. Defina a capacidade de cada
arco como a unidade: uij = |N | 1, (i, j) A. Defina o limite inferior
para o fluxo de cada arco: lij = 0, (i, j) A. Defina o custo de cada arco
como o seu peso: cij = wij , (i, j) A. Defina o fluxo injetado em cada no:
b(s) = |N | 1 e b(i) = 1, i N {s}. O fluxo otimo em G induz uma
arvore de caminhos mnimos de s para t.
EX 8.3: A solucao otima e dada por:
x14 = 10, x21 = 0, x23 = 10, x26 = 10, x34 = 5
x35 = 5, x47 = 10, x56 = 0, x57 = 5, x68 = 10
x78 = 0
O fluxo otimo correspondente tem custo 270.
309
EX 8.4: A afirmacao e verdadeira.

Primeiro, pode-se mostrar que existe uma solucao factvel cujos fluxos atraves dos
arcos sao todos pares. Para obter-se uma solucao factvel, utilize o modelo de fluxo
maximo em redes construindo uma rede G = (N , A ) a partir de G ao eliminar-se
os custos, cij , e os parametros de suprimento/demanda, b(i), introduzindo um no
fonte s e os arcos (s, i) com capacidade b(i) para todo i N tal que b(i) > 0, e
introduzindo um no terminal t e os arcos (i, t) com capacidade b(i) para todo
facil de se convencer que G possui uma solucao factvel
i N tal que b(i) < 0. E
P
se, e somente se, o fluxo maximo de s para t em G e igual a {iN :b(i)>0} b(i) =
P
{iN :b(i)<0} b(i). O algoritmo de aumento para fluxo maximo iterativamente
encontra um caminho com capacidade positiva, conectando s a t, e enviando o
facil de se
fluxo maximo permitido ate que nao existam caminhos restantes. E
verificar a invariancia de que o fluxo e sempre par, dado que as capacidades dos
arcos e os valores de suprimento/demanda sejam todos pares. Portanto, a solucao
otima obtida induz valores pares para todos os fluxos.
Segundo, basta se convencer de que o algoritmo de cancelamento de circuito
negativo, a cada iteracao, obtem uma solucao que induz valores pares para os
fluxos de todos os arcos.
EX 8.5: O conjunto de solucoes
otimas para um problema qualquer de fluxo em redes, de custo mnimo, se altera se multiplicarmos o custo de cada arco por uma
constante k?
Se multiplicarmos os custos por uma constante k 0, entao o conjunto de
solucoes otimas e tipicamente alterado. Se multiplicarmos os custos por uma
constante k > 0, entao a partir da linearidade da funcao objetivo conlu-se que o
conjunto de solucoes otimas nao se altera.
O conjunto se altera se adicionarmos uma constante k?
Dependendo da constante k, o conjunto de solucoes otimas pode ser alterado ou
nao. Para a rede da Figura A.2, o conjunto de solucoes otimas nao se altera se
k = 1, mas e modificado quando k = 100.
(10,10)
(10,10)
(1,10)
3
0
Figura A.2: Exemplo de problema de fluxo em redes
310
EX 8.6: Substitua cada vertice i pelos vertices i1 e i2 . Substitua cada arco (i, j) por
(i2 , j1 ), utilizando a mesma capacidade e custo do arco original. Para cada vertice
i, introduza o arco (i1 , i2 ) definindo c(i1 , i2 ) = 0 e u(i1 , i2 ) = w(i). Para cada
vertice i com b(i) 0, faca b(i1 ) = 0 e b(i2 ) = b(i). Para cada vertice i com
b(i) < 0, faca b(i1 ) = b(i) e b(i2 ) = 0.
EX 8.7: Ver exerccio EX 8.4.
EX 8.8:
1) mostre como formular qualquer problema de fluxo em redes de custo

mnimo como um problema custo-mnimo fluxo-maximo.
Seja N+ = {i N : b(i) > 0}, N0 = {i N : b(i) = 0} e N = {i N :
b(i) < 0}. Aumente a rede G introduzindo os nos s e t. Adicione os arcos
(si) para cada i N+ , fazendo csi = 0 e usi =
Pb(i), e (i, t) para cada
P i N ,
fazendo cit = 0 e uit = b(i). Faca b(s) = iN+ b(i), b(t) = iN b(i) e
b(i) = 0 para todo i N+ N . Entao a solucao do problema de fluxomaximo custo-mnimo na rede aumentada produz uma solucao otima para
o problema de fluxo em rede de custo mnimo na rede original.
2) mostre como o problema de custo-mnimo fluxo-maximo pode ser resolvido

por meio de uma reducao ao problema de custo mnimo.
Modifique
a rede introduzindo um arco (t, s) sendo uts = e cts =
P
(i,j)A |cij | k, para k > 0. Faca b(i) = 0 para todo i N . O fluxo de
custo mnimo na rede aumentada produz um fluxo-maximo de custo mnimo
na rede original.
EX 8.9: Primeiramente, obtemos a rede G = (V , A ) a partir da operacao de quebra
de vertices do grafo G: V = {i, i : i V } e A = {(i, i ) : i V }{(i , j) : (i, j)
A}. Defina os seguintes custos e capacidades: ci ,j = ci,j para todo (i, j) A,
ci,i = pi para todo i V , e ui,j = 1 para todo (i, j) A . Defina ainda bi = 0
para todo i V , exceto bs = 1 e bt = 1. Entao o caminho com menor custo de
translado e pedagio pode ser encontrado com o algoritmo de fluxo em redes de
custo mnimo. Como exemplo, considere o problema de identificar um caminho
de menor custo de s = 1 para t = 4 conforme grafo da Figura A.3.
EX 8.10: Comecamos gerando o grafo direcionado G = (V, A) tal que:
a) a capacidade de cada arco (i, j) A e uij = xij , onde xij e o valor gerado
pela solucao candidata x;
b) lij = 0 para todo (i, j) A.
com capacidade u[S, S]
mnima em G. Se
DesejamosP
encontrar um corte [S, S]
u[S, S] = {(i,j)A:iS,jV S} uij < 1, entao a solucao candidata nao satisfaz a

restricao de eliminacao de sub-rota para S. Portanto, o problema em questao
se reduz a encontrar um corte mnimo em G conforme definicao acima. Isto
pode ser realizado da seguinte forma. Fixe um vertice qualquer s V . O corte
mnimo deve ter s S e um vertice t V S. Como nao conhecemos o vertice
t, resolvemos |V | 1 problemas de fluxo maximo entre s e t, um para cada
O corte mnimo e o menor dentre
t V {s}, obtendo o corte mnimo [S, S].
311
G = (V , A )
G = (V, A)
p2 = 1
2
c12 = 3
c 1 2 = 3
p4 = 1
s
2
p1 = 2 1
3
3
4
t
4
2
3
3
p3 = 2
Figura A.3: Ilustracao da reducao do problema de caminhos mnimos com pedagio ao

problema de fluxo de custo mnimo atraves da operacao de quebra de vertices.
todos estes cortes. Logo, o problema pode ser resolvido computando |V |1 fluxos
maximos em G. Isto decorre do teorema fluxo-maximo corte-mnimo.
EX 8.11: O dual do problema de fluxo maximo pode ser
P
D : Minimize
(i,j)E uij wij
Sujeito a :
yi yj + wij 0,
ys + yt 1
wij 0,
yi R,
expresso como:
(i, j) A
(i, j) A
i V
312
A.9
Linguagens de Modelagem
EX 9.1: O problema pode ser colocado em programacao matematica :

Minimize
n
P
sj w j
j=1
Sujeito a :
sj si + pi M (1 xij )
xij + xji = 1
sj 0
xij {0, 1}
M=
n
P
i = 1, . . . , n
j = 1, . . . , n, j 6= i
i = 1, . . . , n
j = i + 1, . . . , n
j = 1, . . . , n
i = 1, . . . , n
j = i = 1, . . . , n
pj
j=1
A solucao otima sequencia as tarefas na ordem: 8 4 9 1 5 10

2 6 3 7. O custo desta solucao e: 24.69. Em AMPL, o modelo pode ser
expresso como:
#-----------------------------------------------------# WellModel1.mod
#
param n > 0 integer;
param w
{j in 1..n} >= 0;
param p
{j in 1..n} >= 0;
param M >= 0;
#-------------------------------------------------------------var x
{ i in 1..n, j in 1..n : i!=j } integer >=0, <=1;
var s
{ j in 1..n} >= 0;
#-------------------------------------------------------------minimize cost:
sum{j in 1..n} w[j]*s[j];
#-------------------------------------------------------------subject to prec1{i in 1..n, j in 1..n : i!=j}:

s[j] >= s[i] + p[i] - M*(1 - x[i,j]);
subject to prec2{i in 1..n, j in (i+1)..n }:
x[i,j] + x[j,i] = 1;
313
O arquivo de dados em AMPL tem como conte

udo:
param n := 10;
param M := 25;
param:
1
0.5
2
0.4
3
0.1
4
0.5
5
0.3
6
0.5
7
0.2
8
0.8
9
1.0
10 0.6
w
p :=
1.5
2.3
1.2
1.0
1.5
3.6
4.1
0.8
2.0
3.0;
Em Mosel (Xpress-MP), o problema pode ser especificado conforme o modelo:

model scheduling
uses "mmxprs"
declarations
Jobs: set of integer
M : real
w : array(Jobs) of real
p : array(Jobs) of real
x: array(Jobs,Jobs) of mpvar
s: array(Jobs) of mpvar
end-declarations
!Jobs:= {1, 2, 3, 4, 5, 6, 7, 8, 9, 10}
!M:= 25
!w:= [0.5 0.4 0.1 0.5 0.3 0.5 0.2 0.8 1.0 0.6]
!p:= [1.5 2.3 1.2 1.0 1.5 3.6 4.1 0.8 2.0 3.0]
initializations from "model.dat"
Jobs M w p
end-initializations
forall(i in Jobs, j in Jobs | i<>j )
create(x(i,j))
314

x(i,j) is_binary
forall(j in Jobs)
create(s(j))
! Constraints
forall(j in Jobs)
s(j) >= 0
! Constraints
forall(i in Jobs, j in Jobs | i < j)
x(i,j) + x(j,i) = 1
s(j) >= s(i) + p(i) -M*(1 - x(i,j))
! Objective Function
Cost := sum(j in Jobs)
s(j)*w(j)
minimize(Cost)
writeln
writeln("-------------------------------------")
writeln("x(",i,",",j,"): ",getsol(x(i,j)))
writeln("-------------------------------------")
forall(j in Jobs)
writeln("s(",j,"): ",getsol(s(j)))
writeln
writeln("objective: ",getobjval)
O conte
udo do arquivo de dados definindo a instancia e:
Jobs: [1 2 3 4 5 6 7 8 9 10]
M: 25
w: [0.5 0.4 0.1 0.5 0.3 0.5 0.2 0.8 1.0 0.6]
p: [1.5 2.3 1.2 1.0 1.5 3.6 4.1 0.8 2.0 3.0]
315
A.10
Programac
ao Inteira: Fundamentos
EX 10.1: Seja xj = 1 se o investimento j S e escolhido e, caso contrario, xj = 0.

P
i. Nao pode-se investir em todas as acoes: 7j=1 xj 6 6.
P
ii. Pelo menos uma acao deve ser selecionada: 7j=1 xj > 1.
iii. A acao 1 nao pode ser escolhida se a acao 3 e escolhida: x1 + x3 6 1.
iv. A acao 4 pode ser escolhida apenas se a acao 2 e escolhida: x4 6 x2 .
v. Ambas as acoes 1 e 5 devem ser escolhidas ou, exclusivamente, nenhuma
delas: x1 = x5 .
vi. Pelo menos uma das acoes do conjunto {1, 2, 3} ou pelo menos duas acoes
do conjunto {2, 4, 5, 6}:
2(x1 + x2 + x3 ) + (x2 + x4 + x5 + x6 ) > 2 2(x1 + x2 + x3 ) + (x4 + x5 + x6 ) > 2
EX 10.2:
i. u = min{x1 , x2 }, assumindo que 0 6 xj 6 C para j = 1, 2:

u
u
u
u
onde
6
6
>
>
x1
x2
x1 Cy
x2 C(1 y)
y {0, 1}
0 6 xj 6 C, j = 1, 2.
ii. v = |x1 x2 | com 0 6 xj 6 C para j = 1, 2:

v
v
v
v
onde
>
>
6
6
x1 x2
x2 x1
x1 x2 + 2Cy
x2 x1 + 2C(1 y)
y {0, 1}
0 6 xj 6 C, j = 1, 2.
iii. O conjunto X {x } onde X = {x Z n : Ax 6 b} e x X.
X {x } = {x Z n : Ax 6 b
xT x 6 eT x + n(1 y)
xT (e x ) > 1 y
y {0, 1}
}
EX 10.3: Basta verificar que

(0, 0, 0, 0), (0, 0, 0, 1), (0, 0, 1, 0), (0, 0, 1, 1),
X1 = X2 = X3 = { (0, 1, 0, 0), (0, 1, 0, 1), (0, 1, 1, 0), (0, 1, 1, 1),
(1, 0, 0, 0), (1, 0, 0, 1), (1, 0, 1, 0), (1, 1, 0, 0)}
316
EX 10.4: Solucao otima: Rota 1 2 4 5 6 8 7 3 1 com comprimento 13.

O codigo LP-SOLVE segue abaixo.
min: x12 + x13 + x23 + 2*x24 + 5*x26 + 2*x34 + 4*x37 +

x45 + 2*x56 + 2*x57 + x68 + x78;
x12
x12
x13
x24
x45
x26
x37
x68
+
+
+
+
+
+
+
+
x13
x23
x23
x34
x56
x56
x57
x78
=
+
+
+
+
+
+
=
2;
x24
x34
x45
x57
x68
x78
2;
+
+
=
=
=
=
x26 = 2;
x37 = 2;
2;
2;
2;
2;
x26 + x45 + x37 >= 2;

x12
x13
x23
x24
x26
x34
x37
x45
x56
x57
x68
x78
<=
<=
<=
<=
<=
<=
<=
<=
<=
<=
<=
<=
1;
1;
1;
1;
1;
1;
1;
1;
1;
1;
1;
1;
int
int
int
int
int
int
int
int
int
int
int
int
x12;
x13;
x23;
x24;
x26;
x34;
x37;
x45;
x56;
x57;
x68;
x78;
317
EX 10.5:
1) yij e igual a xi xj :
yij > xi + xj 1
yij 6 xi
yij 6 xj
yij > 0
2) Se x1 = 1 entao x2 + x3 = 1:

ou yij + 1 > xi + xj > 2yij
x2 + x3 6 2 x1
x2 + x3 > x1
3) x3 e 1 se e somente se x1 e 1 ou
x3
x3
x
x3
x2 e 1, mas nao ambas:

>
>
6
6
x1 x2
x2 x1
2 x1 x2
x1 + x2
4) x1 e x2 podem assumir todos os valores 0-1 possveis, exceto x1 = 0 e x2 = 1:

x1 > x2
EX 10.6: As respostas seguem abaixo.
i. As variaveis xj podem ser formuladas como segue:
x0 = 0
xj 6 xj1 + aj1
xj > xj1 + aj1 n(1 aj1 )

, j = 1, . . . , n
xj > 0
xj 6 naj1
ii. O limite maximo para xj pode ser modelado por:

xj 6 l, j = 1, . . . , n
iii. O comprimento mnimo de subsequencias de 1s pode ser modelado por:

aj >
lmin xj1 lmin n(1 aj1 )

, j = 1, . . . , n
lmin
mas permite que se tenha uma subsequencia de comprimento menor que lmin
no extremo direito da sequencia a.
EX 10.7: Seja an BM 1 um vetor tal que anm = 1 se a rota rn passa por pm e anm = 0
caso contrario, para n = 1, . . . , N e m = 1, . . . , M . O problema pode ser colocado
como um problema de cobertura de conjuntos:
PN
Minimize
n=1 cn xn
Sujeito a :
PN n
n=1 am > 1, m = 1, . . . , M
xn {0, 1}, n = 1, . . . , N
318
EX 10.8: O problema pode ser colocado formalmente como:

P :
n
P
Minimize
dj
j=1
Sujeito a :
xj 6 xj x 6 xj
yj 6 yj y 6 yj

xj > 0
, j = 1, . . . , n
yj > 0
dj = min{
xj , yj }
Para escrever a funcao min em programacao matematica, podemos fazer uso do

exerccio ja resolvido anteriormente. Logo, obtemos uma formulacao do problema
em programacao inteira mista:
PI : Minimize
n
P
dj
j=1
Sujeito a :
xj
yj
yj
dj
dj
dj
dj
6
6
>
>
6
6
>
>
xj x 6 xj
yj y 6 yj
0
0
xj
, j = 1, . . . , n
yj
xj M zj
yj M (1 zj )
zj {0, 1}
onde |xj x| 6 xj , |yj y| 6 yj , dj = min{

xj , yj }, xj = min{
xj , yj } se zj = 0
e yj = min{
xj , yj } se zj = 1, onde M e uma constante suficientemente grande.
Note que para uma solucao ser otima, |xj x| = xj se zj = 0 e |yj y| = yj se
zj = 1.
O problema P pode ser colocado em uma forma alternativa, com um n
umero
maior de variaveis mas um n
umero menor de restricoes:
P : Minimize
n
P
dj
j=1
Sujeito a :
xj x = x+
j xj
yj y = yj yj
+
xj , xj > 0
, j = 1, . . . , n
y
,
y
>
0
j j
+
dj = min{x+
j + xj , yj + yj }
Escrevendo o operador min em termos de restricoes lineares, podemos reexpressar
319
P com um problema de programacao inteira mista:
PI : Minimize
n
P
dj
j=1
Sujeito a :
xj x = x+
j xj
yj y = yj+ yj
x+
j , xj > 0
+
yj , yj > 0
d j 6 x+
, j = 1, . . . , n
j + xj
+
d j 6 yj + yj
d j > x+
j + xj M z j
dj > yj+ + yj M (1 zj )
zj {0, 1}
Resolvendo o modelo PI para a instancia dada no exerccio, obtemos a solucao

(x, y) = (383, 442) com custo 547. A solucao obtida esta ilustrada na Figura A.4.
(x13 , y13 )
(x1 , y1 )
(x14 , y14 )
(x3 , y3 )
(x2 , y2 )
Mestre Horizontal
(x, y)
(x5 , y5 )
(x12 , y12 )
(x4 , y4 )
(x6 , y6 )
(x11 , y11 )
(x7 , y7 )
(x8 , y8 )
(x9 , y9 )
Mestre Vertical
(x10 , y10 )
Figura A.4: Rede de abastecimento.
320
A.11
Programac
ao Inteira: Relaxa
co
es e Algoritmo
Branch-and-Bound
EX 11.1: Seja P o problema original dado por:

P : Maximize 77.9x1 + 76.8x2 + 89.6x3 + 97.1y1 + 31.3y2
Sujeito a :
60.9x1 + 68.9x2 + 69.0x3 56.9y1 + 22.5y2
86.8x1 + 32.7x2 + 24.3x3 + 13.8y1 12.6y2
10.9x1 + 3.6x2 40.8x3 + 43.9y1 + 7.1y2
x1 , x2 , x3 0 e inteiro
y1 , y2 0
= x0
= 86.5
77.3
82.3
(Bounding) Resolvendo a relaxacao R(P ) obtemos a solucao x1 = 1.496, x2 = 0,

x3 = 5.021, y1 = 6.1697 e y2 = 0 e o limite superior 1165 para o valor objetivo
da solucao otima.
(Branching) Quebrando o problema em dois subproblemas P1 = P {x : x1 1}
e P2 = P {x : 2}, obtemos a arvore branch-and-bound da Figura A.5.
1165
P
x1 <= 1
P1
oo
x1 >= 2
P2
Figura A.5: Arvore

branch-and-bound parcial
(Bounding) Resolvendo a relaxacao R(P2 ) do problema P2 , obtemos a solucao
x1 = 2, x2 = 0, x3 = 2.675, y1 = 3.8642 e y2 = 0 com valor objetivo 771.
(Branching) Como a solucao da relaxacao R(P2 ) nao e factvel para o problema
original, um limite inferior nao foi obtido e temos que quebrar o problema P2 em
dois subproblemas. Assim, obtemos P21 = P2 {x : x3 2} e P22 = P2 {x :
x3 3}, resultando na arvore branch-and-bound dada na Figura A.6.
(Bounding) Resolvendo a relaxacao R(P22 ) detectamos que o problema e infactvel, portanto o no correspondente ao problema P22 e fechado devido a infactibilidade.
(Bounding) Resolvendo a relaxacao R(P1 ) obtemos o limite superior 1052 e a
solucao x1 = 1, x2 = 0, x3 = 4.4089, y1 = 5.4838 e y2 = 1.4851 que viola a
restricao de integralidade das variaveis x.
(Branching) Quebramos P1 em dois subproblemas P11 = P1 {x : x3 4} e P12 =
P1 {x : x3 5}. A arvore branch-and-bound resultante aparece na Figura A.7.
Note que o limite superior do no P passa de 1165 para 1052 = max{1052, 771}.
321
1165
P
oo
x1 >= 2
x1 <= 1
771
P2
P1
x3 <= 2
oo
x3 >= 3
P21
P22
Figura A.6: Arvore

1165
P
x1 <= 1
oo
x1 >= 2
771
1052
oo
x3 <= 4
P11
P2
P1
x3 >= 5
P12
x3 <= 2
P21
Figura A.7: Arvore

oo
x3 >= 3
infactivel
P22
322
(Bounding) Resolvendo a relaxacao R(P12 ) verificamos que o problema P12 e

infactvel.
(Bounding) Resolvendo a relaxacao R(P21 ) produzimos o limite superior 659 para
a subarvore com raiz em P21 e a solucao x1 = 2, x2 = 0.1479, x3 = 2, y1 = 3.2248
e y2 = 0. Uma vez que a solucao obtida viola a restricao de integralidade, teremos
de gerar subproblemas. Podemos tambem reduzir o limite superior do no P2 de
771 para 659.
(Branching) Quebrando o problema P21 obtemos os subproblemas P211 = P21
{x : x2 0} e P212 = P21 {x : x2 1}. A arvore branch-and-bound resultante
e apresentada na Figura A.8.
1165
P
oo
x1 >= 2
x1 <= 1
659
1052
oo
x3 <= 4
P2
P1
x3 >= 5
x3 <= 2
x3 >= 3
659
infactivel
P11
oo
P12
oo
x2 <= 0
P211
infactivel
P21
P22
x2 >= 1
P212
Figura A.8: Arvore

(Bounding) Resolvendo a relaxacao R(P212 ) obtemos um problema infactvel, que
nos leva a cortar o no P212 por infactibilidade.
(Bounding) Resolvendo a relaxacao R(P211 ) obtemos a solucao x1 = 2.145, x2 = 0,
x3 = 2, y1 = 3.2009 e y2 = 0 com valor objetivo 657. Geramos assim um novo
limite superior para os nos P21 e P2 . Uma vez que a solucao obtida e fracionaria,
novos subproblemas serao gerados.
(Branching) Quebrando o problema P211 em dois subproblemas, obtemos P2111 =
P211 {x : x1 2} e P2112 = P211 {x : x 3}. Isto resulta na arvore branchand-bound da Figura A.9.
(Bounding) Resolvendo a relaxacao R(P11 ) obtemos a solucao x1 = 1, x2 =
0.2768, x3 = 4, y1 = 5.1513 e y2 = 1.0507 com valor objetivo 991. Logo, o limite
superior do no P1 e reduzido para 991 e de P para max{991, 657} = 991.
(Branching) Executando a quebra de P11 obtemos P111 = P11 {x : x2 0} e
P112 = P11 {x : x2 1}. A Figura ilustra a arvore branch-and-bound resultante
323
1165
P
oo
x1 >= 2
x1 <= 1
657
1052
oo
x3 <= 4
P2
P1
x3 >= 5
x3 <= 2
x3 >= 3
657
infactivel
P11
oo
P12
oo
infactivel
P21
x2 >= 1
x2 <= 0
657
P211
P212
oo
infactivel
x1 <= 2
P2111
x1 >= 3
P2112
Figura A.9: Arvore

P22
324
A.10.
991
P
oo
x1 >= 2
x1 <= 1
657
991
oo
P2
P1
x3 >= 5
x3 <= 4
991
x2 <= 0
x3 <= 2
infactivel
oo P11
oo
657
P12
oo
x2 >= 1
x3 >= 3
infactivel
P21
P22
x2 >= 1
x2 <= 0
657
P111
P211
P112
P212
oo
infactivel
x1 <= 2
P2111
x1 >= 3
P2112
Figura A.10: Arvore

(Bounding) Resolvendo a relaxacao R(P111 ) obtemos uma solucao inteira x1 = 1,

x2 = 0, x3 = 4, y1 = 5.0702 e y2 = 1.693 com valor objetivo 982. Portanto os
nos P2111 e P2112 sao cortados por limite superior (657) inferior ao limite inferior
(982), restando apenas o no P112 . A arvore branch-and-bound corrente e dada na
Figura A.11.
(Bounding) O u
nico subproblema restante e P112 . Resolvendo a relaxacao R(P112 )
obtemos uma solucao fracionaria com valor objetivo 824 que, por sua vez, e
cortada por limite. Ja encontramos um limite inferior com valor superior a 824.
(Finalizacao) A solucao otima e portanto a solucao encontrada ao resolvermos o
no P111 : x1 = 1, x2 = 0, x3 = 4, y1 = 5.0702 e y2 = 1.693 com valor objetivo
981.6 (tinha sido arredondado para 982).
EX 11.3: Abaixo segue os resultados das tarefas.
i. Ilustramos apenas a arvore branch-and-bound final.
As seguintes solucoes foram produzidos nos nos da arvore: (x01 , x02 ) =
(5/3, 10.3), (x11 , x12 ) = (1, 4), (x21 , x22 ) = (2, 2.85), (x31 , x32 ) = (2.6, 2),
(x51 , x52 ) = (2, 2), (x61 , x62 ) = (3, 1.42837), (x71 , x72 ) = (3.3, 1),(x91 , x92 ) = (3, 1),
10
(x10
1 , x2 ) = (4, 0).
325
991
P
oo
x1 >= 2
x1 <= 1
657
991
oo
P2
P1
x3 >= 5
x3 <= 4
991
x2 <= 0
x3 <= 2
infactivel
oo P11
P12
oo
infactivel
P21
P22
x2 >= 1
x2 <= 0
982
x3 >= 3
657
x2 >= 1
P111
oo
657
P211
P112
P212
oo
982
infactivel
otimalidade
x1 <= 2
657
P2111
x1 >= 3
657
cortado por
cortado por
P2112
por limite
por limite
Figura A.11: Arvore

ii. O subproblema Lagrangeano e dado por:

L(u1 , u2 ) = Maximize
Sujeito a :
17x1 + 12x2
+u1 (40 10x1 7x2 ) + u2 (5 x1 x2 )
x1 4
x2 5
x1 , x2 0
x1 , x2 Z
ou, equivalentemente,
L(u1 , u2 ) = Maximize
(17 10u1 u2 )x1 + (12 7u1 u2 )x2

+40u1 + 5u2
Sujeito a :
x1 4
x2 5
x1 , x2 0
x1 , x2 Z
O Lagrangeano dual e dado por:
LD : Minimize L(u1 , u2 )
u1 , u2 0
326
ub = 68.33
s0
x1 2
x1 1
s1
ub = 68.2857
ub = 65
s2
lb = 65
(x1 , x2 ) = (1, 4)
solucao inteira
x2 3
x2 2
ub = 68.2
s3
s4
s5
ub = 68.1425
ub = 58
s6
lb = 58
x2 2
x2 1
s7
x1 3
s9
lb = 63
ub = 68.1
s8
ub = 68
s10
ub =
infactvel
x1 4
ub = 63
lb = 63
infactvel
x1 3
x1 2
ub =
solucao inteira (
otima)
lb = 68
(x1 , x2 ) = (4, 0)
Figura A.12: Arvore

327
Para u1 = 1/2 e u2 = 1, temos que: a) (17 10u1 u2 ) = 11 x1 = 4; b)

(12 7u1 u2 ) = 7.5 x2 = 5. Portanto L(u1 , u2 ) = 11 4 + 7.5 5 +
40/2 + 5 = 106.5. Observe que L(u1 , u2 ) define um limite superior para o
problema inteiro em consideracao.
A relaxacao contnua corresponde ao problema do no s0 da arvore branchand-bound. Logo o limite superior obtido com esta relaxacao e 68.33.
328
A.12
Algoritmos de Planos de Corte e Desigualdades Fortes
EX 12.1:
i. X = {x B2 : 3x1 4x2 1}.

Podemos obter a seguinte desigualdade:

3x1 4x2 1
x2 1
3x1 3x2 2
x1 x2 2/3
x1 x2 2/3
x1 x2 0
Basta verificar graficamente que obtemos conv(X) introduzindo a restricao

x1 x2 . Note que X = {(0, 0), (0, 1), (1, 1)}.
ii. X = {(x, y) R+ B : x 20y, x 7}.

Adicionando a restricao x 7y pode-se verificar graficamente que se obtem
conv(X). Note que X = {(0, 0)} {(x, 1) : 0 x 7}.
iii. X = {(x, y) R+ Z+ : x 6y, x 16}.

Introduzindo a restricao x 12 + 4(y 2) = 4y + 4 à formulacao obtemos
conv(X). Observe que X = {(0, 0)} {(x, 1) : 0 x 6} {(x, 2) : 0
x 12} {(x, 3) : 0 x 16}.
Ex 12.2:
i. X = {(x, y) R2+ B : x1 + x2 2y, x1 1; x2 1} e (x1 , x2 , y) =

(1, 0, 1/2).
A desigualdade x1 y e valida e corta a solucao fracionaria. Introduzindo
esta restricao à formulacao e resolvendo a relaxacao linear nao obteremos a
mesma solucao fracionaria, com sorte uma solucao factvel sera produzida.
ii. X = {(x, y) R+ Z+ : x 9, x 4y} e (x, y) = (9, 9/4)

A desigualdade x 8 + (y 2) x 6 + y e valida e corta a solucao
corrente, pois 9 = x 6 6 + y = 6 + 9/4 = 8.25.
iii. X = {(x1 , x2 , y) R2+ Z+ : x1 + x2 25, x1 + x2 8y} e (x1 , x2 , y) =

(20, 5, 25/8).
A desigualdade x1 + x2 25 + (y 4) x1 + x2 21 + y e valida para
X. Alem disso a solucao fracionaria viola esta restricao pois 25 = 20 + 5 =
x1 + x2 6 21 + y = 21 + 25/8 = 24.125.
iv. X = {x Z5+ : 9x1 + 12x2 + 8x3 + 17x4 + 13x5 50} e x = (0, 25/6, 0, 0, 0).
Divididindo a desigualdade por 12, produzimos uma desigualdade valida:
9
8
13
12
x1 + 12
x2 + 12
x3 + 17
x4 + 12
x5 50
12
12
12
50
x1 + x2 + x3 + 2x4 + 2x5 12
x1 + x2 + x3 + 2x4 + 2x5 5
Observe que a u
ltima desigualdade e valida por construcao e corta a
solucao fracionaria corrente, pois 25/6 6> 5.
329
v. X = {x Z4+ : 4x1 + 8x2 + 7x3 + 5x4 33} e x = (0, 0, 33/7, 0).
Dividindo a desigualdade por 7 e realizando arredondamento obtemos:
8
7
5
33
4
8
7
5
33
4
x1 + x2 + x3 + x4
x1 + x2 + x3 + x4
7
7
7
7
7
7
7
7
7
7
x2 + x3 4
Observe que a desigualdade acima corta a solucao fracionaria, pois
4.7143 = x2 + x3 6 4.
33
7
EX 12.3: Prove que a desigualdade y2 + y3 + 2y4 6 e valida para X = {y Z4+ :

4y1 + 5y2 + 9y3 + 12y4 34}.
Dividindo a desigualdade por 5 e realizando arredondamento obtemos:
4
5
9
12
34
4
5
9
12
34
y1 + y2 + y3 + y4
y1 + y2 + y3 + y4
5
5
5
5
5
5
5
5
5
5
y2 + y3 + 2y4 6
EX 12.4: As iteracoes do algoritmo de planos de corte seguem abaixo.
Itera
c
ao 1: Introduzindo as variaveis de folgas w1 , w2 e w3 , e resolvendo a relaxacao linear obtemos o dicionario:
Max 68 +
S.a :
1
3
x1
x2
35
w
21 1
1
w
3 2
1
w
3 1
1
w
3 1
1
w
3 1
+
+
7
w
3 2
10
w
3 2
7
w
3 2
+ w3
=
=
=
5
3
10
3
7
3
Podemos entao gerar um corte de Gomory na primeira linha:

7
5
1
x1 + w1 w2 x1 3w2 1
3
3
3
1
7
5
x1 3w2 (x1 + w1 w2 ) 1
3
3
3
2
2
1
w1 w2
3
3
3
1
2
2
w1 w2 + w4 =
(A.4)
3
3
3
Itera
c
ao 2: Resolvendo a relaxacao linear apos introduzir o corte (A.4), obtemos
uma solucao inteira: x1 = 4, x2 = 0. O valor da funcao objetivo para esta
solucao e 68.
330
A.13
Programac
ao L
ogica
A.14
Programac
ao Din
amica: Domnio Discreto
EX 14.1: Abaixo damos uma implementa em Matlab do algoritmo.

%-----------------------------------------------------% asm.m -- Approximate String Matching
%------------------------------------------------------% Input: 1) sp - pattern string
%
2) st - text string
%
3) tym - type of matching.
%
tym=1 for perfect matching
%
tym=2 for matching anywhere in the text
% Output: 1) m x n matrix D, where m = length(sp) and
%
n = length(st).
%
Entry D[i,j] is the minimum number of differences
%
between sp(1:i) and st(1:j)
%
2) the matching cost (number of deletions, substitutions,
%
and insertions)
function [D, d] = asm(sp,st,tym)
m = length(sp); n = length(st); D = [];
for j=0:n
if tym==1
D(0+1,j+1) = j;
else
D(0+1,j+1) = 0;
end
end
for i=0:m
D(i+1,0+1) = i;
end
for i=1:m
for j=1:n
if sp(i)==st(j)
d1 = D(i-1+1,j-1+1);
else
d1 = D(i-1+1,j-1+1) + 1;
end
d2 = D(i-1+1,j+1)+1;
d3 = D(i+1,j-1+1)+1;
D(i+1,j+1) = min([d1, d2, d3]);
end
end
if tym==1
d = D(m+1,n+1);
end
if tym==2
d = D(m+1,0+1);
for j=1:n
if D(m+1,j+1)<d
d = D(m+1,j+1);
331
332
end
end
end
Para o padrao P = abcdef ghijkl e texto T = bcdef f ghixkl, podemos executar

os comandos Matlab abaixo para emparelhamento perfeito e flutuante, respectivamente:
sp = abcdefghijkl
st = bcdeffghixkl
[D, d] = asm(sp,st,1); % perfect matching
[D, d] = asm(sp,st,1); % matching anywhere in the text
Para o caso de emparelhamento perfeito a tabela D e indentica aos resultados

apresentados na Figura 14.2.
Se modificarmos o padrao para P = f g e mantivermos o mesmo texto, entao
obteremos D[i, j] conforme Tabela A.1 para o caso de emparelhamento perfeito,
e D[i, j] conforme Tabela A.2 para o caso de emparelhamento flutuante. Note
que no primeiro caso o custo de edicao e 10, enquanto que no segundo caso o
custo e nulo pois o padrao P = f g aparece no texto T .
Tabela A.1: Tabela D[i, j] para emparelhamento perfeito
T
P 0
f 1
g 2
b
1
1
2
c
2
2
2
d
3
3
3
e
4
4
4
f
5
4
5
f
6
5
5
g
7
6
5
h
8
7
6
i
9
8
7
x
10
9
8
k
11
10
9
l
12
11
10
Tabela A.2: Tabela D[i, j] para emparelhamento flutuante

T
P 0
f 1
g 2
b
0
1
2
c
0
1
2
d
0
1
2
e
0
1
2
f
0
0
1
f
0
0
1
g
0
1
0
h
0
1
1
i
0
1
2
x
0
1
2
k
0
1
2
l
0
1
2
EX 14.3: Seja Ji,N o custo de formatacao otima para a subcadeia (wi , . . . , wN ). Podemos desenvolver as recorrencias estagio por estagio.
a) i = N : Temos o valor terminal:
JN,N =
0
|b b|
se b = A LN b
se b < b
333
b) i = N 1: Temos a recorrencia:
JN 1,N 1 = |b b| onde b = A LN 1
JN 1,N 1 = min
se LN 1 + LN A and
b = (A LN 1 LN )/2 b
se LN 1 + LN A and b < b
2|b b|
JN 1,N + JN,N
c) i = N 2: Temos a recorrencia:
JN 2,N 2 = |b b| onde b = A LN 2
JN 2,N 1 = min
JN 2,N
2|b b|
JN 2,N 2 + JN 1,N 1
3|b b|
= min
J
+ JN 1,N
N 2,N 2
JN 2,N 1 + JN,N
se LN 2 + LN 1 A and
b = (A LN 2 LN 1 )/2
se LN 2 + LN 1 + LN A and
b = (A LN 2 LN 1 LN )/3 b
se LN 2 + LN 1 + LN A
E assim sucessivamente ate obtermos J1,N . Uma analise inicial nos leva a deduzir
que o computo de Ji,j consome (j i + 1) operacoes elementares. Portanto, o
custo total para resolucao das recorrencias e (N 2 ), consumindo tambem (N 2 )
unidades de memoria para armazenamento das tabelas Ji,j , i, j {1, . . . , N }.
Podemos melhorar a analise observando que nao e necessario computar Ji,j se
P
j
a que neste caso a subcadeia (wi , wi+1 , . . . , wj ) nao pode ser
k=i Lk > A, j
acomodada na linha. Assim, um algoritmo mais eficiente pode ser obtido com
base nesta observacao, o qual tera complexidade (N min{A, N }), que sera mais
eficiente quando o n
umero de palavras for maior do que o comprimento da linha.
O algoritmo sera linear no tamanho da entrada.
EX 14.4: As respostas estao enumeradas abaixo:
a) Seja gk (b) o comprimento do caminho mais curto de s ate k com custo
maximo b. Entao podemos formular o problema de forma recursiva:
gs (b) = 0, para b = 0, . . . , B
gk (0) = +, para todo k V {s}

g
k (b) = min{gk (b 1), min{gj (b cjk ) + wjk : (j, k) A, cjk b}},
k V {s}, b {1, . . . , B}
b) As recorrencias podem ser resolvidas atraves do algoritmo a seguir. O algoritmo tambem matem os parametros k (b), o qual nos da o predecessor de
k no caminho mais curto de s ate k com custo maximo b.
334
Algoritmo
Inicializa
c
ao
Para b = 0, . . . , B faca
gs (b) 0
s (b) nil
Para todo k V {s} faca
gk (0)
k (0) nil
Recorr
encia
Para b = 1, . . . , B faca
Para todo k V {s} faca
gk (b) gk (b 1)
k (b) k (b 1)
Para todo (j, k) A faca
Se cjk b e gj (b cjk ) + wjk < gk (b)
gk (b) gj (b cjk ) + wjk
k (b) j
Para cada valor b {1, . . . , B}, o algoritmo varre todos os arcos do grafo.
Assumindo que existe caminho com origem em s para todo k, a complexidade
do algoritmo e (B|E|). A memoria ocupada pelo algoritmo e tambem da
ordem (2B|E|) necessaria para armazenar as tabelas gk (b) e k (b).
EX 14.5: Seja D(i, j) o comprimento da maior subsequencia em comum para as subcadeias x(i) = (x1 , . . . , xi ) e y(j) = (y1 , . . . , yj ). Se i = 0 entao definimos x(i) =
como uma cadeia vazia, o mesmo ocorrendo quando j = 0 que implica y(j) =.
Podemos entao colocar o problema de uma forma recursiva:
D(0, j) = 0, j = 0, . . . , m
D(i, 0) = 0, i = 0, . . . , n
(A.5)
D(i, j) = max{D(i, j 1), D(i 1, j),
D(i 1, j 1) + 1 se xi = yj }, i, j > 0
A recorrencia dada por (A.5) nos leva imediatamente a um algoritmo de programacao dinamica.
Algoritmo
Inicializa
c
ao
Para j = 0, . . . , m faca
D(0, j) 0
Para i = 0, . . . , n faca
D(i, 0) 0
335
Recorr
encia
Para j = 1, . . . , m faca
Para i = 1, . . . , n faca
D(i, j) min{D(i 1, j), D(i, j 1)}
Se xi = yj entao
D(i, j) min{D(i, j), D(i 1, j 1) + 1}
A execucao do algortimo para as cadeias x = (A, B, C, B, D, A, B) e y =

(B, D, C, A, B, A) pode ser observeda na Figura A.13.
A partir do algoritmo de programacao dinamica e imediata a conclusao que a
memoria utilizada e (nm) e o tempo de execucao, que corresponde ao preenchimento das entradas da tabela D(i, j), e (nm).
y1
y2
y3
y4
y5
y6
x1 A
x2 B
x3 C
x4 B 0
x5 D 0
x6 A 0
x7 B 0
Figura A.13: Exemplo de execucao do algoritmo de programacao dinamica para subsequencia mais longa de duas cadeias de caracteres.
Para computar as subsequencias mais longas em comum entre x e y, podemos

construir um grafo direcionado e acclico, tendo como vertices os pontos de casamento maximo (crculos com valor 4 na Figura A.13), os vertices de casamento
perfeito alcancaveis (com crculo) a partir dos vertices de valor 4, e com arcos
dados pela relacao de alcancavel. Para o exemplo da figura, o grafo correspondente aparece na Figura A.14. Todos os possveis camimhos de vertices com
rotulo 4 ate vertices com rotulo 1 definem emparelhamentos que induzem subcadeias mais longas. Note que os arcos sao sempre de um vertice com rotulo i
para um vertice com rotulo i 1. Portanto, todos os caminhos tem o mesmo
comprimento, ou seja, o comprimento da subcadeia mais longa.
336
1
x 2 y1
1
x 4 y1
2 x 3 y3
2
x 5 y2
3
x 6 y4
3 x 4 y5
4 x 6 y6
4 x y
7
5
Figura A.14: Grafo para computo de todos os possveis emparelhamentos de subcadeias

mais longas.
EX 14.6: Seja G = (V, E) a arvore com a hierarquia da empresa XYZ. Inicialmente,

considere o subproblema restrito à subarvore dos descendentes do vertice n:
P
Jny = Maximize
jSn rj xj
Sujeito a :
xi + xj 1, (i, j) E[Sn ]
xn = y
xi {0, 1}, i Sn
onde Sn = {j : existe caminho de n para j em G} e o conjunto dos descendentes
de n, y = 1 se o empregado n e convidado e y = 0 caso contrario. Note que
n Sn . Defina tambem:
Jn = max{Jn0 , Jn1 }
afinal de contas, temos que decidir se convidamos ou nao o empregado n. Entao
o problema da festa otimizada pode ser resolvido recursivamente, conforme as
recorrencias abaixo:
0
P
Jj
Jn =
jAP
n
Jn1 = rn + jAn Jj0
(A.6)
0
1
Jn = max{Jn , Jn }
onde An = {j : (n, j) E} e o conjunto dos descendentes imediatos de n.
Podemos resolver eficientemente as recorrencias (A.6) seguindo um ordem topologica reversa de G. Obtemos um algoritmo de programacao dinamica.
Algoritmo
Inicializa
c
ao
Obtenha uma ordem topologica reversa I = (i1 , . . . , iN )
dos vertices de G
Para n = 1, . . . , N faca
337
Jn Jn0 Jn1 0
Recorr
encia
Para k = 1, . . . , N faca
n iP
k
Jn0 = jAn Jj
P
Jn1 = rn + jAn Jj0
Jn = max{Jn0 , Jn1 }
Tabela A.3: Resolucao das recorrencias do algoritmo de programacao dinamica

n
Jn0
Jn1
Jn
n
Jn0
Jn1
Jn
n
Jn0
Jn1
Jn
n
Jn0
Jn1
Jn
36
0
0.2314
0.2314
26
0
0.8194
0.8194
16
1.0651
0.2405
1.0651
6
2.2340
1.4419
2.2340
35
0
0.3618
0.3618
25
0
0.8571
0.8571
15
0
0.0929
0.0929
5
2.7765
1.9883
2.7765
34
0
0.6013
0.6013
24
0.9786
0.8624
0.9786
14
0.8571
0.2781
0.8571
4
3.7543
4.5095
4.5095
33
0
0.9786
0.9786
23
0
0.3838
0.3838
13
0.9786
1.3284
1.3284
3
2.2616
2.1511
2.2616
32
0
0.8832
0.8832
22
1.0445
0.1118
1.0445
12
0
0.9056
0.9056
2
5.0105
5.1816
5.1816
31
0
0.1613
0.1613
21
0
0.7379
0.7379
11
1.4283
2.0386
2.0386
1
11.9527
11.9979
11.9979
30
0.5932
0.1397
0.5932
20
0
0.1851
0.1851
10
0.7379
0.2468
0.7379
29
0
0.6041
0.6041
19
0.5932
1.1659
1.1659
9
2.8527
2.4287
2.8527
28
0.6013
0.8976
0.8976
18
1.5017
0.9255
1.5017
8
0.9016
0.0096
0.9016
27
0
0.2457
0.2457
17
0
0.9016
0.9016
7
2.0151
2.2616
2.2616
Note que uma ordem topologica pode ser obtida em tempo O(N + M ) = O(N ),
onde N = |V | e M = |E|. O laco de inicializacao e executado em tempo O(N ).
O laco de recorrencia percorre cada vertice precisamente uma vez. Para cada
vertice n, sao executadas O((n) + 1) operacoes sendo
(n) = |An |. Portanto,
P
o custo computacional do laco e da ordem de O( nV (n)) + O(N ) = O(N ).
Conclumos que o algoritmo executa em tempo linear (N ).
A quantidade de memoria e precisamente o n

umero de entradas necessarias para
armazenar as tabelas, sendo esta da ordem de (3N ) = (N ).
Para garantir que o presidente sera convidado, basta utilizar a solucao cujo valor
e J11 , segundo a qual o presidente (vertice 1) e convidado.
Na solucao otima para o problema o presidente e convidado, pois J11 > J10 conforme a Tabela A.3. Nao e difcil construir um algoritmo que percorre esta tabela
e produz a lista de convidados. Os seguintes convidados constam da lista: 1, 7,
11, 12, 13, 17, 19, 20, 21, 25, 26, 27, 28, 29, 31, 32, 33, 35 e 36.
338
EX 14.7: Daremos uma resposta informal ao problema. Seja m {1, . . . , 21} o

n
umero de palitos que restam sobre a mesa. Eliminamos o contador de iteracao k
pois a poltica de controle otima depende apenas do n
umero de palitos restantes,
sendo independente de quantas iteracoes foram realizadas. Seja (m) {1, . . . , 3}
a decisao otima quando ha m palitos sobre a mesa. Seja tambem J(m) {0, 1}
o ganho recebido pelo jogador, onde J(m) = 1 se o jogador ganhara com certeza,
e J(m) = 0 caso contrario. Podemos calcular a poltica de controle otima (m)
resolvendo para m = 1, 2, . . . , 21, conforme indicam as tabelas A.4 e A.5. O asterisco indica que qualquer valor valido, {1, 2, 3}, pode ser selecionado sem afetar
o resultado final.
Tabela A.4: Jogos dos palitos
m
(m)
J(m)
1
1
0
2
1
1
3
2
1
4
3
1
5
*
0
6
1
1
7
2
1
8 9
3 *
1 0
10
1
1
11
2
1
12
3
1
Tabela A.5: Jogos dos palitos

m
(m)
J(m)
14
1
1
15
2
1
16
3
1
17
*
0
18
1
1
19
2
1
20
3
1
21
*
0
13
*
0
339
A.15
Programac
ao Din
amica: Domnio Contnuo
EX 15.1: O problema pode ser colocado de forma recursiva em tres estagios:

J2 (x2 ) = r(x2 T )2
J1 (x1 ) = Min u21 + J2 (x2 )
u1
S.a: x2 = (1 )x1 + u1
J0 (x0 ) = Min u20 + J1 (x1 )
u0
S.a: x1 = (1 )x0 + u0
No estagio terminal nao ha o que otimizar, logo podemos encontrar a poltica de
ultimo estagio.
controle otima 1 (x1 ) dependente do estado no pen
Min f1 (x1 ) = u21 + r[(1 )x1 + u1 T ]2
Uma vez que f1 e uma funcao convexa em y1 , podemos encontrar a solucao otima
quando a derivada e nula.

d
d 2
f1 =
u1 + r[(1 )x1 + u1 T ]2
u1
u1
= u1 + r(1 )x1 + r2 u1 rT
Fazendo df1 /du1 = 0, conclumos que:
r[T (1 )x1 ]
1 + ra2
J1 (x1 ) = u21 + r(x2 T )2
= 1 (x1 )2 + r [(1 )x1 + 1 (x1 ) T ]2
r[(1 )x1 T ]2
=
1 + r2
1 (x1 ) =
Procedendo ao primeiro estagio, podemos obter J0 (x0 ) com base na poltica otima
a ser aplicada no estagio seguinte:
J0 (x0 ) = u20 + J1 (x1 )
r[(1 )x1 T ]2
= u20 +
1 + r2
Uma vez que J0 e convexa, podemos calcular o valor mnimo fazendo a derivada
em relacao a u0 assumir o valor nulo. A derivada de J0 e:
d
2r
[(1 )2 x0 + (1 )u0 T ](1 )
J0 = 2u0 +
du0
1 + ra2
e fazendo dJ0 /du0 nula, calculamos a lei de controle otima para o primeiro estagio:
0 (x0 ) =
r(1 )
[T (1 a)2 x0 ]
1 + r2 (1 + (1 )2 )
Consequentemente, obtivemos uma poltica de controle otima = (0 , 1 ).
340
EX 15.3: Consideracoes inciais:

Seja xk {t, b} o estado da maquina no incio da semana k, on t indica que
a maquina esta trabalhando e q, maquina quebrada.
Seja uk (q) {r, s} acao no nicio da semana k se o estado da maquina e
quebrada, onde r indica reparo e s substituicao por uma maquina nova.
Seja uk (t) {m, n} a acao no incio da semana k se o estado da maquina e
trabalhando), onde m indica manutencao preventiva e n indica que nenhuma
medida sera tomada.
Jk (xk ) o lucro maximo a partir da semana k se a maquina inicia a semana
no estado xk .
Vamos aplicar o algoritmo de programacao dinamica a partir da u
ltima semana
e progredir ate a primeira semana.
Semana k = 4: Consideramos os dois possveis estados:
a) xk = t: O custo otimo e dado por:
J4 (t) = max{ 0.6 80 + 0.4 20, 0.3 100 + 0.7 0 }
manutencao
sem prevencao
= max{
40,
30
} = 40
Portanto, J4 (t) = 40 e 4 (t) = m.
b) xk = q: O custo otimo e dado por:
J4 (q) = max{ 0.6 60 + 0.4 40,
50
}
reparo
substituicao
= max{
20,
50
} = 20
Portanto, J4 (q) = 20 e 4 (q) = r.
Semana k = 3: Consideramos os dois possveis estados:
a) xk = t: O custo otimo e dado por:
J3 (t) = max{ 0.6 (80 + J4 (t)) + 0.4 (20 + J4 (q)), manut
0.3 (100 + J4 (t)) + 0.7 (0 + J4 (q)) } n
= max{ 0.6 (80 + 40) + 0.4 (20 + 20),
0.3 (100 + 40) + 0.7 20
}
= max{ 72, 56 } = 72
Portanto, J3 (t) = 72 e 3 (t) = m.
b) xk = q: O custo otimo e dado por:
J3 (q) = max{ 0.6 (60 + J4 (t)) + 0.4 (40 + J4 (q)), rep
50 + J4 (t)
}
sub
= max{ 36 + 0.6 40 + 0.4 40 + 0.4 20,
50 + 40
}
= max{ 52, 10 } = 52
Portanto, J3 (q) = 52 e 3 (q) = r.
341
Semana k = 2: Se iniciamos a semana com a maquina trabalhando, xk = t,

entao J2 (t) = 104 e 2 (t) = m. Se iniciamos com a maquina quebrada,
xk = q, entao J2 (q) = 84 e 2 (q) = r.
Semana k = 1: Iniciamos a primeira semana com a maquina trabalhando, xk =
t, o que nos leva a J1 (t) = 136 e 1 (t) = m.
EX 15.6: Abaixo seguem as solucoes item a item.
i. O sistema de equacoes diferenciais pode

(M + m) ml
1
2l
ser colocado na forma:

y
u
=
2g
(A.7)
Seja A a matriz à esquerda da equacao acima. Podemos calcular A1 fazendo

A1 = adj(A)/det(A):

1
2l
ml
1
A =
(M + m)2l ml 1 (M + m)
Pre-multiplicando (A.7) por A1 , obtemos:

1
=
(2M + m)l
2l
ml
1 (M + m)

u
2g
(A.8)
podemos colocar (A.8) na forma:

Fazendo x1 = y, x2 = y,
x3 = e x4 = ,

0 1
x 1
x 2 0 0

x 3 = 0 0
x 4
0 0
0
2mg
2M +m
2g(M +m)
(2M +m)l
0
x1
0 x2
1 x3
x4
0
2
2M +m
(2M 1+m)l
Substituindo as constantes com grandeza fsicas em (A.10)

tema de equacoes:

x1
x 1
0
0 1
0
0
x 2 0 0 0.4780 0 x2 0.0976
+

x 3 = 0 0
0
0
1 x3
0.0976
0 0 20.0780 0
x4
x 4
(A.9)
obtemos os ssi
(A.10)
EX 15.7: O problema pode ser modelado como um processo Markoviano conforme

Figura A.15, onde S e o estado inicial, SP (SI ) e o estado intermediario com valor
par (mpar) e FP (FI ) e o estado terminal com valor par (mpar). Conhecemos o
valor dos estados terminais:
J(FP ) = 100
J(FI ) = 100
342
Podemos entao calcular o valor otimo dos estados intermediarios:

J(SP ) = max{rola dado A, rola dado B}
1
1
= max{110 + 100 , 110 0.3 + 100 0.7}
2
2
= max{5, 37}
= 37
J(SI ) = max{rola dado A, rola dado B}
= max{110 0.5 + 100 0.5, 110 0.7 + 100 0.3}
= max{5, 47}
= 5
Logo a poltica otima para os estados SP e SI e:
(SP ) = B
(SI ) = A
Continuando o processo recursivo, calculamos o valor do estado inicial S:
J(S) = max{rola dado A, rola dado B}
1
1
= max{J(SP ) + J(SI ) , J(SP ) 0.3 + J(SI ) 0.7}
2
2
= max{16, 7.6}
= 16
Portanto a acao otima para o estado inicial e (S) = A. Obtemos uma poltica
otima = ((S), (SP ), (SI )) = (A, B, A).
1/2
1/2
1/2
FP
SP
0.3
1/2
$110
0.7
0.7
S
1/2
0.3
B
A
0.7
1/2
FI
SI
B
$100
0.3
Figura A.15: Processo Markoviando do jogo par-mpar.
343
A.16
Programac
ao N
ao-Linear
Fundamentos
Sob
Restrico
es:
EX 16.2 Vamos mostrar que o n

umero de solucoes que satisfazem as condicoes KKT
de primeira ordem e finito e, portanto, o n
umero de otimos locais e obrigatoriamente finito. Tomemos o Lagrangeano:
L(x, ) = (x2 + 100)2 + 0.01x1 2 (x2 cos x1 )
Diferenciando L, obtemos:
x1 L = 0.02x1 sin x1
x2 L = 2(x2 + 100)
L = x2 + cos x1
Uma vez que x2 L = 0, conclumos a partir de (A.12) que x2 =
tituindo x2 em (A.11) e (A.13), e de L = 0, teremos:
0.02x1 sin x1 = 0
cos x1 + 100 = 0
2
(A.11)
(A.12)
(A.13)
100. Subs(A.14)
(A.15)
Evidenciando em (A.15), temos = 2 cos x1 + 200 e depois substituindo em

(A.14) deduzimos que:
0.02x1 2 cos x1 sin x1 200 sin x1 = 0
(A.16)
A equacao (A.16) pode ser colocada na forma:

h(x1 ) = g(x1 )
(A.17)
onde h(x1 ) = 0.02x1 e g(x1 ) = 2 cos x1 sin x1 + 200 sin x1 . Note que g(x1 ) e
periodica e limitada, sendo g(x1 ) [202, 202]. Portanto a reta h(x1 ) intercepta
g(x1 ) um n
umero finito de vezes. Da conclumos que o n
umero de solucoes de
(A.16) e finito, portanto, o n
umero de solucoes KKT tambem e finito.
EX 16.5: Em princpio podemos utilizar o pacote do Prof. Kunz fazendo g(x) =
f (x)T f (x) = kf (x)k2 . Note que g : Rn R, sendo g contnua e diferenciavel
pois f e contnua e diferenciavel. Seja f = [f1 (x) . . . fn (x)]T com fj : Rn R.
Entao g(x) = 0 f (x)T f (x) = 0 fj (x) = 0, j = 1, . . . , n x e solucao de
f (x) = 0.
EX 16.6: Podemos fazer uso do pacote de software do Prof. Kunz fazendo h(x) =
f (x) e g(x) = f (x). Neste caso, se encontrarmos x tal que h(x) = 0 e g(x) < 0
entao x satisfaz as condicoes suficientes de segunda ordem, f (x) = 0 e f (x) > 0,
e deve ser um mnimo local.
344
EX 16.7: Tomemos inicialmente o Lagrangeano do problema:

L(x, , ) =
n
X
c i xi +
i=1
n
X
gi (xi ) + (
i=1
n
X
xi b)
i=1
n
X
i xi
(A.18)
i=1
com > 0 e i > 0, i = 1, . . . , n. Pelas condicoes KKT, todo x mnimo satisfaz

as relacoes:
gi (xi )
L
= ci +
+ i = 0,
xi
xi
n
X
xi b 6 0
i = 1, . . . , n
i=1
xi > 0,
i > 0,
>0
n
X
i=1
i = 1, . . . , n
i = 1, . . . , n
xi b) = 0
i xi = 0,
i = 1, . . . , n
Fazendo
i = ci +
gi (xi )
+
xi
e substituindo no sistema KKT, eliminamos i e obtemos:

n
X
i=1
xi b 6 0
xi > 0,
gi (xi )
+ > 0,
xi
>0
n
X
(
xi b) = 0
ci +
i = 1, . . . , n
i = 1, . . . , n
i=1

gi (xi )
+ = 0,
xi c i +
xi

i = 1, . . . , n
A.17
Programac
ao N
ao-Linear Sob
Fundamentos de Algoritmos
345
Restrico
es:
346
A.18
Programac
ao Quadr
atica
EX 18.2: Primeiramente, vamos expandir a funcao o objetivo:

1
1
1
f (x) = (x x0 )T (x x0 ) = xT x xT x0 + xT0 x0
2
2
2
Vamos agora obter o Lagrangeano:
1
1
L(x, ) = f (x) T (Ax b) = xT x xT x0 + xT0 x0 T (Ax b)
2
2
sendo Rm1 . Calculando os gradientes de L com respeito a x e , obtemos:
x L = x x 0 AT
L = (Ax b)
Uma vez que L = 0, deduzimos que
AT = x x0 AAT = A(x x0 )
Uma vez que A tem posto de linha completo, AAT Rmm e rank(AAT ) = m.
Logo,
= (AAT )1 A(x x0 ) = (AAT )1 (Ax Ax0 ) = (AAT )1 (b Ax0 )
como esperado. Portanto, a solucao do problema e:
x = x 0 + AT
= x0 + AT (AAT )1 (b Ax0 )
EX 18.4: Prof. Kunz esta equivocado em sua afirmacao pois podem haver equacoes
redundantes, i.e., podem existir linhas de A linearmente dependentes. Nao faria
sentido resolver o problema se rank(A) < rank([A|b]) (i.e, quando nao existe
solucao para Ax = b) ou se rank(A) = rank([A|b]) = n (i.e., quando a solucao de
Ax = b e u
nica). Faz sentido resolver o problema de otimizacao quando existem
infinitas solucao: rank(A) = rank([A|b]) < n. Considere o problema abaixo:
Minimize k(x1 , x2 )k
Sujeito a :
x1 +
2x1 +
x1
2x1
2x2
4x2
2x2
4x2
=
1
=
2
= 1
= 2
Observe que m > n, mas rank(A) = rank([A|b]) = 1 < n pois a segunda, a terceira e a quarta linha sao m
ultiplos da primeira linha, contradizendo a afirmacao
do Prof. Kunz.
347
EX 18.5: Note que minimizar uma funcao f (x) equivale a minimizar 2f (x). Logo:
min q(x) min 2q(x) min 22 xT Qx + 2dT x + 2c min 12 xT Qx + 21 xT QT x +
2dT +2c min + 21 xT (Q+QT )x+2dT x+2c. Assim podemos resolver o problema
em consideracao resolvendo um problema tipo PQ onde Q e substituda por Q +
QT , d por 2d e c por 2c. Entao resolvemos o problema abaixo:
1 T
x (Q
2
Minimize
Subjeito a :
+ QT )x + 2dT x + 2c
Ax b
EX 18.6: Obtenha primeiramente o Lagrangeano:
m
cX 2 X
1
ei +
i (yi wT (xi ) b ei )
L(w, b, e, ) = wT w +
2
2 i=1
i=1
Agora, calcule as derivadas parciais:

L/w = w
L/b =
m
X
i (xi )
(A.19)
i=1
m
X
(A.20)
i=1
L/ei = cei i , i = 1, . . . , m
T
L/i = yi w (xi ) ei , i = 1, . . . , m
(A.21)
(A.22)
Uma vez que as derivadas de L devem ser nulas, para satisfazer condicoes necessarias de otimalidade, fazendo:
ei = i /c, i = 1, . . . , m
m
X
w=
i (xi )
(A.23)
(A.24)
i=1
e substituindo em (A.22), obtemos as equacoes (A.19)(A.22) do Lagrangeano

em funcao das variaveis i e b:
m
X
i = 0
(A.25)
i=1
yi
m
X
j=1
(xj )T j (xi ) b i /c = 0, i = 1, . . . , m
(A.26)
De forma mais compacta, (A.25)(A.26) podem ser colocadas em notacao matricial:

0
b
0
1T
(A.27)
=
y
1 Q + c1 I
onde: 1 = (1, . . . , 1)T , y = (y1 , . . . , ym )T , = (1 , . . . , m )T e Q e uma matriz
m m com entrada Qij = (xi )T (xj ). A solucao do problema PQ se reduz
a resolver a equacao (A.27) e encontrar w a partir de (A.24), assim obtendo o
aproximador otimo f(x, w, b) = wT (x) + b.
348
EX 18.7: Basta fazer q = bA1 u.
A.19
349
Programac
ao N
ao-Linear sob Restrico
es: Algoritmos
EX 19.1: Os codigos Matlab da funcao barreira e do algoritmo de barreiras seguem

abaixo. A Figura A.16 da a trajetoria gerada pelo algoritmo de barreiras. A
seq
uencia de iterandos e convergente para a solucao otima (x1 , x2 ) = (4, 8).
%----------------------------% bm - barrier method

x = [];
x(1,1) = 0.5; x(1,2) = 0.5;
mu = []; mu(1) = 100;
opt = optimset(fminsearch); opt = optimset(opt,MaxIter,100);
opt = optimset(opt,TolX,1e-8);
for k=2:20
xi = x(k-1,:);
z = fminsearch(b,xi,opt,mu(k-1));
x(k,1) = z(1);
x(k,2) = z(2);
mu(k) = mu(k-1)*0.4;
end
%----------------------------% b(x; mu)

function r = b(x, mu)
x1 = x(1); x2 = x(2);
r = -3*x1 - 2*x2 ...
- mu*log(
1 - x1 + 2*x2) ...
- mu*log( 2 - x1 + x2) ...
- mu*log( 6 - 2*x1 + x2) ...
- mu*log( 5 x1) ...
- mu*log( 16 - 2*x1 - x2) ...
- mu*log( 12 - x1 - x2) ...
- mu*log( 21 - x1 - 2*x2) ...
- mu*log( 10 - x2) ...
- mu*log( x1 ) ...
- mu*log( x2 );
EX 19.2: Conversoes entre algumas representacoes sao dadas abaixo.
350
12
x
10
solucao otima
8
4
trajetoria
x1
Figura A.16: Trajetoria de iterandos produzida pelo algoritmo de barreiras.

1 2: A conversao pode ser demonstrada como segue:
1
{x : (x x0 )T A1 (x x0 ) 1} {x : kA 2 (x x0 )k2 1
1
{x : kA 2 (x x0 )k 1
{x : kuk 1} com u = A 2 (x x0 )
1
{x : kuk 1} com A 2 u + x0 = x
1
{A 2 u + x0 : kuk 1}
{Bu + x0 : kuk 1} com B = A 2
Note que det(A) 2 = det(A 2 ) = det(B).

2 3: Uma vez que x E na representacao 2 se x = Bu + x0 , temos que
u = B 1 (x x0 ) = Ax b com A = B 1 e b = B 1 x0 . Observe que
Bu + x0 = B(Ax b) + x0 = x Bb + x0 = x BB 1 x0 + x0 = x. Portanto
E = {Bu+x0 : kuk 1} = {x : kAxbk 1}. Note que det(B) = det(A1 ).
3 4: A conversao pode ser desenvolvida como segue. kAx bk 1 (Ax
b)T (Ax b) 1 xT AT Ax 2bT Ax + bT b = xT Cx + 2dT x + e para
C = AT A = A2 , d = AT b, e e = bT b.

LN Métodos Numéricos Computacional

Enviado por

Direitos autorais:

Formatos disponíveis

LN Métodos Numéricos Computacional

Enviado por

Dados do documento

Título original

Direitos autorais

Formatos disponíveis

Compartilhar este documento

Compartilhar ou incorporar documento

Opções de compartilhamento

Você considera este documento útil?

Este conteúdo é inapropriado?

Direitos autorais:

Formatos disponíveis

LN Métodos Numéricos Computacional

Enviado por

Direitos autorais:

Formatos disponíveis

UNIVERSIDADE FEDERAL DE SANTA CATARINA

Agradeco sinceramente o apoio recebido dos alunos Alberto X. Pavim, Agustinho

2.3.4 Encontrando o Passo . . . . . . . . . . . . . . . . . . .

5 Treinamento de Redes Neurais: Um Problema de Otimizac

7 Teoria dos Jogos

7.4 Estrategia Otima

7.5 Estrategia Otima para o Agente Linha .

7.10 Exerccios . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 105

10.2.4 Problema de Otimizacao Combinatoria . . . . . . . . . . . . . .

12 Algoritmos de Planos de Corte e Desigualdades Fortes

19.5.2 Linhas Gerais do Metodo SQP

Predicao peso com base na altura . . . . . . . . . . . . . . . . . . . . .

Exemplo de funcao com um n

Ilustracao do processo iterativo de Newton. . . . . . . . . . . . . . . . .

Operador cross-over de um ponto. . . . . . . . . . . . . . . . . . . . . .

Exemplo de topologia de redes neurais. . . . . . . .

Exemplo de problema infactvel. As regioes achuradas indicam as regioes

Curvas de nvel, conjuntos reativos, solucao Nash e pontos Pareto de um

8.18 Propriedade de unimodularidade das matrizes de incidencia de grafos.

Rede exemplo do problema de alocacao de rotas. . . . . . . . . . . . . . 150

Ilustracao da solucao obtida atraves de arredondamento

12.1 Espaco de solucoes factveis e desigualdade valida x 6 14 4(2 y) . 189

Fronteiras nao suaves . . . . .

16.8 Regiao de descenso vazia . . . . . . . . . . . . . . . . . . . . . . . . . . 237

A.7 Arvore branch-and-bound parcial . . . . . . . . . . . . . . . . . . . . . .

A.10 Arvore branch-and-bound parcial . . . . . . . . . . . . . . . . . . . . . .

A.12 Arvore branch-and-bound parcial . . . . . . . . . . . . . . . . . . . . . .

Iteracoes do metodo de Newton. . . . . . . . . . . . . . . . . . . . . . .

Amostras para treinamento da rede neural . . . . . . . . . . . . . . . .

Capacidade de producao dos

Dados do problema da mochila . . . . . . . . . . . . . . . . . . . . . . 139

Tabela D[i, j] para emparelhamento perfeito . . . . . . . . . . . .

A representacao da realidade e uma necessidade da sociedade moderna, seja pela

de programacao matematica e exemplificamos o seu uso em uma serie de problemas

Elementos de um Problema de Otimizac

Tipicamente, um problema de otimizacao tem tres elementos constituintes:

onde: f : Rn R e a funcao objetivo; g : Rn Rp e h : Rn Rq sao restricoes que

Sao duas as classes principais de excecoes `a formulacao geral do problema de otimizacao.

reduzidos a problemas envolvendo apenas um objetivo (combinando-se m

O problema de programa linear e um caso particular de (1.1) cuja funcao objetivo

Um atleta deseja encontrar uma dieta otimizada, ou seja, um programa alimentar

a1,1 x1 + a1,2 x2 + . . . + a1,N xN > b1

a2,1 x1 + a2,2 x2 + . . . + a2,N xN > b2

Aqui ilustramos uma aplicacao do problema de programacao inteira que envolve a

2) Tarefa: Formule o problema de definir quais depositos devem ser instalados de

O problema geral de programacao quadratica e formulado como segue:

O problema dos mnimos quadrados nao-linear consiste de um problema da seguinte

onde k k corresponde `a norma Euclidiana e f (x) : Rn Rm e uma funcao qualquer,

Mnimos Quadrados (Linear)

Varios problemas encontrados na pratica como, por exemplo, o problema de ajuste

Tabela 1.1: Dados amostrais

O Problema de Mnimos Quadrados

Consideremos inicialmente um sistema

linear com mais equacoes do que variaveis:

Figura 1.1: Predicao peso com base na altura

onde aTi e a i-esima linha de A.

aos dados (t1 , y1 ), . . . , (tm , ym ), ou seja, gostaramos que:

onde gi (t) : R R, i = 1, . . . , n, sao funcoes quaisquer mas conhecidas; tais funcoes

que, por sua vez, pode ser expresso em forma matricial: