Рекомендации для изучения непрерывного динамического программирования

11

Кто-нибудь знает хорошие ссылки для изучения непрерывного динамического программирования? Ссылки не должны быть книгами. Они также могут быть ссылками на онлайн-ресурсы. Были бы полезны ссылки на четкие, краткие обсуждения даже только основ.

jmbejara
источник
детерминированный, стохастический или оба? от чего зависит многое.
номинально жесткая
1
Сожалею. Оба были бы полезны, но я на самом деле имею в виду стохастик. Спасибо!
jmbejara
Просто подумал, что упомяну, что если мы собираемся ответить на подобные вопросы, мы должны придерживаться установленного соглашения о предоставлении 1 рекомендации на ответ.
cc7768

Ответы:

8

Для стохастического динамического программирования с непрерывным временем небольшая нетехническая программа Art of Smooth Pasting от Dixit является прекрасным вариантом. Он очень эффективно передает основную интуицию.

Более поздняя « Стоки» - «Экономика бездействия» - тоже приличная, но для практичного человека она, вероятно, уступает Дикситу - его гораздо большая длина и несколько более тяжелые обозначения не дают соразмерного вознаграждения.


Если лежащие в основе стохастические процессы не являются диффузионными, то я не уверен, что это лучшая ссылка. Наиболее распространенным таким случаем, который я видел (и который я использую сам), является случай дискретного множества экзогенных состояний, где, если мы в настоящее время находимся в состоянии существует некоторая постоянная степень опасности переключателя заявить . К счастью, на практике это довольно простой случай: можно просто изменить уравнение HJB, чтобы учесть вероятность переключения потока с на . (Вы можете увидеть это, например, в уравнениях (1) - (5) в этой статье Acemoglu и Akcigitλ s , s s V ( , s ) V ( , s )sλs,ssV(,s)V(,s), Концептуально это ничем не отличается от настройки уравнения HJB, когда в качестве движущего процесса используется диффузия Itō, за исключением того, что это проще, потому что мы просто получаем систему линейных уравнений и нам не нужно думать о лемме It и т. Д.)

Конечно, возможно, для этого есть и хорошая ссылка на учебник, но в отличие от потенциально гораздо более сложных случаев, связанных со стохастическим исчислением, это достаточно просто, так что текст никогда не казался мне необходимым.

номинально жесткий
источник
Экономика бездействия выглядит великолепно. Я немного посмотрел на это. Учитывая ваше описание «Искусства гладкой вставки» , я бы очень хотел проверить это, но мне кажется, что это немного сложно. Спасибо за рекомендации!
Джмбехара
5

Динамическое программирование и оптимальное управление Берцекасом

Введение в современный экономический рост Асемоглу

Книга Acemoglu, несмотря на то, что она специализируется на теории роста, очень хорошо представляет динамическое программирование с непрерывным временем.

Брайс
источник
4

Я думаю, что динамическая оптимизация Камиена и Шварца : расчет вариаций и оптимального управления в экономике и управлении довольно хорошо известен.

jmbejara
источник
Это очень хорошо, но обратите внимание, что книга не является вводной книгой по динамической оптимизации.
оптимальное управление
3

Действительно хорошая методология для аппроксимации HJB - это схема против ветра, которую я довольно быстро выучил, используя заметки и коды Бена Молла и его коллег.

Примерами являются непрерывные временные версии известных моделей экономики разнородных агентов, таких как Hugget и Aiyagari.

FooBar
источник
1

«Прикладная межвременная оптимизация » Клауса Вельде - очень хорошая книга, даже для тех, кто не очень знаком с математикой.

В книге рассматриваются детерминированные и стохастические модели, как в дискретном, так и в непрерывном времени.

Я бы действительно сказал для этой книги "Динамическая оптимизация для чайников". Я не был знаком с динамической оптимизацией, но эта книга позволила мне пройти.

оптимальное управление
источник
Эта книга выглядит фантастически. Я люблю организацию. Таблицы в начале действительно показывают, насколько они тщательны. Книга охватывает большинство интересных случаев и предоставляет множество примеров. (Извиняюсь за 4-летнюю задержку с ответом ... :))
jmbejara
1
Рад, что это помогает! Я так много узнал из этой книги :)
оптимальное управление