Когда не удается оптимальное управление (?)

17

Чтобы «задать свой вопрос», я должен сначала решить модель. Я опущу некоторые шаги, но тем не менее, это неизбежно сделает этот пост очень длинным - так что это также тест, чтобы увидеть, нравится ли этому сообществу такие вопросы.

Прежде чем начать, я поясняю, что это может выглядеть полностью как стандартная неоклассическая модель роста в непрерывном времени, но это не так : она касается одного человека, который не «представляет» кого-либо еще в экономике вокруг него, экономике, которая не моделируется. Основой здесь является «применение оптимального управления к задаче максимизации отдельного человека». Речь идет о структуре оптимального управления и самом методе.

Мы решаем проблему максимизации межвременной полезности для маленького предпринимателя, которому принадлежит капитал в его фирме, в то время как он покупает услуги по трудоустройству на совершенно конкурентном рынке труда и продает свой продукт (свежие пончики) на совершенно конкурентном рынке товаров. Мы устанавливаем модель в непрерывном времени без неопределенности (социально-экономические условия устойчивы) и с бесконечным горизонтом (бизнесмен предвидит много его будущих копий подряд):

maxc,,k0eρtlncdts.t.k˙=f(k,)wδkclimteρtλ(t)k(t)=0

где - потребление предпринимателя, - мгновенная полезность от потребления, - коэффициент чистых временных предпочтений, - капитал фирмы, - норма амортизации капитала, а f (k, \ ell) это производственная функция бизнеса. Начальный уровень капитала указан, к_0 . Собственная занятость бизнесмена бизнесом относится к капиталу. Производственная функция является стандартной неоклассической (постоянная отдача от масштаба, положительные предельные продукты, отрицательные вторые частичные, условия Инада). Ограничениями являются закон движения капитала и условие трансверсальности с использованием множителя текущего значения. clncρ>0kδf(k,)k0

Настройка текущего значения гамильтониана

H^=lnc+λ[f(k,)wδkc]

вычисляем условия первого порядка

H^c=01c=λc˙c=λ˙λ

H^=0λ[fw]=0f=w

H^k=ρλλ˙λ[fkδ]=ρλλ˙

и объединяя их, мы получаем закон эволюции потребления нашего бизнесмена,

(1)c˙=(fkδρ)c

Из оптимального правила для спроса на рабочую силу (статический) и константы, возвращающейся к импликации масштаба ( ), мы получаем . Вставляя это в закон движения капитала, мы получаемf = f k k + f f - w = f k k:f=wf=fkk+ffw=fkk

(2)k˙=fkkδkc

Уравнения и образуют систему дифференциальных уравнений. Установившиеся значения для потребления и капитала предпринимателя( 2 )(1)(2)

(3)c=fkkδk,k:fk=δ+ρ

(3a)c=ρk

... это довольно знакомое выражение.

k иногда называют «измененным золотым правилом» уровня капитала. Якобиан системы, оцененный по значениям установившегося состояния, имеет отрицательный определитель для любого значения параметров модели , что является необходимым и достаточным условием для системы, чтобы продемонстрировать устойчивость по седловому пути.

Максимум локуса находится в точке, (иногда ее называют уровнем капитала "золотого правила") ~ кk˙=0k~

(4)k~:fkk(k~)k~+fk(k~)δ=0fk(k~)=δfkk(k~)k~

Значение важно в качестве эталона: это уровень капитала, где а - максимум (не оптимальное или устойчивое состояние ).k~k˙=0c

локусов пересекают горизонтальную ось фазовой диаграммы (что меры капитала) на стационарном уровень капитала .c˙=0k

Если , что требует из-за отрицательных вторых частичек, у нас будет «чрезмерное накопление капитала» (слишком много пончиков): бизнесмен мог бы наслаждаться более устойчивым государственное потребление с более низким уровнем капитала. Используя и мы имеемk>k~fk<fk(k~)(3)(4)

fk<fk(k~)δ+ρ<δfkk(k~)k~

(5)ρ<fkk(k~)k~

Неравенство является условием неоптимального устойчивого уровня капитала. И дело в том, что мы не можем исключить это . Это просто требует, чтобы бизнесмен был «достаточно терпеливым», с достаточно небольшим уровнем чистых временных предпочтений, но все же позитивным.(5)

Здесь начинается проблема: избыточное накопление капитала фактически исключается в модели репрезентативного агента. Это возможно в перекрывающихся моделях генерации, но как непредвиденное последствие на макроэкономическом уровне, один из самых ранних примеров того, что макроэкономика может быть микрообоснованной и по-прежнему вести себя иначе, чем микромир.

Но наша модель не относится ни к одной из категорий: это модель частичного равновесия одного агента в неявно неоднородной среде - и общее равновесие здесь не изменит результатов: этот человек представляет только себя. Таким образом, проблема в том, что если выполнено, то решение оптимального управления будет явно неоптимальным , потому что здесь у нас есть один человек, одна воля, единый разум: глядя на решение, наш бизнесмен скажет: « эй, этот метод бесполезен, если я последую его совету, я получу субоптимально высокий уровень капитала ». (5)

И я не удовлетворен тем, чтобы просто сказать: «Ну, Оптимальное управление не подходит для этой проблемы, попробуйте другой метод», потому что я не понимаю, почему мы должны считать его неподходящим. Но если он подходит, то метод должен сигнализировать , что - то не так, он должен в какой - то момент требуют , что имеет не выполняется, для того , чтобы быть в состоянии предложить решение (если так случится , что не подожди, все выглядит отлично).(5)(5)

Кто-то может спросить: «Может быть, условие трансверсальности нарушается, если выполнено?» - но это не выглядит так, потому что , которая переходит в положительную константу, а переходит в ноль, требуя только, чтобы .λ ( t ) k ( t ) = k ( t ) / c ( t ) e - ρ t ρ > 0(5)λ(t)k(t)=k(t)/c(t)eρtρ>0

Мои вопросы:

1) Может ли кто-нибудь предложить некоторое понимание здесь?

2) Буду признателен, если кто-нибудь решит это с помощью динамического программирования и сообщит о результатах.

ДОБАВЛЕНИЕ
С математической точки зрения, принципиальное отличие этой модели заключается в том, что оптимизированный закон движения капитала, ур. включает в себя не весь вывод как в стандартной модели, а только возврат к капиталу . И это происходит потому, что мы разделили права собственности на выход, что и следует ожидать в рамках «проблемы максимизации индивидуального бизнеса».(2)f k kf(k)fkk

Алекос Пападопулос
источник
Я не уверен, что вы имеете в виду, когда говорите "максимум локуса kdot = 0". Максимум по отношению к чему? Кроме того, когда вы вычисляете (4), разве вы не должны полностью дифференцировать (2), то есть не должны ли вы также рассчитывать изменение в c, необходимое для того, чтобы kdot = 0 все еще выполнялось после изменения k?
Вездесущий
@ Вездесущий максимум по отношению к капиталу. Именно так строятся фазовые диаграммы, но я не мог бы также включить эти расчеты здесь. По второму вопросу: происходит от установки в и выражения потребления как функции капитала, ( не оценивается при значении устойчивого состояния). Чтобы получить форму этого локуса, мы дифференцируем его по капиталу. ˙ k = 0 ( 2 ) c = f k k - δ k(4)k˙=0(2)c=fkkδk
Алекос Пападопулос
Я не проверил все это, но я вижу одну проблему: условие оптимальности труда (в соответствии с CRS) определяет соотношение капитала и труда, которое, в свою очередь, определяет предельный продукт капитала, который, таким образом, будет постоянным на оптимальном пути. Модель тогда эквивалентна стандартной проблеме экономии потребления с экзогенной процентной ставкой, поэтому, если MPK - delta> rho, потребление агента будет расти с постоянной скоростью (т. Е. Не будет устойчивого состояния).
ivansml
@ivansml. Спасибо за помощь. Но решение не говорит, что . Устойчивое состояние находится в точке, где , ур. . Проблема в том, какому уровню капитала соответствует это устойчивое состояние и будет ли оно выше или ниже уровня «золотого правила» . fkδ>ρfkδ=ρ(3)k~
Алекос Пападопулос
Только сейчас я заметил, что этот вопрос довольно старый ... надеюсь, это не имеет значения. Вернуться к теме - должен определяться трудовым ВОК. Устойчивое состояние будет существовать, только если это значение также равно , то есть по совпадению (или некоторому общему равновесному соображению). Если оно выше, агент будет накапливать капитал бесконечно, и его потребление растет, если оно ниже, он будет накапливать капитал, и его потребление падает. Это действительно все из-за предположения CRS - функция «выручки» будет линейной по когда фирма оптимизирует работу, поэтому устойчивый рост возможен. fkfkρ+δf(k,)wk
ivansml

Ответы:

9

Я полагаю, что проблема в том, что устойчивое состояние может не существовать, и вместо этого система демонстрирует устойчивый рост (в зависимости от параметров).

Причина в том, что модель эквивалентна стандартной проблеме экономии потребления с экзогенной и постоянной процентной ставкой. Чтобы увидеть это, сначала рассмотрим условие первого порядка для трудового выбора f2(k,)=w (здесь есть частная производная ф WRT. Я й аргумент). Используя определение постоянной прибыли, предельный продукт труда равен fifi которая зависит только от отношения капитала к труду. Если заработная плата постоянна, трудовой ВОК однозначно определяет оптимальный

f(k,)=[f(k,1)]=f1(k,1)k+f(k,1)
соотношение в зависимости от заработной платы ш и других параметров. Так как предельный продукт капитала k/w также зависит отk/, оно будет постоянным вдоль оптимального пути. Обозначим это значение предельного произведенияrи обозначим доходность за вычетом амортизацииr=r-δ. Уравнения (1) - (2) для динамики капитала и потребления тогда ˙ c t
kf(k,)=k[f(k,1)]=f1(k,1)
k/rr=rδ и конкретное решение, которое удовлетворяет условию трансверсальности, должно бытьct=ρktсзаданнымk0, то есть постоянная часть богатства потребляется в каждый момент времени. И капитал, и потребление растут со скоростью(
c˙t=(rρ)ctk˙t=rktct
ct=ρktk0 , поэтому устойчивого состояния не существует, если только доходность капитала (которая здесь зависит от экзогенной ставки заработной платы w ) не равна скорости предпочтения времени.(rρ)w
ivansml
источник
(+1) Спасибо. Я принимаю это сейчас в свой ответ.
Алекос Пападопулос
отличный ответ. в основном, после того, как рабочая сила выбрана оптимально, функция прибыли становится линейной в капитале - так что эта модель сводится к модели АК, чьи свойства (включая рост в устойчивом состоянии) хорошо понятны.
номинально жесткая
@nominallyrigid Но только если предположить, что заработная плата остается постоянной . Помните, что это не общее равновесие, а крошечный индивидуум, плавающий в океане экономики.
Алекос Пападопулос
6

Я публикую это как ответ, потому что он продолжается в ответе пользователя @ivansml ... который и определил улов здесь, улов, который я наивно упустил из виду (хотя это узкий случай, хотя интересный критерий наступает после. Тем не менее, это должно было быть решено).

Действительно, при экзогенной ставке заработной платы и совершенно конкурентной оптимизации спроса на рабочую силу предельный продукт капитала определяется только параметрами модели и ставкой заработной платы. Для простого случая, когда мы предполагаем, что ставка заработной платы постоянна, анализ @ivansml выполняется: модель становится моделью эндогенного роста : предельный продукт капитала является постоянным, что и необходимо для эндогенного роста, где нет устойчивого состояние в уровнях .

Обозначая с = ˙ с / с , а к = ˙ к / к , уравнения ( 1 ) и ( 2 )c^=c˙/ck^=k˙/k(1)(2) от OP можно записать

к =FK-δ-с

(1b)c^=fkδρ
(2b)k^=fkδc/k

Поскольку постоянна, скорость роста потребления постоянна - ноль, положительный или отрицательный, в зависимости от параметров и заработной платы. С другой стороны, дифференцируя ( 2 б ) по времени, мы получаемfk(2b)

k^˙=(k^c^)(c/k)

и очевидно , что для стационарного роста мы хотим к = с , что из ( 2 б ) получается только тогда , когда с = ρ к . Это легко проверить, так как λ ( t ) =k^=c^(2b)c=ρk , единственный способ выполнения условия трансверсальности - это если потребление и капитал растут или уменьшаются с одинаковой скоростью (или остаются постоянными).λ(t)=c(t)

В самих моделях эндогенного роста, где мы исследуем всю экономику, мы просто предполагаем, что параметры модели таковы, что существует положительный темп роста, потому что это то, что мы наблюдаем в реальном мире. Но здесь у нас есть только один человек. Итак, что мы можем сказать нашему бизнесмену?

Если , темпы роста являются положительными, и как его потребление, так и капитал должны расти «вечно», поддерживая постоянное соотношение. Если f k - δ - ρ = 0 , скорость роста равна нулю, и обе переменные остаются всегда постоянными. Если f k - δ - ρ < 0 , темп роста отрицательный, и мы должны войти в нисходящую спираль убывающих потребления и капитала (всегда сохраняя соотношение c =fkδρ>0
fkδρ=0
fkδρ<0 ).c=ρk

Это имеет некоторую интуицию, подтверждающую целесообразность применения Оптимального управления: с учетом других параметров и уровня заработной платы, чем больше «нетерпение» (тем больше ), тем больше становится вероятность того, что человек будет испытывать снижение уровня потребления, поскольку Будущее и, следовательно, инвестиции не очень по душе. Конечно, монотонная нисходящая спираль может показаться не очень реалистичной в качестве решения, но это очень стилизованная модель, обеспечивающая, по существу, общие тенденции на обязательно очень формальном математическом языке. ρ

Действительно интересная часть начнется , если мы рассмотрим переменную заработную плату . Это может создать всевозможную интересную и сложную динамику для нашего маленького бизнесмена и его решений в области потребления и инвестиций.

Алекос Пападопулос
источник
4

Я думаю, что ключевой вопрос заключается в том, является ли эта фирма единственной фирмой в экономике. Если это так, то уже не правильно принимать значение как заданное, поскольку w будет зависеть от его собственного решения о накоплении капитала. В этом случае вы должны сделать замены, которые вы сделали перед уравнением (2) при настройке гамильтониана. С другой стороны, если это одна из многих фирм, так что ставка заработной платы является экзогенной, то замены до экв. (2) не действительны. Я думаю , вам нужно тщательно различать big- к , совокупный капитал в экономике, и мало- K капитала , выбранный этого решением.wwkk

Джйотирмой Бхаттачарья
источник
Я строго смотрю на одну фирму, которая остается слишком маленькой, чтобы влиять на совокупность. Таким образом, ваш второй комментарий уместен, когда вы говорите «замены перед уравнениями (2) недействительны». Я не понимаю почему. Можете ли вы уточнить (желательно формально) об этом, пожалуйста? Спасибо.
Алекос Пападопулос
@AlecosPapadopoulos Я думаю, что проблема не в математической, а в интерпретации. Если моя фирма слишком мала, чтобы влиять на экономику, почему это должно быть так, что или r = f k для моей фирмы независимо от выбранного мной k , что, по-видимому, является допущением, подразумеваемым в заменах, которые вы делаете раньше (2), а затем дифференцировать RHS уравнения ˙ k по отношению к k . w=flr=fkkk˙k
Джотирмой Бхаттачарья
1
@JyotirmoyBhattacharya - это стандартный результат принятия конкурентных рынков.
FooBar
@FooBar На конкурентном рынке вы выбираете и l, чтобы сделать w = f l и r = f k . Условия не выполняются при произвольных l и k . klw=flr=fklk
Джотирмой Бхаттачарья
Хорошо, мне все-таки придется написать гамильтониан и сделать его еще длиннее.
Алекос Пападопулос