Lorsque le contrôle optimal échoue (?)

17

Afin de "poser ma question", je dois d'abord résoudre un modèle. Je vais omettre certaines étapes, mais cela rendra inévitablement ce message très long - c'est donc aussi un test pour voir si cette communauté aime ce genre de questions.

Avant de commencer, je précise que cela peut ressembler totalement à un modèle de croissance néoclassique standard en temps continu, mais ce n'est pas le cas : il s'agit d'un seul individu, qui ne "représente" personne d'autre dans l'économie qui l'entoure, une économie qui n'est pas modélisé. Le cadre ici est "l'application du contrôle optimal au problème de maximisation d'un seul individu". Il s'agit du cadre et de la méthode de la solution de contrôle optimal lui-même.

Nous résolvons le problème de maximisation de l'utilité intertemporelle d'un petit homme d'affaires qui détient le capital de son entreprise, alors qu'il achète des services de main-d'œuvre sur un marché du travail parfaitement concurrentiel et qu'il vend son produit (beignets frais) sur un marché de marchandises parfaitement concurrentiel. Nous posons le modèle en temps continu sans incertitude (les conditions socio-économiques sont stables), et à horizon infini (l'homme d'affaires envisage de nombreuses futures copies de lui d'affilée):

maxc,,k0eρtlncdts.t.k˙=f(k,)wδkclimteρtλ(t)k(t)=0

c est la consommation de l'homme d'affaires, lnc est l'utilité instantanée de la consommation, ρ>0 est le taux de préférence temporelle pure, k est le capital de l'entreprise, δ est le taux de dépréciation du capital, et f(k,) est la fonction de production de l'entreprise. Le niveau initial de capital est donné, k0 . La propre occupation de l'homme d'affaires dans l'entreprise est incluse dans le capital. La fonction de production est néoclassique standard (rendements d'échelle constants, produits marginaux positifs, seconds partiels négatifs, conditions Inada). Les contraintes sont la loi de mouvement du capital et la condition de Transversalité utilisant le multiplicateur de la valeur courante.

Configuration de la valeur actuelle hamiltonienne

H^=lnc+λ[f(k,)wδkc]

nous calculons les conditions de premier ordre

H^c=01c=λc˙c=λ˙λ

H^=0λ[fw]=0f=w

H^k=ρλλ˙λ[fkδ]=ρλλ˙

et en les combinant on obtient la loi d'évolution de la consommation de notre homme d'affaires,

(1)c˙=(fkδρ)c

À partir de la règle optimale pour la demande de main-d'œuvre (statique) et des rendements d'échelle constants ( ), nous obtenons . En insérant cela dans la loi de mouvement du capital, nous obtenonsf = f k k + f f - w = f k k:f=wf=fkk+ffw=fkk

(2)k˙=fkkδkc

Les équations et forment un système d'équations différentielles. Les valeurs à l'état stationnaire de la consommation et du capital de l'homme d'affaires sont( 2 )(1)(2)

(3)c=fkkδk,k:fk=δ+ρ

(3a)c=ρk

... qui est une expression assez familière.

k est parfois appelé le niveau de "règle d'or modifiée" du capital. Le jacobien du système évalué aux valeurs d'état stationnaire a un déterminant négatif pour toute valeur des paramètres du modèle , ce qui est une condition nécessaire et suffisante pour que le système présente une stabilité sur le trajet de la selle.

Le maximum du locus est au point, (parfois appelé niveau de capital "règle d'or") ˜ kk˙=0k~

(4)k~:fkk(k~)k~+fk(k~)δ=0fk(k~)=δfkk(k~)k~

La valeur est importante comme référence: c'est le niveau de capital où et est au maximum (pas optimal ou stable ).˙ k =0ck~k˙=0c

Le loci coupe l'axe horizontal du diagramme de phase (qui mesure le capital) au niveau du capital en régime permanent .kc˙=0k

Si , qui nécessite raison de seconds partiels négatifs, nous aurons une "suraccumulation de capital" (trop de beignets): l'homme d'affaires pourrait profiter de plus de stabilité - la consommation de l'État avec un niveau de capital inférieur. En utilisant et nous avons f k < f k ( ˜ k ) ( 3 ) ( 4 )k>k~fk<fk(k~)(3)(4)

fk<fk(k~)δ+ρ<δfkk(k~)k~

(5)ρ<fkk(k~)k~

L'inégalité est la condition pour un niveau de capital en régime permanent sous-optimal. Et le fait est que nous ne pouvons pas l'exclure . Cela exige simplement que l'homme d'affaires soit "suffisamment patient", avec un taux de préférence temporelle pur suffisamment faible, mais toujours positif.(5)

Ici commence le problème: la suraccumulation de capital est effectivement exclue dans le modèle de l'agent représentatif. Il est possible dans des modèles de génération qui se chevauchent, mais comme conséquence involontaire au niveau macroéconomique, l'un des premiers exemples que la macro-économie peut être micro-fondée et se comporter toujours différemment du micro-monde.

Mais notre modèle ne rentre dans aucune catégorie: il s'agit d'un modèle d'équilibre partiel d'un seul agent dans un environnement implicitement hétérogène - et l'équilibre général ici ne modifiera pas les résultats: cette personne ne représente que lui-même. Donc, le problème est que si tient, alors la solution de contrôle optimal sera évidemment sous-optimale , car ici nous avons une seule personne, une seule volonté, un seul esprit: en regardant la solution, notre homme d'affaires dira: " hé, cette méthode ne vaut rien, si je suis son conseil, je me retrouverai avec un niveau de capital sous-optimal ". (5)

Et je ne suis pas satisfait de dire simplement "eh bien, le contrôle optimal ne convient pas à ce problème, essayez une autre méthode", car je ne vois pas pourquoi nous devrions le considérer comme inapproprié. Mais si elle est appropriée, alors la méthode devrait signaler que quelque chose ne va pas, elle devrait à un moment donné exiger que ne tienne pas , afin de pouvoir offrir une solution (si cela se produit que ne maintenez, tout semble gonfler).(5)(5)

On pourrait se demander "peut-être que la condition de la transversalité est violée si tient?" -mais il ne semble pas que ce soit le cas, car , qui va vers une constante positive, tandis que va vers zéro, ne nécessitant que .λ ( t ) k ( t ) = k ( t ) / c ( t ) e - ρ t ρ > 0(5)λ(t)k(t)=k(t)/c(t)eρtρ>0

Mes questions:

1) Quelqu'un peut-il donner un aperçu ici?

2) Je serais reconnaissant si quelqu'un résolvait cela en utilisant la programmation dynamique et rapportait les résultats.

ADDENDA
D'un point de vue mathématique, la différence cruciale de ce modèle est que la loi optimisée de mouvement du capital, éq. n'inclut pas la totalité de la sortie comme dans le modèle standard, mais uniquement les rendements du capital . Et cela se produit parce que nous avons séparé les droits de propriété sur la sortie, ce qui est normal dans le cadre du "problème de maximisation de l'entreprise individuelle".f ( k ) f k k(2)f(k)fkk

Alecos Papadopoulos
la source
Je ne sais pas ce que vous voulez dire quand vous dites "le maximum du locus kdot = 0". Maximum par rapport à quoi? De plus, lorsque vous calculez (4), ne devez-vous pas totalement différencier (2) - c'est-à-dire ne devez-vous pas également calculer la variation de c qui est nécessaire pour garantir que kdot = 0 est toujours satisfait après avoir changé k?
Ubiquitaire
@ Maximum omniprésent par rapport au capital. C'est exactement ainsi que les diagrammes de phases sont dessinés, mais je ne pouvais pas inclure également ces calculs ici. Pour la deuxième question: vient de la définition de dans et de l'expression de la consommation en fonction du capital, ( non évalué à la valeur de régime permanent). Pour obtenir la forme de ce lieu, nous le différencions par rapport au capital. ˙ k = 0 ( 2 ) c = f k k - δ k(4)k˙=0(2)c=fkkδk
Alecos Papadopoulos
Je n'ai pas vérifié le tout, mais un problème que je vois est que la condition d'optimalité du travail déterminera (sous CRS) le rapport capital / travail, qui à son tour détermine le produit marginal du capital, qui sera donc constant le long du chemin optimal. Le modèle est alors équivalent à un problème standard d'économie de consommation avec un taux d'intérêt exogène, donc si MPK - delta> rho, la consommation de l'agent augmentera à taux constant (c'est-à-dire qu'il n'y a pas d'état stable).
ivansml
@ivansml. Merci d'avoir contribué. Mais la solution ne dit pas que . L'état stationnaire est au point où , éq. . Le problème est de savoir à quel niveau de capital correspond cet état stationnaire et s'il sera supérieur ou inférieur au niveau "règle d'or" . fkδ>ρ( 3 ) ˜ kfkδ=ρ(3)k~
Alecos Papadopoulos
Seulement maintenant, j'ai remarqué que cette question est plutôt ancienne ... j'espère que cela n'a pas d'importance. Retour au sujet - doit être déterminé par le FOC du travail. L'état stationnaire n'existera que si cette valeur de également égale à , c'est-à-dire par coïncidence (ou une certaine considération d'équilibre général). S'il est plus élevé, l'agent accumulera du capital indéfiniment et sa consommation augmentera, si elle est inférieure, il décumulera le capital et sa consommation diminuera. Tout est vraiment dû à l'hypothèse de CRS - la fonction "revenu" est linéaire en une fois que l'entreprise optimise sur le travail, donc une croissance régulière est possible. f k ρ + δ f ( k , ) - w kfkfkρ+δf(k,)wk
ivansml

Réponses:

9

Je crois que le problème est que l'état stationnaire peut ne pas exister et que le système présente une croissance régulière (en fonction des paramètres).

La raison en est que le modèle est équivalent au problème standard d'économie de consommation avec un taux d'intérêt exogène et constant. Pour voir cela, considérons d'abord la condition de premier ordre pour le choix du travail (ici, est une dérivée partielle de wrt. ème argument). En utilisant la définition des rendements constants, le produit marginal du travail est qui est uniquement fonction du rapport capital-travail. Si le salaire est constant, le FOC du travail détermine uniquement le optimalf i f i f2(k,)=wfifi

f(k,)=[f(k,1)]=f1(k,1)k+f(k,1)
k/ratio en fonction du salaire et d'autres paramètres. Puisque le produit marginal du capital dépend également de , il sera constant le long du chemin optimal. Notons cette valeur du produit marginal , et notons le rendement net de la dépréciation . Les équations (1) - (2) pour la dynamique du capital et de la consommation sont alors et la solution spécifique qui satisfait la condition de transversalité doit êtrew
kf(k,)=k[f(k,1)]=f1(k,1)
k/rr=rδ
c˙t=(rρ)ctk˙t=rktct
ct=ρktavec donné, c'est-à-dire qu'une part constante de la richesse est consommée à chaque instant. Tant le capital que la consommation croissent à un rythme , il n'y a donc pas d'état stationnaire à moins que le rendement du capital (qui dépend ici du taux de salaire exogène ) soit égal au taux de préférence temporelle.k0(rρ)w
ivansml
la source
(+1) Merci. Je prends ceci maintenant dans une de mes réponses.
Alecos Papadopoulos
très bonne réponse. fondamentalement, une fois le travail choisi de manière optimale, la fonction de profit devient linéaire dans le capital - de sorte que ce modèle se résume à un modèle AK, dont les propriétés (y compris la croissance en régime permanent) sont bien comprises.
nominalement rigide
@nominallyrigid Mais seulement si nous supposons que le salaire reste constant . N'oubliez pas que ce n'est pas un équilibre général, juste un petit individu qui nage dans l'océan de l'économie.
Alecos Papadopoulos
6

Je poste cela comme une réponse, car cela continue sur la réponse de l'utilisateur @ivansml ... qui est celle qui a identifié la capture ici, une capture que j'ai naïvement négligée (bien que ce soit un cas étroit, tandis que le par intéressant vient après. Néanmoins, il aurait dû être traité).

En effet, avec un taux de salaire exogène, et une optimisation parfaitement compétitive de la demande de travail, le produit marginal du capital n'est déterminé que par les paramètres du modèle et par le taux de salaire. Pour le cas simple où nous supposons que le taux de salaire est constant, l'analyse de @ivansml est vraie: le modèle devient un modèle de croissance endogène : le produit marginal du capital est constant, ce qui est nécessaire pour une croissance endogène, où il n'y a pas de stabilité état en niveaux .

En notant c = ˙ c / c et k = ˙ k / k , les équations ( 1 ) et ( 2 ) de l'OP peut être écritc^=c˙/ck^=k˙/k(1)(2)

k =fk-δ-c/k

(1b)c^=fkδρ
(2b)k^=fkδc/k

Puisque est constant, le taux de croissance de la consommation est constant - zéro, positif ou négatif, selon les paramètres et le salaire. Par contre différenciant ( 2 b ) par rapport au temps on obtientfk(2b)

k^˙=(k^c^)(c/k)

et il est évident que la croissance à l'équilibre que nous voulons k = c , qui, à partir de ( 2 b ) est obtenu que si c = ρ k . Il est facile de vérifier que, puisque λ ( t ) = c ( t ) , la seule condition que la condition de transversalité tiendra, est si la consommation et le capital croissent ou diminuent au même rythme (ou restent constants).k^=c^(2b)c=ρkλ(t)=c(t)

Dans les modèles de croissance endogène proprement dits où nous examinons l'ensemble de l'économie, nous supposons simplement que les paramètres du modèle sont tels qu'il existe un taux de croissance positif, car c'est ce que nous observons dans le monde réel. Mais ici, nous n'avons qu'un seul individu. Alors, que pouvons-nous dire à notre homme d'affaires?

Si , le taux de croissance est positif, et sa consommation et son capital devraient croître «pour toujours», en maintenant un ratio constant. Si f k - δ - ρ = 0 , le taux de croissance est nul et les deux variables restent à jamais constantes. Si f k - δ - ρ < 0 , le taux de croissance est négatif et nous devrions entrer dans une spirale descendante de consommation et de capital décroissants (en maintenant toujours la relation c = ρ k ).fkδρ>0
fkδρ=0
fkδρ<0c=ρk

Ceci, a une certaine intuition, validant la pertinence de l'application du contrôle optimal: étant donné les autres paramètres et le taux de salaire, plus «l'impatience» (plus le est) est grande, plus il est possible que l'individu connaisse des niveaux de consommation décroissants, car le l'avenir, et donc l'investissement, ne lui plaisent pas beaucoup. Bien sûr, une spirale descendante monotone peut ne pas sembler très réaliste comme solution - mais il s'agit d'un modèle très stylisé, fournissant des tendances essentiellement générales dans un langage mathématique nécessairement très formel. ρ

La partie vraiment intéressante commencera si nous considérons un salaire variable . Cela peut créer toutes sortes de dynamiques intéressantes et compliquées pour notre petit homme d'affaires et ses décisions de consommation-investissement.

Alecos Papadopoulos
la source
4

wwkk

Jyotirmoy Bhattacharya
la source
Je regarde strictement une seule entreprise qui reste trop petite pour influencer l'agrégat. Votre deuxième commentaire est donc pertinent, où vous dites "les substitutions avant les équations (2) ne sont pas valides". Je ne vois pas pourquoi. Pouvez-vous élaborer (de préférence formellement) à ce sujet s'il vous plaît? Je vous remercie.
Alecos Papadopoulos
w=flr=fkkk˙k
1
@JyotirmoyBhattacharya qui est un résultat standard de l'hypothèse de marchés concurrentiels.
FooBar
klw=flr=fklk
Ok, je vais devoir écrire le hamiltonien après tout, et le rendre encore plus long.
Alecos Papadopoulos