Perturbative solutions of Hamilton Jacobi Bellman equations in robust decision making

(1)

!"

! !"" #

$!"% &

'

!"%

!" $ &

()

* #

&( ) +* , ,-&

. /0 , #

12 123#

Æ ! "#$%&&'( #) *+** * #

, ( -( . /

0( 1#$2 %$*& /3/34 5*

(2)

Æ

!"#" "$%

&

' (

) *

) +(

,!-...%!+(,!-...%% *

/

0 +

' +(,!-...%)

( 1 ' !(1'% 2

Æ ! %

3

+(,!-...%

,* !%

!%

4

(1'2

+(,!-...%*

)6)( ))(

78)6 "(0 %9%54) :)(0 %%$5'0 %%95

0 %%;5< 0 %%95*

) 0

=" 0 %%91&&&5"* 01&& 5 "( 0 %%%55

) )()6( ) ( > )

0 %9%5?01&&&5*

(3)

*

2!% )

3

!"#""$%&

,*

3

3 ,-*

+(, !-...%*

, 7 , *

, 8 , 9

+(,!-...%

,#

!

3

:

;

!

% !%

'!

% 3

<

. !%

!%:

/.

=

:>

! %;

?;

!-%

3 *

+(,!-...% *

3* @

(4)

!

%:!

% .

!%*

!%! %:

>!

% !

%

:?

3

!

%

!%!%=:!!

%!

%

:% !7%

3* +(,!-...%(

!-..%*

!

%:

!%

!

%;

!%

.A!% !-%

3(1'B 2

!

%

.:

!%;

!8%

!%=:

!%

!9%

=:

!%

!#%

* !

%

3 2

!

%

!

%

*

C !9% !#% ( B

! +(,!-...% -9% !8%2

(1'2

. :

;! !%;%

;

-

!$%

)# @ )@

"*01&& 5*

?A0B5 #)A () #

A@"CA@*

(5)

: !

%

!D%

:

!

%

!% !"%

!D%!"%!$%*

. :

! %!

%

-

! %

!

%

;

:=

!!%% !.%

B

3 B

2

!%: !% !%

!%

3 !.%A

!% 3*

.

" # $%

+

!8%2 / ,!"D"%,

!""" %/ ,!""7

* %EF!"""

% ' (1'2!$%

*

<

:>

!%;

?

;

!-%

+*

.

G

!;;!%%% !;;!%% !7%

(6)

:

;! ;%

! ;%

!7% 3 !!%:

"

!%

!!%

!;

% #

.

: *

! 398 ,!"""%%

/ !.% .

!% 3

* /!

, G

!%! H

%

H

!.%

H

:! /

!%

!%:.

CG!

+ !

+

!!

%!!

%

:

!%

! !%%; 3

. ,

* 2

!.%A!%

&

!.% :. :.

! !"#" "$% , ,!"""%% 3

.

. 3(1'2

.:

!%!

%

$

;

:=

!!%%

(7)

$:

!%

-

!8%

!% :

!"

%

!9%

: ! %;

! %

;

$

!%

. 3(1'2

.: !

%

$

;

:=

!!%%

!% :

! ! %;

%

: ! %;

$

;

!#%

3 !.%

!%:

%I

!% . !$%

3

) !9%

(1'2 !.%

Æ *% :- B

2

%:- < =

< * 2 %

2

% 4 %

! %

/ 2*

< %:- 3

*

/

( 1

' 2

(8)

# *

& =:

!' !%% #.

' :

%I

#.

/ * #.

' !%: !% !D%

!#%#

3

*

!

!%

" # # $ % !

&

. :

& #I

; ;(

(

!"%

(

:

"

; -$

!% (

:

$

!%

!-.%

' " #: & (

. : (

!"

%

;

;(

(

!-%

) *

& '

+ ,# '

!%:

"

** D *

(9)

:

!-!-;Æ

%;Æ

% Æ

:

(

Æ

:

(

- . -/0 $)

:

;

;)

!--%

3 '

* ( 3

3

* -/0 $)

:

;

-

;)

!-7%

1 , 2 * . $ !

.

:

$

;7! $

;!7%$

%

;

!-8%

$

#

3

!"%

# : -

&

3 @

!D%#:- /

0 -

' ( ) %* )*

* !--%

!D% !"% *

E

1

E

0 5

F01F0 55

10 5

E B

0 5

0

5

F

0 5

E

10 5

E

0

5

B

.) 0 B5 *

() 1A 0950%5 )

*

(10)

(. 4

" $.

:

"

!%

! "

%

;)

' " .

:

!%

-

!%

! "

%

;)

/

:

"

! %

!"

%

"

!" #!

;)

:

!%

! %

!"

%

-

! %

!%

$% & #!

;)

' .

!"#""$%

"

!.%

!%

!.%

J . *

!#%=

;)

!.%

!%

;)

!.%

!-9%

,

* !-9%

3B

3

(11)

*

:

!%

!"

%

"

*

:

!%

! "

%

-

!%

! %

/

:

-

!%

;-

;

!%

;-

3

2

:.

-

:.

/- '

B*

/

)

/

,

+ ( ) , -.

/

< *

*

/-/7 :.

:. +

*

B*

* 3

/8A

<

2

:. 3

() * -E&&!E&1

) E&&B6 E& *

(12)

Consumption - Difference

0 2

4 6

8 10 Wealth

0.05 0.1

0.15 0.2

Risk Aversion Index 0

0.1 0.2 0.3

0 2

4 6

8 Wealth

/ = 4B

3 B 2

!.%

3

(1'!.%

0 )

# (1'2

!.%!%

!$% 3*

)! %& !%

" # # #

& :

#I

;)

$ ,

:

(13)

Portfolio-Difference

2 4

6 8

10 Wealth

0.05 0.1

0.15 0.2

Risk Aversion Index -0.3

-0.25 -0.2 -0.15

2 4

6 8 Wealth

/-= 4B

.

:

"

!%

-

"

;$

7

8

!%

:

-"

$

!%

:

-$

"

-!-%

#

)! % * <

2 2

#3 3

B ! !"%%

:;(

*

(

*

!-#%

(

* 3 / 3

G82 !"%

:

#I

& :

;)!% # !-$%

(14)

2 4 6 8 10 Wealth W 160

180 200 220 240

Value Value Function

/ 7= 3

!

% *!%:

!%;

!%! %

!%:

!%;

!%! %

!:.%

, 2 :. #

!-$% #

/##

3 #

!%

*

2 :. !

% :

!

%

(: Æ

!Æ

%

8Æ

-

+: Æ

;

!Æ

%

8Æ

-

Æ

3 /2

,*

,: (+*

!(

+

%

!(

+

%:!(+%;!+(%

(15)

0 2 4 6 8

10 Wealth 0.05

0.1

0.15 0.2 Risk Aversion Index

-10 0 10 Value Function

0 2 4 6 8

Wealth 10

0

/8= K

!:.%

' !-$% G8

#*

: !%

!-D%

3

!-D%

3

G

(16)

: !%

"

-

;

+

;

.

;.

!-"%

.

:

# %

:

# # %

:-

"

:

!

!%% # %

:

!% # %

:-

-

:

- # %

:

-# # %

:-

G9

B #

*#! # $$ 3 !

!.%# ## #

"

-

;

+

;

.

;.

:. !7.%

(

.

(

-!7% !7%

(

*

0!7.% 0 #

3!7% *

2(

.2

!%

!7-%

3

!% )

"

:

!77%

(17)

/ )

2 < :.

* B

G 9 # #

!% (

B

!.%!% / 8

<*

!%:

#I

! % !79%

(1'2!.% 3

2 # # *

:

!%

-#;

+

;.!#%;.

:.

!7#%

3

=:

J

/G9

0 # B #

(

.

(

#;

!"-%

#

#;

!9% !7$%

** ) )

)*

)) ) )01%5 )

( *())6

A

1$F

F0$5F

E& 0!B5

. ((* 0!B5 Ê

)#( *

(18)

3 *

=:

!%

(

.

(

#;

!"-%

#

#;

!9%

*

' B 3

=:

#

# B 3

3!79%

(1'2 !.%

!%

5 $ !

# $

!%:

#I

! %

6# !% . # $ !%3

' 6# -/0

# $

:. # $ !%

$

1 /

< +(,

!-...%*

< *

) <

/*

/

* (1'2

(19)

! %<#

' :' ;

#I

'*' )

#

2

. :

!%

'

$

'

;'

!7D%

# < !7D% 6

'

:

'

;

!%

#I

;)

!%

'

:

!%

'

#I

;)

4 !7D%

)

:& !%

;

;-$

$

#I

(

B 2

& !% :

#I

;

;-$

$

(20)

# 6

B

2 =

& !% :

#I

;(

(

3 3 3-

.=

&

!% :

! %

$

:

! %

$

-

;

;)

:

-

$

;)

* ) B 2

&

:

-

!%

! "

%

;)

3- 3

!%

:

Æ

;

Æ

;

"

-!-;Æ

%;Æ

/.

"

:

-

!%;

!%

;

$

!%

Æ

:

;

Æ

=:

$

Æ

:

Æ

=:

$

(21)

=:

Æ

;

Æ

;

Æ

!.%

+ 2

'

:

:. 3 3

! % /

:

;

;)

:

"

! %

!"

%

;)

/

:

!%

:

!%

;

;)

3

:

!%

! %

;

-

!%

! "

%

;)

! %'*&

& :

!%

'

' ;'

$

'

< & )

/ #

(22)

*'

,

:

!%

'

:

!%

'

#I

-

'

#I

;)

: ,

#I

'

;)

: ,

#I

;)

: ,

#I

#I ,

;)

,

/

:' ;'

: ;

#I

;

/

:

'

:

'

;-'

)

'

;

)

'

-'

)

;)

:

; -'

)

'

#I

'

-

;-

;)

: ;-0 ;)

<(, 2

(23)

0 :

'

)

'

:

)

;

)

:

#I

;0

#I

;)

0

* <

:

#I

-

'

;-

:

#I

;)

* 3

& : &

#I

;

;-$

$

#I

!,

;-$0

;

%

;)

:

#I

!,

;-$0

;

%

;)

3 0,

0

(24)

3

,

:

-

!%

"

0

:

;

:

"

!%

-

: -

:-

"

:

!%

"

: -

: -"

!%

-

"

-!-%

,

&

:

#I

;)

B *

!% : ! ,

;$!-0

;

% %

$

1

,

0

1

:

-"

!%

1

:

-

"

-!-%

!%<*

!

2

!

%:"

!

;"

!

!7"%

"

* G 9 3G

))!-"% K

!-D%!7"% 3

(25)

!-"%

! % 3 !-"%

B

!#;%!Æ

%;-#;#!#%;#7. !8.%

(+ 3

.

:.

:# (

.

(

#;

!"-%

#

#;

!9%

,# #:

! % <* 3

# G 9

=

!%

"

#I

!

"

-

;

+

;

.

;.

!

"

-

#I

"###

!

"

-

;

+

;

.

;.

!

-

#

!% "

-

#I

!

"

;"

!7;+;#%

!

"

;"

-

#I

!7;+%

"

;"

"

!8%

(26)

/ . =

!%

"

-

#I

"###

!

"

-

;

+

;

.

;.

!

"

-

#I

!

"

;"

!7;+-%

!

"

;"

"

!8-%

3 G 9

*

#

(27)

>? + GK ( 3 , !""D%

2 60

>-? +GK(3,!-...%

60

>7? 0F G C !-...%+

6

>8? 0 1 0 0 ( !"D"% J

B1

38"77D7

>9? 04!""$%J 2

1 3$-

77$7

>#? 4Æ4GC!""-%,B

#.7977"8

>$? / <( K , !"D"% J

B

6 1 7D-"778

>D? / <(( ,!""-%0

,L @E

>"? C 4 , !"D"%

21 D897

>.? (GK31,43 1!"""%K

K,##D$7".$

>? ( G K 31 , C + 3 @ <

!-..% 6

0

>-? 53, J!""#%4

/ ,"8#

>7? 56 !-...%

2 K6'

0 L

>8? G 1 !""D% K <

,6

>9? !"#"% G =

,9-8$-9$

(28)

1 377$787

>$? , 0,!"""%J 0 K

, ,4B 6 1 3

D"@#D-#

>D? ,K!"""%3 B

,4B C= 3@

' !%+ ,

4C'M'

>"? < 1 !""D% K

=+ <

(6

>-.? E1 NE F !"""%, = (

(1' 2 + ,

+ K 87,@E