Deep Hedging 2.0 – MDP와 Bellman Equation

1.
다른 분야는 오랜 경험과 나름 학습으로 이겨낼 수 있지만 기계학습은 넘기어려운 벽입니다. 학습은 기본이고 이해를 하려면 최소한 Python을 배우고 익혀서 시험을 해야 하는데 엄두가 나지 않습니다. 도전할 생각이 가끔 들지만 그것도 잠시뿐입니다. 그럼에도 호기심은 여전합니다. 특히나 이론이 아니라 금융분야에 적용한 사례가 등장할 때는 더욱더 커집니다.

JP Morgan의 Deep Hedging은 블로그의 글중 나름 인기있는 글입니다.

JP Morgan의 Deep Hedging
JP Morgan의 Deep Hedging 둘째

2017년 JP Morgan이 발행한 기계학습 및 빅데이타 안내서부터 이어져온 기계학습 투자가 Deep Hedging으로 열매를 맺는 과정이 개인적으로 멋졌습니다. 그리고 이런저런 기사를 보면 실제 시스템화하여 운영중임을 확인할 수 있었습니다.

JP Morgan testing deep hedging of exotics
JP Morgan deep hedging reaches cliquets

이렇게 잘 나가는 JP Morgan의 Global head of equities analytics팀이 새로운 논문 두편을 2022년에 내놓았습니다.

Deep Hedging: Learning to Remove the Drift under Trading Frictions with Minimal Equivalent Near-Martingale Measures
Deep Bellman Hedging

이 중 Deep Bellman Hedging은 Risk.net에서 Deep Hedging 2.0이라는 불리우고 있습니다.

JP Morgan quants are building deep hedging 2.0

논문 제목에서 알 수 있듯이 Deep Hedging에 Bellman Equation을 도입하였습니다. 제가 이렇게 표현했지만 솔직이 Bellman Equation을 모릅니다. 강화학습에 마르코프 결정과정이라는 것이 있다고 하네요. ㅠㅠㅠ

강화학습을 위한 마르코프 결정 과정(MDP)과 벨만 기대 방정식

대략 개념이라도 이해하려고 아래를 참고로 읽었습니다.

Markov Decision Process (1) – 개요
Markov Decision Process (2) – Bellman Equation

어찌되었든 이해하시려면 논문을 직접 읽는 편이 좋겠지요?(^^)

Download (PDF, 218KB)

2.
위 논문이 나온 이후 변화가 발생합니다. 앞서 JP Morgan 팀에서 중요한 역할을 한 Hans Buehler가 떠납니다.

Deep hedging pioneer Hans Buehler quits JP Morgan

회사를 떠나서 독립하였고 Deep Hedging을 이용하여 실제 매매하는 회사를 만들거나 참여한 듯 합니다. 회사 이름은 XTM Markets입니다. 회사 홈페이지를 보면 회사가 사용하는 IT리소스를 소개하고 있습니다. 놀라운 숫자입니다.

120 Petabytes of usable storage
2 Petabytes of RAM
25 Pflops in our research cluster
3.6 Megawatts of renewably sourced power
295 Billion USD Daily trading volume

회사를 떠난 Hans Buehler는 Deep Hedging과 관련한 자료를 대대적으로 공개하였습니다. 우선 Learning To Trade – Deep Hedging을 통해 관련한 모든 자료를 모아서 소개합니다. 이중 Lecture Notes Learning to Trade II: Deep Hedging은 2022년 6월 학생 교육으로 만든 자료로 보입니다.

Download (PDF, 1.76MB)

혹 Deep Hedging에 관심을 가지셨더라도 창조적 혁신을 하시길 바랍니다. 올라온 자료를 보니까 특허등록을 한 상태입니다.

Systems And Methods For Privacy-preserving Inventory Matching
Method And System For Managing Derivatives Portfolios (Statistical Hedging)
Method For Optimizing A Hedging Strategy For Portfolio Management (Deep Hedging)

Leave a Comment

이메일 주소는 공개되지 않습니다. 필수 필드는 *로 표시됩니다

이 사이트는 스팸을 줄이는 아키스밋을 사용합니다. 댓글이 어떻게 처리되는지 알아보십시오.