[討論] 股票當沖模型是否符合MDP的特性?

看板DataScience作者 (yuwenche)時間6月前 (2023/10/23 14:05), 編輯推噓3(3019)
留言22則, 7人參與, 5月前最新討論串1/1
我有一個股票當沖模型:狀態有6個state,分別為 t、t-1、t-2、t-3的價格對昨日收盤 的值取對數,即 log(Pt/Pc)、log(Pt-1/Pc)、 log(Pt-2/Pc) 、 log(Pt-3/Pc);另外兩 個則是t時間的價格(標準化)和部位(-1、0、+1)。動作有三個:買進(+1) 、賣出(-1) 、不動作(0) 。 教科書說MDP(Markov Decision Process)是強化學習(Reinforcement Learning)的一項重 要性質,因為有了這個性質,我們才能只針對當前的狀態作出動作選擇,而無需去考慮以 前的狀態。請問這個模型是否符合MDP的特性? 請不要拿『股票漲跌可預測嗎?』這種哲學問題,或『影響股價的因素不僅是歷史股價, 還有更多的因素,如公司的近况、總經數據 …』這類社會科學的觀點來討論,請針對數學 模型來討論,謝謝。 -- ※ 發信站: 批踢踢實業坊(ptt.cc), 來自: 111.241.21.152 (臺灣) ※ 文章網址: https://www.ptt.cc/bbs/DataScience/M.1698041151.A.491.html

10/23 14:20, 6月前 , 1F
這類文獻應該很多吧
10/23 14:20, 1F

10/25 22:10, 6月前 , 2F
你感覺好像沒有很懂mdp
10/25 22:10, 2F

10/27 13:55, 6月前 , 3F
POMDP
10/27 13:55, 3F

10/27 18:35, 6月前 , 4F
同二樓
10/27 18:35, 4F

10/28 10:44, 6月前 , 5F
為啥沒有很懂 定義都說出來了 只是不知道自己的state有沒
10/28 10:44, 5F

10/28 10:44, 6月前 , 6F
有符合不是嗎
10/28 10:44, 6F

11/01 15:23, 5月前 , 7F
懂的話就直接拿price data驗證了,不會在這裡問
11/01 15:23, 7F

11/07 09:26, 5月前 , 8F
如果真懂就寫些有意義的東西,只是擺出一付冷嘲的態度
11/07 09:26, 8F

11/07 09:26, 5月前 , 9F
不代表你就懂。That sucks.
11/07 09:26, 9F

11/07 16:09, 5月前 , 10F
我沒有冷嘲熱諷啊 我只有說你好像沒有很懂
11/07 16:09, 10F

11/07 16:11, 5月前 , 11F
你要不要從最基礎的開始 像是寫一下你覺得State Acti
11/07 16:11, 11F

11/07 16:11, 5月前 , 12F
on Transition是什麼 連這種effort都沒有不就只是伸
11/07 16:11, 12F

11/07 16:11, 5月前 , 13F
手牌想要別人告訴你答案嗎
11/07 16:11, 13F

11/07 16:13, 5月前 , 14F
你今天做了action 那transition是什麼 reward是什麼
11/07 16:13, 14F

11/07 16:13, 5月前 , 15F
這種應該很基本的吧 寫得出來不就知道了嗎
11/07 16:13, 15F

11/07 16:24, 5月前 , 16F
唉算了直接講結論 你做了這些action可是下一個state
11/07 16:24, 16F

11/07 16:24, 5月前 , 17F
會因為你做的action改變嗎 不會啊 這樣你要說他是MDP
11/07 16:24, 17F

11/07 16:24, 5月前 , 18F
嗎 可能吧 可是這種情況下你做什麼action根本就沒差
11/07 16:24, 18F

11/07 16:24, 5月前 , 19F
11/07 16:24, 19F

11/07 16:24, 5月前 , 20F
問題就是你的state不應該設定成什麼t t-1之類的價格
11/07 16:24, 20F

11/07 16:24, 5月前 , 21F
而是應該是你的action可以影響的 如果你有好好想過的
11/07 16:24, 21F

11/07 16:24, 5月前 , 22F
話大概就不會問什麼是不是MDP的問題了吧
11/07 16:24, 22F
文章代碼(AID): #1bDWq_IH (DataScience)
文章代碼(AID): #1bDWq_IH (DataScience)