全部版块 我的主页
论坛 经济学人 二区 外文文献专区
790 12
2022-06-25
英文标题:
《An intelligent financial portfolio trading strategy using deep
  Q-learning》
---
作者:
Hyungjun Park, and Min Kyu Sim, and Dong Gu Choi
---
最新提交年份:
2019
---
英文摘要:
  Portfolio traders strive to identify dynamic portfolio allocation schemes so that their total budgets are efficiently allocated through the investment horizon. This study proposes a novel portfolio trading strategy in which an intelligent agent is trained to identify an optimal trading action by using deep Q-learning. We formulate a Markov decision process model for the portfolio trading process, and the model adopts a discrete combinatorial action space, determining the trading direction at prespecified trading size for each asset, to ensure practical applicability. Our novel portfolio trading strategy takes advantage of three features to outperform in real-world trading. First, a mapping function is devised to handle and transform an initially found but infeasible action into a feasible action closest to the originally proposed ideal action. Second, by overcoming the dimensionality problem, this study establishes models of agent and Q-network for deriving a multi-asset trading strategy in the predefined action space. Last, this study introduces a technique that has the advantage of deriving a well-fitted multi-asset trading strategy by designing an agent to simulate all feasible actions in each state. To validate our approach, we conduct backtests for two representative portfolios and demonstrate superior results over the benchmark strategies.
---
中文摘要:
投资组合交易者努力确定动态投资组合分配方案,以便在整个投资期内有效分配其总预算。本研究提出了一种新的投资组合交易策略,该策略通过深度Q学习训练智能代理识别最优交易行为。我们为投资组合交易过程建立了一个马尔可夫决策过程模型,该模型采用离散的组合动作空间,确定每种资产在预先指定的交易规模下的交易方向,以确保实用性。我们新颖的投资组合交易策略利用了三个特点,在现实交易中表现优异。首先,设计一个映射函数来处理和转换一个最初发现但不可行的动作,使之成为最接近最初提出的理想动作的可行动作。其次,通过克服维度问题,本研究建立了agent和Q网络模型,在预定义的动作空间中推导出多资产交易策略。最后,本研究介绍了一种技术,该技术的优点是通过设计一个代理来模拟每个状态下的所有可行操作,从而得出一个非常适合的多资产交易策略。为了验证我们的方法,我们对两个有代表性的投资组合进行了回溯测试,并证明其结果优于基准策略。
---
分类信息:

一级分类:Quantitative Finance        数量金融学
二级分类:Portfolio Management        项目组合管理
分类描述:Security selection and optimization, capital allocation, investment strategies and performance measurement
证券选择与优化、资本配置、投资策略与绩效评价
--
一级分类:Computer Science        计算机科学
二级分类:Artificial Intelligence        人工智能
分类描述:Covers all areas of AI except Vision, Robotics, Machine Learning, Multiagent Systems, and Computation and Language (Natural Language Processing), which have separate subject areas. In particular, includes Expert Systems, Theorem Proving (although this may overlap with Logic in Computer Science), Knowledge Representation, Planning, and Uncertainty in AI. Roughly includes material in ACM Subject Classes I.2.0, I.2.1, I.2.3, I.2.4, I.2.8, and I.2.11.
涵盖了人工智能的所有领域,除了视觉、机器人、机器学习、多智能体系统以及计算和语言(自然语言处理),这些领域有独立的学科领域。特别地,包括专家系统,定理证明(尽管这可能与计算机科学中的逻辑重叠),知识表示,规划,和人工智能中的不确定性。大致包括ACM学科类I.2.0、I.2.1、I.2.3、I.2.4、I.2.8和I.2.11中的材料。
--

---
PDF下载:
-->
二维码

扫码加我 拉你入群

请注明:姓名-公司-职位

以便审核进群资格,未注明则拒绝

全部回复
2022-6-25 06:33:57
使用Deep Q-learningHyungjun Park的智能金融投资组合交易策略浦项科技大学工业和管理工程系,77 Cheongam Ro,Nam Gu,Pohang,Gyengbuk 37673,首尔国立科技大学工业和系统工程系代表KoreaMin Kyu Sim,232,Gongneung Ro,Nowon Gu,首尔,01811,KoreaDong Gu Choi代表*浦项科技大学工业与管理工程系,77 Cheongam Ro,Nam Gu,Pohang,Gyengbuk 37673,韩国代表。投资组合交易者努力确定动态投资组合分配方案,以便在整个投资期内有效分配其总预算。本研究提出了一种新的投资组合交易策略,在该策略中,智能代理通过深度Q学习来识别最佳交易行为。我们为投资组合交易过程建立了一个马尔可夫决策过程模型,该模型采用了一个离散的组合动作空间,确定了每种资产在预先指定的交易规模下的交易方向,以确保其实际适用性。我们新颖的投资组合交易策略利用了三个特点,在现实交易中表现优异。首先,设计了一个映射函数来处理和转换一个最初发现但不可行的操作,使其成为最接近最初提出的理想操作的可行操作。其次,通过克服维度问题,本研究建立了agent和Q网络模型,用于在预先定义的行动空间中推导多资产交易策略。
二维码

扫码加我 拉你入群

请注明:姓名-公司-职位

以便审核进群资格,未注明则拒绝

2022-6-25 06:34:00
最后,本研究介绍了一种技术,该技术的优点是能够*相应的authorEmail地址:dgchoi@postech.ac.kr(Dong Gu Choi)2019年12月2日提交给Elsevier的预印本通过设计一个代理来模拟每个州的所有可行行为,从而确定了多资产交易策略。为了验证我们的方法,我们对两个具有代表性的投资组合进行了回溯测试,并展示了优于基准策略的结果。关键词:投资组合交易、强化学习、深度Q学习、深度神经网络、马尔可夫决策过程1。简介金融投资组合交易的目标是在投资期内,通过将资本分配给投资组合中的一篮子资产,使交易员的货币财富最大化。因此,投资组合交易是买方金融行业最重要的投资实践。投资组合交易者努力建立交易策略,以便在应对时变市场条件时,将资本适当分配给金融资产。交易策略优化的典型目标函数包括预期收益和夏普比率(即风险调整收益)。除了优化目标函数外,交易策略还应实现合理的换手率,以便适用于现实世界的金融交易。如果周转率不合理,交易成本会损害整体交易绩效。投资组合交易是一个优化问题,涉及跨多个再平衡期的连续决策过程。在此过程中,应考虑时变市场变量的随机成分。因此,推导最优投资组合交易策略的问题传统上被表述为一个随机优化问题[10、15、19]。
二维码

扫码加我 拉你入群

请注明:姓名-公司-职位

以便审核进群资格,未注明则拒绝

2022-6-25 06:34:04
为了在多个时期处理这些随机成分,大多数相关研究都开发了启发式方法[5、7、8、13、21、29、38、39]。近年来,强化学习(RL)已成为解决金融投资组合交易问题的另一种流行方法。在RL方法中,学习代理可以通过尝试各种交易行为和修改其交易行为策略来了解复杂的金融环境,然后根据这些经验优化其交易策略。此外,这些方法具有重要的优势,学习代理可以根据其在未来交易日的经验更新其交易策略。学习代理可以使用他们在每个真实交易日观察到的经验来调整他们的策略,而不是简单地维护从历史数据中衍生出来的交易策略。凭借这些优势以及RL算法的日益普及,许多以前的研究已经将RL算法应用于各种投资组合交易问题设置[1、2、3、6、11、12、14、17、18、24、25、26、27、28、30、38]。根据RL方法的最新发展,一些研究人员【12、17、18】已经开始使用深度RL(DRL)方法,即深度RL和深度神经网络(DNN)的结合,以克服先前RL方法的性能不稳定。然而,我们认为,由于以下两个原因,这一研究方向在实际适用性方面尚未成熟。首先,大多数基于DRL方法的研究侧重于单一资产交易[12,17]。因为大多数交易者通常有多个证券,所以即使衍生出单一资产交易规则,也需要额外的决策步骤。第二,即使研究涉及多资产组合交易,行为也会决定组合权重【18】。
二维码

扫码加我 拉你入群

请注明:姓名-公司-职位

以便审核进群资格,未注明则拒绝

2022-6-25 06:34:06
不能直接遵循决定portfolioweights的操作空间,因为它需要关于如何满足目标权重的额外决策。我们将在第2.3节中更详细地解释这个问题。为了克服目前的局限性,本研究提出了一种新的方法,使用最流行的DRL方法之一的深度Q学习来推导多资产组合交易策略。在这项研究中,我们将重点放在多资产交易策略上,并定义一个直观的交易行为集,可以解释为交易员的直接投资指南。在本研究中使用的行动空间中,每个交易包括与投资组合中每项资产相对应的交易方向,每个交易方向包括持有每项资产或以预先指定的交易规模买卖每项资产。尽管最近的一项研究[30]认为,基于离散行动空间优化交易策略会产生负面影响,但我们发现,我们的离散行动空间建模允许较低的周转率,并且比连续行动空间建模更实用。为了制定一个实用的多资产交易策略,本研究涉及一些挑战性方面。首先,设置一个离散的组合行动空间可能会导致不可行的行动,因此,我们可能会得出一个不合理的交易策略(即,一个投资组合权重频繁且无意义变化的策略,只会导致更多的交易成本)。为了解决这个问题,我们引入了映射函数,该函数使代理能够通过将不可行的操作映射到类似且有价值的操作来防止选择不合理的操作。通过应用该映射函数,我们可以在实际行动空间中推导出合理的交易策略。其次,决定投资组合中每项资产交易方向的行动空间存在维度问题【24】。
二维码

扫码加我 拉你入群

请注明:姓名-公司-职位

以便审核进群资格,未注明则拒绝

2022-6-25 06:34:10
随着投资组合中资产数量的增加,行动空间的大小也相应增加,因为交易代理必须确定投资组合中多个资产的交易方向组合。这就是为什么之前与此行动空间相关的研究只考虑了单一资产或具有无风险资产交易的单一风险资产。因此,在本研究中,我们克服了这一限制,并利用DQL在实际行动空间中对多资产交易进行了首次研究。第三,尽管我们使用了多年的财务数据,但这些数据可能无法为DRL代理提供足够的培训数据,使其能够在金融环境中学习多资产交易策略。因为学习从联合状态到联合动作的策略映射需要大量数据。有一定数量的数据,因此我们需要让代理在培训数据中获得更多经验,并尽可能多地学习。因此,我们通过模拟每个状态下的所有可行操作,然后利用模拟结果中的学习经验更新agent的跨越策略,从而实现高效学习。该技术允许代理获得并学习足够的经验,以得出一个完善的多资产交易策略。本文的其余部分组织如下。在第2节中,我们首先回顾了相关文献,并介绍了我们的研究与以往研究之间的差异。第3节描述了问题的定义,第4节介绍了我们制定智能交易策略的方法。在第5节中,我们提供了实验结果来验证我们方法的优势。最后,我们在第6节中总结了相关的启示,并确定了未来研究的方向。2、文献综述投资组合交易是一个优化问题,涉及多个再平衡期的连续决策过程。
二维码

扫码加我 拉你入群

请注明:姓名-公司-职位

以便审核进群资格,未注明则拒绝

点击查看更多内容…
相关推荐
栏目导航
热门文章
推荐文章

说点什么

分享

扫码加好友,拉您进群
各岗位、行业、专业交流群