基于深度强化学习的股票量化交易算法研究与实现

来源 :电子科技大学 | 被引量 : 2次 | 上传用户:weiwen2100000
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
自21世纪以来,与计算机领域相关的软硬件技术蓬勃发展,为人工智能技术的兴起打下了良好的基础,而量化交易由于其高效和稳定的性能吸引了更多的投资者。在本文中,我们探索了深度强化学习以及元学习方法在量化交易中的潜力,提出了一种基于LSTM深度神经网络的智能体,以学习股票数据中的时间关系;并且使用策略梯度训练方法,依据当前的市场状况和历史数据进行自动化交易。本文主要完成以下工作:1.针对传统量化交易方法其表征金融信号时的缺陷,提出了格拉布斯去噪声的优化方法对金融数据进行处理,将其与量化交易系统结合,更为准确地捕捉到金融市场的特性。实验结果显示,格拉布斯去噪的优化过程可以大幅度提高智能体对股票数据的表征能力,从而超越传统方法的盈利性能。2.由于传统的量化交易方法在处理高维数据时存在难度,难以挖掘股票数据的历史意义,本文提出了基于深度强化学习的量化交易方法,智能体采用LSTM深度神经网络构造,在学习和记忆股票数据中的时序关系的同时探索最优的交易策略。实验证明,基于LSTM网络的交易智能体训练的性能优于基于全连接神经网络的智能体,前者最高收益率达到280%。3.由于金融数据存在大量噪声和冗余数据,金融指标虽然能表征出金融数据的内在关系和趋势,但是金融指标数量众多并且大量金融指标在不同情况下存在冲突和钝化等问题,为了更合理地表征市场状态以实现最大化累积利润的目标,对股票指标特征进行筛选和组合。本文所提出的股票交易系统在中国股票市场上进行了回溯测验:在大多数情况下交易智能体都能超额获益,具有良好的性能。4.由于深度强化学习过度依赖于大量训练数据,导致交易智能体无法快速适应复杂多变的环境。为了提高智能体的快速学习和泛化能力,将与模型无关的元学习引入到深度强化学习中,通过前期知识经验来指导智能体在新任务上的学习。实验结果对比表明,交易智能体能够快速适应环境变化,既能平衡收益和风险,同时也可以探索到较好的交易策略。本文将深度强化学习和元学习方法应用于股票领域的量化交易,使得交易算法在面对错综复杂的金融市场时,能够合理的表征市场状态,实时挖掘到高维股票数据隐藏的模式,选择最优策略以获得最大累积利润。因此该方法具有实用价值。
其他文献
风能是一种丰富且可再生的清洁能源,利用风力发电生产清洁电能,可以显著缓解因燃烧石油、煤炭、天然气等不可再生资源发电而造成的能源紧缺的压力。虽然我国是风力发电大国,但由于严寒气候下风力发电机叶片极易覆冰,大大降低了风力发电机的工作效率,严重制约着我国风力发电行业的发展。目前,针对风力发电机叶片除冰的方法有很多,如机械除冰、热能除冰、涂层除冰等,但都存在一定的弊端。为此本研究提出了一种高效除冰的新方法
黄泥埠水库土拦库湾以养草鱼为主的养殖方法初探黎明来(吉安地区水利电力局工程管理站343000)多年来,我区水库养鱼一直以养鳙鲢为主,产量低、价格廉、效益差。为了改变这种现状,我们于1993年
雪橇拖拽抗阻加速跑是一种被广泛运用并且有效的加速跑训练方法,但是在最佳训练负荷重量的选择问题上还没有得出一致的研究结果。本研究通过文献资料法、专家访谈法、实验法
住宅小区物业管理作为一种新的房屋管理模式,属于我国住房制度改革和城市化发展建设过程中发展的必然模式。住宅小区物业管理的发展毋容置疑改善了人们的生活环境,提升人们的生活品质,对全社会的发展起到了推动作用。但经济发展越来越快,人们生活水平也相应提高,随之而来的就是,人们慢慢地对生活质量的要求也一步步提高,所以在享受物业管理给人们带来的各种便捷的同时,也越来越重视物业管理给人们带来提供的服务质量的高低,
随着小学生年级的不断增高,小学生两极分化的情况越来越严重。学习能力较强的小学生在享受着学习中的乐趣,学习能力较差的小学生则成为了学习过程中的“观众”。形成这种局面的
明闵元衢《罗江东外纪》引《詹氏小辨》,谓罗隐《两同书》“文欲学汉,而音不振;气不雄奇多凡语,旨又率袭旧,读之不能使人触清警心,其书可有可无”,系纯属极端缺乏见识的偏激
公司里年轻人多,哼上几句流行歌曲是这帮男同事的最爱。我也是一个追星族,对各种流行歌曲爱得欲罢不能。不过,我是五音不全的女孩子,只能在独处时将变调的歌儿唱给自己。
我的一位商界朋友,45岁的时候,移居去了美国。大凡去美国的人,都想早一点拿到绿卡。他到美国后3个月,就去移民局申请绿卡。一位比他早先到美国的朋友好心地提醒他:“你要有耐心等
内部控制是企业资金安全运转的根本保障,其不仅可以为企业决策提供完整的财务信息,并且能够提升企业的经济效益,促进企业良性化发展。近年来,我国企业财务管理内控工作已初见成效
在素质教育深入发展的背景下,情感教育是语文教学非常重要的组成部分,但从目前的教学实际来看,情感教育常常被忽视,这不利于学生的全面发展。基于此,本文结合教学实践,对新课