电商金融大数据价值提取与空间关联挖掘应用研究

来源 :江西理工大学 | 被引量 : 0次 | 上传用户:zxc286929269
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
随着搜索引擎、云计算、人工智能这些新兴技术的成熟和普及,人类在日常中产生的数据量出现了前所未有的爆发式增长,催生了“大数据”时代的到来。在这种背景下,互联网与传统金融业的“碰撞”使得互联网金融应运而生。互联网金融的诞生满足了中小微企业和大众金融消费者的需求,弥补了传统金融机构的不足,为普惠金融的发展提供新的思路。其中,以电子商务平台为核心的电商金融在所有互联网金融模式中影响最大,引起了整个行业和社会的高度关注。电商金融行业本身就是一个基于数据的产业,行业内拥有着大量的多源异构数据,一方面是自身内部电商平台的海量历史交易数据;另一方面是互联网和社交媒体上的外部数据。因此,如何具备从电商金融大数据中提取和挖掘所蕴含数据价值的能力将决定未来整个电商金融行业的竞争力。本文针对上述问题,在分析电商金融大数据特征及价值、国内外基于空间关联规则的挖掘方法以及大数据挖掘研究现状的基础上,采用分布式搜索引擎技术,定制网络爬虫从电商金融行业的多源异构数据中获取所需要的银行卡和淘宝店铺数据,设计相应的Spark并行算法对数据预处理,建立倒排表和二级索引文件,为后面的大数据分析平台提供数据源。确定数据来源后,运用MECE分析法并结合行业内多位金融业务专家评分得到企业信用风险评价候选指标集及量化方法,分析指标相关性和风险定级。接着,利用大数据机器学习库中的随机森林算法对候选指标集特征选择,设计基于Hash结构的多级空间关联规则算法来挖掘企业风险信息,构建出信用风险评估与智能预警模型。最后,将机器学习、挖掘算法库、信用风险评估与智能预警模型、大数据存储与分布式计算能力进行封装,搭建基于Spark on YARN的电商金融大数据分析平台,对所研究模型的准确度和平台实用性进行验证。以淘宝平台某旗舰店一年的日常经营数据、银行卡资金往来数据和管理层群体数据作为数据源,利用电商金融大数据分析平台对店铺进行经营行为分析,提供信用风险评估与审批授信和贷后风险预警管理服务,证明构建的信用风险评估与智能预警模型能够达到预期要求,具有较高的可信度。
其他文献
闽南文化它具有鲜明的地方特色、独特的性格和丰富的内涵,是中华文化的一朵奇葩。在幼儿园开展闽南文化教育,激发幼儿热爱闽南文化的情感,不仅是幼儿园教育发挥文化传递功能
电力是国民经济的基础产业,它是能源系统中的支柱之一,为人民的生产和生活提供重要的能量资源。电力行业的发展也是国民经济发展的一个重要缩影,电力行业的进步体现了社会的
学习正比例函数、一次函数后,反比例函数是根据变量间的不同变化情况认识的另一种函数.函数问题一直是中考的压轴题,也是学生学习难点所在,函数中的面积问题更是初中常见问题
<正>销售费用承包是指企业为扩大产品市场份额,对销售相关费用实行包干的一种方式。企业将销售部门实际发生的人员工资及福利、差旅、办公、包装、运输、广告费用等与销售活
现代企业经营的主要目标是追求股东财富最大化,而企业财务会计报表中净利润和现金净流量两项指标是反映企业在一定时期内的经营成果的关键性指标,也是衡量一个企业盈利水平和
<正>2016年,北汽新能源全年继续保持高速增长势头,整车销售52187辆,同比增长159%,成为中国纯电动汽车名副其实的第一品牌。但对于北汽新能源的高速发展,也有人认为,他们是享
在现代产科的临床上,随着各种剖宫产术式的日趋完善,剖宫产手术已成为解决难产和严重的妊娠并发症和合并症,降低母儿发病率和病死率的重要手段之一。我院1998~2004年开展新式
随着国家对于新媒体发展的不断重视,用户的持续增长,新媒体发展呈现出新的态势和特征,其主要表现在:技术创新持续升级,助力实现智能互联;媒体融合加速推进,传播生态愈发丰富;
目的观察肩关节镜下治疗钙化性冈上肌腱炎的疗效。方法采用肩关节镜技术治疗20例非手术治疗无效的钙化性冈上肌腱炎患者。术中发现钙化灶均位于冈上肌腱,行钙化灶清除术、肩
背景胃癌是目前最常见的恶性肿瘤之一,全球发病率在所有恶性肿瘤中位居第四,仅次于肺癌、乳腺癌和大肠癌,而在癌症相关死亡中,胃癌所致死亡位居第二,这不仅严重危害人类的生