【摘 要】
:
在如今大数据时代,分类问题一直备受研究者的关注。传统研究的分类算法都是建立在数据分布均衡的基础之上,并假设各个类别错分的代价相同,但实际所接触的数据集大多数都不满足该条件,一般都是其中某一类别数据明显多于另一类别的数据,在这种情况下,传统的分类算法并不能很好的对该类样本进行分类。因此,不均衡数据集的分类问题得到越来越多研究者的关注。本文主要针对不均衡数据集的分类问题进行研究,从数据层面和算法层面进
论文部分内容阅读
在如今大数据时代,分类问题一直备受研究者的关注。传统研究的分类算法都是建立在数据分布均衡的基础之上,并假设各个类别错分的代价相同,但实际所接触的数据集大多数都不满足该条件,一般都是其中某一类别数据明显多于另一类别的数据,在这种情况下,传统的分类算法并不能很好的对该类样本进行分类。因此,不均衡数据集的分类问题得到越来越多研究者的关注。本文主要针对不均衡数据集的分类问题进行研究,从数据层面和算法层面进行改进,并将其运用到机票价格的分类问题中。主要从以下几个方面展开研究:首先,针对不均衡数据集分布中的类间不均衡问题,本文在已有研究的基础之上提出混合采样算法,该算法是对数据集中多数类样本与少数类样本分别采取不同的算法处理方式,对其中少数类样本采取过采样算法进行抽样,对其中的多数类样本采取欠采样的抽样算法,从局部和全局两个角度同时改善原始数据集的均衡性,使新的数据集更加接近原始数据的分布,之后将新的数据集带入神经网络模型中进行预测分析。其次,针对算法层面本文提出了重采样技术与XGBoost算法相结合的改进XGBoost算法。首先对数据集进行Easy Ensemble处理得到较为均衡的数据集,之后带入XGBoost模型中进行预测分析。最后,选择F值与召回率作为评价指标对两种算法进行评价,根据指标结果分析得到,相比较而言选择性混合抽样基础之上的神经网络模型对于不均衡数据集中少数类样本的预测效果更好。
其他文献
制造业发展情况体现了一个国家的经济发展情况以及生产水平,一个国家的振兴需要大力发展制造业。制造业作为我国实体经济的重要组成部分其发展的好坏对我国经济的发展有着重
十九大报告提出创新是引领发展的第一动力,是建设现代化经济体系的战略支撑,我们要加快建设创新型国家。煤炭资源型城市是我国重要的能源基地,对我国的经济发展有着重要的影响,而长期以来,煤炭资源型城市都依赖煤炭资源发展经济,产业结构单一,环境污染严重,创新能力低,导致经济发展逐渐下滑。为了尽快完成经济转型,促进煤炭资源型城市的经济增长,需要以创新为新的增长动力,转换增长方式。因此,从创新入手研究其对煤炭资
胶质瘤约占脑组织肿瘤的50%,其特征表现为高死亡率,然而胶质瘤基因标志物的识别仍然有待探索。肿瘤的引发因素包括多类,其中基因表达水平的扰动会直接影响机体功能。单细胞基因表达数据以单细胞为分辨率反映基因表达,有助于更深入地理解潜在的分子变化如何改变细胞行为和疾病过程。转录调控关系的扰动也会影响基因表达水平进而影响肿瘤的发生发展,然而目前很多单细胞基因表达数据的研究中没有考虑调控关系的影响。本文充分利
目前身份认证充斥着人们生活的方方面面,小到手机解锁、移动支付,大到银行业务、军事系统等,身份认证都扮演着举足轻重的角色。利用生物信息进行身份认证的技术日趋成熟,比如声音、指纹、面部、虹膜等认证方式,但是它们也都存在伪造、复制、可强迫等缺点。脑电信号作为一种新兴的生物信息,具有不可复制、独一无二、不可胁迫、生物活性等优点,且不同个体在相同刺激下或者进行相同的思维活动时产生的脑电信号也不一样。已有的研
在经济发展和环境污染矛盾日益突出的今天,以清洁能源和可再生能源为核心的分布式能源技术是未来世界研究能源问题的重要发展方向,是解决我国能源问题的关键所在。本文构建了一个联合风能、热电联产和储能的多能互补分布式能源系统。基于模型预测控制方法,对分布式能源系统内的能源进行调度,为系统配置一个最佳的供能方案。本文围绕多能互补分布式能源系统展开的具体工作如下:(1)首先分析了分布式能源系统中各个模块的出力特
产品架构是产品创新过程中的一个重要工具,通过对产品架构的研究可以帮助企业很好地掌握复杂产品的特性,帮助企业更有效的制定产品创新决策。一方面,在现有的研究中多把产品
随着经济的发展和城镇化的加剧,城市公共交通面临着严重的交通拥堵、交通事故频发、空气严重污染和很多其他方面的问题。如何建立高效合理的公交企业运营调度管理系统,是提升公共交通服务水平的核心问题。而公交线路发车时刻表的制定是公交企业运营调度管理系统不可或缺的要素。发车时刻表的制定核心即确定公交车发车间隔,发车间隔的主要决定因素是公交客流的大小及时空分布。建立同时满足公交企业和城市居民的发车时刻表具有十分
随着网络通讯的飞速发展,电子元器件的单位产热功率增加,要求导热材料具备更高的散热能力。传统的金属导热材料(如铜、铝等)已经渐渐不能满足使用要求,开发新型导热材料已经迫在眉睫。碳素材料(如天然鳞片石墨、石墨烯纸等)具有高热导率、低热膨胀系数等优点,被认为是理想的导热填料。碳基/铜复合材料因为其可调热膨胀系数、优异的导热性能、较高的强度,成为了当代的热管理系统中具有使用前景的导热复合材料,但当前通过粉
紫胶虫是一种具有重要经济价值的资源昆虫,其雌虫通过腺体分泌出紫胶,是一种纯天然生物树脂,因具有粘接性强、绝缘性好等优良性状,被广泛应用于军工、医药、化工等行业。因其
近年来,从各种圈子的衍生产品,到博物馆等文化单位打造的文创产品,都预示着大家会越来越多的接触到文化创意产品。2016年5月,国务院办公厅转发《关于推动文化文物单位文化创意产品开发若干意见的通知》,以此为重要开端,之后国家连续推出多项重要政策指示,以期推进公共图书馆文化创意产品开发,更是在2018年的《中华人民共和国公共图书馆法》中提到了这一要求。正是在如此趋势的背景下,本文总结了前人学者的研究经验