论文部分内容阅读
渠道费用结算系统在源数据预处理过程中,海量数据以离散数据表的形式流转,处理性能和效率依赖于平台处理能力.本文介绍了一种结算数据切片处理方法,将无状态的离散数据按照数据特征归类处理,将数据分割后分配到数据处理集群,实现资源负载均衡,提升数据预处理效率.
基于Hadoop平台的结算数据切片方法及实现
【摘 要】
：
渠道费用结算系统在源数据预处理过程中,海量数据以离散数据表的形式流转,处理性能和效率依赖于平台处理能力.本文介绍了一种结算数据切片处理方法,将无状态的离散数据按照数据特征归类处理,将数据分割后分配到数据处理集群,实现资源负载均衡,提升数据预处理效率.
【机 构】
：
中国移动通信集团广东有限公司,广州 510623
【出 处】
：
现代计算机
【发表日期】
：
2021年29期
其他文献
计票计分算法是投票系统的核心.以深圳大学运行多年的服务单位满意度测评系统为案例,分别从加权计票和加权计分两个环节来探讨投票系统的改进和优化过程:加权计票重点在于调整运算流程和运行环境;加权计分从历年数据池分析挖掘,并借鉴贝叶斯算法和主流电影打分排名网的计分规则.结合学校应用现状,投票系统不断追求高效可靠的运行性能和科学公正的排名结果.
为了对急性咽喉炎的药物治疗提供科学的辅助决策,提高用药的有效性和安全性,对某医院急性咽喉炎门诊处方数据进行分析,挖掘出急性咽喉炎门诊处方中用药组合的关联规则.使用Python语言对急性咽喉炎门诊处方分别建立Apriori算法和FP-Growth算法的关联分析模型,挖掘急性咽喉炎处方中药物的频繁项集,寻找不同药物之间有效的强关联规则.实验结果表明,治疗急性咽喉炎的处方中,地巴唑片、谷维素片和复合维生素B片使用最为频繁,地西泮片,盐酸二氧丙嗪片等药物与盐酸雷尼替丁胶囊具有较为明显的关联.
融合多路径传输机制的车联网可以发挥车载多宿主接口的通信潜力,实现了车载应用多路径并行传输数据.但是,车主在驾驶中往往对内容丰富的车载应用数据在传输服务方面具有按需优先传递的需求.为了保证像具有安全驾驶等具有优先传递需求的数据,提出了一种面向优先级感知的车联网多路径传输机制,旨在通过区分数据的优先级为车载应用提供按需优先并发的策略,提高车联网的传输服务质量.
文章研究无人机利用视觉传感器自主循迹飞行,针对如何规划不同形状路段的目标序列点的问题,提出了从实时采集图像中提取路径后分块统计像素来确定局部目标路径点坐标的算法。首先从灰度图像中提取路径区域的信息;然后根据灰度图像栅格化后像素分布统计结果确定局部路径序列点坐标;最后根据规划结果计算控制指令。设计了包含不同拐角的路径来检验算法,飞行测试结果表明算法能达到使无人机沿不同形状路径循迹飞行的目的。
本文主要针对数字票据平台应用区块链技术的研究,有效分析了传统票据市场的现状、分类及主要风险.基于传统大型票据风险案例分析、区块链大环境背景分析及应用区块链技术解决传统票据市场的痛点分析,来阐述数字票据平台为什么要采用区块链技术及区块链技术的本质特征是什么.随后对区块链数字票据平台进行整体综述,并概述了平台的技术架构,及后续扩展性和规划展望等.
为帮助听障人群和健听人群之间正常交流,提出一种采用Seq2Seq模型识别手语的方法。首先对手语视频按帧数切分,将每帧图片采用InceptionV3进行特征提取,得到手语视频特征。然后对手语视频特征,进行K-means聚类提取关键帧以及利用人工标注的方式从语言学角度和听障人群使用的角度标注视频帧的关键帧。最后将手语视频特征和其关键帧特征一起用于Seq2Seq网络的参数训练,试验结果表明,加入关键帧的
针对目前档案库房内部环境监测存在的实时性差、监测范围小及人工监测环境难度较大等问题,设计出一个基于以太网的智能库房环境监控系统.系统通过Modbus TCP协议与下位机通信,实时监测多库房多区域内的温湿度、二氧化碳、粉尘等环境参数,并通过My SQL数据库对数据进行存储.当库房某个区域环境异常时,系统将会启动报警,自动向下位机发送相应设备控制指令,同时对报警机制进行解除,实现库房环境的自动监控.经测试,该系统具有较好的稳定性及实时性,可应用于智能监控等领域.
在公共安全的博弈中,加油站是安检体系设置相对薄弱、被袭后将造成巨大损失的攻击目标之一,基于此,构建了两阶段加油站安检模型,通过人车分离的方法对人与车进行不同的安检来优化安检流程;另外引进了身份识别系统对加油用户进行绿、黄、红三通道分流;最后通过仿真模拟进行对比分析,结果显示,所构建的两阶段加油站安检模型明显提高了识别潜在袭击者的比例,优化了安检流程并且大大的提高了社会收益值,同时节约了各项安检成本.
招标投标能够提高经济效益和社会效益.针对招标过程中可能出现的违法违纪行为,提出基于纪检监察知识库的知识图谱构建方法.利用结构化数据经过整合输入至图数据库中,通过知识图谱展示,能够更直观的观察各个中标单位与公职人员的潜在联系,通过语句可查询到关系的最短路径,进而利用知识图谱发现负责人、法人等职位与公职人员的关系.还可通过公职人员共同所在单位、关系流通、资金流动等角度挖掘潜在的勾结关系,结合优化营商环境条例提前预防可能出现的违法违纪事实.
计算机类在线直播课程教学资源建设,从课程特征出发,结合在线直播课程教学资源需求,依据建设要点、建设目标、建设要素3层次的建设思路;形成在线直播、实时互动、自主学习、考核评价4个建设要点的在线课程体系;从各建设要点梳理出计算机类在线直播课程教学资源中蕴含的建设元素;结合建设目标,将学习内容与实际工作生活结合起来,使所建教学资源在促进知识与技能掌握的同时,推动学习者创新应用能力与计算思维的形成.