论文部分内容阅读
[摘 要]众所周知,科学技术是第一生产力,这是不变的真理。我国对于科学技术的发展越来越重视,大数据在其中的一项技术也自然受到了人們的关注。应用了大数据的行业和领域不仅仅有了大幅度发展,而且也大大提升了这些行业和领域的发展空间。同时,我们也要看到大数据的应用除了能够给人民群众的生活带来便利外,还能够有效促进经济的发展,综合国力的提升,重要性可见一斑。而现阶段我国在大数据应用上还存在诸多问题,我们要正视这些问题,找到行之有效的方法加以解决。
[关键词]大数据;计算技术;创新
中图分类号:G712 文献标识码:A 文章编号:1009-914X(2019)08-0014-01
引言
大数据是新一代信息技术的核心方面和竞争前沿,也是制约大数据产业快速发展的关键瓶颈。大数据技术创新能力已经成为后信息时代衡量国家竞争力的重要指标。与传统信息产业的发展过程相似,大数据必将逐渐形成一个相对独立、体系完善的产业形态,完成传统信息产业的升级换代。互联网和云计算的发展过程与趋势已经证明,大数据未来的产业形态将是以服务为核心的新型产业形态,大数据产业体系的各个环节将提供极为丰富的服务。
1大数据的概念分析
大数据的的概念及定义范围比较广泛。广义的大数据就是包容了规模巨大且种类繁多的各种数据的集合系统;狭义的大数据指的是对无法在一定时间范围内用常规软件工具进行捕捉、管理和处理的数据进行集合,并通过更新处理模式使其具有更强的决策力、洞察发现力和流程优化能力进而来适应海量的、高增长率的、多样化的信息资产。因此,大数据具有很强的数据包容性及数据分析处理能力,对人们分析及收集更为有效的需求信息具有重要帮助作用。
2大数据应用的现状
仅就现阶段的发展来看,大数据技术应用的范围多见于企业生产和政府管理等方面,特别是电子商务,交通管理,医疗保障等方面。在电商领域,由于大数据的应用,使其运营模式产生了一定变化。如今的电商平台多是利用数据来分析消费者的需求,预测未来的销售情况,进而使企业在经营决策上更有依据可以遵循,使企业获得更大的经济效益,也能够在一定程度上提高企业的竞争力。如在淘宝购物的过程中出现的个性化推荐,广告投放系统,就是根据消费者经常搜索和购买产品时所得到的数据,再利用大数据分析消费者的喜好,然后进行相关的广告推荐。除此之外,大数据在城市交通和建设上应用也是较为广泛,现如今智慧城市在很多城市得到了积极的倡导和推广,它利用的就是大数据技术来协助管理城市,使整个城市的管理工作更加智能化、科学化、规范化。例如在交通系统中,通过各个路口电子摄像头的实时监控与上传,准确的将路况信息分析出来,在附近各个路口实时显示拥堵状况,还可以为驾驶员提供较为快捷方便的路线。
大数据在医疗领域的医药研发和商业模式上的应用主要集中于生命科学领域的研究以及制药公司的商业策略上。通过对医疗卫生数据做信息化的处理,使患者心理和生理上更加顺畅,有利于找到更为适合的药物。另外大数据的应用还体现在对于药物副作用的跟踪和分析。从前对于药物副作用的跟踪,运用的方法大多是临床试验。而自从大数据出现后所带来的采集样本得到了大幅度扩展,避开了传统方法的弊端,这样做使药品副作用分析在操作上更加简单。同时,在药品研究上,可以利用大数据来分析广大人民群众对于医疗用品的需求趋势,这样相关的企业就可以从市场的需要出发,制定出科学合理的生产计划,使企业的发展更加顺畅。
3大数据系统计算技术创新平台
在国际社会和我国政府将大数据上升为国家战略的背景下、在我国大数据计算平台和共性技术研究不充分的情况下,国家发展和改革委员会于2017年正式批复由深圳大学牵头建设大数据系统计算技术国家工程实验室(以下简称国家工程实验室)。国家工程实验室面向国家实施大数据战略的需求,着重解决我国大数据计算平台安全可信性差、软件通用性低的突出问题;采用国产高性能处理器互联芯片和计算平台,实现大数据智能诊断和自动纠错等可靠性信息高速转发,提升大数据计算平台的安全控制能力,满足国家加密算法的要求;以研制自主可控、通用性强的大数据计算平台为核心目标,解决高性能大数据计算中的共性问题,并以此为基础,着力开展大数据示范性应用研发。各技术方向的架构和关系如图1所示。
3.1高性能高安全的大数据计算平台研发
随着国家、国防信息化建设的发展,构建自主可控的大数据计算平台是国家战略安全的至关重要的问题。目前我国绝大多数的大数据计算平台都基于国外的软硬件系统。大数据计算平台安全可信性差和软件通用性低等问题,成为大数据行业最为突出的核心问题。采用国外的基础技术平台,不仅在核心技术上受制于人,而且对我国重要数据信息的安全构成了直接威胁。国家工程实验室将从“硬件—系统软件—应用”3个层次,全面构建国产化高可靠性、高性能大数据平台。该平台的建设以研制基于国产化处理器的大数据计算硬件系统为核心方向。采用创新的RAS2.0(增强的可靠性(reliability)、可用性(availability)及可服务性(service ability))和处理器互联技术,提供超越现有标准开放平台的单机可靠性和计算性能。采用基于固件、不依赖操作系统(operatin system,OS)的故障响应和诊断机制,能够全面、自动收集故障信息并进行分析,实现主动预警、隔离、替换失效部件,并率先支持CPU、内存等核心部件的在线维护,面向计划内零停机维护设计,保障重要部门和企业的关键业务连续运行。
图1 国家工程实验室研究方向
3.2高度通用的大数据计算共性关键技术研究
国家工程实验室将开展面向高度通用的大数据计算共性关键技术的研究。大数据计算在数据量、数据类型方面与传统高性能计算有显著不同,对数据的实时响应、安全性等方面也有特殊的要求。国家工程实验室拟在通用大数据并行计算框架、一体化平台集成、数据存储、资源调度、数据安全、一体化应用环境6个方面开展研究。基于度量空间的大数据抽象框架,利用度量空间将大数据复杂繁多的数据类型和多样化的距离抽象为统一的数据类型和距离函数接口,并通过支撑点选取算法选取若干支撑点,以数据到支撑点的距离为坐标,从而将数据从无坐标的度量空间映射到有坐标的多维空间,使众多数学工具得以使用。
3.3大数据示范性应用研发
研发特定领域的大数据示范性应用及其共性技术是国家工程实验室建设的重要目标之一。国家工程实验室建设期间将从“智慧城市”“智能制造”“智慧政府”及“智慧服务”等领域的关键应用技术出发,开展五大示范性应用及共性技术的开发,包括多维时空大数据分析在智慧城市中的示范应用、物流大数据示范应用、媒体大数据分析的示范应用、物联网大数据示范应用以及大数据可视化分析技术的示范应用。通过示范应用的开发及共性技术的研究,建立大数据“产学研用”协同创新生态链,促进大众创业和万众创新。
结语
创新平台的建设将提升国家大数据创新能力,满足我国大数据技术与应用的重大需求,促进我国大数据技术服务产业发展壮大,助力我国大数据“双创”生态环境的成熟完善。
参考文献
[1]陈静棠.大数据应用的现状分析及展望[J].通讯世界,2017(08):63-64.
[2]朱荣,高瑞.大数据应用的现状与展望分析[J].电脑迷,2017(01):116.
[3]蔡志珍.计算机大数据:现状与展望[J].赤峰学院学报(自然科学版),2016,32(03):21-22.
[关键词]大数据;计算技术;创新
中图分类号:G712 文献标识码:A 文章编号:1009-914X(2019)08-0014-01
引言
大数据是新一代信息技术的核心方面和竞争前沿,也是制约大数据产业快速发展的关键瓶颈。大数据技术创新能力已经成为后信息时代衡量国家竞争力的重要指标。与传统信息产业的发展过程相似,大数据必将逐渐形成一个相对独立、体系完善的产业形态,完成传统信息产业的升级换代。互联网和云计算的发展过程与趋势已经证明,大数据未来的产业形态将是以服务为核心的新型产业形态,大数据产业体系的各个环节将提供极为丰富的服务。
1大数据的概念分析
大数据的的概念及定义范围比较广泛。广义的大数据就是包容了规模巨大且种类繁多的各种数据的集合系统;狭义的大数据指的是对无法在一定时间范围内用常规软件工具进行捕捉、管理和处理的数据进行集合,并通过更新处理模式使其具有更强的决策力、洞察发现力和流程优化能力进而来适应海量的、高增长率的、多样化的信息资产。因此,大数据具有很强的数据包容性及数据分析处理能力,对人们分析及收集更为有效的需求信息具有重要帮助作用。
2大数据应用的现状
仅就现阶段的发展来看,大数据技术应用的范围多见于企业生产和政府管理等方面,特别是电子商务,交通管理,医疗保障等方面。在电商领域,由于大数据的应用,使其运营模式产生了一定变化。如今的电商平台多是利用数据来分析消费者的需求,预测未来的销售情况,进而使企业在经营决策上更有依据可以遵循,使企业获得更大的经济效益,也能够在一定程度上提高企业的竞争力。如在淘宝购物的过程中出现的个性化推荐,广告投放系统,就是根据消费者经常搜索和购买产品时所得到的数据,再利用大数据分析消费者的喜好,然后进行相关的广告推荐。除此之外,大数据在城市交通和建设上应用也是较为广泛,现如今智慧城市在很多城市得到了积极的倡导和推广,它利用的就是大数据技术来协助管理城市,使整个城市的管理工作更加智能化、科学化、规范化。例如在交通系统中,通过各个路口电子摄像头的实时监控与上传,准确的将路况信息分析出来,在附近各个路口实时显示拥堵状况,还可以为驾驶员提供较为快捷方便的路线。
大数据在医疗领域的医药研发和商业模式上的应用主要集中于生命科学领域的研究以及制药公司的商业策略上。通过对医疗卫生数据做信息化的处理,使患者心理和生理上更加顺畅,有利于找到更为适合的药物。另外大数据的应用还体现在对于药物副作用的跟踪和分析。从前对于药物副作用的跟踪,运用的方法大多是临床试验。而自从大数据出现后所带来的采集样本得到了大幅度扩展,避开了传统方法的弊端,这样做使药品副作用分析在操作上更加简单。同时,在药品研究上,可以利用大数据来分析广大人民群众对于医疗用品的需求趋势,这样相关的企业就可以从市场的需要出发,制定出科学合理的生产计划,使企业的发展更加顺畅。
3大数据系统计算技术创新平台
在国际社会和我国政府将大数据上升为国家战略的背景下、在我国大数据计算平台和共性技术研究不充分的情况下,国家发展和改革委员会于2017年正式批复由深圳大学牵头建设大数据系统计算技术国家工程实验室(以下简称国家工程实验室)。国家工程实验室面向国家实施大数据战略的需求,着重解决我国大数据计算平台安全可信性差、软件通用性低的突出问题;采用国产高性能处理器互联芯片和计算平台,实现大数据智能诊断和自动纠错等可靠性信息高速转发,提升大数据计算平台的安全控制能力,满足国家加密算法的要求;以研制自主可控、通用性强的大数据计算平台为核心目标,解决高性能大数据计算中的共性问题,并以此为基础,着力开展大数据示范性应用研发。各技术方向的架构和关系如图1所示。
3.1高性能高安全的大数据计算平台研发
随着国家、国防信息化建设的发展,构建自主可控的大数据计算平台是国家战略安全的至关重要的问题。目前我国绝大多数的大数据计算平台都基于国外的软硬件系统。大数据计算平台安全可信性差和软件通用性低等问题,成为大数据行业最为突出的核心问题。采用国外的基础技术平台,不仅在核心技术上受制于人,而且对我国重要数据信息的安全构成了直接威胁。国家工程实验室将从“硬件—系统软件—应用”3个层次,全面构建国产化高可靠性、高性能大数据平台。该平台的建设以研制基于国产化处理器的大数据计算硬件系统为核心方向。采用创新的RAS2.0(增强的可靠性(reliability)、可用性(availability)及可服务性(service ability))和处理器互联技术,提供超越现有标准开放平台的单机可靠性和计算性能。采用基于固件、不依赖操作系统(operatin system,OS)的故障响应和诊断机制,能够全面、自动收集故障信息并进行分析,实现主动预警、隔离、替换失效部件,并率先支持CPU、内存等核心部件的在线维护,面向计划内零停机维护设计,保障重要部门和企业的关键业务连续运行。
图1 国家工程实验室研究方向
3.2高度通用的大数据计算共性关键技术研究
国家工程实验室将开展面向高度通用的大数据计算共性关键技术的研究。大数据计算在数据量、数据类型方面与传统高性能计算有显著不同,对数据的实时响应、安全性等方面也有特殊的要求。国家工程实验室拟在通用大数据并行计算框架、一体化平台集成、数据存储、资源调度、数据安全、一体化应用环境6个方面开展研究。基于度量空间的大数据抽象框架,利用度量空间将大数据复杂繁多的数据类型和多样化的距离抽象为统一的数据类型和距离函数接口,并通过支撑点选取算法选取若干支撑点,以数据到支撑点的距离为坐标,从而将数据从无坐标的度量空间映射到有坐标的多维空间,使众多数学工具得以使用。
3.3大数据示范性应用研发
研发特定领域的大数据示范性应用及其共性技术是国家工程实验室建设的重要目标之一。国家工程实验室建设期间将从“智慧城市”“智能制造”“智慧政府”及“智慧服务”等领域的关键应用技术出发,开展五大示范性应用及共性技术的开发,包括多维时空大数据分析在智慧城市中的示范应用、物流大数据示范应用、媒体大数据分析的示范应用、物联网大数据示范应用以及大数据可视化分析技术的示范应用。通过示范应用的开发及共性技术的研究,建立大数据“产学研用”协同创新生态链,促进大众创业和万众创新。
结语
创新平台的建设将提升国家大数据创新能力,满足我国大数据技术与应用的重大需求,促进我国大数据技术服务产业发展壮大,助力我国大数据“双创”生态环境的成熟完善。
参考文献
[1]陈静棠.大数据应用的现状分析及展望[J].通讯世界,2017(08):63-64.
[2]朱荣,高瑞.大数据应用的现状与展望分析[J].电脑迷,2017(01):116.
[3]蔡志珍.计算机大数据:现状与展望[J].赤峰学院学报(自然科学版),2016,32(03):21-22.