论文部分内容阅读
[摘 要]大数据时代的到来引起了业界和学界的广泛关注,大量研究成果不断涌现。时间范围内信息化变革使几乎每个行业都面临大数据问题,为了有效应对大数据带来全方位挑战,同时充分利用这一前所未有大号机遇,国内外的产业界,科技界甚至各国政府都在积极布局,制定战略规划。
[关键词]大数据 知识图谱 Web of Science 可视化
中图分类号:G203 文献标识码:A 文章编号:1009-914X(2015)11-0115-01
引言:传感器数量的不断增加、智能手机的渐渐普及、数字化办公的迅速拓展等因素,使得计算机数据呈指数级增长。目前国内仍没有对国外大数据研究热点系统梳理的成果,本文试图引入文献计量学研究方法,通过构建关键词的共词网络,并利用近年新兴的词频聚类和知识图谱可视化技术,以形象、科学的分析方法展示学科的结构、关系和演化规律,挖掘和展示国外大数据研究的热点。
1.大数据定义
大数据是一个体量特别大,数据类别特别大的数据集,并且这样的数据集无法用传统数据库工具对其内容进行抓取、管理和处理。大数据有4V特点:数据体量(Volume)大、数据类别(Variety)大、数据处理速度(Velocity)快、数据真实性(Veracity)高。
1.1大数据产生背景 随着网络和信息技术的不断普及,人类产生的数据量正在呈指数级增长。大约每两年翻一番,根据监测,这个速度在2020 年之前会继续保持下去。这意味着人类在最近两年产生的数据量相当于之前产生的全部数据量。
1.2 国内外大数据的发展状况及应用
1.2.1大数据已深耕于经济领域且创造了巨大的经济价值美国的大数据产业已经创造了巨大的价值,具体表现在:大数据使美国医疗服务质量得到提高。为在广大人群中取得最有效的医疗效果,更多地使用电子健康记录(电子健康档案),并与新的分析工具相结合,将提供挖掘信息的机会。研究人员可以利用信息寻找有效的统计趋势,并依据真实的医疗服务质量开展医疗评估。
1.2.2大数据使美国的交通更加便利。数据可以对美国教育及其在全球经济中的竞争力产生深远影响。这种分析可以针对成千上万的学生进行,而不是孤立的小型研究。课程和教学方法,无论是在线的,还是传统的,都可以根据大规模分析所收集到的信息进行修订。
1.2.3大数据提高了美国的征税效率。由于迅速发现异常的能力日益增加,政府税务部门可以缩小“税收缺口”,即纳税人应付税款与其自愿缴税额之间的差额,并且对于那些试图进行不当纳税申报的人,会深刻地改变他们的行为方式。
1.2.4大数据在欧洲公共管理部门得到深入应用。大数据在OECD组织中的欧洲国家公共管理部门创造了1500到3000亿欧元或更高的潜在经济价值,这些经济价值主要通过政府公共管理机构开支的减少、转移支付的下降及税收的增加来实现
1.2.5大数据的快速发展,使它成为IT领域的又一大新兴产业。据中央财经大学中国经济管理研究院博士张永力估算,国外大数据行业约有1000亿美元的市场,而且每年都以10%的速度在增长,增速是软件行业的两倍。我国2012年大数据市场规模大约4.7亿元,2013年增速将达到138%,达到11.2亿元,产业发展潜力非常巨大。
1.2.6人才需求巨大据一家国际咨询公司,盖特纳咨询公司预测大数据将为全球带来440万个IT新岗位和上千万个非IT岗位。麦肯锡公司预测美国到2018年需要深度数据分析人才44万—49万,缺口14万—19万人;需要既熟悉本单位需求又了解大数据技术与应用的管理者150万,这方面的人才缺口更大。中国是人才大国,但能理解与应用大数据的创新人才更是稀缺资源。
1.2.7随着互联网技术的不断发展,数据将像能源、材料一樣,成为战略性资源。如何利用数据资源发掘知识、提升效益、促进创新,使其为国家治理、企业决策乃至个人生活服务,是大数据技术的追求目标。随着技术不断成熟,大数据技术将成为国家治理的重要工具。
1.2.8在立足国家战略和产业政策推动大数据收集和分析技术快速发展的同时,我们也应清 醒地认识到避免数据垄断和保护数据安全的重要性,及早开展相关法律法规的探讨和研究。
2.如今“大数据”复杂和深刻的新理念
2.1美国政府6个部门启动的大数据研究计划中,除了自然科学基金会的研究内容提到要“形成一个包括数学、统计基础和计算机算法的独特学科”外,绝大多数研究项目都是应对大数据带来的技术挑战,重视的是数据工程而不是数据科学,主要考虑大数据分析算法和系统的效率。在大数据发展与应用方面已经形成较为普遍的共识,美国政府部门、社会机构、商业企业、科研院校都在结合各自实际需求,推进大数据应用。
2.2英国虽然经济不景气,财政收紧,但大数据依然是英国政府重点发展的科技领域。今年年初,英国商业、创新和技能部宣布,将注资6亿英镑发展8类高新技术,大数据独揽其中的 1.89亿英镑,将近三成。
2.3日本面临着由于长期经济低迷导致国际地位下降、少子高龄化以及日益增大的社会保险费用和社会基础设施老化等诸多问题。日本政府为了扭转这一现状,保持经济持续增长,决定通过大力发展IT产业,特别是大数据及开发数据和云计算,促进经济发展。而对此日本各大IT企业充满期待,因为大数据和云计算已成为IT企业战略核心。此外,无论大数据技术还是企业实际应用方面,日本都在亚洲占据明显优势。
3.结语:
对我国的启示和建议 从国家战略层次的角度出发,将大数据产业发展纳入国家发展的战略性项目,与国际大数据发展接轨,解决现阶,段大数据发展的核心问题。中国发展大数据,具有得天独厚的优势,主要体现在我国的特殊的国情,拥有独特的位势和经济社会高速稳定发展,给大数据及其应用带来了巨大的发展空间。大数据在我国各领域和不同行业的应用潜力巨大、机遇重大。大数据的核心技术进展和大数据应用有可能带来我国新兴战略性产业发展的新机遇。政府要扫清大数据产业化发展的一切阻力,促进大数据技术从实验室到工业化生产的转移,加强大数据在实际生活生产方面的应用,推进大数据核心技术产业化发展的步伐,创造大数据的社会价值。确立大数据的战略地位。大数据领域的竞争将关系到国家的安全和未来,国家竞争力也将愈发体现为一国拥有数据的规模、活性以及解释、运用的能力。我国要发展好、应用好大数据,应把大数据产业上升到战略高度,强化全民数据意识,树立以数据提高效率、提升精细化和智能化水平的意识,从国家层面推动大数据的收集、分析和应用。
继续深入开展研发亦可积极通过专利,引进,消化,吸收,实现再创新,企业可通过人才引进并在重点引进美国,英国,挪威等国外的行业,专家或科研团队的同时,注重本土企业内的研发人才,培养也可积极寻求与科研机构和油气集团的合作建立协同创新机制共同研发等。
参考文献
[1] 陆亦恺 .海工装备的“隐形”主力军———水下生产系统[J].海运纵览, 2012(10):31-33.
[2] 王 根,李金波.基于文献计量的专利情报分析研究综述[J]. 图书馆理论与实践, 2012(7):22-26.
[3] 金向东,林华春.海上油气田水下生产系统的关键设备与技术[J].油气田地面工程,2012(4):55-56.
[关键词]大数据 知识图谱 Web of Science 可视化
中图分类号:G203 文献标识码:A 文章编号:1009-914X(2015)11-0115-01
引言:传感器数量的不断增加、智能手机的渐渐普及、数字化办公的迅速拓展等因素,使得计算机数据呈指数级增长。目前国内仍没有对国外大数据研究热点系统梳理的成果,本文试图引入文献计量学研究方法,通过构建关键词的共词网络,并利用近年新兴的词频聚类和知识图谱可视化技术,以形象、科学的分析方法展示学科的结构、关系和演化规律,挖掘和展示国外大数据研究的热点。
1.大数据定义
大数据是一个体量特别大,数据类别特别大的数据集,并且这样的数据集无法用传统数据库工具对其内容进行抓取、管理和处理。大数据有4V特点:数据体量(Volume)大、数据类别(Variety)大、数据处理速度(Velocity)快、数据真实性(Veracity)高。
1.1大数据产生背景 随着网络和信息技术的不断普及,人类产生的数据量正在呈指数级增长。大约每两年翻一番,根据监测,这个速度在2020 年之前会继续保持下去。这意味着人类在最近两年产生的数据量相当于之前产生的全部数据量。
1.2 国内外大数据的发展状况及应用
1.2.1大数据已深耕于经济领域且创造了巨大的经济价值美国的大数据产业已经创造了巨大的价值,具体表现在:大数据使美国医疗服务质量得到提高。为在广大人群中取得最有效的医疗效果,更多地使用电子健康记录(电子健康档案),并与新的分析工具相结合,将提供挖掘信息的机会。研究人员可以利用信息寻找有效的统计趋势,并依据真实的医疗服务质量开展医疗评估。
1.2.2大数据使美国的交通更加便利。数据可以对美国教育及其在全球经济中的竞争力产生深远影响。这种分析可以针对成千上万的学生进行,而不是孤立的小型研究。课程和教学方法,无论是在线的,还是传统的,都可以根据大规模分析所收集到的信息进行修订。
1.2.3大数据提高了美国的征税效率。由于迅速发现异常的能力日益增加,政府税务部门可以缩小“税收缺口”,即纳税人应付税款与其自愿缴税额之间的差额,并且对于那些试图进行不当纳税申报的人,会深刻地改变他们的行为方式。
1.2.4大数据在欧洲公共管理部门得到深入应用。大数据在OECD组织中的欧洲国家公共管理部门创造了1500到3000亿欧元或更高的潜在经济价值,这些经济价值主要通过政府公共管理机构开支的减少、转移支付的下降及税收的增加来实现
1.2.5大数据的快速发展,使它成为IT领域的又一大新兴产业。据中央财经大学中国经济管理研究院博士张永力估算,国外大数据行业约有1000亿美元的市场,而且每年都以10%的速度在增长,增速是软件行业的两倍。我国2012年大数据市场规模大约4.7亿元,2013年增速将达到138%,达到11.2亿元,产业发展潜力非常巨大。
1.2.6人才需求巨大据一家国际咨询公司,盖特纳咨询公司预测大数据将为全球带来440万个IT新岗位和上千万个非IT岗位。麦肯锡公司预测美国到2018年需要深度数据分析人才44万—49万,缺口14万—19万人;需要既熟悉本单位需求又了解大数据技术与应用的管理者150万,这方面的人才缺口更大。中国是人才大国,但能理解与应用大数据的创新人才更是稀缺资源。
1.2.7随着互联网技术的不断发展,数据将像能源、材料一樣,成为战略性资源。如何利用数据资源发掘知识、提升效益、促进创新,使其为国家治理、企业决策乃至个人生活服务,是大数据技术的追求目标。随着技术不断成熟,大数据技术将成为国家治理的重要工具。
1.2.8在立足国家战略和产业政策推动大数据收集和分析技术快速发展的同时,我们也应清 醒地认识到避免数据垄断和保护数据安全的重要性,及早开展相关法律法规的探讨和研究。
2.如今“大数据”复杂和深刻的新理念
2.1美国政府6个部门启动的大数据研究计划中,除了自然科学基金会的研究内容提到要“形成一个包括数学、统计基础和计算机算法的独特学科”外,绝大多数研究项目都是应对大数据带来的技术挑战,重视的是数据工程而不是数据科学,主要考虑大数据分析算法和系统的效率。在大数据发展与应用方面已经形成较为普遍的共识,美国政府部门、社会机构、商业企业、科研院校都在结合各自实际需求,推进大数据应用。
2.2英国虽然经济不景气,财政收紧,但大数据依然是英国政府重点发展的科技领域。今年年初,英国商业、创新和技能部宣布,将注资6亿英镑发展8类高新技术,大数据独揽其中的 1.89亿英镑,将近三成。
2.3日本面临着由于长期经济低迷导致国际地位下降、少子高龄化以及日益增大的社会保险费用和社会基础设施老化等诸多问题。日本政府为了扭转这一现状,保持经济持续增长,决定通过大力发展IT产业,特别是大数据及开发数据和云计算,促进经济发展。而对此日本各大IT企业充满期待,因为大数据和云计算已成为IT企业战略核心。此外,无论大数据技术还是企业实际应用方面,日本都在亚洲占据明显优势。
3.结语:
对我国的启示和建议 从国家战略层次的角度出发,将大数据产业发展纳入国家发展的战略性项目,与国际大数据发展接轨,解决现阶,段大数据发展的核心问题。中国发展大数据,具有得天独厚的优势,主要体现在我国的特殊的国情,拥有独特的位势和经济社会高速稳定发展,给大数据及其应用带来了巨大的发展空间。大数据在我国各领域和不同行业的应用潜力巨大、机遇重大。大数据的核心技术进展和大数据应用有可能带来我国新兴战略性产业发展的新机遇。政府要扫清大数据产业化发展的一切阻力,促进大数据技术从实验室到工业化生产的转移,加强大数据在实际生活生产方面的应用,推进大数据核心技术产业化发展的步伐,创造大数据的社会价值。确立大数据的战略地位。大数据领域的竞争将关系到国家的安全和未来,国家竞争力也将愈发体现为一国拥有数据的规模、活性以及解释、运用的能力。我国要发展好、应用好大数据,应把大数据产业上升到战略高度,强化全民数据意识,树立以数据提高效率、提升精细化和智能化水平的意识,从国家层面推动大数据的收集、分析和应用。
继续深入开展研发亦可积极通过专利,引进,消化,吸收,实现再创新,企业可通过人才引进并在重点引进美国,英国,挪威等国外的行业,专家或科研团队的同时,注重本土企业内的研发人才,培养也可积极寻求与科研机构和油气集团的合作建立协同创新机制共同研发等。
参考文献
[1] 陆亦恺 .海工装备的“隐形”主力军———水下生产系统[J].海运纵览, 2012(10):31-33.
[2] 王 根,李金波.基于文献计量的专利情报分析研究综述[J]. 图书馆理论与实践, 2012(7):22-26.
[3] 金向东,林华春.海上油气田水下生产系统的关键设备与技术[J].油气田地面工程,2012(4):55-56.