当前位置：文档库 › 大数据发展现状与未来发展趋势研究

大数据发展现状与未来发展趋势研究

朱孔村

（江苏省科学技术情报研究所，江苏南京210042）

【摘要】数据是信息化时代的“新石油”资源，如何利用好这种“新石油”资源需要大数据技术的支持。文章介绍了大数据技术及其发展历程，概括了当前国内外大数据的发展现状并展望了大数据技术和产业方面的未来发展趋势。

【关键词】大数据；现状；趋势

【中图分类号】TP391【文献标识码】A【文章编号】1008-1151(2019)01-0115-04 Research on the Current Situation and Future Development Trend of Big Data Abstract: Data is the “new petroleum” resource of the information age and how to make good use of this “new petroleum” resource needs the support of big data technology. This paper first introduces the big data technology and its development process and summarizes the current development of big data at home and abroad. Finally, the future development trend of big data technology and industry is prospected.

Key words: big data; current situation; trend

1 大数据技术概述

1.1大数据技术

随着物联网、云计算、移动互联网等技术的成熟，以及智能移动终端的普及，全社会的数据量呈指数型增长，全球已经进入以数据为核心的大数据时代。大数据并不是一个新的概念，信息技术发展的每一个阶段都会遇到数据处理的问题，人类需要不停的面对来自数据的挑战。为满足商业结构化数据存储的需求而产生了关系型数据库，为满足互联网时代非结构化数据存储需求而产生了NoSQL技术，而大数据技术的产生是为了解决大型数据集分析的问题。

大数据技术目前还没有一个确切的定义，各行各业有着自己的见解，但总体而言，其关键在于从数量庞大、种类繁多的数据中提取出有用的信息。维基百科从数据处理的角度将大数据定义为一个超大的、难以用现有常规的数据库管理技术和工具处理的数据集。国际数据公司（IDC）给出的报告指出，大数据技术描述了一种新一代技术和构架，以很经济的方式、以高速的捕获、发现和分析技术，从各种超大规模的数据中提取价值[1]。

少量的数据看似杂乱无章，但是当数据累积到一定程度时，就会呈现出一种规律和秩序。大数据的价值就在于数据分析，利用大数据分析技术，从海量数据中总结经验、发现规律、预测趋势，最终为辅助决策服务。《大数据时代》的作者克托·迈尔-舍恩伯格认为：“大数据开启了一次重大的时代转型”，他指出大数据将带来巨大的变革，改变人们的生活、工作和思维方式，改变人们的商业模式，影响人们的经济、政治、科技和社会等各个层面。

1.2大数据发展历程

1.2.1萌芽阶段

20世纪90年代，“大数据”这个术语开始出现。1998年SGI首席科学家John Masey在USENIX大会上提出大数据的概念，他当时发表了一篇名为Big Data and the Next Wave of Infrastress的论文，使用了大数据来描述数据爆炸的现象。但是那时的大数据只表示“大量的数据或数据集”这样的字面含义，还没有涵盖到相关的采集、存储、分析挖掘、应用等技术方法与特征内涵

1.2.2发展阶段

从20世纪末到21世纪初期是大数据的发展期，在这一阶段中大数据逐渐为学术界的研究者所关注，相关的定义、内涵、特性也得到了进一步的丰富。2003至2006年，Google 发布的GFS、MapReduce和BigTable三篇论文对大数据的发展起到重要作用。2006至2009年，大数据技术形成并行运算与分布式系统。2009年，Jeff Dean在BigTable基础上开发了Spanner数据库。随着数据挖掘理论和数据库技术的逐步成熟，一批商业智能工具和知识管理技术如数据仓库、专家系统、知识管理系统等开始被应用。

1.2.3成熟阶段

2011年至今，是大数据发展的成熟阶段，越来越多的研究者对大数据的认识从技术概念丰富到了信息资产与思维变革等多个维度，一些国家、社会组织、企业开始将大数据上升为

总第21卷233期大众科技Vol.21 No.1 2019年1月Popular Science & Technology January 2019

【收稿日期】2018-11-06

【作者简介】朱孔村（1985－），男，山东临沂人，江苏省科学技术情报研究所实习研究员，从事电子政务相关工作。

- 115 -

重要战略。学术界及企业界纷纷开始将大数据研究由学术领域向应用领域扩展，大数据技术开始向商业、科技、医疗、政府、教育、经济、交通、物流及社会的各个领域渗透。

2 国内外大数据发展现状

当前，许多国家都认识到了大数据的重要作用，纷纷将开发利用大数据作为争夺新一轮竞争制高点的重要举措，实施大数据战略，为大数据技术、产业的发展提供有利的条件。

2.1国外发展现状

当前，大数据所蕴含的战略价值已经引起多数发达国家政府重视，各国相继出台大数据战略规划和配套法规促进大数据应用与发展。在各国政府大数据战略部署和政策推动下，政府部门、企业、高校及研究机构都开始积极探索大数据应用，下面以美国、英国、日本3个国家为例具体说明。

美国政府将大数据视为强化美国竞争力的关键因素之一，2012年3月29日，美国发布《大数据研究与发展计划》，将大数据的研究和发展上升为国家战略层次。之后，12个联邦部门启动开展了82个大数据相关项目[2]，涵盖了国防、国土安全、国家安全、能源、医疗卫生、食品药物、航空航天、人文社会科学、地质勘查等众多领域，美国希望借助大数据技术实现这些领域的技术突破。企业也借助于大数据政策的东风，强化对大数据的技术研发和创新应用。

2013年10月31日，英国发布《把握数据带来的机遇：英国数据能力战略》，战略旨在促进英国在数据挖掘和价值萃取中的世界领先地位。为实现上述目标，战略从强化数据分析技术、加强国家基础设施建设、推动研究与产研合作、确保数据被安全存取和共享等几个方面做出了部署，并做出11项明确的行动承诺，确保战略目标真正得以落实。

2013年6月，日本公布了新的IT战略——《创建最尖端IT国家宣言》，全面阐述了2013～2020年期间以发展开放公共数据和大数据为核心的日本新IT国家战略。日本政府推出了数据分类网站（data.go.jp），目的是提供不同政府部门和机构的数据供使用，向数据提供者和数据使用者开放数据。日本的企业如富士通、日立、NTT DATA等也在积极开发大数据业务。

2.2国内发展现状

我国政府、学术研究、产业界都高度重视大数据的研究和应用工作，纷纷制定相关发展计划。

在政府层面，2014年大数据首次写入政府工作报告，我国大数据产业进入蓬勃发展时期。2015年，《促进大数据发展行动纲要》发布，大数据上升为国家战略。2016年，国家大数据战略作为“十三五”十四大战略之一，首次被写进五年规划中，大数据创新应用向纵深发展。2017年，《大数据产业发展规划（2016-2020年）》正式发布，全面部署“十三五”时期大数据产业发展工作，推动大数据产业健康快速发展。

在学术研究方面，大数据研究机构、大数据学术组织纷纷成立，如中国计算机学会和中国通信学会都成立了大数据专家委员会，教育部在人民大学成立了“大数据分析和管理国际研究中心”，北京大数据研究院、电子科技大学和国家信息中心共建了大数据研究中心。大数据相关的学术活动也相继举行，如CCF大数据学术会议、中国大数据技术大会和中国国际大数据大会等。

在产业层面，由于各级政府和企业大力推进，目前我国的大数据产业处于高速发展阶段，技术创新取得明显突破，大数据应用推进势头良好，产业体系初具雏形，支撑能力日益增强；另外我国的数据资源量十分庞大，这些数据资源的积累也为大数据产业的发展提供了非常良好的机遇与环境。国内大数据产业发展格局已经形成了京津地区、长三角地区、珠三角地区、成渝地区四大聚集区域。北京、上海、广东是发展的核心地区，这些地区拥有知名互联网及技术企业、高端科技人才、国家强有力政策支撑等良好的信息技术产业发展基础，形成了比较完整的产业业态，且产业规模仍在不断扩大。以贵州、重庆为中心的大数据产业圈，虽然地处经济比较落后的西南地区，但是贵州、重庆等地依托政府对其大数据产业发展提供的政策引导，积极引进大数据相关企业及核心人才，实现了大数据产业在当地的快速发展。

3 大数据发展趋势

3.1关键技术发展趋势

3.1.1数据采集技术

数据采集是大数据挖掘和分析的基础，有效的数据采集方案对大数据挖掘研究具有重要意义。目前，不同领域有不同的数据采集方法与采集工具，如Facebook的Scribe、Apache Hadoop的chukwa、LinkedIn的Kafka、Cloudera的Flume等常用于互联网领域的日志采集，网络爬虫和网站公开API等方式常用于互联网领域的网络数据采集的，埋点技术等则应用于企业app产品数据采集；企业生产经营数据或学科研究数据等保密性要求较高的数据，可以通过与企业或研究机构合作，使用特定系统接口等相关方式采集数据。

大数据采集大致可以分为软采和硬采，未来软采的发展趋势是建立统一的数据采集框架，通过在待采集数据的系统中预留接口，直接和大数据平台的采集接口对接。这个统一的数据采集框架能够适应多种多样的数据源，并且能适应大数据数据量大、更新快的特点，自动对采集的数据进行一些预处理，删除重复数据，可靠快速地完成数据采集。硬采方面，未来将出现更多的低功耗智能传感器，可以达到人力无法到达的层面获取数据。另外未来可以建立数据集市和开放数据平台，通过数据分享方便大数据平台的数据采集。

3.1.2数据存储技术

大数据存储就是用存储器把采集到的数据存储起来，建立相应的数据库，便于后续的管理和调用。随着结构化数据和非结构化数据量的持续增长，以及大数据的大量、多样性、低密度等特点，大数据对存储设备的容量、读写性能、可靠性、系统可扩展性等提出了更高的要求，此前存储系统的设计已经无法满足大数据应用的需要。目前大数据存储主要应用于分布式文件系统、NoSQL数据库技术、NewSQL数据库技术实现。

- 116 -

未来大数据存储发展的两大主要目标是高可用性和低成本，高可用性即保证存储的数据可以快速访问同时不会丢失，低成本即对存储器的容量要求低。当前的大数据平台上，数据都是存储在硬盘驱动器或固态驱动器（SSD）的存储系统中，而现代内存技术将数据存储在RAM中可以大大提高数据存储的速度，未来通过内存数据库技术可以极大地提高大数据存储的可用性。基于人工智能的大数据重复数据删除功能和大数据编码优化技术可以有效的降低数据量，将其加入分布式存储系统可以极大地降低大数据存储对存储容量的需求。

3.1.3数据分析技术

大数据系统中，采集获取的所有数据并不是都是真实有用的，只有对数据进行二次加工，经过大数据分析，才能真正发挥数据的价值和作用。大数据分析技术主要包括已有数据的分布式统计分析技术和未知数据的分布式挖掘、深度学习技术，通过这些技术把隐藏在大型数据库或数据仓库的数据中的信息集中起来，进行萃取、提炼，以找出所研究对象的内在规律。目前常用的大数据分析及挖掘技术包括可视化分析、数理统计分析、情报检索、机器学习、专家系统（依靠过去的经验法则）和模式识别等。

随着数据量的迅速膨胀，大数据分析挖掘日益复杂，如果采用普通单机进行数据分析挖掘，性能无法满足，如果采用高性能机来处理海量数据，则在软硬件成本上可能无法承受。基于云计算平台的数据分析挖掘可以在节约成本的前提下满足性能需求，是大数据分析挖掘未来的重要发展方向。另外，机器学习、人工神经网络在未来将继续成为大数据智能分析的核心技术。

3.1.4大数据技术与其它新技术相辅相成

大数据技术的发展与其它新技术的发展将会相辅相成、相互促进。人工智能、机器学习等新技术可以促进大数据分析挖掘技术的进步，反过来大数据的发展也能同时促进这些新技术的进步。人工智能的实现过程需要基于大数据进行深度学习实现，大数据量可显著提高人工智能算法的准确性，训练数据集越大，训练的效果越好，数据量足够大时即使使用非常简单的算法也能达到很好的学习精度。对于最近热门的区块链技术，从当前来看，其与大数据还是两个相对独立的领域，但很可能会以技术互补形式的相互融合。例如随着区块链技术应用的迅速发展，数据规模将会越来越大，需要借助大数据技术进行处理；另一方面，区块链的可信任性、安全性和不可篡改性等特性，也可以用来加强大数据系统的安全隐私与鉴权系统。

3.2产业发展趋势

3.2.1政府政策体系支持

最近几年，大数据从政策层面备受关注。2014年起，大数据连续五年作为重要角色出现在政府工作报告中；十三届全国人大一次会议上，国务院总理李克强在报告中三次提到大数据；党的“十九大”提出“推动互联网、大数据、人工智能和实体经济深度融合”；2015年8月31日，国务院印发《促进大数据发展的行动纲要》；2016年3月，国家在出台的《“十三五”规划纲要》中再次明确大数据作为基础性战略资源的重大价值；2017年1月，

《大数据产业发展规划（2016-2020年）》正式发布。如表1所示，列举了近两年部分行业领域内国家的相关大数据政策[3]。

表1部分行业领域大数据政策汇总

排序政策名称发布日期发文单位

《关于组织实施促进大数据发展重大工程的

通知》

2016/1/7 发改委

2 《生态环境下大数据建设总体方案》2016/3/7 环保部

《关于印发促进国土资源大数据应用发展实

施意见》

2016/7/4 国土资源部

4 《关于加快中国林业大数据发展的指导意见》2016/7/13 国家林业局

《关于推进交通运输行业数据资源开放共享

的实施意见》

2016/8/25 交通运输部

6 《农业农村大数据试点方案》2016/10/14 农业部

7 《大数据产业发展规划(2016-2020年)》2017/1/17 工信部

8 《中国大数据发展报告(2017)》2017/2/26 国家信息中心

9 《关于推进水利大数据发展的指导意见》2017/5/2 水利部

《大数据驱动的管理和决策研究重大研究计

划2017年度项目指南》

2017/7/25

国家自然科学

基金委员会

《智慧城市时空大数据与云平台建设技术大

纲(2017版)》

2017/9/6

国家测绘地理

信息局办公室

《关于深入开展“大数据＋网上督查”工作的

意见》

2017/9/8 公安部在国家政策的引领下，各地方政府也高度重视大数据的发展，多个省市出台了促进大数据发展的文件规划，部分地区还设置了大数据管理机构或部门。2013年，上海与重庆率先推出了大数据发展计划，随后，贵州、广东、青海、浙江、北京等地也制定了各自的大数据行动计划。截至目前，全国已有十余个省市自治区制定了大数据产业战略规划。未来几年，从中央到地方，将出台更加丰富的配套政策与实施细则促进大数据加快落地，同时更多的地方政府也将为大数据发展创造更好的政策体系支持。

3.2.2产业规模继续扩大

据国际数据资讯（IDC）公司监测，全球数据量大约每两年翻一番，预计到2020年，全球将拥有35ZB的数据量[4]，同时，传感网、物联网、社交网络等技术迅猛发展，引发数据规模爆炸式增长。数据量的增长促进了大数据产业规模的增长，中国信息通信研究院结合对大数据相关企业的调研测算，2017年我国大数据产业规模为4700亿元[5]，同比增长30%。其中，大数据软硬件产品的产值约为234亿元，同比增长39%。可以预见，未来几年，大数据产业仍将保持高速增长。《大数据产业发展规划（2016—2020年）》提出，到2020年大数据产业要突破1万亿的规模，年均复合增长率要大致达到30%[6]。

3.2.3大数据开放共享程度加强

数据流通不畅一直是制约大数据发展的关键障碍。人人都想要别人的数据，但都不愿意把自己的数据给别人。从国家层面到企业内部，情况大同小异。麦肯锡2016年底的一份报告显示，大数据在很多领域没有达到预期效果，很重要的原因就是数据割裂。近年来，推动数据开放共享的政策举措在一直在加强，然而效果与预期还有差距。不少基础性、关键性数据仍被众多部门和机构束之高阁，少数大型互联网垄断企业为追求利益最大化，以安全和企业机密等原因拒绝向社会提供关键数据，整个国家数据共享开放程度不高。未来，随着同态加密、差分隐私、多方安全计算、零知识证明技术

- 117 -

的进一步突破，通过建立跨地域、跨行业的开放数据统一管理平台，大数据开放共享程度将进一步加强。

3.2.4大数据相关立法加快

随着我国大数据产业得到快速发展，个人信息泄漏、数据权属划分不清晰、数据交易安全、第三方监督缺位等问题也浮出水面，大数据产业需要国家层面立法规范。目前，我国暂无大数据相关的专门法律，且大数据产业的行业力量、行业组织不够强大，企业自律难以实现，政府的调控和保护能力不够强。2016年，《贵州省大数据发展应用促进条例》出台，这是国内首个大数据地方性条例。国家层面推动大数据立法，通过完善大数据相关法律法规，为大数据产业的健康发展创造良好的环境。

3.3大数据行业应用发展趋势

大数据在互联网行业的应用起步比较早，应用范围也较广。但如今大数据的应用已经不限于互联网行业，正在逐步向其他行业如政府决策、生产制造、商业等专业领域扩展。在政府决策领域，大数据能够对当前数据信息进行快速的整合和处理，从而自动生成决策报告，帮助政府决策者做出科学的决策，提升决策的效率和水平。在商业领域，企业通过网络信息的搜集，结合大数据的信息处理技术，能够获得大量的消费者信息以及产品销售情况。在生产制造领域，可以通过大数据分析改善加工工艺流程提高产量，对生产质量进行跟踪。著名的国际咨询公司麦肯锡全球研究所在其报告中指出大数据已经渗入到了社会上的每一个行业领域，并且逐渐成为各个领域重要的生产因素。

随着信息技术和人类生产生活交汇融合，未来大数据应用的涉及面将会更广泛，也更注重解决实际问题。互联网行业借助于大数据技术，可以进行商品推荐和针对性广告投放；电信行业利用大数据技术可以实现网络管理和优化；在金融行业中，大数据在高频交易、信贷风险分析方面可以发挥重大作用；在生物医学行业中，大数据可以实现流行病预测、智慧医疗、健康管理；城市管理中，可利用大数据实现智能交通、环保监测、城市规划和智能安防等；能源行业利用大数据技术分析用户的用电模式，可以改进电网运行，合理设计电力需求响应系统，确保电网运行安全；物流行业利用大数据可以优化物流网络，提高物流效率，降低物流成本。未来大数据行业应用融合在融合行业数量、融合应用深度、融合业务规模、融合发展均衡性等方面将取得进一步发展。

4 总结

大数据是时代发展的新产物，是国家与企业最为重要的战略资产，对经济的发展和社会进步有着重大意义。当前大数据产业发展已经具备了良好基础，面临难得的发展机遇，但仍然存在一些困难和问题。未来几年，大数据产业集聚将进一步发展，大数据融合应用进程将进一步加速，大数据技术将为经济社会发展提供新的动力。

【参考文献】

[1]李后强.大数据时代的互联网思维[N].企业家日报,2014-

11-11.

[2]张勇进,王璟璇.主要发达国家大数据政策比较研究[J].中

国行政管理,2014(12):113-117.

[3]前瞻产业研究院.大数据产业发展前景与投资战略规划

分析报告[R].北京:前瞻产业研究院,2018.

[4]Gantz J,Reinsel D.Extracting Value from Chaos [R].IDC,

2011.

[5]中国电子信息产业发展研究院.中国大数据发展调查报告

(2018年)[R].北京:中国电子信息产业发展研究院,2018. [6]工业和信息化部.大数据产业发展规划(2016-2020年)[Z].

北京:工业和信息化部,2017.

（上接第88页）

方面着手，对症下药，尽可能将员工的需求与企业的发展要求相结合，实现个人与集体的统一，才能在满足员工需求与发展的基础上，促进企业集体和员工个体的共同进步。

【参考文献】

[1]林琳.中小企业员工流失带来的危害及对策研究[J].商场

现代化,2015(27):131-132.

[2]何振,张甜颖.民营企业人员流失成因及对策研究[J].经济

研究导刊,2015(7):157-158.

[3]李俭富,刘冠军.企业员工流失防范机制的构建[J].中国劳

动,2013(5):44-46.

[4]曹书全.我国中小企业员工流失的原因及对策[J].人才资

源开发,2015(1):105-106.

[5]李娇.国有钢铁企业人才流失的成因及对策研究——以

邯郸钢铁公司为例[D].天津:天津商业大学,2015.

- 118 -

大数据专业发展前景如何

大数据是目前最火热的一个词了，想必所有人，只要你接触网络，那你就应该听说过这个词。然而更多的人也只是听说过而已，对大数据并没有过多的了解，前几天我好多朋友就问我，大数据这么火，那它到底是做什么呢，这么火热的大数据前景究竟怎么样?今天我们就来探讨一下。一、大数据的前景中国拥有世界上五分之一的人口，很多行业内专业人士断定中国在未来将成为大数据最重要的市场。中国的发展正在处于快速的上升期，中国产生的数据将是巨大的，而巨大的数据对大数据的发展将起到促进的作用，而大数据在中国市场的发展也将领先。如今，大数据作为中国官方重点扶持的战略性新兴产业，已逐步从概念走向落地“大数据”和“虚拟化”两大热门领域得到了广泛关注和重视，90%企业都在实用大数据。大数据将给中国的企业带来更广泛的发展机会，是值得大家重视的一个市场。二、大数据发展的几大方向

方向一：大数据分析领域快速发展数据蕴藏价值，但是数据的价值需要用IT技术去发现、去探索，数据的积累并不能够代表其价值的多少。方向二：分布式存储有了用武之地大数据的特点就是数量多且大，这就使得存储的管理面临着挑战，这个问题就需要新的技术来解决，分布式存储技术将作为未来解决大数据存储的重要技术。方向三：大数据与云技术的结合如果再找一个可以跟大数据并驾齐驱的IT热词，云计算无疑是跟大数据关系非常大的一个词语。方向四：大数据将成为企业IT核心随着大数据价值逐渐被发展，大数据将成为企业IT的核心，毕竟在这个以盈利为主导的行业环境中，谁能够为企业带来更多的价值就将会更重要。三、大数据就业前景好，工资高。大数据技术人才在中国市场目前非常紧缺，因此企业也是开出了高薪聘请这类高端人才。北大青鸟佳音校区为您提供一个好的平台，让你深入接触大数据，实现你的高薪就业梦，北大青鸟佳音校区为您扬帆起航。

大数据发展趋势答案

大数据发展趋势势 2011年，IBM的“沃森”超级计算机在美国著名智力竞赛节目《危险边缘》上击败两名人类选手而夺冠。（3分） ? A. 是 ? B. 否北京航空航天大学创办了国内第一个“大数据科学与应用”软件工程硕士专业。（3分） ? A. 是 ? B. 否人工智能够和人一样进行感知、认知、决策、执行的人工程序或系统。（3分） ? A. 是 ? B. 否

大数据开发的根本目的是以数据分析为基础，帮助人们做出更明确的决策，优化企业和社会运转。（3分） ? A. 是 ? B. 否机器学习就是通过算法，使得机器能从大量历史数据中学习规律，从而对新的样本做智能识别或对未来做预测。（3分） ? A. 是 ? B. 否目前，我国政府、企业和行业信息化系统建设往往缺少统一规划和科学论证，系统之间缺乏统一的标准，形成了众多“信息孤岛”。（3分） ? A. 是 ? B. 否当前，企业提供的大数据解决方案大多基因Hadoop开源项目。（3分）

A. 是 ? B. 否由于大数据处理多样性的需求，目前出现了多种典型的计算模式，包括大数据查询分析计算、批处理计算、流式计算、图计算等。（3分） ? A. 是 ? B. 否大数据分为“结构化数据“与”非结构化数据”。（3分） ? A. 是 ? B. 否大数据成熟催化了人工智能的进步，深度学习带来算法上的突破则带来了人工智能浪潮。（3分）

A. 是 ? B. 否知识图谱是一种基于图的数据结构，由节点和边组成。（3分） ? A. 是 ? B. 否大数据的发展趋势中的智能化关键技术包括感知技术、自然语言技术、交互技术以及决策等。（3分） ? A. 是 ? B. 否 2012年7月国务院发布的《“十二五”国家战略性新兴产业发展规划》中明确提出支持海量数据存储、处理技术的研发和产业化。（3分） ?

数据中心的未来发展趋势

数据中心未来的发展趋势经历了ISP/ICP飞速发展，.COM公司的风靡后，一种新的服务模式--互联网数据中心（Internet Data Center，缩写为IDC）正悄然兴起。它在国外吸引着像AT&T、AO- 、IBM、Exodus、UUNET等大公司的巨资投入；国内不但四大电信运营商中国电信、中国网通、中国联通、中国吉通开始做跑马圈地，一些专业服务商如清华万博、首都在线和世纪互联等，也参与了角逐。 IDC(Internet Data Center) - Internet数据中心，它是传统的数据中心与Internet的结合，它除了具有传统的数据中心所具有的特点外，如数据集中、主机运行可靠等，还应具有访问方式的变化、要做到7x24服务、反应速度快等。IDC是一个提供资源外包服务的基地，它应具有非常好的机房环境、安全保证、网络带宽、主机的数量和主机的性能、大的存储数据空间、软件环境以及优秀的服务性能。 IDC作为提供资源外包服务的基地，它可以为企业和各类网站提供专业化的服务器托管、空间租用、网络批发带宽甚至ASP、EC等业务。简单地理解，IDC是对入驻(Hosting)企业、商户或网站服务器群托管的场所；是各种模式电子商务赖以安全运作的基础设施，也是支持企业及其商业联盟(其分销商、供应商、客户等)实施价值链管理的平台。形象地说，IDC是个高品质机房，在其建设方面，对各个方面都有很高的要求。 IDC的总体结构如下图所示:

IDC的建设主要在如下几个方面：网络建设 IDC主要是靠其有一个高性能的网络为其客户提供服务，这个高性能的网络包括其- AN、WAN和与Internet接入等方面。 IDC的网络建设主要有： - IDC的- AN的建设，包括其- AN的基础结构，- AN的层次，- AN的性能。- IDC的WAN的建设，即IDC的各分支机构之间相互连接的广域网的建设等。- IDC的用户接入系统建设，即如何保证IDC的用户以安全、可靠的方式把数据传到IDC的数据中心，或对存放在IDC的用户自己的设备进行维护，这需要IDC 为用户提供相应的接入方式，如拨号接入、专线接入及VPN等。 - IDC与Internet互联的建设。

大数据发展趋势标准答案

大数据发展趋势答案

————————————————————————————————作者：————————————————————————————————日期：

大数据发展趋势势 2011年，IBM的“沃森”超级计算机在美国著名智力竞赛节目《危险边缘》上击败两名人类选手而夺冠。（3分） ? A. 是 ? B. 否答题情况：正确选项：A你答对了! 北京航空航天大学创办了国内第一个“大数据科学与应用”软件工程硕士专业。（3分） ? A. 是 ? B. 否答题情况：正确选项：A你答对了! 解析：暂无解析! 人工智能够和人一样进行感知、认知、决策、执行的人工程序或系统。（3分） ? A. 是 ?

答题情况：正确选项：A你答对了! 解析：暂无解析! 大数据开发的根本目的是以数据分析为基础，帮助人们做出更明确的决策，优化企业和社会运转。（3分） ? A. 是 ? B. 否答题情况：正确选项：A你答对了! 机器学习就是通过算法，使得机器能从大量历史数据中学习规律，从而对新的样本做智能识别或对未来做预测。（3分） ? A. 是 ? B. 否答题情况：正确选项：A你答对了! 解析：暂无解析! 目前，我国政府、企业和行业信息化系统建设往往缺少统一规划和科学论证，系统之间缺乏统一的标准，形成了众多“信息孤岛”。（3分） ?

? B. 否答题情况：正确选项：A你答对了! 解析：暂无解析! 当前，企业提供的大数据解决方案大多基因Hadoop开源项目。（3分） ? A. 是 ? B. 否答题情况：正确选项：A你答对了! 解析：暂无解析! 由于大数据处理多样性的需求，目前出现了多种典型的计算模式，包括大数据查询分析计算、批处理计算、流式计算、图计算等。（3分） ? A. 是 ? B. 否答题情况：正确选项：A你答对了!

国内外大数据发展现状和趋势(2018)

行业现状当前，许多国家的政府和国际组织都认识到了大数据的重要作用，纷纷将开发利用大数据作为夺取新一轮竞争制高点的重要抓手，实施大数据战略，对大数据产业发展有着高度的热情。美国政府将大数据视为强化美国竞争力的关键因素之一，把大数据研究和生产计划提高到国家战略层面。在美国的先进制药行业，药物开发领域的最新前沿技术是机器学习，即算法利用数据和经验教会自己辨别哪种化合物同哪个靶点相结合，并且发现对人眼来说不可见的模式。根据前期计划，美国希望利用大数据技术实现在多个领域的突破，包括科研教学、环境保护、工程技术、国土安全、生物医药等。其中具体的研发计划涉及了美国国家科学基金会、国家卫生研究院、国防部、能源部、国防部高级研究局、地质勘探局等6个联邦部门和机构。目前，欧盟在大数据方面的活动主要涉及四方面内容：研究数据价值链战略因素；资助“大数据”和“开放数据”领域的研究和创新活动；实施开放数据政策；促进公共资助科研实验成果和数据的使用及再利用。英国在2017年议会期满前，开放有关交通运输、天气和健康方面的核心公共数据库，并在五年内投资1000万英镑建立世界上首个“开放数据研究所”；政府将与出版行业等共同尽早实现对得到公共资助产生的科研成果的免费访问，英国皇家学会也在考虑如何改进科研数据在研究团体及其他用户间的共享和披露；英国研究理事会将投资200万英镑建立一个公众可通过网络检索的“科研门户”。法国政府为促进大数据领域的发展，将以培养新兴企业、软件制造商、工程师、信息系统设计师等为目标，开展一系列的投资计划。法国政府在其发布的《数字化路线图》中表示，将大力支持“大数据”在内的战略性高新技术，法国软件编辑联盟曾号召政府部门和私人企业共同合作，投入3亿欧元资金用于推动大数据领域的发展。法国生产振兴部部长ArnaudMontebourg、数字经济部副部长FleurPellerin和投资委员LouisGallois在第二届巴黎大数据大会结束后的第二天共同宣布了将投入1150万欧元用于支持7个未来投资项目。这足以证明法国政府对于大数据领域发展的重视。法国政府投资这些项目的目的在于“通过发展创新性解决方案，并将其用于实践，来促进法国在大数据领域的发展”。众所周知，法国在数学和统计学领域具有独一无二的优势。日本为了提高信息通信领域的国际竞争力、培育新产业，同时应用信息通信技术应对抗灾救灾和核电站事故等社会性问题。2013年6月，安倍内阁正式公布了新IT战略——“创建最尖端IT国家宣言”。“宣言”全面阐述了2013～2020年期间以发展开放公共数据和大数据为核心的日本新IT国家战略，提出要把日本建设成为一个具有“世界最高水准的广泛运用信息产业技术的社会”。日本著名的矢野经济研究所预测，2020年度日本大数据市场规模有望超过1兆日元。在重视发展科技的印度，大数据技术也已成为信息技术行业的“下一个大事件”，目前，不仅印度的小公司纷纷涉足大数据市场淘金，一些外包行业巨头也开始进军大数据市场，试图从中分得一杯羹。2016年，印度全国软件与服务企业协会预计，印度大数据行业规模在3年内将到12亿美元，是当前规模的6倍，同时还是全球大数据行业平均增长速度的两倍。印度毫无疑问是美国亦步亦趋的好学生。在数据开放方面，印度效仿美国政府的做法，制定了一个一站式政府数据门户网站https://www.wendangku.net/doc/779355776.html,.in，把政府收集的所有非涉密数据集中起来，包括全国的人口、经济和社会信息。我国大数据行业仍处于快速发展期，未来市场规模将不断扩大 ?目前大数据企业所获融资数量不断上涨，二级市场表现优于大盘，我国大数据行业的市

数据库未来发展趋势(同名25272)

数据库技术最新发展数据库（Databases，简称DB）是指长期保存在计算机的存储设备上、并按照某种模型组织起来的、可以被各种用户或应用共享的数据的集合。数据库管理系统（Database Management Systems，简称DBMS）是指提供各种数据管理服务的计算机软件系统，这种服务包括数据对象定义、数据存储与备份、数据访问与更新、数据统计与分析、数据安全保护、数据库运行管理以及数据库建立和维护等。由于企业信息化的目的就是要以现代信息技术为手段，对伴随着企业生产和经营过程而产生的数据进行收集、加工、管理和利用，以改善企业生产经营的整体效率，增强企业的竞争力。所以，数据库是企业信息化不可缺少的工具，是绝大部分企业信息系统的核心。纵观数据库发展，三大数据库巨头公司纷纷推出其最新产品，数据库市场竞争日益加剧。从最新的IDC报告显示，在关系数据库管理系统(RDBMS)软件市场上，Oracle继续领先对手IBM和微软，但是微软在2006年取得了更快的销售增长率…… 根据对数据库发展的技术趋势不难看出，整个数据库发展呈现出了三个主要特征： (1)、支持XML数据格式 IBM公司在它新推出的DB2 9版本中，直接把对XML的支持作为其新产品的最大卖点，号称是业内第一个同时支持关系型数据和XML数据的混合数据库，无需重新定义XML数据的格式，或将其置于数据库大型对象的前提下，IBM DB2 9允许用户无缝管理普通关系数据和纯XML数据。对于传统关系型数据与层次型数据的混合应用已经成为了新一代数据库产品所不可或缺的特点。除了IBM，Oracle和微软也同时宣传了它们的产品也可以实现高性能XML存储与查询，使现有应用更好的与XML共存。 (2)、商业智能成重点为应对日益加剧的商业竞争，企业不断增加内部IT及信息系统，使企业的商业数据成几何数量级不断递增，如何能够从这些海量数据中获取更多的信息，以便分析决策将数据转化为商业价值，就成为目前数据库厂商关注的焦点。各数据库厂商在新推出的产品中，纷纷表示自己的产品在商业智能方面有很大提高。如：微软最新版SQL Server 2005就集成了完整的商业智能套件，包括数据仓库、数据分析、ETL工具、报表及数据挖掘等，并有针对性的做了一些优化。如何更好的支持商业智能将是未来数据库产品发展的主要趋势之一。 (3)、SOA架构支持 SOA已经成为目前IT业内的一个大的发展趋势，最初IBM和BEA是该理念的主要推动者，后来有越来越多的企业加入，开始宣称支持SOA，其中包括Oracle，而微软开始并不是非常赞同SOA的，但是，随着时间的发展，目前国内主流的数据库厂商都开始宣称他们的产品是完全支持SOA架构的，包括微软的SQL Server 2005，从微软态度的转变可以看出，未来IT业的发展与融合，SOA正在成长为一个主流的趋势。本文仅对数据库管理系统的现状以及一些重要的发展方向作一简要综述，并不具体对一些技术内容进行深入探讨，每一个方向的研究课题都可以充分地展开。

大数据发展现状与未来发展趋势研究

大数据发展现状与未来发展趋势研究朱孔村（江苏省科学技术情报研究所，江苏南京210042）【摘要】数据是信息化时代的“新石油”资源，如何利用好这种“新石油”资源需要大数据技术的支持。文章介绍了大数据技术及其发展历程，概括了当前国内外大数据的发展现状并展望了大数据技术和产业方面的未来发展趋势。【关键词】大数据；现状；趋势【中图分类号】TP391【文献标识码】A【文章编号】1008-1151(2019)01-0115-04 Research on the Current Situation and Future Development Trend of Big Data Abstract: Data is the “new petroleum” resource of the information age and how to make good use of this “new petroleum” resource needs the support of big data technology. This paper first introduces the big data technology and its development process and summarizes the current development of big data at home and abroad. Finally, the future development trend of big data technology and industry is prospected. Key words: big data; current situation; trend 1 大数据技术概述 1.1大数据技术随着物联网、云计算、移动互联网等技术的成熟，以及智能移动终端的普及，全社会的数据量呈指数型增长，全球已经进入以数据为核心的大数据时代。大数据并不是一个新的概念，信息技术发展的每一个阶段都会遇到数据处理的问题，人类需要不停的面对来自数据的挑战。为满足商业结构化数据存储的需求而产生了关系型数据库，为满足互联网时代非结构化数据存储需求而产生了NoSQL技术，而大数据技术的产生是为了解决大型数据集分析的问题。大数据技术目前还没有一个确切的定义，各行各业有着自己的见解，但总体而言，其关键在于从数量庞大、种类繁多的数据中提取出有用的信息。维基百科从数据处理的角度将大数据定义为一个超大的、难以用现有常规的数据库管理技术和工具处理的数据集。国际数据公司（IDC）给出的报告指出，大数据技术描述了一种新一代技术和构架，以很经济的方式、以高速的捕获、发现和分析技术，从各种超大规模的数据中提取价值[1]。少量的数据看似杂乱无章，但是当数据累积到一定程度时，就会呈现出一种规律和秩序。大数据的价值就在于数据分析，利用大数据分析技术，从海量数据中总结经验、发现规律、预测趋势，最终为辅助决策服务。《大数据时代》的作者克托·迈尔-舍恩伯格认为：“大数据开启了一次重大的时代转型”，他指出大数据将带来巨大的变革，改变人们的生活、工作和思维方式，改变人们的商业模式，影响人们的经济、政治、科技和社会等各个层面。 1.2大数据发展历程 1.2.1萌芽阶段 20世纪90年代，“大数据”这个术语开始出现。1998年SGI首席科学家John Masey在USENIX大会上提出大数据的概念，他当时发表了一篇名为Big Data and the Next Wave of Infrastress的论文，使用了大数据来描述数据爆炸的现象。但是那时的大数据只表示“大量的数据或数据集”这样的字面含义，还没有涵盖到相关的采集、存储、分析挖掘、应用等技术方法与特征内涵 1.2.2发展阶段从20世纪末到21世纪初期是大数据的发展期，在这一阶段中大数据逐渐为学术界的研究者所关注，相关的定义、内涵、特性也得到了进一步的丰富。2003至2006年，Google 发布的GFS、MapReduce和BigTable三篇论文对大数据的发展起到重要作用。2006至2009年，大数据技术形成并行运算与分布式系统。2009年，Jeff Dean在BigTable基础上开发了Spanner数据库。随着数据挖掘理论和数据库技术的逐步成熟，一批商业智能工具和知识管理技术如数据仓库、专家系统、知识管理系统等开始被应用。 1.2.3成熟阶段 2011年至今，是大数据发展的成熟阶段，越来越多的研究者对大数据的认识从技术概念丰富到了信息资产与思维变革等多个维度，一些国家、社会组织、企业开始将大数据上升为总第21卷233期大众科技Vol.21 No.1 2019年1月Popular Science & Technology January 2019 【收稿日期】2018-11-06 【作者简介】朱孔村（1985－），男，山东临沂人，江苏省科学技术情报研究所实习研究员，从事电子政务相关工作。 - 115 -

大数据发展背景与研究现状

大数据发展背景与研究现状（一）大数据时代的背景随着计算机存储能力的提升和复杂算法的发展，近年来的数据量成指数型增长，这些趋势使科学技术发展也日新月异，商业模式发生了颠覆式变化。《分 MGI）发 “赢技术使得在线购物的完成率提升了10%到15%。我国信息数据资源80%以上掌握在各级政府部门手里，但很多数据却与世隔绝“深藏闺中”，成为极大的浪费。2015年，国务院印发《促进大数据发展行动纲要》，明确要求“2018年底前建成国家政府数据统一开放平台”；今年5月，国务院办公厅又印发《政务信息系

统整合共享实施方案》，进一步推动政府数据向社会开放。1 大数据可以把人们从旧的价值观和发展观中解放出来，从全新的视角和角度理解世界的科技进步和复杂技术的涌现，变革人们关于工作、生活和思维的看法。大数据的应用十分广泛，通过对大规模数据的分析，利用数据整体性与涌现性、相关性与不确定性、多样性与非线性及并行性与实时性研究大数据在。2012年Gartner认为，不到两年时间大数据将成为新技术发展的热点，海量和多样化的信息资产使得大数据需要新的处理模式，才能为数据信息使用者提供有效的信息，使得企业洞察危险的能力增强，流程得以优化，决策更加准确。Victor 在其最新着作《大数据时代——生活、工作与思维的大变革》中指出，大数据 1人民网 26个好用大数据的秘诀

时代要想得到有价值的信息，要从总体而不是少量的数据样本分析与实务相关的所有数据。更加注重数据之间的相关关系，乐于加收纷繁复杂的数据，而不再探求难以捉摸的因果关系和追求数据的精确性。欧盟在其公布的《数字议程》中指出公共数据的市场价值约有320亿欧元，公共数据的开放和再利用可以产生新的商业和工作机会。开放行、公共数据，增加政府的开放和透明度可以给年9 展的进程。2017年8月30日，国家旅游局、银联商务股份有限公司和中国电信集团联合成立“旅游消费但是数据联合实验室”，并发布了首份研究成果《2017年上半年中国旅游消费大数据报告》。三方在各自的领域有深耕多年的技术、大数据能力、市场资源和经验，通过签署站多合作，可以实现资源共享，优势互 3国家十三五规划纲要

大数据发展发展趋势分析报告

2012年，全球数据储存量达到1.8ZB，这是什么概念？它相当于每个中国人，每分钟发3条微博，一共要写2.6976万年才能写完。四年过去了，全球大数据储量是2012年的8倍，而用于存储数据的全球服务器总量还将增长十倍。预计到2020年，全球大数据市场规模将达到1263.21亿美元，据数据显示，目前70%的大企业和56%的中小企业已经部署或是正在计划部署与大数据有关的项目和计划。全球大数据市场结构正在从垄断竞争走向完全竞争的局面。美国：美国是大数据发展的领跑者，美国政府一直积极出台大数据相关政策。现今，美国的大数据产业发展广泛渗透到经济、政治、教育、安全和社会管理等领域，步入大规模商业化阶段。大数据已成企业发展的巨大引擎。“Facebook”、“Twitter”项目的成功，标志着信息技术企业加快推动大数据业务的发展，大数据的使用将成为领先企业与其他企业之间最显著的差别。大数据也成为新的盈利模式，正在推动改革企业的决策模式、运营模式和竞争模式，成为企业发展战略的重要组成部分。政府对大数据政策的支持在美国总统奥巴马宣誓就职后的第一个工作日就签发了“开放政府”备忘录（Memorandum on Transparency and Open

Government），指导新一届行政当局从开放政府数据源、建设开放型政府入手，以数字革命带动政府变革。“开放政府”的目的简洁明了：改进公众服务，提升公众信任，更有效管理公共资源和增进政府责任。互联网时代的开放型政府，首先必须开放政府数据。紧随其后，总统签发“开放政府数据”行政令（The Open Government Directive），要求在45天内所有政府部门无一例外必须向社会开放3个有价值的数据源。在大数据法律方面：美国总统要求超前思考“大数据”对人类社会的影响，重点研究现有技术和未来技术会对现行法律带来哪些挑战，哪些法律和政策需要修订或制定以适应变化。为了更进一步发展大数据产业，美国政府发布了《联邦大数据研发战略计划》，以加速其2012年提出的“大数据研发行动”进程。应用案例：大数据在公共设施方面的应用 1.在夏威夷四处可见防海啸警报器，但这些警报器里的电池经常被偷，直接导致政府无法准确掌握各个报警器在紧急状况下能否使用，所以他们利用大数据技术，发明了一个“报警器中的报警器”，可以及时获取所有报警器的实时数据，避免了海啸发生前由于数据无法准确掌握造成的重大损失。

大数据时代的数据库的创新与发展

大数据时代的数据库的创新与发展摘要：大数据时代的到来，使得传统数据库在处理百TB以上、特别是PB级数据的查询、统计、分析等应用时，遇到性能上的瓶颈。面对电信、金融、安全、政企等大数据量应用，包括电信话单、金融细帐、智能电网、经营分析、公安网监、舆情监控、审计稽查、应急指挥等，用户体验往往不可接受。海量数据的3V(数量Volume、速度Velocity、多样Variety)挑战着传统数据库曾经非常成功的“一种架构支持多类应用”的模式。互联网和大数据应用的冲击下，世界数据库格局在发生革命性的变化，通用数据库(OldSQL)一统天下变成了OldSQL、NewSQL、NoSQL共同支撑多类应用的局面。大数据是信息化的一个崭新发展阶段，通过分析各种大数据，人类对知识的认知可以见微知著、集腋成裘、由此及彼，对世界的认知也将更全面、更深入、和更具前瞻性。自2011年5月，EMC和IDC在合作研究“数字宇宙”五年之后提出“大数据”概念以来，“大数据经济”的影响力愈发显著，谷歌、Facebook竞相超过微软，曾经的“软件为王”让位于“数据为王”。可以预见，大数据时代将引发大量应用创新，比如，城市大数据应用将支撑智慧城市建设，还有智慧教育、智慧医疗、智慧交通、智慧金融等; 关键词：大数据时代，数据库；系统；创新；引言：“大数据”（ big data）或者称为“海量数据”，这个直白的名词，已经在全球引起了广泛关注，已经引领了又一轮数据技术的革命。美国EMC 公司于2011 年5 月在美国拉斯维加斯举办第11 届 EMC World 大会，大会的核心是帮助企业利用IT变革的重要趋势。此次大会以“云计算相遇大数据（ Cloud Meets Big Data）”为主题，着重展现当今两个最重要的技术趋势，正式抛出了“大数据”概念。根据IDC《数字世界》研究项目在2012年的统计，2010年全球数字资源的规模首次突破了ZB（1ZB=1万亿GB）级别，达到了1.227ZB；而2005年只有130Eb，五年增长了10倍。如果保持这种爆炸式的增长速度，到了2020年，我们的数字资源规模将超过40ZB，相当于世界上每个人拥有超过5200GB的数据。无疑，我们已进入了大数据时代。在 2011 年 12 月，我国工信部发布了物联网“十二五”规划，提出了4项关键技术创新工程。信息处理技术的内容包括海量数据存储、数据挖掘、图像视频智能分析等，都是大数据技术的重要组成部分；另外 3 项关键技术创新工程，包括信息感知技术、信息传输技术、信息安全技术，这些也都与“大数据”密切相关。我国也对大数据技术给与了足够的重视。基于以上概述，大数据时代已经到来，已经对我们的社会产生了重大影响，本文将尝试对大数据时代我国的索引和数据库事业的发展与创新进行研究和展望。大数据时代：多权威机构和企业对大数据给予了不同的定义。麦肯锡认为，“大数据所涉及的数据集规模已经超过了传统数据库软件获取、存储、管理和分析的能力。”IBM公司认为，可以用3个特征相结合来定义大数据：数量（V olume）、种类（Variety）和速度（Velocity），即庞大容量、极快速度和种类丰富的数据。IDC认为，“大数据不是一个事物，而是一个跨多个信息技术领域的活动。大数据技术描述了新一代的技术和架构，其被设计用于通过使用高速（V elocity）的采集、发现或分析，从超大容量（V olume）的多样（Variety）数据中经济地提取价值（Value）。” 综合对种不同的见解，本文认为，具备以下特征的就是大数据。

数据库未来发展趋势(更新版)

东华大学报告名称: 数据库技术最新发展学院：专业：姓名：学号：指导老师： 2015-12-10

1.引言自从计算机问世以后，就有了处理数据、管理数据的需求，由此,计算机技术新的研究分支数据库技术应运而生。数据库（Databases，简称DB）是指长期保存在计算机的存储设备上、并按照某种模型组织起来的、可以被各种用户或应用共享的数据的集合。数据库管理系统（Database Management Systems，简称DBMS）是指提供各种数据管理服务的计算机软件系统，这种服务包括数据对象定义、数据存储与备份、数据访问与更新、数据统计与分析、数据安全保护、数据库运行管理以及数据库建立和维护等。随着计算机应用领域的不断拓展和多媒体技术的发展,数据库已是计算机科学技术中发展最快、应用最广泛的重要分支之一。从20世纪60年代末开始,数据库系统已从第一代层次数据库、网状数据库,第二代的关系数据库系统,发展到第三代以面向对象模型为主要特征的数据库系统。关系数据库理论和技术在70~80年代得到长足的发展和广泛而有效地应用,80年代,关系数据库成为应用的主流,几乎所有新推出的数据库管理系统(DataBaseManagementSystem,DBMS)产品都是关系型的,他在计算机数据管理的发展史上是一个重要的里程碑,这种数据库具有数据结构化、最低冗余度、较高的程序与数据独立性、易于扩充、易于编制应用程序等优点,目前较大的信息系统都是建立在关系数据库系统理论设计之上的。但是,这些数据库系统包括层次

数据库、网状数据库和关系数据库,不论其模型和技术上有何差别,却主要是面向和支持商业和事务处理应用领域的数据管理。然而,随着用户应用需求的提高、硬件技术的发展和InternetIntranet提供的丰富多彩的多媒体交流方式,促进了数据库技术与网络通信技术、人工智能技术、面向对象程序设计技术、并行计算技术等相互渗透,互相结合,成为当前数据库技术发展的主要特征,形成了数据库新技术。目前，数据库技术已相当成熟，被广泛应用于各行各业中，成为现代信息技术的重要组成部分，是现代计算机信息系统和计算机应用系统的基础和核心。 2.数据库技术的发展历程在数据库系统出现以前，各个应用拥有自己的专用数据，通常存放在专用文件中，这些数据与其他文件中数据有大量的重复，造成了资源与人力的浪费。随着机器存储数据的日益增多，数据重复的问题越来越突出。于是人们就想到将数据集中存储、统一管理，这样就演变成数据库管理系统而形成数据库技术。数据库的诞生以20世纪60年代IBM 推出的数据库管理产品IMS 为标志。1969年IBM 公司研制了基于层次模型数据库管理系统IMS （Information Management System），并作为商品化软件投入市场。数据库的出现，实现了数据资源的整体管理。IMS系统的推出，使得数据库概念得到了普及，也使得人们认识到数据的价值和统一管理的

浅析大数据的特点及未来发展趋势

浅析大数据的特点及未来发展趋势摘要：随着二十一世纪的到来，人们已经进入了信息化的时代。计算机技术水平越来越先进，给人们的生活带来了极大的便利。在信息化的时代，人们每天接触的信息量成千上万。获取有用的数据，不仅可以有效缩短时间，而且可以满足具体需求。大数据技术正是适应现代社会的发展，从数据量巨大、结构复杂、类型众多的数据中，快速获取有价值的信息。因此本篇文章主要分析了大数据的特点，通过进一步探讨，并对其未来的发展趋势进行展望。关键词：大数据；特点；发展趋势大数据是继互联网、云计算技术后世界又一热议的信息技术，近几年来发展十分迅速。大数据技术的出现，给人们的生活带来了极大的便利。我们将生活中的东西数据化之后，就可以采用数据的格式对其进行存储、分析，从而获得更大的价值。一、大数据技术的特点分析 1）开源软件得到广泛的应用近几年来，大数据技术的应用范围越来越广泛。在信息化的时代，各个领域都趋向于智能化、科技化。大数据技术研发出来的分布式处理的软件框架Hadoop、用来进行挖掘和可视化的软件环境、非关系型数据库Hbase、MongoDb 和CounchDB等开源软件，在各行各业具有十分重要的意义。这些软件的研发，与大数据技术的发展是分不开的。 2）不断引进人工智能技术大数据技术主要是从巨大的数据中获取有用的数据，进而进行数据的分析和处理。尤其是在信息化爆炸的时代，人们被无数的信息覆盖。大数据技术的发展显得十分迫切。实现对大数据的智能处理，提高数据处理水平，需要不断引进人工智能技术，大数据的管理、分析、可视化等等都是与人密切相关的。现如今，机器学习、数据挖掘、自然语言理解、模式识别等人工智能技术，已经完全渗透到了大数据的各个程序中，成为了其中的重要组成部分。 3）非结构化的数据处理技术越来越受重视大数据技术包含多种多样的数据处理技术。非结构化的处理数据与传统的文本信息存在很大的不同，主要是指图片、文档、视频等数据形式。随着云计算技

2020年(发展战略)数据库新技术及其发展方向

（发展战略）数据库新技术及其发展方向

数据库新技术及其发展趋势数据库技术是计算机科学的重要分支,主要研究如何安全高效地管理大量、持久、共享的数据。数据库的研究始于20世纪60年代中期,它的发展有着三大标志性事件。第壹件大事,1969年IBMXX公司研制开发了基于层次模型的数据库管理系统的商品化软件InformationManagementSystem,即IMS系统,是首例成功的数据库管理系统软件。第二件大事,美国数据系统语言协会CODASYL(ConferenceOnDataSystemLanguage)下属的数据库任务组DBTG(DataBaseTaskGroup)对数据库方法进行系统的研究和讨论后,于20世纪60年代末到70年代初提出了若干方案。DBTG方案确定且建立了数据库系统的许多概念、方法和技术。DBTG所提议的方法是基于网状结构的,它是数据库网状模型的基础和典型代表。第三件大事,1970年IBMXX公司SanJose研究实验室的研究员E.F.Codd 博士发表了题为“大型共享数据库数据的关系模型”的论文,提出数据库的关系模型,从而开创了数据库关系方法和关系数据理论的研究领域,为关系数据库技术奠定了理论基础,E.F.Codd因此于1981年获得ACM图录奖。20世纪80年代几乎所有新开发的系统均是关系系统。随着计算机系统硬件、Internet和Web技术的发展,数据库系统所管理的数据格式、数据处理方法以及应用环境不断变化,同时人工智能、多媒体技术和其他学科技术的发展,数据库技术面临着前所未有的挑战。当前数据库技术发展的现状，关系数据库技术仍然是主流

大数据职业发展方向

大数据职业发展方向一、大数据的概念及特点：大数据本身就是一个很抽象的概念，提及大数据很多人也只能从数据量上去感知大数据的规模，大数据被定义为“代表着人类认知过程的进步，数据集的规模是无法在可容忍的时间内用目前的技术、方法和理论去获取、管理、处理的数据。大数据不是一种新技术，也不是一种新产品，而是一种新现象，是近来研究的一个技术热点。大数据具有以下4个特点，即4个“V”： (1) 数据体量(Volumes) 巨大。大型数据集，从TB级别，跃升到PB级别。 (2) 数据类别(Variety) 繁多。数据来自多种数据源，数据种类和格式冲破了以前所限定的结构化数据范畴，囊括了半结构化和非结构化数据。 (3) 价值(Value) 密度低。以视频为例，连续不间断监控过程中，可能有用的数据仅仅一两秒钟。 (4) 处理速度(Velocity) 快。包含大量在线或实时数据分析处理的需求，1秒定律。最后这一点也是和传统的数据挖掘技术有着本质的不同。物联网、云计算、移动互联网、车联网、手机、平板电脑、PC以及遍布地球各个角落的各种各样的传感器，无一不是数据来源或者承载的方式。二、大数据处理流程：从大数据的特征和产生领域来看，大数据的来源相当广泛，由此产生的数据类型和应用处理方法千差万别。但是总的来说，大数据的基本处理流程大都是一致的。整个处理流程可以概括为四步，分别是采集、导入和预处理、统计和分析，最后是数据挖掘。三、大数据分解结构：第一层面是理论，理论是认知的必经途径，也是被广泛认同和传播的基线。我会从大数据的特征定义理解行业对大数据的整体描绘和定性；从对大数据价值的探讨来深入解析大数据的珍贵所在；从对大数据的现在和未来去洞悉大数据的发展趋势；从大数据隐私这个特别而重要的视角审视人和数据之间的长久博弈。第二层面是技术，技术是大数据价值体现的手段和前进的基石。我将分别从云计算、分布式处理技术、存储技术和感知技术的发展来说明大数据从采集、处理、存储到形成结果的整个过程。第三层面是实践，实践是大数据的最终价值体现。。

大数据发展趋势

大数据发展趋势大数据的黄金时代

回顾我国大数据产业保持高速发展态势，各级政府和企业大力推进，技术创新取得明显突破，大数据应用推进势头良好，产业体系初具雏形，支撑能力日益增强。未来大数据产业发展将迎来“黄金时代”，产业集聚将进一步特色化发展，创新驱动仍将是产业发展主基调，大数据融合应用进程加速，为做大做强数字经济、带动传统产业转型升级提供新动力。商业智能企业决策正在经历的转变将延续到未来。处理大数据的目标使效率越来越高，成本不断减少，从而造就了基于大数据的商业智能，对中小企业甚至初创公司来说更为重要。这一趋势将延续到未来及以后，处理大数据的成本将继续降低，但以下情况除外： o使用云端商业智能的费用将提高。 o数据分析将提供更好的数据可视化模型和自助式软件。 o向新市场和新地区扩张的决策将基于大数据。 2018年的云趋势 ?创造利基 2018年，更多的人将熟悉云应用，专业化和利基工作将得到发展，就像在所有其他行业里一样，从而带来额外的研究选择和更多的业内竞争。拥有零售、区域性增长等专长的数据科学家将逐渐成为常态。 ?混合云

虽然云提供了便利的大数据存储和处理解决方案，但愿意把“所有”数据都放到云端的企业少之又少。2018年，混合云的使用应该会大幅增长，因为混合云兼具二者的优点，本地数据管理可以与云的便利性结合起来。 ?其他部门也将使用云通常来说，IT部门是其他部门使用云的“中间人”。然而，云技术的使用已经变得非常简单。现在，销售和营销、人力资源等其他部门也能直接使用云。随着更多的人可以访问敏感信息，安全将成为一个重要问题。 2018年的数据分析 ?数据分析将包含可视化模型 2017年，对2800名商业智能专家的一项调查预测，数据可视化和数据发现将成为一股重要趋势。数据发现的范畴已经扩大，不仅包括对数据分析和关系的理解，还包括呈现数据的方式，以挖掘更深层次的商业洞见。其结果就是，作为一种把数据变成可用洞见的方法，可视化模型越来越受欢迎。日益改善和演变的可视化模型已经成为从大数据中获取洞见的必要组成部分。人脑能高效地处理视觉图像。在这个过程中，大脑使用了潜意识，让决策者可以通过迅速扫描图像来处理信息。可视化图表利用了大脑的图像识别能力，出色的可视化模型将成为处理庞大数据集的更好选择，也是2018年重要的大数据趋势之一。

大数据发展背景及研究现状

（一）大数据时代的背景随着计算机存储能力的提升和复杂算法的发展，近年来的数据量成指数型增长，这些趋势使科学技术发展也日新月异，商业模式发生了颠覆式变化。《分析的时代：在大数据的世界竞争》是2016年12月麦肯锡全球研究院（MGI）发表的一份报告。五年前MGI就指出大数据分析在基于定位的服务、美国零售业、制造业、欧盟公共部门及美国健康医疗领域有很大的增长潜力。数据正在被商业化，来自网络、智能手机、传感器、相机、支付系统以及其他途径的数据形成了一项资产，产生了巨大的商业价值。苹果、亚马逊、Facebook、谷歌、通用微软以及阿里巴巴集团利用大数据分析及自己的优势改变了竞争的基础，建立了全新的商业模式。稀缺数据的所有者利用数字化网络平台在一些市场近乎垄断，只需用独特方式将数据整合分析，提供有价值的数据分析，几乎可以“赢家通吃”。2011年全球的数据储量就达到，与2011年相比2015年大数据增长了近4倍，未来十年，全球数据存储量还将增长十倍，大数据成为提升产业竞争力和创新商业模式的新途径。大数据在企业中得到了充分的应用并实现了巨大的商业价值。梅西百货的SAS系统可以根据7300种货品的需求和库存实现实时定价。零售业寡头摩尔玛通过最新的搜索引擎Polaris，利用语义数据技术使得在线购物的完成率提升了10%到15%。我国信息数据资源80%以上掌握在各级政府部门手里，

但很多数据却与世隔绝“深藏闺中”，成为极大的浪费。2015年，国务院印发《促进大数据发展行动纲要》，明确要求“2018年底前建成国家政府数据统一开放平台”；今年5月，国务院办公厅又印发《政务信息系统整合共享实施方案》，进一步推动政府数据向社会开放。1 大数据可以把人们从旧的价值观和发展观中解放出来，从全新的视角和角度理解世界的科技进步和复杂技术的涌现，变革人们关于工作、生活和思维的看法。大数据的应用十分广泛，通过对大规模数据的分析，利用数据整体性与涌现性、相关性与不确定性、多样性与非线性及并行性与实时性研究大数据在公共交通、公共安全、社会管理等领域的应用。大数据与云计算、物联网一起使得很多事情成为可能，将会是新的经济增长点。大数据随着以数据科学为核心的计算机技术的迅猛发展，推动了社会科学与自然科学等跨科学研究的发展。因此对内蒙古乃至全国的大数据研究具有深刻而广泛的意义。（二）国内外相关研究现状大数据（big data），指无法在一定时间范围内用常规软件工具进行捕捉、管理和处理的数据集合，是需要新处理模式才能具有更强的决策力、洞察发现力和流程优化能力的海量、高增长率和多样化的信息资产。2大数据充斥着人类经济社会的角角落1人民网 2 6个好用大数据的秘诀

数据库未来发展趋势

库大型对象的前提下，IBM DB2 9允许用户无缝管理普通关系数据和纯XML数据。对于传统关系型数据与层次型数据的混合应用已经成为了新一代数据库产品所不可或缺的特点。除了IBM，Oracle和微软也同时宣传了它们的产品也可以实现高性能XML存储与查询，使现有应用更好的与XML共存。 (2)、商业智能成重点为应对日益加剧的商业竞争，企业不断增加内部IT及信息系统，使企业的商业数据成几何数量级不断递增，如何能够从这些海量数据中获取更多的信息，以便分析决策将数据转化为商业价值，就成为目前数据库厂商关注的焦点。各数据库厂商在新推出的产品中，纷纷表示自己的产品在商业智能方面有很大提高。如：微软最新版SQL Server 2005就集成了完整的商业智能套件，包括数据仓库、数据分析、ETL工具、报表及数据挖掘等，并有针对性的做了一些优化。如何更好的支持商业智能将是未来数据库产品发展的主要趋势之一。 (3)、SOA架构支持 SOA已经成为目前IT业内的一个大的发展趋势，最初IBM和BEA 是该理念的主要推动者，后来有越来越多的企业加入，开始宣称支持SOA，其中包括Oracle，而微软开始并不是非常赞同SOA的，但是，随着时间的发展，目前国内主流的数据库厂商都开始宣称他们的产品是完全支持SOA架构的，包括微软的SQL Server 2005，