浅析大数据分析的方法和展望

龙源期刊网 https://www.wendangku.net/doc/e53780395.html,

浅析大数据分析的方法和展望

作者：李雨函

来源：《财讯》2017年第04期

如今，一个大规模生产、应用数据的时代正在开启。就如维克托教授所说的那样，大数据的真实价值就像海洋中的冰山，从表面看只能看到冰山的一角，而大部分的价值都隐藏在表面之下。互联网时代中的“云计算”就是征服数据海洋、发掘数据价值的关键，尤其是社交网站、电子商务与移动通信把人类社会带入“PB”为单位的结构与非结构数据信息时代。大数据和云计算其实是问题的两个方面：一个是问题，另一个是解决问题的办法。通过云计算对大数据的分析、预测，会让决策变得更为精准，挖掘出更多数据的隐藏价值。本文就列举在公共卫生、商业服务领域中大数据变革的例子。不再一味追求因果关系，而是承认混杂性，探索相关的关系，思维转变过来，数据就能被利用成为巨大的经济资产，带来全新的创业方向、商业模式和投资机会。现代历史上的历次技术革命中中国均是学习者。而在这次云计算与大数据的新变革中，中国与世界的距离越来越小，在很多领域甚至还有创新、领先的可能。只要我们以开放的心态、创新的勇气拥抱“大数据时代”，就一定会抓住历史赋予中国创新的机会。

相关研究

大数据的定义：

目前，大数据的重要性无人质疑，但是大数据的定义还没有一个教科书似的答案。大数据是一个抽象概念，不仅具有数据庞大的特征，还有其他一些特征，这些特征的区分了大数据和“海量数据”、“非常大的数据”这些概念的不同。一般情况下大数据是指无法在有限时间内用传统IT技术和硬件工具对其进行的管理、预测、处理和服务的数据集合。正如Facebook的副总工程师杰伊·帕瑞克所言，“如果不利用所搜集的数据，那么你所拥有的就是一堆数据，而不是大数据”。

就大数据该如何定义，学术界已经进行了不少讨论。但是，大数据的关键不在于此，而是应该如何提取数据价值，如何利用数据，如何将“一堆数据”变为“大数据”。

大数据分析方法

我们认为大数据价值链可分为4个阶段：数据生成、数据采集、数据储存以及数据分析。数据分析是大数据分析中最重要的一环同样也是价值链的最后，实现了大数据的价值，也是大数据应用的基础，其目的在于提取有用的信息，在根据现有的理论上对未来进行合理预判，提供论断建议或支持决策，通过对不同领域数据集的分析可能会产生不同级别的潜在价值。

传统数据分析是指用适当的统计方法对收集来的大量数据进行分析，把一大批杂乱无章的数据中的信息提取出来，找出研究对象的内在规律，以求最大化地开发数据资料的信息，发挥