Page 15 - 大数据时代计算机信息处理技术研究

第一章 大数据技术概述

在于海量数据的交换、整合与分析，在于通过数据挖掘发现数据背后的意义。也
即，大数据的意义最终将落脚于其所承载的信息，这些信息是通过对原始的庞大
数据进行运算处理而得出的结果。
（二）主要的技术变革

大数据的运算处理是随着互联网的发展和云计算技术的进步而逐步被提上日
程的，技术的进步实际上是为数据和信息的流动提供了更为先进与便捷的框架，
而在数据自动化处理过程中，无论是第一代的大型主机还是现在最先进的分布式
主机结构，最重要的始终都是数据和信息的价值，所围绕的整个处理过程也是以

数据和信息为中心——数据的产生、处理和信息输出的过程，只不过有一系列的
范式变革。
从某种意义上来说，离开了运算处理能力来谈大数据是没有任何意义的，就
如同计算机终端机离开了 CPU 的运算功能，其先进与便利就无从谈起。“当前

大数据分析技术面临的挑战，一方面是要对结构化和半结构化数据开展深度分析，
另一方面是要开发非结构化数据的宝藏，从而将海量复杂多源的数据转化为有用
的知识。”这表明，大数据的核心就是数据的分析。
“大数据是指无法在可容忍的时间内用传统 IT 技术和软硬件工具对其进行

感知、获取、管理、处理和服务的数据集合。”大数据的另一特点在于数据的非
结构化，这样广泛的数据是无规则的、混沌的、杂乱无章的，在存储之前需要一
个清洗和降噪的过程。所以数据分析的起点就是数据的抽取和存储问题。进而通
过分布式计算实现非结构化数据的运算分解与整合。最后，大数据的最重要的应

用途径之一是可视化，通过清晰的图表分析展示大数据分析生成的信息结果。
（三）现实的应用领域
大数据改变着人与人之间的社会关系，通过广泛的应用从方方面面带来了各
个领域的变革。它让决策和商务都更加智慧、更加高效、更加精确，大数据的应

用带来的是模式上的改变与革新。
大数据推动着政府社会管理方式的创新。“数据驱动的社会管理”就是在社会
管理中实施的一种新型管理模式，无论是政府还是组织机构，数据收集和分析已经
成为基层管理部门的基本要求，根据数据分析结果制定政策和法规，将社会管理从

事后处罚转向事前防备，在医疗健康、国土安全、智慧城市建设、防范和打击恐怖
活动、社会治安、治理社会腐败等方面发挥着重要作用。同时，大数据在选举民意

·7·