一、大数据基本概念及背景

1.1大数据发展的背景-数据爆炸

伴随着互联?、物联?、电?商务、社交媒体、现代物流、?络?融等?业的发展，全球数据总量正呈?何级数增长，过去?年时间产?的数据总量超过了?类历史上的数据总和，预计年全球数据总量将达到35.2ZB，?类将进?“泽它”（ZB）时（1ZB=?万亿亿字节）。

1.2大数据发展的背景-(感知化、物联化、智能化)

感知化：指数据源的变化。传感器、RFID标签、芯片、摄像头遍布世界的各个角落，物理世界中原本不能被感知的事物现在可以被感知，它们通过各种技术被接?了互联?世界。

物联化：指的是数据传送?式的变化。继?与?、?与机器的互联后，机器与机器之间的互联成为当下的发展趋势。未来数据可能来自于自?车、电器、道路、自来?管，甚?是食物的包装盒。

智能化：指的是数据使用?式的变化。“没有解释就没有价值”。感知和互联并不是最终的目的，数据只有经处理、分析和计算，从中提取出有价值的东西，才能实现真正的价值。

1.3大数据发展的背景-大数据在各领域应用中逐渐崭露头

传统的面向应用的开发模式逐渐被数据驱动（DDD）的模式。大数据引发了商业、科研、政务、社会服务等领域的深刻变革。

二、大数据的定义

麦肯锡：?数据是指?小超出常规的数据库?具获取、存储、管理和分析能?的数据集。（并不是说?定要超过特定TB的数据集才能算?数据）

百科：?数据指的是所涉及的资料量规模巨?到?法透过目前主流软件?具，在合理时间达到获取、管理、处理，并整理成帮助企业经营决策更积极目的的资讯。

Gartner公司：?数据是需要新护理模式才能具有更强的决策?、洞察发现?和流程优化的海量、?增长率和多样化的信息资产。

美国国家标准技术研究院（NIST）：数据量?、获取速度快或形态多样的数据，难以用传统关系型数据分析?法进?有效分析，或者需要?规模的?平扩展才能?效处理。

国际数据公司（IDC）：从?数据的4个特征来定义，即海量的数据规模（Volume）、数据处理的快速性（Velocity）、多样的数据类型（Variety）、数据价值密度低（Value），即所谓的4V特性。IBM认为?数据还应该具有其真实性（Veracity）。

2.1大数据的特点

2.2大数据面临的问题

三、大数据平台安全技术

大数据平台安全自身防护由多个部分构成，包括数据采集端、基础设施层、数据存储层、数据处理层、数据管理安全、能力开放层和大数据平台运营运维层的安全实施。

2.1大数据平台安全防护技术特点

（1）数据采集层：线采集和流式的实时采集。主要的应用包括基于文件、消息、表的采集系统和基于表的批量抽取软件。数据采集时需要根据采集方法的不同进行不同方式认证鉴权。数据采集时对传输通道进行加密，采用可靠的传输方式，如VPN专线等。包括日志采集及异常告警。

（2）基础设施层：大数据平台的基础设施层的安全防护主要是集群依赖的基础设施的防护。大数据平台集群的部署通常有两种方式：部署在物理机上和部署在“云”上。部署在物理机上的集群需要考虑物理设备的安全，主要包括集群节点网络设备、主机设备和安全设备等。部署在“云”上的集群更多的需要

转载请注明:http://www.aideyishus.com/lkgx/6823.html