什么是大数据概念

　　现在说起大数据，那是相当火的“时髦词”，大家在炒概念，大数据并不难，怎样利用大数据还是很难得，在我看来，目前很多人都在吹嘘大数据。但是真正懂大数据的人却寥寥无几，下面我们来聊聊大数据概念：

　　大数据(big data),简单来说就是巨量数据集合(IT行业术语)，百度百科词条的解释是这样的：指无法在可承受的时间范围内用常规软件工具进行捕捉、管理和处理的数据集合，是需要新处理模式才能具有更强的决策力、洞察发现力和流程优化能力来适应海量、高增长率和多样化的信息资产。

　　在维克托·迈尔-舍恩伯格及肯尼斯·库克耶编写的《大数据时代》中是这样定义大数据的：指不用随机分析法(抽样调查)这样的捷径，而采用所有数据进行分析处理。大数据的5V特点(IBM提出)：Volume(大量)、Velocity(高速)、Variety(多样)、Value(价值)Veracity(真实性)。

　　大数据是需要更新模式才能具有更强大的决策力，洞察发现力和流程优化能力来适应海量，高增长和多样化的信息资产。大数据有以下几点内涵吧:

　　1. 数据量大，TB，PB，乃至EB等数据量的数据需要分析处理。

　　2. 要求快速响应，市场变化快，要求能及时快速的响应变化，对数据的分析也要快，在性能上有更高要求，所以数据量显得对速度要求有些“大”。

　　3. 数据多样性：不同的数据源，非结构化数据越来越多，需要进行清洗，整理，筛选等操作，变为结构数据。

　　4. 价值密度低，由于数据采集的不及时，数据样本不全面，数据可能不连续等等，数据可能会失真，但当数据量达到一定规模，可以通过更多的数据达到更真实全面的反馈。

　　现在的社会是一个快速发展的时代，科技发达，信息流通，人们之家的交流越来越密切呢，生活也是越来越方便，大数据就是这个高科技时代的产物;很多行业都会有大数据需求，譬如电信行业，互联网行业等等容易产生大量数据的行业，很多传统行业，譬如医药，教育，采矿，电力等等任何行业，都会有大数据需求。大数据与各个行业的深度融会，将发生出前所未有的社会和商业价值。

　　马云曾说过，未来时代将不是IT时代，而是DT(Data Technology数据科技)的时代，显示大数据对于阿里巴巴企业来说举足轻重。

　　这是本人理解的大数据概念， 如果有不对的地方，希望谅解，也希望你们多多补充，让我们感受和期待大数据未来的发展

　　本文出自柠檬派(http://www.lemonpai.com/1419.html 在Apache Hive中轻松生存的12个技巧 )转载请务必保留此出处 ，否则将追究法律责任!