【大数据入门核心技术-基本概念】（一）大数据相关基本概念

目录

1、大数据的4v特征

volume大量化、velocity快速化、variety多样化、value价值化

2、大数据的影响

思维方式方面：大数据完全颠覆了传统的思维方式（全样而非抽样、效率而非精确、相关而非因果）。

社会发展方面：大数据决策逐渐成为一种新的决策方式，大数据应用有力促进了信息技术与各行业的深度融合云计算实质和核心，大数据开发大大推动了新技术和新应用的不断涌现。

就业市场方面：大数据的兴起使得数据科学家成为热门职业。

人才培养方面：大数据的兴起将在很大程度上改变中国高校信息技术相关专业的现有教学。

3、大数据的两大核心技术

分布式存储：GFS/HDFS、BigTable/HBase、NoSQL

分布式处理：MapReduce

4、大数据对科学研究的影响

（1）实验科学

（2）理论科学

（3）计算科学

（4）数据密集型科学

5、大数据计算模式及代表产品

大数据计算模式：批处理计算、流计算、图计算、查询分析计算

批处理计算：针对大规模数据的批量处理。MapReduce、Spark。

流计算：针对流数据的实时计算。Storm、S4、Flume、Streams、Puma、DStream、SuperMario、银河流数据处理平台。

图计算：针对大规模图结构数据的处理。Pregel、GraphX、Giraph、PowerGraph、Hama、GoldenOrb。

查询分析计算：大规模数据的存储管理和查询分析。Dremel、Hive、Cassandra、Impala。

6、大数据与云计算、物联网的关系

云计算、大数据和物联网代表了IT领域最新的技术发展趋势，三者相辅相成，既有联系又有区别。云计算为大数据提供了技术基础；大数据为云计算提供用武之地。

云计算为物联网提供海量数据存储能力；物联网为云计算技术提供了广阔的应用空间。

物联网是大数据的重要来源；大数据技术为物联网数据分析提供支撑

（编辑：源码门户网）

【声明】本站内容均来自网络，其相关言论仅代表作者个人观点，不代表本站立场。若无意侵犯到您的权利，请及时与联系站长删除相关内容!