数据库技术发展趋势- 04.大数据技术

1.3.4大数据技术

大数据技术是一组用于存储、处理和分析大规模数据集的技术和工具。这些数据集通常包含结构化、半结构化和非结构化数据，且具有高速、多样和庞大的特点。大数据技术的体系庞大且复杂，基础的技术包含数据的采集、数据预处理、分布式存储、NoSQL数据库、数据仓库、机器学习、并行计算、可视化等各种技术范畴和不同的技术层面。

大数据与云计算的关系就像一枚硬币的正反面一样密不可分，云计算是基础，没有云计算，无法实现大数据存储与计算。大数据是应用，没有大数据，云计算就缺少了目标与价值。大数据相当于海量数据的“数据库”，通观大数据领域的发展能看出，当前的大数据处理一直在向着近似于传统数据库体验的方向发展。大数据的总体架构包括三层：数据存储，数据处理和数据分析。数据先要通过存储层存储下来，然后根据数据需求和目标来建立相应的数据模型和数据分析指标体系对数据进行分析产生价值。随着云时代的来临，大数据也吸引了越来越多的关注。

大数据技术已经被广泛应用于各个领域，包括商业、金融、医疗、交通等。

在娱乐行业，通过大数据分析可以预测影视视频的播放量和受喜爱程度；通过智能产品的点击数量和浏览量，可以推测用户的个性偏好，并且推荐其喜爱的产品。在医疗行业，手机上的健康APP里的健康步数统计和锻炼情况，在运用大数据技术，记录用户健康状况，并且预测可能发生的疾病。在一些网站浏览页面寻找需要的衣物信息时，网站利用大数据技术记录下用户的浏览信息，随后在浏览电商平台的信息时，平台就会根据用户信息来展现相匹配的产品。