2026-10-20 11:55:21
大数据是指规模超常规、类型多元、生成与传输速度快、价值密度低,超出传统数据处理工具在可接受时间内采集、存储、管理和分析能力范围的数据集合
它的核心特征可概括为4个关键维度:
数据规模大(Volume):通常以TB、PB乃至EB为单位,单条数据量或整体数据量远超传统数据量级。
处理速度快(Velocity):数据生成、传输频率高,需实时或近实时处理,比如即时通信消息、传感器实时回传数据。
数据类型多(Variety):既包括结构化数据(如数据库表格),也有非结构化数据(如文本、图片、音频、视频)和半结构化数据(如JSON文件)。
价值密度低(Value):海量数据中有效信息占比低,需通过技术手段提取有价值内容,比如监控视频中仅几秒的有效事件片段。
常见的大数据场景包括电商平台的用户行为数据、城市交通的实时车流量数据、气象站的多源传感数据等。