大数据(Big Data):指在无法在一定时间范围内用常规软件工具进行捕捉,管理和处理的数据集合,是需要新处理模式才能具有更强的决策力、洞察决策力和流程优化能力的海量,高增长率和多样化的信息资产。
存储单位:bit, Byte, KB, MB, GB, TB, PB, EB, ZB, YB, BB, NB, DB
大数据主要解决海量数据的存储和海量数据的分析计算问题。
大数据的特点(4V):
- Volume
- Velocity:这是大数据区别于传统数据挖掘最显著的特征。
- Variety:数据分为结构化数据和非结构化数据。相比于传统的结构化数据,非结构化数据越来越多,包括网络日志,视频,音频,图片,地理位置信息等。
- Value:大数据的价值和大数据的量的大小成反比。
大数据的应用:
- 物流仓储:大数据分析系统助力商家精细化运营、提升销量、节约成本。
- 零售:尿布+啤酒。
- 旅游
- 商品广告推荐
- 保险
- 金融
- 房产
- 人工智能
大数据部门业务流程分析
产品人员提需求(统计总用户数,日活跃用户数,回流用户数) 数据部门搭建数据平台、分析数据指标 数据可视化(报表展示,邮件发送,大屏幕展示等)JavaEE的工作。
大数据部门组织结构
转载于:https://www.jianshu.com/p/15f43732424e