慕课笔记-数据科学导论-第一章引言-大数据时代/核心问题/主要特征/技术特征/社会价值

引言

人类的信息文明起源于电子计算机技术的产生

大数据时代

IBM公司前首席执行官郭士纳的观点,IT领域基本每隔15年都会迎来一次重大的技术变革

大数据时代的来临(3次信息化浪潮)

  • 在这里插入图片描述
  • 信息技术的发展和不断的快速革新才造就了信息量的指数级增长
  • 信息量的不断堆积直接造就了大数据概念的出现。随着相关技术的不断成熟,人们终于迎来了大数据时代。

信息技术的发展-四个核心问题

  • 信息采集

    • 大数据技术主要依附于数字信息
    • 现在的数字信息采集方法已经十分完善,文字、图片、音频、视频等多维度的数字信息的采集手段和技术已经十分完备
    • 信息的采集环节已经基本实现实时化,而信息延迟主要在信息传输和信息处理阶段
    • 在这里插入图片描述
  • 信息存储

    • 计算机硬盘的快速发展促进了高安全性和高扩展性的商业领域信息存储乃至信息积累
    • 而移动端闪存的快速发展则拉动了个体生活和社会公共事务方面的快速信息积累
    • 两者相辅相成,共同提供了大数据时代的信息体量支撑。
  • 信息处理

    • 信息处理速度主要依靠计算机处理核心CPU的运算能力。
    • CPU单核心处理能力的演变长期遵循摩尔定律(见图 1-2),即CPU的运算速度随着时间呈现指数增长趋势,所以在很长时间内,行业的发展主要集中在提高CPU单个核心的运算主频上。
    • 在这里插入图片描述
    • 而随着摩尔定律的渐渐失效,尤其是伴随着提高CPU单核心主频带来的商业成本的成倍增加,直接促使技术模式由简单的提高单核心主频向多核心多线程发展,即增加单个CPU的处理核心的数量的同时增加内存和CPU联络的线程数量和通信带宽,这样就可以保证多核心的同时运转。CPU的实际运算因核心数量的增加,同样实现了运算速度的十分可观的高速提升。
  • 信息显示

    • 图形显示技术的发展突破了简单文字显示和图表显示的技术界限,信息显示由一维、二维显示拓展到了三维乃至更多维度显示。

    • 意义

      • 带给人们更好的视觉和感官享受,让信息技术更好、更快地融入信息时代;
      • 带来了新的连带技术的发展,诸如图形化数据库、图像识别及人工智能等技术的全面发展;
      • 信息显示的发展和日臻完善,给整个信息技术带来了从量到质的跨越式发展,并且会继续更加深远地影响整个大数据时代的发展。

数据产生方式的变革

信息技术的发展只能为大数据时代的来临带来技术上的铺垫和积淀。大数据时代的来临必须依托于数据量的爆炸式增长和完善,而这在很大程度上取决于数据产生方式的变革。

  • 信息技术的发展促进了数据产生方式的变革,而反过来数据产生方式的革新也倒逼了信息技术的不断完善和发展,两者的发展是相辅相成和互相促进的。

  • 数据产生方式的变革

在这里插入图片描述

大数据的主要特征-4V特征(数据层次)

数据量巨大(Huge Volume)

  • “数据量摩尔定律”

    • 著名咨询机构IDC(Internet Data Center)做出的预测,人类社会产生的数据一直都在以每年 50%的速度增长,基本每两年就增长一倍。
  • 数据量的真实增长会是怎样的只有明天才有结论,但是数据量大却是大数据时代牢不可动的第一标签。

数据类型繁多(Variety)

  • 从数据产生方式的几次改变就可以体会到数据类型跟随时代的变革。

    • 大型商业运营阶段产生的数据类型多为传统的结构化数据。这些数据多为隐私性和安全性级别都十分高的商业、贸易、物流,以及财务、保险、股票等的传统支柱行业数据。
    • 而互联网时代产生的数据类型多为非结构化的电子商务交易数据、社交网络数据、图片定位数据,以及商业智能报表、监控录像、卫星遥感数据等非结构化和二维码像素数据。
  • 数据类型的增多也促进了数据库技术的发展

    • 数据类型的改变也促进了新型数据库技术的大力发展,如NoSQL和NewSQL等数据库技术都得到了长足的发展
    • IoT、人工智能时代的数据产生方式是多种多样的,其产生的数据类型也是多种多样的。

信息处理速度快(Velocity)

  • 大量的数据、繁杂的数据类型,必然要求较快的信息处理速度。

价值密度低(Value)

  • 数据量虽然巨大,但是人们关注的其中有用的信息却不容易被发现,这是大数据时代数据的一个很大特点。

大数据的技术特征

1.大数据时代的技术是开放性的

2.大数据时代的技术是平台化的

3.大数据时代的技术是基于新型的实验训练性质的数学算法实现的

4.大数据时代的技术最终期待实现人工智能管理和机器人代工

大数据的社会价值

1.大数据为各个行业带来了行业规划和行业决策的整体升级及精准化

2.大数据为行业的整体发展注入更加公平和充沛的活力

3.大数据从实际意义上促进了信息技术产业与工业企业的深度融合

4.大数据极大地提升了企业自主创新能力,为新技术和新方法的出现提供高效信息咨询

XMind: ZEN - Trial Version

发布了12 篇原创文章 · 获赞 3 · 访问量 771

猜你喜欢

转载自blog.csdn.net/weixin_45761327/article/details/104591659
今日推荐