作者：禅与计算机程序设计艺术
1.简介
随着大数据的发展和应用，互联网、物联网技术也进入了一个新的阶段，经历了从分布式系统到云计算、大规模集群技术的变化。在这个过程中，技术框架已经发生巨变，各类商业模式也随之演进。本文将总结大数据时代下互联网物联网技术的研发路径及应对策略。
2.大数据发展背景
（一）历史回顾
大数据概述
数据是一个客观存在的物理现象，通过各种手段获取并积累的数据越来越多，形成海量的数据集。数据可以是结构化、半结构化或非结构化数据，可以是静态数据或实时的动态数据。目前，由于存储、处理和分析大数据的技术能力不断提升，使得能够处理上亿条记录的海量数据成为可能，并且产生了大量的价值，得到了广泛关注。
20世纪90年代末期，计算机技术取得飞速发展，人们在计算机上制造出来的各种模拟器、游戏机、动画片，引起了轰动。这一时期，IBM推出了系统/370，可以让个人电脑在几分钟内运行出先进的软件。同年，国际标准化组织ISO发布了ANSI C，即C语言标准。此后，出现了各种数据库、文件系统、网络传输协议等新型信息技术，为大数据的存储、处理和分析提供了基础设施。
21世纪初，随着互联网的发展和普及，大数据面临着爆炸性增长，更重要的是，数据量急剧膨胀。过去，中心化的数据中心存储和处理数据，如今成为一种瓶颈。许多公司迫切需要云计算服务，帮助他们摆脱中心化的依赖，利用数据分布式存储的特性来提高效率。
2008年，谷歌推出了MapReduce，