Skip to content

大数据学习地图:纵观大数据技术发展史,看清大数据本质

前段时间受邀为某高校研一学生分享大数据最新技术,特以此为契机重新梳理了大数据技术发展史,最终形成了一个为适用于初学者的大数据学习地图,希望可以帮助更多的人入门大数据相关技术。

中小企业技术栈

在了解大数据之前,我们需要考虑两个问题:

  • 什么时候需要使用大数据?
  • 应用大数据技术可以为企业带来那些价值?

为了让大家可以对上述两个问题有深刻地体会,我假设一家中小型企业可能的技术栈:

此时,如果企业用户量级只有10w+,我可能觉得还没有使用大数据技术的必要性。然而当企业用户增长到百万甚至亿级别,每天企业都会产生GB级的数据,我认为企业可能需要考虑大数据技术了。因为一般的数据处理手段已经无法满足我们的需求了。

大数据发展时间线

要聊大数据,就要清楚一点,所谓的大数据技术也好,其它技术也罢,都是为了更好地解决问题而产生的。基于此,我认为大数据技术的发展一直围绕两个核心:计算与存储。如果我们再扩展一下,好像计算与存储问题伴随着人类的发展。

大数据技术的发展纷繁复杂,只能基于我个人浅薄的理解,尽最大努力为大家讲明白。如有遗漏,望大家理解。

进阶

本文是大数据学习地图系列教程的第一篇,后续笔者会按照时间线的内容,持续为大家输出相关教程。如果你对我的系列教程感兴趣,可以关注公众号:遇码,回复学习地图,学习全部内容。

遇码MeetCoding 开源技术社区