大数据学习地图:纵观大数据技术发展史,看清大数据本质
前段时间受邀为某高校研一学生分享大数据最新技术,特以此为契机重新梳理了大数据技术发展史,最终形成了一个为适用于初学者的大数据学习地图,希望可以帮助更多的人入门大数据相关技术。
中小企业技术栈
在了解大数据之前,我们需要考虑两个问题:
- 什么时候需要使用大数据?
- 应用大数据技术可以为企业带来那些价值?
为了让大家可以对上述两个问题有深刻地体会,我假设一家中小型企业可能的技术栈:
此时,如果企业用户量级只有10w+,我可能觉得还没有使用大数据技术的必要性。然而当企业用户增长到百万甚至亿级别,每天企业都会产生GB级的数据,我认为企业可能需要考虑大数据技术了。因为一般的数据处理手段已经无法满足我们的需求了。
大数据发展时间线
要聊大数据,就要清楚一点,所谓的大数据技术也好,其它技术也罢,都是为了更好地解决问题而产生的。基于此,我认为大数据技术的发展一直围绕两个核心:计算与存储。如果我们再扩展一下,好像计算与存储问题伴随着人类的发展。
大数据技术的发展纷繁复杂,只能基于我个人浅薄的理解,尽最大努力为大家讲明白。如有遗漏,望大家理解。
进阶
本文是大数据学习地图系列教程的第一篇,后续笔者会按照时间线的内容,持续为大家输出相关教程。如果你对我的系列教程感兴趣,可以关注公众号:遇码,回复学习地图,学习全部内容。