【前端拾遗】前端布局方案
2020-05-09
9 min read
【工业与大数据】流处理 —— 云计算的重要处理模式
【代码仓库】SQL -- 数据批量插入
【工业与大数据】内存计算的解决方案 —— Spark
MapReduce作为大数据技术最主流的并行计算方案,仍然存在编程实现较为复杂(麻烦但不难),性能较差的问题。MapReduce在运算过程中会产生大量的IO操作。为了提高性能,我们引入内存计算的概念。
【工业与大数据】大数据的主要处理框架与工具
大数据作为一门应用广泛的技术,在不同的应用场景下对其数据结构,处理实时性都有不同的需求,所以大数据技术的先驱们开发了许多不同的技术框架来满足不同的需求。本章主要介绍大数据所采用的的主流处理框架以及其技术细节。
【工业与大数据】GFS:Google文件系统
为什么传统的NFS/AFS并不能满足大数据的需要?为什么GFS大名鼎鼎?它解决了什么样的问题?
【工业与大数据】分布式文件系统
【工业与大数据】云计算的商业模式
【工业与大数据】大数据基础
大数据这个词已经火热了很多年,似乎处处都存在着大数据的噱头,让我们回归本质,探讨一下大数据是什么?
本文介绍了大数据技术细节以及相关背景的的一些概念。本文并未对大数据的相关知识进行总结,所以本文仅作为参考,无需详细阅读。