map-reduce 相关

• 传统海量数据处理

  流量分发 hash 处理 取模运算 放到不同的桶里面 ()%max 会分到 0-(max-1)中的多个桶中

  一致性 hash 方法

  大数据量

  分布式文件系统

  大流量

  分流 分发

  大计算

  map-reduce

• map-reduce

  稳定性

  机器多，保证机器的稳定

  一致性

  强一致性和弱一致性

• 数据处理方式

  分治思想

  分治 - 求解 - 合并