🏦

BigData6:大数据存储

Created
Nov 1, 2021 02:36 PM
Describe
Link
Tags

目录

1.大数据存储挑战

  • 大容量
  • 高效率
  • 高可用

2.数据存储扩容

  • 纵向扩展
  • 横向扩展
 

3.大数据面临的压力

  1. 海量数据存储,如何统一管理和调度
  1. 大容量并发读写,设备性能成为瓶颈
  1. 设备故障及时修复,维护成本激增
  1. 不同数据系统数据难以融合

4.解决

  1. 提供分布式文件系统,数据调度与存储分离
  1. 单独—>团队
  1. 及时维护—>定期维护
  1. 各种数据融合,提供统一接口
 
:使用者按需使用数据,无需关系资源在何处,如何构建。

分布式存储/云存储

  • 云存储的架构,分为”控制节点“和”存储节点“。
  • 弹性伸缩、无缝扩展
notion image

RAID

  • RAID0
  • RAID1
  • RAID3
  • RAID5
  • RAID6
notion image
 

存储系统的发展

  • 直连存储DAS
  • 存储局域网络SAN
  • 网络附加存储NAS
 

云存储的存储方式

  • 对象存储
  • 块存储
  • 文件存储