还剩58页未读,继续阅读
本资源只提供10页预览,全部文档请下载后查看!喜欢就下载吧,查找使用更方便
文本内容:
存储课件基本结构课程概述八大核心板块学习时长基础知识、系统架构、设备介课程总计约16学时质适合人群学习目标理解存储基础概念掌握各类存储系统的工作原理熟悉存储系统架构区分DAS、NAS、SAN等不同架构特点应用存储管理技术能够进行容量规划和性能优化把握技术发展趋势了解未来存储发展方向第一部分存储基础知识基本概念介绍存储的定义和重要性发展历程从磁带到云存储的演变分类与架构主存储与辅存储的区别什么是数据存储?定义功能记录、保存和维护数据的过程与技术数据写入实现数据的可持久化和可访问性数据读取数据保留数据保护存储的重要性数字经济基石支撑各行各业数字化转型保障业务连续性防止数据丢失和系统崩溃数据资产管理3实现数据的长期保存和价值挖掘存储系统的演变11950-1970磁带和磁鼓存储21970-1990硬盘技术普及31990-2010网络存储崛起42010至今云存储和闪存革命存储分类主存储器和辅助存储器主存储器(RAM)易失性存储直接与CPU交互速度快、容量小、价格高辅助存储器非易失性存储需通过I/O系统访问速度慢、容量大、价格低存储介质类型半导体存储器磁存储器RAM、ROM、闪存硬盘、磁带新兴存储技术光存储器MRAM、PRAM、ReRAM CD、DVD、蓝光半导体存储器RAM(随机访问存储器)ROM(只读存储器)闪存易失性内存非易失性内存非易失性内存DRAM需刷新PROM一次可编程NOR随机读取SRAM不需刷新但成本高EPROM可擦除可编程NAND块读取EEPROM电可擦除磁存储器工作原理利用磁介质记录数据通过磁头读写信息机械运动定位数据优缺点优点成本低、容量大缺点速度慢、易损坏光存储器CD(容量约700MB)DVD(容量
4.7-17GB)采用红色激光读写使用更短波长激光蓝光光盘(25-128GB)蓝紫色激光,密度更高新兴存储技术MRAM PCMReRAM DNA存储磁阻式随机存取存储相变存储器阻变存储器利用DNA分子存储数器据第二部分存储系统架构DAS NAS直连式存储网络附加存储云存储SAN远程托管存储服务存储区域网络存储系统的基本结构控制器缓存存储介质连接接口管理数据流和存储操作加速数据访问物理存储数据的设备提供主机访问通道实现数据保护和冗余功能减少I/O延迟决定存储系统容量和性能影响传输速度和扩展性直连式存储()DAS特点应用场景直接连接到单一服务器小型办公环境不需要网络设备个人工作站管理简单,成本低不需要共享的应用局限性资源不共享可扩展性差服务器故障影响数据访问网络附加存储()NAS连接到IP网络文件级访问多用户共享独立文件系统使用TCP/IP协议通信通过CIFS/NFS协议共享支持同时多人访问自带操作系统和安全管理存储区域网络()SAN特点优势块级访问高性能和低延迟高性能专用网络良好的可扩展性支持多主机访问支持服务器集群统一存储混合架构资源整合同时支持NAS和SAN功能简化管理,降低复杂度成本效益减少硬件投资,优化资源利用云存储公有云私有云第三方提供的共享资源企业自建专属云平台社区云混合云特定群体共享的云环境公有云和私有云的结合分布式存储系统数据分片数据复制水平扩展一致性控制将数据分散存储到多创建多个数据副本提通过增加节点提升性确保数据在各节点间个节点高可用性能和容量同步第三部分存储设备和介质本部分将详细介绍各类存储设备和介质的特点、工作原理和应用场景硬盘驱动器()HDD结构组成性能指标盘片、磁头、电机、控制电路转速5400-15000RPM工作原理传输速率100-200MB/s磁头在旋转盘片上读写数据访问时间平均7-15ms固态驱动器()SSD高性能随机读写速度快低功耗无机械部件,能耗低高可靠性3抗震动,无噪音磁带存储特点应用场景发展趋势成本低廉长期归档容量持续增长容量大灾难恢复与云存储结合寿命长冷数据存储自动化管理顺序访问光盘存储CD DVD容量650-700MB容量
4.7-17GB原理利用凹坑反射激光原理多层记录技术寿命10-30年寿命20-50年蓝光光盘容量25-128GB原理蓝紫色激光更高密度寿命30-100年闪存年10800MB/s使用寿命读取速度写入/擦除周期限制高端产品可达此速度2TB单卡最大容量消费级产品容量上限第四部分存储协议和接口SATA SAS串行ATA,广泛用于消费设备串行连接SCSI,企业级应用FC/iSCSI NVMe存储网络传输协议4基于PCIe的高性能协议接口SATASATA
1.0SATA
2.0SATA
3.0SATA Express传输速率
1.5Gbps传输速率
3.0Gbps传输速率
6.0Gbps传输速率16Gbps2003年推出2004年推出2009年推出结合PCIe通道接口SAS特点性能演进点对点全双工传输SAS-13Gbps支持热插拔SAS-26Gbps兼容SATA设备SAS-312GbpsSAS-
422.5Gbps协议NVMe定义专为闪存优化的接口协议高性能低延迟、高带宽、高IOPS并行处理支持64K队列和每队列64K命令扩展性支持PCIe
3.0/
4.0/
5.0扩展协议Fibre Channel特点速率演进高速专用网络传输协议1GFC1Gbps支持光纤和铜缆介质2GFC2Gbps低延迟、高可靠性4GFC4Gbps8GFC8Gbps16GFC16Gbps32GFC32Gbps协议iSCSI基于IP网络利用现有以太网基础设施块级传输封装SCSI命令为IP包成本效益无需专用设备,降低投资远程存储支持跨地域存储访问第五部分技术RAID定义目标独立磁盘冗余阵列提高数据可靠性多磁盘组合提高性能和可靠性提升I/O性能扩大单一逻辑卷容量常见级别RAID0条带化RAID1镜像RAID5/6带奇偶校验RAID10镜像+条带概述RAID硬件RAID专用控制器实现,性能好软件RAID操作系统实现,成本低混合RAID3结合硬件和软件技术RAID0特点优势应用场景数据条带化分布读写性能最佳临时数据无冗余保护100%空间利用率高性能计算任一磁盘故障导致数据丢失配置简单非关键业务RAID1特点优势局限性完全数据镜像高可靠性空间利用率低(50%)一份数据两份副本读性能提升成本高单盘故障不影响使用恢复速度快写性能无提升RAID5特点优势局限性数据+奇偶校验分布式存储读性能好写性能较弱最少需要3个磁盘空间利用率高(N-1/N重建时性能下降可容忍单盘故障兼顾性能和可靠性重建过程中有数据风险RAID6双奇偶校验每条数据有两个校验块双盘容错可同时容忍两块磁盘故障至少四盘建议使用6盘以上配置写性能更弱校验计算负担更重RAID10综合优势兼具RAID0速度和RAID1可靠性镜像+条带先镜像后条带(RAID1+0)至少四盘3空间利用率为50%第六部分存储管理容量规划性能优化预测和分配存储资源提升I/O吞吐量和响应时间安全管理备份恢复4防止未授权访问和数据泄露保护数据免于丢失存储容量规划需求分析评估当前和未来存储需求增长预测预估数据增长率和趋势资源分配合理配置和分配存储空间定期审核持续监控和调整容量计划存储性能优化缓存技术数据分层读写缓存加速数据访问热数据放在高性能存储智能预读算法冷数据迁移到低成本介质SSD缓存加速自动化数据迁移负载均衡I/O平衡分布避免热点问题多路径访问数据备份策略备份类型3-2-1原则关键考量完全备份所有数据3份数据副本恢复点目标(RPO)增量备份变化数据2种不同存储介质恢复时间目标(RTO)差异备份与完全备份差异1份异地存储备份窗口时间数据恢复技术逻辑恢复修复文件系统或数据结构物理恢复修复损坏的存储介质远程恢复从备份站点恢复数据即时恢复使用快照或复制技术存储安全访问控制严格的身份验证和授权数据加密静态和传输中的加密保护物理安全3设备防护和环境控制第七部分高级存储技术重复数据删除数据压缩快照技术消除重复数据块,节省空间减少数据占用空间数据时间点备份重复数据删除工作原理实现方式效率影响因素识别重复数据块源端去重数据生成处数据类型保留一份副本内联去重数据写入时数据重复率替换重复部分为指针后处理去重数据写入后块大小设置数据压缩无损压缩保持原始数据完整性有损压缩适用于影音等容忍损失的数据硬件加速专用芯片提高压缩性能压缩比与性能平衡高压缩比通常需要更多计算资源快照技术创建快照记录数据状态时间点写时复制仅在数据变化时保存原始块访问快照查看历史数据状态回滚恢复将数据恢复到快照时间点存储虚拟化存储池化资源抽象物理资源聚合为逻辑资源池屏蔽底层硬件差异无缝迁移动态分配在不同物理设备间移动数据按需调整分配的存储资源自动分层存储高性能层SSD/NVMe闪存性能层高速HDD/SAS硬盘容量层3大容量SATA硬盘归档层光盘/磁带/对象存储第八部分存储趋势和未来发展存储技术正经历前所未有的创新浪潮,本部分将探讨未来发展方向软件定义存储核心特点主要优势市场代表硬件与软件分离灵活性增强CephAPI驱动的管理规模扩展简化GlusterFS自动化配置和管理总体拥有成本降低VMware vSAN硬件选择自由Dell EMCScaleIO超融合基础设施资源整合模块扩展统一管理计算、存储、网络按节点进行线性扩单一界面管理所有融为一体展资源性能优化本地数据访问减少延迟驱动的存储管理AI预测分析提前预测容量和性能问题自动优化智能调整存储配置参数异常检测发现潜在的安全威胁智能建议提供存储管理最佳实践量子存储技术基本原理潜在优势发展阶段利用量子态存储信息极高存储密度基础研究突破传统物理限制超长数据保留期量子存储器原型超快数据传输速度量子纠错技术绿色存储能源效率冷却优化降低每TB数据的能耗减少冷却系统能耗智能休眠材料循环空闲设备自动降低功耗可回收和环保材料课程总结基础知识理解存储原理和基本概念熟悉主流存储介质特性系统架构掌握各类存储架构特点了解不同架构应用场景高级技术数据保护和优化方法现代存储管理技术未来趋势软件定义和智能化发展绿色节能和新型存储技术问答环节技术疑问实践应用进阶学习针对课程内容提问讨论实际工作中的应用场景获取更多学习资源和指导。
个人认证
优秀文档
获得点赞 0