存储、计算、分布式知识点思维导图(收集整理适合小白)

这篇具有很好参考价值的文章主要介绍了存储、计算、分布式知识点思维导图(收集整理适合小白)。希望对大家有所帮助。如果存在错误或未考虑完全的地方,请大家不吝赐教,您也可以点击"举报违法"按钮提交疑问。

  • IO技术
    • FC协议
      光纤通道协议,为了解决I/O传输瓶颈对于整个存储系统带来的消极影响从而产生的光纤通道标准协议簇
    • iSCSI技术
      一种专门为小型计算机系统设计的I/O技术又被成为小型计算机系统接口,通过网络由专门的服务器提供存储管理,已实现数据的远程存储,便于集中管理,从而简化了数据复制,迁移和容灾
  • 不同网络的文件系统
    • 文件系统
      文件系统是用来明确存储设备或分区上文件的方法和数据结构
    • NFS协议
      NFS是一种基于TCP/IP传输的网络文件系统协议,通过使用NFS协议,客户机可以像访问本地目录一样访问远程服务器中的共享资源
    • CIFS协议/SMB协议
      通用internet文件系统,也被成为服务器消息块,是一种网络协议,常用于Lan口文件共享
  • 文件传输协议
    • HTTP协议
      超文本传输协议,是一个简单的请求/响应协议
    • FTP协议
      文件传输协议,用于Internet上控制文件的双向传输。同时,它也是一个应用程序
  • 额外的协议
    • NIS协议(Network Information Server)
      网络信息服务,集中控制几个系统管理数据库的网络用品
    • OpenStack Manila协议
      带有完整文件系统的存储服务
    • Microsoft Active Directory协议
      活动目录,Active Directory存储了有关网络对象的信息,并且让管理员和用户能够轻松地查找和使用这些信息
    • NDMP协议
      网络数据管理协议,用来在网络附加存储设备与备份设备之间传输数据
    • LDAP协议
      轻型目录访问协议,一个开放的、中立的工业标准的应用协议,通过IP协议提供访问控制和维护分布式信息的目录信息
    • HDFS协议
      分布式文件系统,基于硬件的分布式文件系统,能提供高吞吐量的数据访问,
    • S3协议
      理论上是一个全球存储区域网络(SAN),利用S3存取的资产被称为对象。
    • RoCE协议
      IBTA标准中定义的网络协议,允许以太网络使用RDMA技术
    • POSIX协议
      可移植操作系统接口,该标准定义了操作系统应该为应用程序提供的接口标准
    • MPI-IO协议
      用于在参与计算的不同CPU、或服务器节点之间进行消息传递的一组规范或接口
  • 存储类型
    根据不同的数据类型进行存储的区别
    • DAS直连式存储
      存储设备与主机之间没有任何网络设备参与
    • NAS网络存储系统
      NAS提供文件级别存储数据,通常采用NFS、SMB/CIFS等网络文件共享协议进行文件存取,是以太网连接的网络存储系统,NAS通常与非结构化数据相关联
    • SAN存储区域网络
      通过光纤等高速网络设备在服务器与存储设备间搭建专门的存储网络,提供块级别存储数据,使用光纤通道连接,SAN与数据库等结构化工作负载相关联
  • 存储技术
    • Raid技术
      独立磁盘冗余阵列,是提高磁盘可靠性和可用性的一种技术
    • EC技术
      它可以将N份原始数据,增加M份数据,并能通过N+M份中的任意N份数据,还原为原始数据,ec技术简单来说就是多个盘失效的算法,作为可有效提升存储效率、安全性和便捷性的新兴存储技术通过冗余来进行高可用的解决方案
    • 重删压缩
      重删:将相同的数据,保存其中一份,其他的重复数据块保留一个地址引用到这个唯一存储的块即可
      压缩:一个大字符串的子串用一个很简短的数字标记,然后检索该字符串出现的位置,用简单的字符来进行代替,从而减少数据表达所需要的空间
    • RDMA
      远程直接数据存储,为了解决网络传输中服务器端数据处理的延迟而产生的技术
    • 3副本
      业务数据被分割为固定大小的数据块,每个数据块在不同的节点上保存3个副本,以实现数据自动平衡和横向扩展
  • 磁盘存储逻辑概念
    • LUN
      因为SCSI总线上可挂接的设备数量是有限的,一般为8个或者16个,设备只要一加入系统,就需要有一个代号,LUN就是我们为了使用和描述更多设备及对象而引进的一个方法而已
    • Volume
      LUN是对存储设备而言的,volume是对主机而言的,当存储设备连接入主机之后是一个物理设备,在该设备上创建一个物理分区再创建一个文件系统,才可以得到一个volume,volume对于主机来说是一个逻辑设备
  • 常见名词解释
    • HBA
      即主机总线适配器,在主机和存储装置间提供输入/输出(I/O)处理和物理连接的电路板或集成电路适配器,一个HBA和与之相连的磁盘子系统有时一起被称作一个磁盘通道
    • CLI
      命令行界面,允许管理员和其他系统用户执行存储系统的管理和维护操作
    • Restful API
      基于 HTTPS 的接口用于系统的自动化、编制、查询和调配
    • SNMP
      用来管理和监视Internet 协议中的网络连接设备
    • SMI-S
      SNIA(全球网络存储工业协会)发起并主导的一种存储标准管理接口,有众多存储厂商参与定义并实现。SMI-S 接口提供存储硬件和业务配置能力,存储管理软件可以使用此接口管理存储设备
  • 内存条类型
    • RDIMM
      带寄存器的双列直插内存模块,RDIM的内存条上加了一个寄存器进行传输,其位于CPU和内存颗粒之间,由于寄存器效率很高,所以容量和频率更容易提高
    • UDIMM
      无缓冲双列直插内存模块,其地址和控制信号不经缓冲器,直接到达DIMM上的DRAM芯片,因此同频率下延迟较小,又因为制作工艺,因此UDIM容量和频率上都较低
    • LRDIMM
      低负载双列直插内存模块,简单缓冲,缓冲降低了下层主板上的电力负载,对性能无影响,降低了内存总线负载,进一步提升了内存支持容量
  • 3DC(两地三中心)
    • 集群
      它将多个系统连接到一起,使多台服务器能够像一台服务器那样工作,提高了系统的容灾,稳定性,高可用和灵活性
      • Oracle RAC集群
        一个Oracle RAC数据库有多个服务器节点,每个服务器节点上都有独自的OS、ClusterWare、oracle Rac数据库,每个节点都有自己的网络监听器。
        ClusterWare是一个集群软件,主要用于集群系统管理
        Oracle Rac是数据库程序,提供oracle实例进程,供客户端访问集群系统
        网络监听器,主要监控自己的网络端口信息,所有服务和程序需要通过操作系统去访问一个共享存储
        Oracle RAC集群中因为每个节点都有完整的数据库程序,节点与节点之间通过私有网络进行通信,互相监控节点状态,数据库中所有的数据、日志、文件、控制文件都会保存在集群的共享存储设备上,因此所有节点都可以同时读写共享存储
      • VMware集群
        Vmware ESXi:虚拟化平台软件,类似于个人电脑中的vmware workstation
        VCenter Server:集中管理ESXI的软件
        使用ESXi虚拟化软件,创建虚拟机,并用VCenter Server管理ESXI虚拟机,在创建集群时,可以启用vSphere DRS、vSphere HA、vSAN并在所有主机上共同管理映像更新,简单来说VMware集群,就是虚拟化的服务器集群,在发生故障之后可以在物理机服务器上,虚拟机可以在集群的另外一台ESXI服务器上重启
      • FusionSphere集群
        在FusionSphere平台上创建的一组虚拟机,在FusionSphere发放的虚拟机上安装eSight集群系统,将虚拟机组成集群
    • 生产业务中心
      提供生产业务响应及生产环境的数据存取
    • 同城灾备中心
      提供将生产业务中心的数据实时的复制到同城灾备中心,即使在生产业务中心发生故障之后实时切换至同城灾备中心
    • 异地灾难备份中心
      将生产业务中心的数据及业务异步的复制到异地灾难备份中心,即使在生产业务中心,同城灾备中心都发生故障之后业务数据及业务不会收到影响
    • 同城灾备方案
      • 冷备
        同城灾备中心只提供数据实时备份,不提供实时服务
      • 热备
        同城灾备中心实时的复制数据,但不提供服务,只有在生产业务中心发生故障之后才会接管业务
    • 同城双活方案
      在同城主从备份中,可以进行数据实时备份,然后再进行读写分离通过中间件实现,将同城从库也接入访问流量,双活:主库承担60%~70%业务,从库分担30%~40%的业务
    • 伪异地双活方案
      在同城双活的方案中,将异地灾难备份中心改为双活从库,即实现了伪异地双活方案,该方案会受到网络因素的影响,不具备机房内网络质量
    • 异地双活方案
      将同城双活方案中,将异地灾难备份中心改为双活从库,并实现就近访问,存储层实现双主架构:两个机房互为从库,自己是主库,即可实时双向数据同步,且可以避免网络因素因素的影响
    • 异地多活方案
      需要设立一个中心机房,且所有从库都与主库为双主架构,多个从库之间没有任何关联,这样从库写入的所有数据都会同步到中心机房,再由中心机房同步到其他从库
    • 免网关双活方案(华为)
      华为免网关双活(HyperMetro)存储设备之间没有虚拟化网关设备,使用存储阵列组成跨站点集群系统,支持LUN Active-Active双活双主架构,通过FastWrite功能对阵列进行协议级优化
      传统SCSI流程:“写命令”“写分配完成”“写数据”“写执行状态”
      FastWrite流程:“写数据命令”“写执行状态”
  • 其他专业性词汇
    • SCM
      软件配置管理(SCM),常来保证所有配置项的完整性和可跟踪性
    • vVol
      VMware vSphere 6.0包含的一个新的存储特性,vvol支持虚拟机级别的存储资源分配和管理,而非LUN级、卷级或挂载点级
    • OLTP
      联机事务处理,主要是对数据的增删改,侧重实时性
    • OLAP
      联机分析处理,主要是对数据的查询,侧重大数据量查询
    • OOB
      带外数据,传输层协议使用带外数据来发送一些重要的数据
    • 随机读写
      指可以在任何时候将存取文件的指针指向文件内容的任何位置
    • RTO
      数据恢复点目标,指灾难发生后,从IT系统宕机导致业务停顿之时开始,到IT系统恢复至可以支持各部门运作、恢复运营之时,此两点之间的时间段称为RTO
    • RPO
      即恢复时间目标,从灾难发生到业务系统恢复服务功能所需要的最短时间周期
    • RPM
      即转速单位,表示设备每分钟的旋转次数
    • IEEE 802.3
      是一种网络协议,广泛用于局域网(LAN)
    • SM
      即单模光模块
    • MM
      即多模光模块
    • CWDM
      一种面向城域网接入层的低成本WDM传输技术,主要应用于企业网,校园网
    • DWDM
      一项用来在现有的光纤骨干网上提高带宽的激光技术,长途干线网,大容量城域网核心节点
    • SOC
      系统级芯片,也有称片上系统,意指它是个产品,是一个有专用目标的集成电路,其中包含完整系统并有嵌入软件的全部内容。同时它又是一种技术,用以实现从确定系统功能开始,到软/硬件划分,并完成设计的整个过程。
    • IOPS
      可以视为是每秒的读写次数,是一个用于计算机存储设备性能测试的量测方式
    • TOPS
      运算单元PE的理论数值,ITOPS表示处理器每秒钟可进行一万亿次操作
    • GOPS
      运算单元PE的理论数值,ITOPS表示处理器每秒钟可进行十亿次操作
    • MOPS
      运算单元PE的理论数值,ITOPS表示处理器每秒钟可进行一百万次操作
    • eSight
      面向企业的一体化融合运维管理解决方案,可实现网络设备,服务器操作系统和虚拟资源的统一管理
    • ASIC
      应用型专用集成电路,是为了某种特定的需求而专门订制的芯片的同城
    • IB
      Infiniband,简称为IB,功能完善的IB网路,是一个用于高性能计算的计算网络通信标准
    • POSIX
      可移植操作系统接口,该标准定义了操作系统应该为应用程序提供的接口标准
    • HPC
      高性能计算机集群
  • 延伸专业词汇
    • 高可用
      Hight availability,即HA。主要目的是为了保障业务的连续性
    • 元数据
      中介数据、中继数据,描述数据的数据,主要描述数据属性
    • 横向扩展
      当集群达到性能瓶颈时,可通过增加服务器节点的方式突破性能瓶颈
    • 纵向扩展
      当集群性能达到瓶颈时,通过提高单个服务器节点配置的方式突破性能节点
    • 异构
      一个整体又不同的个体构成,(异构网络:家用网络,用不同厂家的网络设备构成)

文章来源地址https://www.toymoban.com/news/detail-838430.html

到了这里,关于存储、计算、分布式知识点思维导图(收集整理适合小白)的文章就介绍完了。如果您还想了解更多内容,请在右上角搜索TOY模板网以前的文章或继续浏览下面的相关文章,希望大家以后多多支持TOY模板网!

本文来自互联网用户投稿,该文观点仅代表作者本人,不代表本站立场。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如若转载,请注明出处: 如若内容造成侵权/违法违规/事实不符,请点击违法举报进行投诉反馈,一经查实,立即删除!

领支付宝红包 赞助服务器费用

相关文章

  • 结合云计算的最新技术和现状,介绍云计算基础知识、开源分布式数据库Clickhouse、可视化数据分析工具、分布式链路跟踪系统Pinpoint、数据湖存储系统Pulsar等

    作者:禅与计算机程序设计艺术 2019年,“云计算”将成为“经济全球化”的热门词汇之一,2020年全球云计算市场规模预计达到1万亿美元。中国是继美国、英国之后,成为全球第四大云服务提供商。华为、腾讯、阿里巴巴等互联网巨头纷纷布局云计算领域,各家公司纷纷推出

    2024年02月08日
    浏览(38)
  • 云存储、云计算与分布式存储、分布式计算是一回事吗?

    随着互联网的蓬勃兴起,大数据、人工智能、物联网、云计算与云存储等这些专业词汇在大众视野内出现的频率越来越高,再加上近几年分布式技术异军突起,更使得分布式存储、分布式计算等成为热词。然而,很多人对这些名词都一知半解,所以本文将主要和大家聊一聊,

    2024年01月25日
    浏览(49)
  • 存储、计算、分布式存储篇(收集整理适合小白)

    存储分类 块存储 需要格式化,将文件直接保存到磁盘上 文件存储 应用程序通过调用操作系统将文件保存到块存储进行持久化 Object对象存储 基于对象的存储,也可以被称为云存储,在对象存储系统中,文件没有多层级的文件结构,而是以存储空间的概念,文件被拆分为多个

    2024年02月05日
    浏览(39)
  • 云计算基础-存储虚拟化(深信服aSAN分布式存储)

    分布式存储是利用虚拟化技术 “池化”集群存储卷内通用X86服务器中的本地硬盘,实现服务器存储资源的统一整合、管理及调度,最终向上层提供NFS、ISCSI存储接口,供虚拟机根据自身的存储需求自由分配使用资源池中的存储空间。 每秒钟的IOPS数,该指标主要用于评价小块

    2024年02月19日
    浏览(31)
  • 存储、计算、分布式虚拟化篇(收集整理适合小白)

    超融合 硬件资源的统一管理 虚拟化 计算机资源最大化利用 桌面云 虚拟机上的桌面 虚拟桌面资源池 用户使用的云桌面虚拟机 虚拟应用资源池 应用虚拟化的虚拟机 处理器虚拟化 将一个物理的CPU虚拟成多个逻辑CPU供虚拟机使用 超线程技术 将多线程处理器内部的逻辑内核模拟

    2024年01月16日
    浏览(39)
  • 论文阅读笔记(Clover: 计算与存储被动分离的分布式键值存储系统)

    关于 Disaggregating Persistent Memory and Controlling Them Remotely: An Exploration of Passive Disaggregated Key-Value Stores 这篇论文的笔记 原文链接 提出背景 传统的分布式存储系统中,每个节点都会包含计算和存储两个部分,一个节点既可以访问本地的存储部分也可以访问远端的存储部分。传统的

    2024年02月07日
    浏览(44)
  • 计算机组成原理课程论文:分布式存储系统组成和应用

    摘要 分布式存储系统是一种解决大规模数据处理和存储需求的重要技术。本文首先对分布式存储系统进行了概述,包括其定义、优缺点等。然后,详细介绍了分布式存储系统的组成部分,包括存储节点、数据管理软件、网络连接和元数据管理,并结合具体案例进行了说明。接

    2024年02月13日
    浏览(48)
  • 头歌Educoder云计算与大数据——实验五 Java API分布式存储

    原始电商数据都是存储在关系型数据库或 NoSQL 数据库上的,是面向OLTP(联机事务处理过程)的;数据都是面向业务的,而不是面向分析。因此数据比较复杂,表很多关联的数据是分散的,不利于统计分析;因此需要把数据从多个表里导出来、联合起来,找出分析所需要的数据项

    2023年04月09日
    浏览(41)
  • 数据存储和分布式计算的实际应用:如何使用Spark和Flink进行数据处理和分析

    作为一名人工智能专家,程序员和软件架构师,我经常涉及到数据处理和分析。在当前大数据和云计算的时代,分布式计算已经成为了一个重要的技术方向。Spark和Flink是当前比较流行的分布式计算框架,它们提供了强大的分布式计算和数据分析功能,为数据处理和分析提供了

    2024年02月16日
    浏览(44)
  • 【分布式】分布式存储架构

    说到分布式存储,我们先来看一下传统的存储是怎么个样子。 传统的存储也称为集中式存储, 从概念上可以看出来是具有集中性的,也就是整个存储是集中在一个系统中的,但集中式存储并不是一个单独的设备,是集中在一套系统当中的多个设备,比如下图中的 EMC 存储就需

    2024年02月10日
    浏览(37)

觉得文章有用就打赏一下文章作者

支付宝扫一扫打赏

博客赞助

微信扫一扫打赏

请作者喝杯咖啡吧~博客赞助

支付宝扫一扫领取红包,优惠每天领

二维码1

领取红包

二维码2

领红包