网络存储技术

2020.03.22 Linux- iSCSI服务 今天学习了iSCSI服务以及MariaDB数据库，两个都是在工作中比较使用的技术，以及也是考试内容。 iSCSI技术实现了物理硬盘设备与TCP/IP网络协议的相互结合，使得用户可以通过互联网方便地访问远程机房提供的共享存储资源。 配置iSCSI 1.yum进行安装，#yum命令的后面添加-y参数，可以不用手动确认 2.配置iSCSI服务端共享资源 targetcli是交互式的配置界面（7比5、6简单） 3.创建iSCSI target名称以及配置共享资源，该名称为系统自动生成且唯一，注意该字符串的最后一个点为句号，不是名称里面内容 4.配置ACL 建议在iSCSI target后面追加：client的参数，方便管理 7.配置完成后记得是用exit命令进行退出，CTRL C是不能进行保存的 以上为服务端的配置，客户端的配置见书 老刘总结为 先发现，再登陆，最后挂载并使用 MariaDB 一个与MySQL相似又相爱相杀的数据库管理系统，占有越来越多的市场 同样使用SQL语句，考试主要考察内容为查找 学习笔记： 来源： https://www.cnblogs.com/mrpanyue/p/12549748.html

网络存储服务ip-san搭建 网络存储服务ip-san搭建 一．简介 SAN （存储区域网络 storage area network and SAN protocols ,简称SAN），它是一种高速网络实现计算机与存储系统之间的数据传输。常见的分类是FC-SAN和IP-SAN两种。 FC-SAN通过光纤通道协议转发scsi协议；IP-SAN通过TCP协议转发scsi协议，也就是IP 地址。存储设备是指一台或多台用以存储计算机数据的磁盘设备，通常指磁盘阵列，主要厂商EMC、日立等。 iSCSI（internet SCSI）技术由IBM公司研究开发，是一个供硬件设备使用的、可以在IP协议的上层运行的SCSI指令集，这种指令集合可以实现在IP网络上运行SCSI协议，使其能够在诸如高速千兆以太网上进行路由选择。iSCSI技术是一种新储存技术，该技术是将现有SCSI接口与以太网络(Ethernet)技术结合，使服务器可与使用IP网络的储存装置互相交换资料。 iSCSI是一种基于TCP/IP 的协议，用来建立和管理IP存储设备、主机和客户机等之间的相互连接，并创建存储区域网络（SAN）。SAN 使得SCSI 协议应用于高速数据传输网络成为可能，这种传输以数据块级别（block-level）在多个数据存储网络间进行。SCSI 结构基于C/S模式，其通常应用环境是：设备互相靠近

网络存储服务 ip-san搭建 一．简介 SAN （存储区域网络 storage area network and SAN protocols ,简称SAN），它是一种高速网络实现计算机与存储系统之间的数据传输。常见的分类是FC-SAN和IP-SAN两种。 FC-SAN通过光纤通道协议转发scsi协议；IP-SAN通过TCP协议转发scsi协议，也就是IP 地址。存储设备是指一台或多台用以存储计算机数据的磁盘设备，通常指磁盘阵列，主要厂商EMC、日立等。 iSCSI（internet SCSI）技术由IBM公司研究开发，是一个供硬件设备使用的、可以在IP协议的上层运行的SCSI指令集，这种指令集合可以实现在IP网络上运行SCSI协议，使其能够在诸如高速千兆以太网上进行路由选择。iSCSI技术是一种新储存技术，该技术是将现有SCSI接口与以太网络(Ethernet)技术结合，使服务器可与使用IP网络的储存装置互相交换资料。 iSCSI是一种基于TCP/IP 的协议，用来建立和管理IP存储设备、主机和客户机等之间的相互连接，并创建存储区域网络（SAN）。SAN 使得SCSI 协议应用于高速数据传输网络成为可能，这种传输以数据块级别（block-level）在多个数据存储网络间进行。SCSI 结构基于C/S模式，其通常应用环境是：设备互相靠近，并且这些设备由SCSI 总线连接。

网络存储服务ip-san搭建 1：SAN的定义 SAN(全称，存储局域网络)的诞生，使存储空间得到更加充分的利用，并使得安装和管理更加有效。 SAN是一种将存储设备、连接设备和接口集成在一个高速网络中的技术。SAN本身就是一个存储网络，承担了数据存储任务，SAN网络与LAN业务网络相隔离，存储数据流不会占用业务网络带宽 2：IPSAN典型应用 一,折叠应用于数据处理中心 借助IP SAN存储区域网，基于iSCSI流高速交换平台，运行带内(in-band)虚拟化存储管理软件，将各种存储设备(包括磁盘、磁带及其他存储设施)联接起来。 IP SAN存储区域网的优点，共享了昂贵的存储资源，提高了存储设备的利用率；提供存储资源分配与管理，节省了传统的直连式存储设备多路并行管理费用。 二,折叠存储网与通信网结合 由于支持存储子系统的IP SAN存储区域网与通信子系统构建的应用网是同一种网络架构-Ethernet/IP/TCP，因此，管理人员可以将原来在应用网络通信技术方面积累的知识和经验，充分应用于存储子系统。一些板卡生产厂商:如Adaptec、Alacritech和Intel等公司，均在生产一卡两用的新产品，以支持同一网络架构的应用网和存储网。 3：IP-SAN的操作概要 IP SAN的操作流程大体如下： initiator作为服务器端去使用远程target上的一个lun(逻辑单元号)

关于网络存储技术和存储的协议 网络存储技术 网络存储技术（Network Storage Technologies）是基于数据存储的一种通用网络术语。网络存储结构大致分为三种： 直连式存储（DAS：Direct Attached Storage）、网络存储设备（NAS：Network Attached Storage）和存储网络（SAN：Storage Area Network）。 直连式存储（DAS） 这是一种直接与主机系统相连接的存储设备，如作为服务器的计算机内部硬件驱动。到目前为止，DAS 仍是计算机系统中最常用的数据存储方法。 DAS即直连方式存储，英文全称是Direct Attached Storage。中文翻译成“直接附加存储”。顾名思义，在这种方式中，存储设备是通过电缆（通常是SCSI接口电缆）直接到服务器的。I/O（输入/输出）请求直接发送到存储设备。DAS，也可称为 SAS（Server-Attached Storage，服务器附加存储） 。它依赖于服务器，其本身是硬件的堆叠，不带有任何存储操作系统。 网络存储设备（NAS） NAS 是一种采用直接与网络介质相连的特殊设备实现数据存储的机制。由于这些设备都分配有 IP 地址，所以客户机通过充当数据网关的服务器可以对其进行存取访问，甚至在某些情况下，不需要任何中间介质客户机也可以直接访问这些设备。 最大存储容量

网络存储服务 ip-san 搭建 San 的定义 ip-span 技术由 IBM 公司研究开发，是一个供硬件设备使用的、可以在 IP 协议的上层运行的 SCSI 指令集，这种指令集合可以实现在 IP 网络上运行 SCSI 协议，使其能够在诸如高速千兆以太网上进行路由选择。 iSCSI 技术是一种新储存技术，该技术是将现有 SCSI 接口与以太网络 (Ethernet) 技术结合，使服务器可与使用 IP 网络的储存装置互相交换资料。 ip-span 是一种基于 TCP/IP 的协议，用来建立和管理 IP 存储设备、主机和客户机等之间的相互连接，并创建存储区域网络（ SAN ）。 SAN 使得 SCSI 协议应用于高速数据传输网络成为可能，这种传输以数据块级别（ block-level ）在多个数据存储网络间进行。 SCSI 结构基于 C/S 模式，其通常应用环境是：设备互相靠近，并且这些设备由 SCSI 总线连接。 ip-span 的主要功能是在 TCP/IP 网络上的主机系统（启动器 initiator ）和存储设备（目标器 target ）之间进行大量数据的封装和可靠传输过程。 完整的 iSCSI 系统的拓扑结构如下： 从本质上说， ip-span 启动器是一个客户端设备，它连接到服务器（在本例中是 iSCSI 目标）提供的某一服务，并发起对该服务的请求。 iSCSI

什么是ip-span? ip-span技术由IBM公司研究开发，是一个供硬件设备使用的、可以在IP协议的上层运行的SCSI指令集，这种指令集合可以实现在IP网络上运行SCSI协议，使其能够在诸如高速千兆以太网上进行路由选择。iSCSI技术是一种新储存技术，该技术是将现有SCSI接口与以太网络(Ethernet)技术结合，使服务器可与使用IP网络的储存装置互相交换资料。 ip-span是一种基于TCP/IP 的协议，用来建立和管理IP存储设备、主机和客户机等之间的相互连接，并创建存储区域网络（SAN）。SAN 使得SCSI 协议应用于高速数据传输网络成为可能，这种传输以数据块级别（block-level）在多个数据存储网络间进行。SCSI 结构基于C/S模式，其通常应用环境是：设备互相靠近，并且这些设备由SCSI 总线连接。 ip-span 的主要功能是在TCP/IP 网络上的主机系统（启动器 initiator）和存储设备（目标器 target）之间进行大量数据的封装和可靠传输过程。 完整的iSCSI系统的拓扑结构如下： 从本质上说，ip-span启动器是一个客户端设备，它连接到服务器（在本例中是 iSCSI 目标）提供的某一服务，并发起对该服务的请求。iSCSI 启动器软件需要安装在每个 Oracle RAC 节点（rac1 和 rac2）上。 iSCSI 启动器可以用软件实现

SAN的定义： 存储区域网络（Storage Area Network，简称 SAN ）采用网状通道（Fibre Channel ，简称 FC ，区别与Fiber Channel光纤通道）技术，通过FC交换机连接 存储阵列 和服务器 主机 ，建立专用于 数据存储 的区域网络。SAN经过十多年历史的发展，已经相当成熟，成为业界的事实标准（但各个厂商的光纤交换技术不完全相同，其服务器和SAN存储有兼容性的要求）。 SAN专注于企业级存储的特有问题。当前企业存储方案所遇到问题的两个根源是：数据与应用系统紧密结合所产生的结构性限制，以及 小型计算机系统接口 (SCSI)标准的限制。大多数分析都认为SAN是未来企业级的存储方案，这是因为SAN便于集成，能改善数据可用性及网络性能，而且还可以减轻管理作业。 ip-san的大致操作流程： initiator作为服务器端去使用远程target上的一个lun(逻辑单元号)，一个target即一个主机，一个主机上可以共享多个硬盘给initiator使用，我们把每一个硬盘叫做一个lun。为了使用iscsi协议，initiator上要封装scsi driven,iscsi driven和tcp/ip的报文通过网络发送给target上，target以此扯掉这些报文，发现对方发送的scsi协议，进而交给本地的硬盘驱动处理

1：SAN的定义 SAN是storage area network(存储区域网络)的简写，早期的san采用的是光纤通道技术，后期当iscsi协议出现以后，为了区分两者，就划分了IP SAN和FC SAN。FC SAN由于其昂贵的价格让许多企业退避三舍，IP SAN作为一个很好的代替产品出现在了人们的视线中。现在大部分存储设备提供支持基于TOE技术的接口，可以在硬件基础上处理TCP/IP协议。这意味着ISCSI设备可以处理速度已接近GigE、约100MB/秒的数据传输速率来处理I/O进程，其速率可与FC SAN的相比 2：IP-SAN的操作概要 IP SAN的操作流程大体如下： initiator作为服务器端去使用远程target上的一个lun(逻辑单元号)，一个target即一个主机，一个主机上可以共享多个硬盘给initiator使用，我们把每一个硬盘叫做一个lun。为了使用iscsi协议，initiator上要封装scsi driven,iscsi driven和tcp/ip的报文通过网络发送给target上，target以此扯掉这些报文，发现对方发送的scsi协议，进而交给本地的硬盘驱动处理。所以target上不用必须装scsi的硬盘，像传统的sata盘都可以在这个架构中使用。从用户的角度来看，就像在使用本地的客户端一样，方便简单。 target ---------------

智能存储系统（待续...） 组成部分 前端 由前端端口和前端控制器组成。 前端端口 使得主机能连接到智能存储系统，每个前端端口拥有相应传输协议的处理逻辑（SCSI、光纤通道、iSCSI等）。 前端控制器 通过数据总线在主机和缓存间传输数据。通过命令队列算法来优化IO处理。 前端命令队列 通过队列存储IO命令，调整执行顺序，减少不必要的驱动器磁头移动，改善磁盘性能。 常见算法： 先进先出算法FIFO：按顺序执行，性能最差 寻道时间优化算法：根据寻道时间优化 访问时间优化：综合考虑寻道时间和旋转延迟进行优化 注 ：命令缓存也可以在磁盘控制器上实现。 高速缓存 基本单位是页。 物理磁盘访问最慢。因为寻道时间与旋转延迟，通常要几毫秒。过慢导致请求被排队，带来响应延迟。 缓存访问数据只需不到1ms，数据先被存入缓存随后再写入磁盘。数据存入缓存后，主机会立即得到响应。 缓存由数据存储和标签RAM组成。 标签RAM 每个条目记录数据保存在缓存哪个位置以及数据属于磁盘中的哪个位置。 脏标志位：记录是否已保存到磁盘 时间信息：如最后访问时间，淘汰很久没访问的数据 带有缓存的读操作 主机发送读请求，前端控制器通过标签RAM查询数据是否在缓存中。 如果找到了（读命中），数据直接送入主机，不发生磁盘操作。 否则（缓存未命中），后端控制器访问磁盘，读取数据，数据被存入缓存，在通过前端控制器传入主机。 预读