Kylin麒麟操作系统服务部署 | ISCSI存储服务

一位老司机

以下所使用的环境为：
虚拟化软件：VMware Workstation 17 Pro
麒麟系统版本：Kylin-Server-V10-SP3-2403-Release-20240426-x86_64

一、网络存储结构

网络存储技术（Network Storage Technologies）是基于数据存储的一种通用术语。网络存储结构分为以下三种：

DAS直连式存储：直接与主机系统相连接的存储设备（硬盘、光盘） NAS网络存储设备：直接与网络介质相连的特殊设备以实现数据存储（NFS、Samba、CIFS） SAN存储区域网络：存储设备相连企鹅与一台服务器或服务器群相连形成网络（FC-SAN、IP-SAN）

NAS和SAN的区别

NAS使用TCP/IP传输数据；SAN使用SCSI或iSCSI协议传输数据 NAS采用NFS和CIFS技术实现文件共享，基于操作系统的“文件级“读写操作 SAN采用底层块协议，根据协议头的“块地址+偏移地址”，无需操作系统也可以正常识别

FC-SAN和IP-SNA的区别

FC-SAN以光纤为介质构建存储网络，通过光纤通道协议转发scsi协议 IP-SAN以IP网络构建存储网络，现对于FC-SAN更加经济实惠，通过TCP协议转发scsi协议

二、ISCSI存储概念

ISCSI是一种在Internet协议上，特别是以太网上进行数据块传输的标志，它是一种基于IP Storage理论的新型存储技术，通过将SCSI接口和IP网络相结合，可以在IP网络上构建SAN存储区域网络。可以理解为：iSCSI=IP+SCSI。
ISCIS技术优势

将用于本机的SCSI通过TCP/IP网络传输，只要IP可达，可无视地域 连接的服务器数量不受限制（原有的SCSI-3最大连接数为15） 基于服务器架构，可以实现在线扩容

ISCSI Target
被用于存储数据的iscis磁盘或具有iscsi功能的设备都可以被称为“ISCSI Target”。利用ISCSI Target可以将服务器的存储空间分配给客户端使用，客户端就可以像本地磁盘一样使用iscsi磁盘。
iSCSI initiator
iSCSI initiator是一个安装在系统上的软件或硬件设备，负责与iscis存储设备进行通信。

三、targetcli服务

targetcli支持通过普通命令方式使用或交互式使用。通过targetcli可以创建、删除和配置iSCSI目标，在交互式中，可以直观呈现目标的层级树，方便浏览和配置，支持使用Linux基本命令，如cd、ls、pwd等。
安装targetcli，麒麟操作系统默认已经安装好targetcli

1. yum install-y targetcli

复制代码

进入交互模式

1. targetcli

复制代码

1. 目录内容解析

查看当前目录内容

1. ls

复制代码

• backstores：存储目录
  
  block：块设备，如：磁盘驱动器、磁盘分区、逻辑卷（类型标识符为b的设备文件） fileio：文件存储，将文件模拟成磁盘，类似于虚拟机中的1个文件代表1个磁盘 pscsi：物理SCSI ramdisk：内存中的1个指定大小的内存存储，也就是使用内存模拟磁盘
  
  
  

3. iscis目录解析

默认情况下，iscis目录为空。当我们在iscsi目录下创建iscis target时，会自动生成目录

在创建IQN的同时会自动创建一个默认的TPG

• iscsi：目标目录
  
  acls：设置允许连接的客户端，通过iqn或IP地址限定 luns：逻辑单元号，指向物理存储 portals：映射的IP地址和端口号
  
  
  

3. LUN

目标要提供客户端对存储或输出设备的访问，需要配置一个或多个逻辑单元号（LUN）。在ISCSI中，LUN显示为目标的连续编号的磁盘驱动器，一般来说，目标只有一个LUN。iSCIS通过ACL限制启动器是否可以访问LUN。
LUN的全称是Logical Unit Number（逻辑单元号），是SCSI中的概念。块存储对象只要加入target存储系统，就会分配1个代号。在区分块设备时只需要说 target 中的 LUN号码，块存储对象被指定了一个LUN后，成为了一个“逻辑”磁盘，供存储客户端使用。
通俗的理解：将后端存储设备中的设备理解为房间，LUN理解为房号。客户端如果要访问该房间，只需要知道该房号即可访问。
四、ISCSI服务部署（基于磁盘）

节点设置

主机	网络信息	说明
Kylin-1	192.168.110.1/24	存储服务器
Kylin-2	192.168.110.2/24	测试客户端

[Step1]： Kylin-1配置：添加3块10G硬盘

[Step2]： Kylin-1配置：安装ISCIS存储服务器端

1. yum install-y targetcli

复制代码

[Step3]： Kylin-1配置：创建块存储对象

1. cd /backstores/block                        # 进入块设备存储目录
2. create 10G-1 /dev/sdb                        # 新建块设备
3. create 10G-2 /dev/sdc
4. create 10G-3 /dev/sdd

复制代码

**create：**新建块设备 **10G-1：**块设备名称 **/dev/sdb：**块设备路径

[Step4]： Kylin-1配置：切换到iSCIS目录，创建ISCSI Target

1. cd /iscsi
2. create iqn.2024-09.com.meaauf                # 名称可以自定义

复制代码

[Step5]： Kylin-1配置：切换到luns目录下，将block目录下的块存储加入luns目录下

1. cd iqn.2024-09.com.meaauf/tpg1/luns
2. create /backstores/block/10G-1
3. create /backstores/block/10G-2
4. create /backstores/block/10G-3

复制代码

[Step6]： Kylin-1配置：切换到acls目录下，为initator客户端创建ACL访问（客户端连接器）

1. cd../acls
2. create iqn.2024-09.com.meaauf.Kylin-2

复制代码

[Step7]： Kylin-1配置：切换到portals目录下，指定新的监听地址和端口号

1. cd../portals/
2. delete 0.0.0.0 3260# 删除默认监听端口 3260
3. create 192.168.110.1 3260# 添加监听端口

复制代码

[Step8]： Kylin-1配置：设置允许连接的用户和密码

1. cd../acls/iqn.2024-09.com.meaauf.kylin-2/
2. set auth userid=admin
3. set auth password=kylin2024

复制代码

[Step9]： Kylin-1配置：查看当前配置

1. ls /

复制代码

[Step10]： Kylin-1配置：可以手动保存后退出，也可以直接退出（退出会保存当前配置）

1. cd /
2. saveconfig

复制代码

[Step11]： Kylin-1配置：启动target服务并加入到开机自启，调整防火墙策略，放行3260端口

1. systemctl enable--now target.service
2. firewall-cmd --add-port=3260/tcp --permanent
3. firewall-cmd --reload

复制代码

[Step12]： Kylin-2配置：配置ISCSI存储客户端

1. yum -yinstall open-iscsi

复制代码

[Step13]： Kylin-2配置：配置ISCSI Initiator客户端连接器名称

1. vim /etc/iscsi/initiatorname.iscsi
3. # 修改内容如下，InitiatorName必须和服务端acls中设置值一致InitiatorName=iqn.2024-09.com.meaauf.Kylin-2

复制代码

[Step14]： Kylin-2配置：修改iscsid配置文件

1. vim /etc/iscsi/iscsid.conf
3. # 添加下列内容
4. node.session.auth.authmethod = CHAP
5. node.session.auth.username = admin
6. node.session.auth.password = kylin2024

复制代码

[Step15]： Kylin-2配置：重新启动iscsid服务

1. systemctl restart iscsid.service

复制代码

[Step16]： Kylin-2配置：发现远程可用的iSCSI服务器节点

1. iscsiadm -m discovery -t sendtargets -p192.168.110.1
2. iscsiadm -m discovery -t st -p192.168.110.1

复制代码

-m discovery：发现操作 -t sendtargets：指定发现类型为 sendtargets -p 192.168.110.1：指定iSCSI目标门户地址

[Step17]： Kylin-2配置：登录远程可用的iSCSI服务器节点

1. iscsiadm -mnode--login

复制代码

[Step18]： Kylin-2验证：查看本地裸设备，可以看到新增了3块10G硬盘

1. lsblk

复制代码

[Step19]： Kylin-2验证：卸载指定的iSCSI存储设备

1. iscsiadm -mnode-T iqn.2024-09.com.meaauf -u

复制代码

五、ISCSI服务部署（基于文件）

节点设置

主机	网络信息	说明
Kylin-1	192.168.110.1/24	存储服务器
Kylin-2	192.168.110.2/24	测试客户端

[Step1]： Kylin-1配置：创建1个文件，模拟磁盘

1. ddif=/dev/zero of=/dev/file bs=1M count=2048# 创建1个2G的文件,文件名为 /dev/file

复制代码

if=/dev/zero：指定源文件 of=/dev/file：指定输出文件 bs=1M：设置块大小，dd命令每次写入1M的数据 count=2048：复制的块数为2048

[Step2]： Kylin-1配置：创建iscis文件存储，进入fileio目录下

1. targetcli
2. >cd /backstores/fileio
3. > create file /dev/file

复制代码

[Step3]： Kylin-1配置：创建逻辑单元号

1. cd /iscsi/iqn.2024-09.com.meaauf/tpg1/luns/
2. create /backstores/fileio/file

复制代码

[Step4]： Kylin-1配置：创建客户端ACL，这里我们使用和上述一样的ACL规则

1. cd../acls/

复制代码

[Step5]： Kylin-1配置：退出

1. exit

复制代码

[Step6]： Kylin-2配置：发现远程可用的iSCSI服务器节点，登录iSCSI服务器节点

1. iscsiadm -m discovery -t sendtargets -p192.168.110.1
2. iscsiadm -mnode--login

复制代码

[Step7]： Kylin-2验证：查看本地裸设备，可以看到新增了1块2G硬盘