全国服务热线:13376400854

新闻中心 PRODUCT DISPLAY

济南阿里云基于NVMe共享盘部署集群文件系统

来源: 发布时间:2024-07-09 674 次浏览

本文将为您演示如何基于NVMe共享盘部署集群文件系统。

基于EBS的NVMe(Non-Volatile Memory Express)共享盘的多重挂载能力部署集群文件系统,可以实现多实例对同一个文件系统、同一块盘的并发读写访问。本文将为您演示如何基于NVMe共享盘部署集群文件系统。

背景信息

在当今的企业级数据中心和高性能计算环境中,存在着很多服务器对同一个设备并发读写的需求。例如在大规模数据分析中,大量服务器需要实时并行处理海量数据,这些服务器集群可能需要频繁地对同一份数据库或数据集进行并发的读写操作,以提高整体的数据处理速度和效率。一种传统的解决方案是采用IP SAN(例如iSCSI协议),将一个硬盘驱动器(HDD或SSD)作为一个共享块设备,挂载在多台服务器上。然而,该方式依赖TCP/IP网络,这意味着网络状况直接影响到存储性能。在网络拥塞或故障时,可能会导致严重的延迟和数据传输中断。此外,管理和维护这样的存储系统也增加了运营成本。相较而言,块存储提供了支持NVMe协议的共享ESSD云盘,该云盘可以同时挂载在多个服务器实例上,且具备高可靠、高并发、高性能等特点。

EBS的NVMe共享盘部署集群文件系统涉及一些概念说明,请参见NVMe协议介绍。

功能优势

<a href='https://aliyun.58g.com.cn' target='_blank' title='阿里云'><strong>阿里云</strong></a>服务器 wordpress__<a href='https://aliyun.58g.com.cn' target='_blank' title='阿里云'><strong>阿里云</strong></a>服务器官网__阿里云服务器域名

NVMe和IP SAN在性能、成本、配置和使用场景等方面有各自的特点和优劣,详细说明如下表所示。

   对比类别 IP SAN协议 NVMe协议 

设备管理和映射 需要手动管理和设备映射,但是可以添加较多的设备并挂载在较多的服务器上。 无需手动管理设备和维护设备映射,但NVMe盘当前最多可同时挂载在16台服务器实例上。 

性能 通过TCP/IP网络访问存储,其性能受限于网络带宽。 NVMe专为SSD设计,它利用高速接口进行CPU和SSD间的数据通信,相比SCSI、virtio-blk等传统驱动协议速度更快、传输带宽更高。 

使用场景 适用于一般企业的日常业务需求,特别是当预算有限或对性能要求不是非常高的业务场景。 适用于高性能计算(HPC)、大数据分析、实时数据处理和其他对存储性能有高要求的应用场景。 

计费说明

通过实验室部署基于NVMe盘的集群文件系统服务过程中,会根据使用的阿里云资源(ECS实例、ESSD云盘等)的计费方式进行计费。ECS各资源的计费信息,请参见计费概述。如果您是通过实验室一键部署,创建的实验任务本身不会收费。

说明

实验室一键部署过程中使用到的阿里云资源仅支持按量付费。

部署集群文件系统

手动部署(用于生产环境)

通过实验室一键部署(用于快速验证和测试新特性)

手动部署集群文件系统服务需先购买ECS实例和ESSD NVMe云盘,然后在ECS实例中通过命令部署共享集群文件系统。

操作步骤

创建ECS实例。ECS实例需要满足以下条件:

仅以下实例规格族支持多重挂载功能:g7se、c7se、r7se、c8y、g8y、r8y、g8ae、c8ae、r8ae、g8i、c8i和r8i。更多信息,请参见实例规格族。

仅支持使用Ubuntu 22.04镜像,不支持其他类型的镜像。

ECS实例数量为2~16个,建议您选择两台ECS用于实验验证。

具体操作,请参见自定义购买实例。

购买NVMe数据盘并挂载在已创建的多个ECS实例上。

具体操作,请参见开启多重挂载功能。

远程连接ECS实例。

具体操作,请参见通过密码或密钥认证登录Linux实例。

创建集群文件系统。本示例以两台ECS实例为例。

在所有ECS实例上执行以下命令,更新apt并安装ocfs2-tools工具。

sudo apt update

sudo apt install ocfs2-tools

修改ECS实例的hostname,并配置集群配置文件。

在所有实例上执行以下命令,通过设置hostname来识别不同的ECS实例。

本示例以设置hostname是server1为例,不同实例的hostname不能设置相同。

sudo hostnamectl set-hostname server1

执行以下命令,打开集群文件系统配置文件。

sudo vi /etc/ocfs2/cluster.conf

在文件中输入以下内容。

node:

  ip_port=7777

  ip_address=192.168.0.71

  number=0

  name=server1

  cluster=ocfs2

 

 node:

   ip_port=7777

   ip_address=192.168.0.70

   number=1

   name=server2

   cluster=ocfs2

 

  cluster:

     node_count=2

     name=ocfs2

请将ip_address替换为您实际环境的私有IP地址,请将name设置为您上一个步骤设置的hostname,node_count替换为您实际ECS实例的个数。




阿里云数据解决方案[39] 阿里云是什么[38] 阿里云产品报价[36] 阿里云产品介绍[35] 阿里云解决方案[35] 阿里公有云介绍[35] 云规划设计与实施服务[34] 阿里公有云产品[34] 云与计算培训服务[30] 阿里云优势[30] 阿里云官网登陆[30] 阿里云服务器配置[30] 阿里私有云搭建方案[30] 云与计算咨询服务[28] 阿里云服务器[28] 阿里云服务器成功案例[28] 公有云私有云混合云[27] 阿里云官网[27] 阿里公有云提供哪些计算服务[27] 阿里弹性云服务器[27] 阿里云智慧教育解决方案[26] 阿里公有云官网[26] 阿里公有云服务[26] 阿里私有云方案[26] 大数据使能服务[25] 阿里云园区解决方案[25] 阿里私有云平台[25] 阿里云服务器试用[24] 云迁移与运营支撑服务[21] 阿里私有云架构[20] 阿里私有云解决方案[20] 阿里云提供的服务[18] 阿里云智慧制造解决方案[18] 阿里云服务总代理[18] 阿里云云主机[17] 阿里云安全[17] 阿里私有云[17] 阿里云服务服务中心[16] 阿里云服务核心分销商[16] 阿里公有云架构解决方案[16] 阿里私有云搭建[16] 阿里云备份[15] 阿里云服务器ECS[15] 阿里云软件开发服务[15] 阿里公有云行业解决方案[15] 阿里私有云服务[15] 阿里私有云的搭建方案[15] 阿里私有云网格结构[15] 阿里私有云部署架构[15] 阿里云智慧校园解决方案[14] 阿里云漏洞扫描[14] 阿里云网站建设服务器[14] 阿里云邮箱[14] 阿里云块存储[13] 阿里云弹性云服务器应用[13] 阿里云数据库[13] 阿里云服务器应用[13] 阿里云桌面系统集成商[13] 阿里云迁移解决方案[13] 云与计算客户支持与运维使能服务[12] 阿里云桌面总代理商[12] 阿里云速建站[12] 阿里云产品服务[11] 智慧教育云平台解决方案[10] 阿里云场景化解决方案[10] 阿里云域名注册[10] 阿里云速智能客服[10] 阿里公有云架构[10] 阿里智慧云课堂解决方案[10] 阿里公有云视讯解决方案[9] 阿里私有云产品有哪些[9] 智慧教育云计算解决方案[8] 阿里公有云平台[8] 阿里公有云解决方案[8] 阿里公有云通用解决方案[8] 阿里私有云服务器[8] 阿里云智慧***解决方案[6] 阿里公有云和私有云区别[6] [5] 云与计算客户支持服务[5] 云盘基础操作[5] 阿里公有云是什么[5] 阿里公有云解决方案服务定制领导者[5] 阿里私有云解决方案服务定制领导者[5] 阿里虚拟私有云vpc[5] 扩容云盘[4] 阿里云HTTPS加密访问[4] 阿里云共建智能世界云底座[4] 阿里云域名解析[4] 阿里云应用镜像(13款)[4] 阿里公有云[4] 大数据使能服务[3] 阿里云园区解决方案[3] 阿里公有云产品[3] 加密云盘[3] 阿里云代理公司有哪些[3] 阿里云官网网站[3] 阿里云手机代理加盟[3] 阿里云经销商[3] 阿里公有云专属云主机DeH服务[3] 阿里云官网[2] 阿里云解决方案[2] 阿里公有云架构[2] 阿里私有云搭建[2] 云规划设计与实施服[2] 阿里云企业邮箱服务[2] 阿里云企业邮箱服务 (SAAS,云邮箱)[2] 阿里云数据解决方案 [2] 智慧教育云计算解决方案[1] 阿里云产品服务[1] 阿里云域名注册[1] 云与计算咨询服务[1] 阿里云云主机[1] 阿里云产品报价[1] 阿里云产品服务[1] 阿里云优势[1] 阿里云智慧制造解决方案[1] 阿里云智慧校园解决方案[1] 阿里云服务器ECS[1] 阿里云服务器应用[1] 阿里云服务器成功案例[1] 阿里云服务器试用[1] 阿里云服务器配置[1] 阿里云服务核心分销商 [1] 阿里云速智能客服[1] 阿里公有云平台[1] 阿里私有云搭建方案[1] HTTPS加密访问(CA证书)[1] 专属块存储集群[1] 专属块存储集群概述[1] 主机新用户使用指南[1] 云盘加密概述[1] 云盘扩容指引[1] 修改云盘标签[1] 加密数据盘[1] 加密系统盘[1] 单实例[1] 卸载或挂载系统盘[1] 卸载数据盘[1] 基础环境配置[1] 如何选购云虚拟主机[1] 快照灵活易用[1] 扩容云盘容量[1] 扩容分区和文件系统(Windows)[1] 提供DDoS防护[1] 撒[1] 最新一代CIPU网络[1] 查看磁盘序列号[1] 网站开通要素[1] 腾讯云园区解决方案[1] 腾讯云数据解决方案[1] 腾讯云解决方案[1] 转换MBR分区为GPT分区[1] 释放云盘[1] 镜像跨地域无缝迁移[1] 阿里云[1] 阿里云主备架构[1] 阿里云产品报价 云规划设计与实施服务[1] 阿里云企业级能力[1] 阿里云原生MySQL生态[1] 阿里云原生数据库 PolarDB[1] 阿里云备份恢复[1] 阿里云官方网站,网络安全隔离[1] 阿里云客户端[1] 阿里云故障切换[1] 阿里云数据传输服务 DTS[1] 阿里云数据库 MongoDB 版[1] 阿里云数据库 RDS MySQL 版[1] 阿里云数据库自治服务 DAS[1] 阿里云数据管理 DMS[1] 阿里云智慧解决方案[1] 阿里云智慧***解决方案[1] 阿里云服务器ECS[1] 阿里云自动分区[1] 阿里云解决方案 [1] 阿里云速智能客服 阿里私有云 阿里私有云解决方案[1] 阿里公有云架[1] 阿里私有云产品有什么[1] 阿里私有云搭建 [1] 高级环境配置(Linux操作系统)[1] 高级环境配置(Windows操作系统)[1]