AWS:还在烦恼如何部署文件存储?瞧,您的高性

时间:2021-07-15 | 标签: | 作者:Q8 | 来源:AWS云计算网络

小提示:您能找到这篇{AWS:还在烦恼如何部署文件存储?瞧,您的高性}绝对不是偶然,我们能帮您找到潜在客户,解决您的困扰。如果您对本页介绍的AWS:还在烦恼如何部署文件存储?瞧,您的高性内容感兴趣,有相关需求意向欢迎拨打我们的服务热线,或留言咨询,我们将第一时间联系您!

< ">重磅通知

< ">< color: rgb(247, 150, 70);">Amazon FSx for Lustre及< color: rgb(247, 150, 70);">Amazon FSx for Windows File Server现已在由光环新网运营的Amazon Web Services(AWS)中国(北京)区域和西云数据运营的AWS中国(宁夏)区域推出。

Amazon FSx for Lustre

< ">Amazon FSx for Lustre是一项完全托管的高性能文件存储服务,可为计算密集型工作负载提供经济高效的高性能存储。机器学习、高性能计算(HPC)、电子设计自动化(EDA),生命科学,自动驾驶和视频渲染等许多工作负载都需要高性能共享存储来实现快速的数据处理和分析。

< ">Amazon FSx for Lustre可提供亚毫秒级延迟、高达每秒数百GB的吞吐量和百万级的IOPS。它提供了多种部署选项以及包括机械硬盘和固态硬盘的存储类型,可以根据您的工作负载需求优化成本和性能。

< ">Amazon FSx for Lustre文件系统也可以链接到Amazon Simple Storage Service(Amazon S3)存储桶,使您可以同时从高性能文件系统和S3 API快速访问和处理数据。

Amazon FSx for Windows File Server

< ">Amazon FSx for Windows File Server提供了完全托管、高度可靠且可扩展的文件存储,可通过行业标准的SMB协议进行访问。它在Windows Server上构建,提供了用户配额、用户文件备份和恢复,以及Microsoft Active Directory(AD)集成等众多管理功能。

< ">Amazon FSx for Windows File Server提供单可用区和多可用区部署选项、完全托管的备份功能,支持数据加密。您可以针对工作负载选择使用SSD和HDD存储选项需求优化成本和性能,并且可以随时扩展存储和更改文件系统的吞吐量性能。您可通过部署在AWS上的Windows、Linux和MacOS计算实例或本地机房运行的设备访问Amazon FSx文件存储。

< ">Amazon FSx for Lustre

< ">产品优势

< ">< color: rgb(247, 150, 70);">高性能和可扩展

< ">Amazon FSx for Lustre提供的性能可以满足各种高性能作负载的要求。Lustre文件系统针对数据处理进行了优化,提供亚毫秒级延迟,和可扩展至每秒数百GB的吞吐量。只需单击几下,即可实现数以万计的计算实例同时访问高性能共享存储。

与对象存储Amazon S3高度集成

< ">Amazon FSx for Lustre使您可以轻松地在Amazon S3中处理数据集。当链接到Amazon S3存储桶时,Amazon FSx for Lustre以透明方式将对象显示为文件,从而使您可以运行工作负载,而无需花费时间和精力管理来自Amazon S3的数据传输。随着Amazon S3存储桶中内容的变化,Amazon FSx for Lustre会自动更新文件系统,提供最新数据来运行工作负载。

经济高效

< ">Amazon FSx for Lustre提供了多种存储选项,以优化价格和性能。固态硬盘(SSD)存储针对延迟敏感型工作负载进行了优化。机械硬盘(HDD)存储针对以吞吐量为中心的工作负载进行了优化。您还可以选择多种部署模式,以进一步降低数据处理的成本。

简单且完全托管

< ">Amazon FSx for Lustre让您可以轻松在云中启动和运行高性能的Lustre文件系统。您无需担心硬件预配置和维护、软件安装、补丁更新,备份管理,以及复杂的文件系统性能优化等问题。只需几分钟,您就可以使用AWS管理控制台、AWS Command Line Interface(AWS CLI)或AWS开发工具包创建并启动Amazon FSx for Lustre文件系统。

全面兼容各类Linux工作负载

< ">Amazon FSx for Lustre兼容POSIX标准,因此您可以使用当前基于Linux的应用程序访问高性能存储,无需进行任何更改。Amazon FSx for Lustre提供原生文件系统接口,支持文件锁定,保证数据一致性。您可以从Amazon EC2实例、Amazon Elastic Kubernetes Service(Amazon EKS)集群访问您的文件系统,也可通过AWS Direct Connect或AWS VPN从本地数据中心访问文件系统。

安全合规

< ">Amazon FSx for Lustre支持数据加密,符合PCI-DSS、ISO和SOC标准以及HIPAA的规定,保证您的数据存放安全合规。您也可以通过POSIX权限或Amazon Virtual Private Cloud(VPC)安全组规则来管理访问控制。

< ">News

< ">Amazon FSx for Lustre使用场景

机器学习

< ">机器学习通常需要多个计算实例同时访问大批量训练数据,Amazon FSx for Lustre提供处理机器学习数据集训练所需的共享文件存储,具有高吞吐量、高一致性和低延迟的特点,是机器学习工作负载的极佳选择。Amazon FSx for Lustre与Amazon SageMaker集成,让您可以加速机器学习训练。

高性能计算

< ">高性能计算(HPC)让科学家和工程师们能够解决复杂的计算密集型问题。HPC工作负载需要处理大量数据,如仿真建模,生命科学等,这些数据需要由具有高吞吐量的多个计算实例同时访问和处理。Amazon FSx for Lustre提供面向高性能工作负载和成本优化的文件系统,能支持数以千计的Amazon EC2实例访问,是HPC和科学计算工作负载的理想选择。Amazon FSx for Lustre与AWS ParallelCluster和AWS Batch集成,让您可以轻松处理HPC工作负载。

媒体制作和转码

< ">视频渲染、视觉效果和媒体制作等媒体数据处理工作需要使用计算和存储资源来处理大量数据。Amazon FSx for Lustre可以实现处理、分发和分析大量媒体文件所需的高性能和低延迟。

自动驾驶训练

< ">自动驾驶汽车系统通过对大量汽车传感器和摄像头数据进行仿真和训练来测试模型,以确保汽车驾驶安全。借助Amazon FSx for Lustre,您可以实现数以千计的高性能节点同时访问训练数据,让您更轻松地大规模运行自动驾驶模拟训练。

大数据分析

< ">大数据分析项目需要处理海量数据,需要高性能存储才能支持数据密集型应用程序。处理不断增长的数据可能成本极高、十分复杂。Amazon FSx for Lustre可以大规模处理海量数据,同时提供多种高性能和成本优化的部署模式,可以让您的组织更高效地完成数据分析作业并发现数据价值。

电子设计自动化

< ">电子设计自动化(EDA)是一种高性能应用程序,用于在芯片设计阶段模拟性能和故障。Amazon FSx for Lustre提供的性能和灵活性使您能够更快地创新、设计和验证新产品,并根据需要进行扩展。

快速上手Amazon FSx for Lustre

< ">登入Amazon FSx控制台,选择创建文件系统,启动文件系统创建向导。

< ">可以按需选择需要的硬盘类型SSD和HDD,设置吞吐量和存储容量。



< ">选择要与文件系统关联的VPC和安全组;



< ">选择用于在您的文件系统上对静态中的数据进行加密;

< ">选择从Amazon S3导入数据并导出数据(可选);

< ">配置Amazon FSx for Lustre的备份维护窗口;

< ">查看创建文件系统摘要并创建文件系统;

< ">在您的实例上安装和配置Lustre客户端。这里我们使用Amazon Linux 2作为客户端。

< ">在客户端上打开终端。通过运行以下命令,确定当前在计算实例上运行的内核。

< ">uname-r

< ">命令返回4.14.104-95.84.amzn2.x86_64基于x86的Amazon EC2实例,或4.14.181-142.260.amzn2.aarch64基于Graviton2的Amazon EC2实例,或更高,请使用以下命令下载并安装Lustre客户端。

< ">sudo amazon-linux-extras install-y lustre2.10

< ">将Amazon FSx for Lustre文件系统挂载到您所创建的目录中。使用以下命令并替换以下内容:

< ">更换file_system_dns_name使用实际文件系统的域名系统(DNS)名称。

< ">更换mountname使用文件系统的挂载名称,您可以通过运行describe-file-systems AWS CLI命令或文件系统API操作。

< ">sudo mount-t lustre-o noatime,flock file_system_dns_name tcp:/mountname/mnt/fsx

< ">使用以下命令,通过列出您挂载文件系统/mnt/fsx的目录内容,验证挂载命令是否成功;

< ">通过以上简单的步骤我们即可以创建一个完全托管的,高度可靠且可扩展的Lustre文件系统。

< ">Amazon FSx for

< ">Windows File Server优势

< ">< color: rgb(247, 150, 70);">基于Windows Server构建而成

< ">Amazon FSx for Windows File Server是构建在Windows Server的完全托管文件存储服务,提供了丰富的管理功能,其中包括最终用户文件恢复、用户配额和访问控制列表(ACL)等。基于Windows Server对SMB协议的源生支持,Amazon FSx for Windows File Server与Windows应用程序完全兼容。Linux和MacOS操作系统也可以通过SMB协议访问Amazon FSx for Windows File Server共享文件存储。

< ">< color: rgb(247, 150, 70);">简单且完全托管

< ">您不再需要花费时间和精力设置和管理文件服务器,存储卷、复制数据、安装软件更新和补丁、管理故障转移和故障恢复以及手动执行备份等工作。您可以通过AWS管理控制台、AWS CLI或AWS开发工具包在几分钟之内轻松地创建单个可用区或跨多个可用区的完全托管共享文件系统。Amazon舆论 FSx for Windows File Server还提供自动持久性备份服务。

云上低成本的SMB文件存储

< ">使用Amazon FSx for Windows File Server,您可以获得高可用、持久性的文件存储,根据业务需求的不同,可以选择HDD或者SSD存储介质。同时借助于数据去重功能,您可以通过冗余数据消重技术来进一步优化成本。您可以随时提高文件系统存储和扩展吞吐容量,从而轻松应对不断变化的业务需求,没有预置成本或许可证费用。

高性能和灵活部署

< ">Amazon FSx for Windows File Server提供多种存储选项,让您可以选择适合您的文件系统的吞吐量水平并可以随时对它进行更改。通过使用DFS Namespaces,您可以扩展至每秒数十GB的带宽、百万级IOPS以及数百PB数据的处理性能。

安全与合规

< ">Amazon FSx for Windows File Server可提供多级别的安全和合规来确保您的数据安全。支持数据加密,符合ISO、PCI-DSS、SOC认证,以及HIPAA标准。通过AWS CloudTrail日志您可以追踪到用户在文件系统中中所采取的所有操作记录。为了控制用户访问,Amazon FSx for Windows File Server可以与您的本地Microsoft Active Directory(AD)或者AWS Microsoft Managed AD集成。

多操作系统支持

< ">通过标准的SMB协议,Amazon FSx for Windows File Server可为Amazon EC2、VMware Cloud on AWS、Amazon WorkSpaces和Amazon AppStream 2.0实例提供共享文件存储服务。Amazon FSx for Windows File Server支持所有的Windows版本包括Windows Server 2008和Windows 7,以及当前的Linux和MacOS版本。客户本地机房的设备也可以通过AWS Direct Connect或AWS VPN等服务访问Amazon FSx for Windows File Server。

< ">Amazon FSx for

< ">Windows File Server使用场景

用户主目录

< ">很多公司在实际使用中会构建组织的主目录或者共享目录,这些组织通常需要向成千上万的用户共享常用数据集。您可以使用Amazon FSx for Windows File Server创建可以被成千上万用户访问的文件系统,并可以实现文件或文件夹级别的权限访问控制。

Windows应用程序迁移

< ">许多基于Windows系统的业务关键型应用程序和工作负载,例如ERP、CRM等都需要通过SMB协议访问基于Windows的共享文件系统。Amazon FSx for Windows File Server基于Windows Server构建而成,可提供应用程序所需的全面兼容Windows功能和性能的文件存储服务,同时支持Microsoft AD集成和自动备份等多种功能,您可以轻松地将基于文件存储的应用程序迁移至AWS。

高可用的Microsoft SQL Server部署

< ">Amazon FSx for Windows File Server作为全托管的文件系统,支持多可用区部署,可为运行关键业务的Microsoft SQL Server数据库提供高可用和持久性的共享文件存储。Amazon FSx for Windows File Server可以自动处理数据复制和故障转移,从而简化数据库部署所需的共享存储管理并能够有效降低成本。

媒体工作流

< ">媒体转码、处理和流媒体等工作流通常依赖于性能一致的共享文件存储。Amazon FSx for Windows File Server可为这些应用程序和工作负载提供高吞吐、低延迟共享文件系统。

Web服务和内容管理

< ">企业内容管理和Web服务应用程序如Microsoft Internet Information Services(IIS)和WordPress等需要存储和处理文件,多个Web或内容服务器通常需要访问同一文件,都需要使用共享文件存储。Amazon FSx for Windows File Server可为这些工作负载提供成千上万个实例同时访问的共享文件存储。

数据分析业务

< ">数据分析应用程序使用来自多种数据源的大量数据,且通常需要成千上万的计算实例访问和分析数据。Amazon FSx for Windows File Server可支持运行数据密集型分析工作负载,包括商业智能和数据可视化应用程序,为这些工作负载提供高吞吐、低延迟的可扩展文件系统。

快速上手Amazon FSx for

Windows File Server

< ">网络环境准备

< ">VPC CIDR:10.100.0.0/16

< ">Subnet1:10.100.0.0/24

< ">Subnet2:10.100.1.0/24

< ">配置安全组以允许Windows实例通过SMB协议访问文件系统;

< ">目录服务

< ">当用户创建文件系统时,您可以将Amazon FSx for Windows File Server加入到Microsoft Active Directory域以提供用户身份验证以及实现文件和文件夹级别的访问控制。Amazon FSx for Windows File Server支持两种类型的Active Directory:Di推广营销目标rectory Service中的AWS Managed Microsoft AD或者用户自建的AD。在这里我们使用托管的AWS Managed Microsoft AD作为目录类型,我们预先在Directory Service中创建好Managed Microsoft AD,关于目录的创建步骤可以参考下方文档。

< ">创建文件系统

< ">1.登陆AWS控制台并切换到FSx服务,点击创建文件系统并选择Amazon FSx for Windows File Server,点击Next。

< ">2.在文件系统详细配置页面,输入文件系统名称、可用区部署模式、存储类型、存储容量和吞吐能力,在此次测试中我们选择多单可用区部署模式,200G SSD类型存储并使用默认吞吐量。

< ">3.在网络与安全配置选项中我们选择之前创建的VPC,安全组和文件系统所在的子网。

< ">4.在Windows Authentication配置选项中我们选择之前创建的AWS Managed AD,用户也可以根据自己的实际情况选择用户自己管理的AD。加密选项中我们选择默认的KMS密钥来对文件系统进行加密。

< ">5.点击下一步会出现Summary页面,继续点击页面右下角创建文件系统进行文件系统的创建。

< ">6.切换到Amazon FSx服务页面我们可以看到系统系统正在创建,等待几分钟待文件系统创建完毕后我们可以点击文件系统名称查看文件系统的相关信息,如下图所示,记录文件系统的DNS名称,后续连接文件系统中会用到此地址。

< ">准备Windows实例并连接Amazon FSx for Windows File Server文件系统

< ">1.创建一台Windows实例,并加入我们之前创建的AD域,关于加域的方式可以使用手动或者无缝加域的方式来完成。

< ">2.通过RDP的方式远程连接到此Windows实例,打开File Explorer,右键点击This PC,在弹出的菜单中选择Map network drive…

< ">3.在配置窗口中我们输入之前创建的文件系统的DNS名称,格式如下图所示,点击Finish即可完成文件系统的映射,挂载成功后用户即可以创建文件。

< ">通过以上简单的步骤我们即可以创建一个完全托管的,高度可靠且可扩展的文件系统,如果您想体验更多高级的功能,快登录AWS管理控制台吧

AWS:还在烦恼如何部署文件存储?瞧,您的高性

上一篇:TikTok能给亚马逊卖家运营带来什么?
下一篇:2020谷歌商家如何快速有效解决GMC被封问题?中国


版权声明:以上主题为“AWS:还在烦恼如何部署文件存储?瞧,您的高性"的内容可能是本站网友自行发布,或者来至于网络。如有侵权欢迎联系我们客服QQ处理,谢谢。
相关内容
推荐内容
扫码咨询
    AWS:还在烦恼如何部署文件存储?瞧,您的高性
    打开微信扫码或长按识别二维码

小提示:您应该对本页介绍的“AWS:还在烦恼如何部署文件存储?瞧,您的高性”相关内容感兴趣,若您有相关需求欢迎拨打我们的服务热线或留言咨询,我们尽快与您联系沟通AWS:还在烦恼如何部署文件存储?瞧,您的高性的相关事宜。

关键词:AWS:还在烦恼如何部署文

关于 | 业务 | 案例 | 免责 | 隐私
客服邮箱:sales@1330.com.cn
电话:400-021-1330 | 客服QQ:865612759
沪ICP备12034177号 | 沪公网安备31010702002418号