AWS：還在煩惱如何部署文件存儲(chǔ)？瞧，您的高性能存儲(chǔ)神器已上線！

重磅通知

Amazon FSx for Lustre及Amazon FSx for Windows File Server現(xiàn)已在由光環(huán)新網(wǎng)運(yùn)營的Amazon Web Services(AWS)中國（北京）區(qū)域和西云數(shù)據(jù)運(yùn)營的AWS中國（寧夏）區(qū)域推出。

Amazon FSx for Lustre

Amazon FSx for Lustre是一項(xiàng)完全托管的高性能文件存儲(chǔ)服務(wù)，可為計(jì)算密集型工作負(fù)載提供經(jīng)濟(jì)高效的高性能存儲(chǔ)。機(jī)器學(xué)習(xí)、高性能計(jì)算(HPC)、電子設(shè)計(jì)自動(dòng)化（EDA），生命科學(xué)，自動(dòng)駕駛和視頻渲染等許多工作負(fù)載都需要高性能共享存儲(chǔ)來實(shí)現(xiàn)快速的數(shù)據(jù)處理和分析。

Amazon FSx for Lustre可提供亞毫秒級(jí)延遲、高達(dá)每秒數(shù)百GB的吞吐量和百萬級(jí)的IOPS。它提供了多種部署選項(xiàng)以及包括機(jī)械硬盤和固態(tài)硬盤的存儲(chǔ)類型，可以根據(jù)您的工作負(fù)載需求優(yōu)化成本和性能。

Amazon FSx for Lustre文件系統(tǒng)也可以鏈接到Amazon Simple Storage Service(Amazon S3)存儲(chǔ)桶，使您可以同時(shí)從高性能文件系統(tǒng)和S3 API快速訪問和處理數(shù)據(jù)。

Amazon FSx for Windows File Server

Amazon FSx for Windows File Server提供了完全托管、高度可靠且可擴(kuò)展的文件存儲(chǔ)，可通過行業(yè)標(biāo)準(zhǔn)的SMB協(xié)議進(jìn)行訪問。它在Windows Server上構(gòu)建，提供了用戶配額、用戶文件備份和恢復(fù)，以及Microsoft Active Directory(AD)集成等眾多管理功能。

Amazon FSx for Windows File Server提供單可用區(qū)和多可用區(qū)部署選項(xiàng)、完全托管的備份功能，支持?jǐn)?shù)據(jù)加密。您可以針對(duì)工作負(fù)載選擇使用SSD和HDD存儲(chǔ)選項(xiàng)需求優(yōu)化成本和性能，并且可以隨時(shí)擴(kuò)展存儲(chǔ)和更改文件系統(tǒng)的吞吐量性能。您可通過部署在AWS上的Windows、Linux和MacOS計(jì)算實(shí)例或本地機(jī)房運(yùn)行的設(shè)備訪問Amazon FSx文件存儲(chǔ)。

Amazon FSx for Lustre

產(chǎn)品優(yōu)勢(shì)

高性能和可擴(kuò)展

Amazon FSx for Lustre提供的性能可以滿足各種高性能作負(fù)載的要求。Lustre文件系統(tǒng)針對(duì)數(shù)據(jù)處理進(jìn)行了優(yōu)化，提供亞毫秒級(jí)延遲，和可擴(kuò)展至每秒數(shù)百GB的吞吐量。只需單擊幾下，即可實(shí)現(xiàn)數(shù)以萬計(jì)的計(jì)算實(shí)例同時(shí)訪問高性能共享存儲(chǔ)。

與對(duì)象存儲(chǔ)Amazon S3高度集成

Amazon FSx for Lustre使您可以輕松地在Amazon S3中處理數(shù)據(jù)集。當(dāng)鏈接到Amazon S3存儲(chǔ)桶時(shí)，Amazon FSx for Lustre以透明方式將對(duì)象顯示為文件，從而使您可以運(yùn)行工作負(fù)載，而無需花費(fèi)時(shí)間和精力管理來自Amazon S3的數(shù)據(jù)傳輸。隨著Amazon S3存儲(chǔ)桶中內(nèi)容的變化，Amazon FSx for Lustre會(huì)自動(dòng)更新文件系統(tǒng)，提供最新數(shù)據(jù)來運(yùn)行工作負(fù)載。

經(jīng)濟(jì)高效

Amazon FSx for Lustre提供了多種存儲(chǔ)選項(xiàng)，以優(yōu)化價(jià)格和性能。固態(tài)硬盤(SSD)存儲(chǔ)針對(duì)延遲敏感型工作負(fù)載進(jìn)行了優(yōu)化。機(jī)械硬盤(HDD)存儲(chǔ)針對(duì)以吞吐量為中心的工作負(fù)載進(jìn)行了優(yōu)化。您還可以選擇多種部署模式，以進(jìn)一步降低數(shù)據(jù)處理的成本。

簡單且完全托管

Amazon FSx for Lustre讓您可以輕松在云中啟動(dòng)和運(yùn)行高性能的Lustre文件系統(tǒng)。您無需擔(dān)心硬件預(yù)配置和維護(hù)、軟件安裝、補(bǔ)丁更新，備份管理，以及復(fù)雜的文件系統(tǒng)性能優(yōu)化等問題。只需幾分鐘，您就可以使用AWS管理控制臺(tái)、AWS Command Line Interface(AWS CLI)或AWS開發(fā)工具包創(chuàng)建并啟動(dòng)Amazon FSx for Lustre文件系統(tǒng)。

全面兼容各類Linux工作負(fù)載

Amazon FSx for Lustre兼容POSIX標(biāo)準(zhǔn)，因此您可以使用當(dāng)前基于Linux的應(yīng)用程序訪問高性能存儲(chǔ)，無需進(jìn)行任何更改。Amazon FSx for Lustre提供原生文件系統(tǒng)接口，支持文件鎖定，保證數(shù)據(jù)一致性。您可以從Amazon EC2實(shí)例、Amazon Elastic Kubernetes Service(Amazon EKS)集群訪問您的文件系統(tǒng)，也可通過AWS Direct Connect或AWS VPN從本地?cái)?shù)據(jù)中心訪問文件系統(tǒng)。

安全合規(guī)

Amazon FSx for Lustre支持?jǐn)?shù)據(jù)加密，符合PCI-DSS、ISO和SOC標(biāo)準(zhǔn)以及HIPAA的規(guī)定，保證您的數(shù)據(jù)存放安全合規(guī)。您也可以通過POSIX權(quán)限或Amazon Virtual Private Cloud(VPC)安全組規(guī)則來管理訪問控制。

News

Amazon FSx for Lustre使用場(chǎng)景

·機(jī)器學(xué)習(xí)

機(jī)器學(xué)習(xí)通常需要多個(gè)計(jì)算實(shí)例同時(shí)訪問大批量訓(xùn)練數(shù)據(jù)，Amazon FSx for Lustre提供處理機(jī)器學(xué)習(xí)數(shù)據(jù)集訓(xùn)練所需的共享文件存儲(chǔ)，具有高吞吐量、高一致性和低延遲的特點(diǎn)，是機(jī)器學(xué)習(xí)工作負(fù)載的極佳選擇。Amazon FSx for Lustre與Amazon SageMaker集成，讓您可以加速機(jī)器學(xué)習(xí)訓(xùn)練。

·高性能計(jì)算

高性能計(jì)算(HPC)讓科學(xué)家和工程師們能夠解決復(fù)雜的計(jì)算密集型問題。HPC工作負(fù)載需要處理大量數(shù)據(jù)，如仿真建模，生命科學(xué)等，這些數(shù)據(jù)需要由具有高吞吐量的多個(gè)計(jì)算實(shí)例同時(shí)訪問和處理。Amazon FSx for Lustre提供面向高性能工作負(fù)載和成本優(yōu)化的文件系統(tǒng)，能支持?jǐn)?shù)以千計(jì)的Amazon EC2實(shí)例訪問，是HPC和科學(xué)計(jì)算工作負(fù)載的理想選擇。Amazon FSx for Lustre與AWS ParallelCluster和AWS Batch集成，讓您可以輕松處理HPC工作負(fù)載。

·媒體制作和轉(zhuǎn)碼

視頻渲染、視覺效果和媒體制作等媒體數(shù)據(jù)處理工作需要使用計(jì)算和存儲(chǔ)資源來處理大量數(shù)據(jù)。Amazon FSx for Lustre可以實(shí)現(xiàn)處理、分發(fā)和分析大量媒體文件所需的高性能和低延遲。

·自動(dòng)駕駛訓(xùn)練

自動(dòng)駕駛汽車系統(tǒng)通過對(duì)大量汽車傳感器和攝像頭數(shù)據(jù)進(jìn)行仿真和訓(xùn)練來測(cè)試模型，以確保汽車駕駛安全。借助Amazon FSx for Lustre，您可以實(shí)現(xiàn)數(shù)以千計(jì)的高性能節(jié)點(diǎn)同時(shí)訪問訓(xùn)練數(shù)據(jù)，讓您更輕松地大規(guī)模運(yùn)行自動(dòng)駕駛模擬訓(xùn)練。

·大數(shù)據(jù)分析

大數(shù)據(jù)分析項(xiàng)目需要處理海量數(shù)據(jù)，需要高性能存儲(chǔ)才能支持?jǐn)?shù)據(jù)密集型應(yīng)用程序。處理不斷增長的數(shù)據(jù)可能成本極高、十分復(fù)雜。Amazon FSx for Lustre可以大規(guī)模處理海量數(shù)據(jù)，同時(shí)提供多種高性能和成本優(yōu)化的部署模式，可以讓您的組織更高效地完成數(shù)據(jù)分析作業(yè)并發(fā)現(xiàn)數(shù)據(jù)價(jià)值。

·電子設(shè)計(jì)自動(dòng)化

電子設(shè)計(jì)自動(dòng)化(EDA)是一種高性能應(yīng)用程序，用于在芯片設(shè)計(jì)階段模擬性能和故障。Amazon FSx for Lustre提供的性能和靈活性使您能夠更快地創(chuàng)新、設(shè)計(jì)和驗(yàn)證新產(chǎn)品，并根據(jù)需要進(jìn)行擴(kuò)展。

快速上手Amazon FSx for Lustre

登入Amazon FSx控制臺(tái)，選擇創(chuàng)建文件系統(tǒng)，啟動(dòng)文件系統(tǒng)創(chuàng)建向?qū)А?/span>

可以按需選擇需要的硬盤類型SSD和HDD，設(shè)置吞吐量和存儲(chǔ)容量。

選擇要與文件系統(tǒng)關(guān)聯(lián)的VPC和安全組；

選擇用于在您的文件系統(tǒng)上對(duì)靜態(tài)中的數(shù)據(jù)進(jìn)行加密；

選擇從Amazon S3導(dǎo)入數(shù)據(jù)并導(dǎo)出數(shù)據(jù)（可選）；

配置Amazon FSx for Lustre的備份維護(hù)窗口；

查看創(chuàng)建文件系統(tǒng)摘要并創(chuàng)建文件系統(tǒng)；

在您的實(shí)例上安裝和配置Lustre客戶端。這里我們使用Amazon Linux 2作為客戶端。

在客戶端上打開終端。通過運(yùn)行以下命令,確定當(dāng)前在計(jì)算實(shí)例上運(yùn)行的內(nèi)核。

uname-r

命令返回4.14.104-95.84.amzn2.x86_64基于x86的Amazon EC2實(shí)例，或4.14.181-142.260.amzn2.aarch64基于Graviton2的Amazon EC2實(shí)例，或更高，請(qǐng)使用以下命令下載并安裝Lustre客戶端。

sudo amazon-linux-extras install-y lustre2.10

將Amazon FSx for Lustre文件系統(tǒng)掛載到您所創(chuàng)建的目錄中。使用以下命令并替換以下內(nèi)容：

更換file_system_dns_name使用實(shí)際文件系統(tǒng)的域名系統(tǒng)(DNS)名稱。

更換mountname使用文件系統(tǒng)的掛載名稱，您可以通過運(yùn)行describe-file-systems AWS CLI命令或文件系統(tǒng)API操作。

sudo mount-t lustre-o noatime,flock file_system_dns_name tcp:/mountname/mnt/fsx

使用以下命令，通過列出您掛載文件系統(tǒng)/mnt/fsx的目錄內(nèi)容，驗(yàn)證掛載命令是否成功；

通過以上簡單的步驟我們即可以創(chuàng)建一個(gè)完全托管的，高度可靠且可擴(kuò)展的Lustre文件系統(tǒng)。

Amazon FSx for

Windows File Server優(yōu)勢(shì)

基于Windows Server構(gòu)建而成

Amazon FSx for Windows File Server是構(gòu)建在Windows Server的完全托管文件存儲(chǔ)服務(wù)，提供了豐富的管理功能，其中包括最終用戶文件恢復(fù)、用戶配額和訪問控制列表(ACL)等。基于Windows Server對(duì)SMB協(xié)議的源生支持，Amazon FSx for Windows File Server與Windows應(yīng)用程序完全兼容。Linux和MacOS操作系統(tǒng)也可以通過SMB協(xié)議訪問Amazon FSx for Windows File Server共享文件存儲(chǔ)。

簡單且完全托管

您不再需要花費(fèi)時(shí)間和精力設(shè)置和管理文件服務(wù)器，存儲(chǔ)卷、復(fù)制數(shù)據(jù)、安裝軟件更新和補(bǔ)丁、管理故障轉(zhuǎn)移和故障恢復(fù)以及手動(dòng)執(zhí)行備份等工作。您可以通過AWS管理控制臺(tái)、AWS CLI或AWS開發(fā)工具包在幾分鐘之內(nèi)輕松地創(chuàng)建單個(gè)可用區(qū)或跨多個(gè)可用區(qū)的完全托管共享文件系統(tǒng)。Amazon FSx for Windows File Server還提供自動(dòng)持久性備份服務(wù)。

云上低成本的SMB文件存儲(chǔ)

使用Amazon FSx for Windows File Server，您可以獲得高可用、持久性的文件存儲(chǔ)，根據(jù)業(yè)務(wù)需求的不同，可以選擇HDD或者SSD存儲(chǔ)介質(zhì)。同時(shí)借助于數(shù)據(jù)去重功能，您可以通過冗余數(shù)據(jù)消重技術(shù)來進(jìn)一步優(yōu)化成本。您可以隨時(shí)提高文件系統(tǒng)存儲(chǔ)和擴(kuò)展吞吐容量，從而輕松應(yīng)對(duì)不斷變化的業(yè)務(wù)需求，沒有預(yù)置成本或許可證費(fèi)用。

高性能和靈活部署

Amazon FSx for Windows File Server提供多種存儲(chǔ)選項(xiàng)，讓您可以選擇適合您的文件系統(tǒng)的吞吐量水平并可以隨時(shí)對(duì)它進(jìn)行更改。通過使用DFS Namespaces，您可以擴(kuò)展至每秒數(shù)十GB的帶寬、百萬級(jí)IOPS以及數(shù)百PB數(shù)據(jù)的處理性能。

安全與合規(guī)

Amazon FSx for Windows File Server可提供多級(jí)別的安全和合規(guī)來確保您的數(shù)據(jù)安全。支持?jǐn)?shù)據(jù)加密，符合ISO、PCI-DSS、SOC認(rèn)證，以及HIPAA標(biāo)準(zhǔn)。通過AWS CloudTrail日志您可以追蹤到用戶在文件系統(tǒng)中中所采取的所有操作記錄。為了控制用戶訪問，Amazon FSx for Windows File Server可以與您的本地Microsoft Active Directory(AD)或者AWS Microsoft Managed AD集成。

多操作系統(tǒng)支持

通過標(biāo)準(zhǔn)的SMB協(xié)議，Amazon FSx for Windows File Server可為Amazon EC2、VMware Cloud on AWS、Amazon WorkSpaces和Amazon AppStream 2.0實(shí)例提供共享文件存儲(chǔ)服務(wù)。Amazon FSx for Windows File Server支持所有的Windows版本包括Windows Server 2008和Windows 7，以及當(dāng)前的Linux和MacOS版本?？蛻舯镜貦C(jī)房的設(shè)備也可以通過AWS Direct Connect或AWS VPN等服務(wù)訪問Amazon FSx for Windows File Server。

Amazon FSx for

Windows File Server使用場(chǎng)景

·用戶主目錄

很多公司在實(shí)際使用中會(huì)構(gòu)建組織的主目錄或者共享目錄，這些組織通常需要向成千上萬的用戶共享常用數(shù)據(jù)集。您可以使用Amazon FSx for Windows File Server創(chuàng)建可以被成千上萬用戶訪問的文件系統(tǒng)，并可以實(shí)現(xiàn)文件或文件夾級(jí)別的權(quán)限訪問控制。

·Windows應(yīng)用程序遷移

許多基于Windows系統(tǒng)的業(yè)務(wù)關(guān)鍵型應(yīng)用程序和工作負(fù)載，例如ERP、CRM等都需要通過SMB協(xié)議訪問基于Windows的共享文件系統(tǒng)。Amazon FSx for Windows File Server基于Windows Server構(gòu)建而成，可提供應(yīng)用程序所需的全面兼容Windows功能和性能的文件存儲(chǔ)服務(wù)，同時(shí)支持Microsoft AD集成和自動(dòng)備份等多種功能，您可以輕松地將基于文件存儲(chǔ)的應(yīng)用程序遷移至AWS。

·高可用的Microsoft SQL Server部署

Amazon FSx for Windows File Server作為全托管的文件系統(tǒng)，支持多可用區(qū)部署，可為運(yùn)行關(guān)鍵業(yè)務(wù)的Microsoft SQL Server數(shù)據(jù)庫提供高可用和持久性的共享文件存儲(chǔ)。Amazon FSx for Windows File Server可以自動(dòng)處理數(shù)據(jù)復(fù)制和故障轉(zhuǎn)移，從而簡化數(shù)據(jù)庫部署所需的共享存儲(chǔ)管理并能夠有效降低成本。

·媒體工作流

媒體轉(zhuǎn)碼、處理和流媒體等工作流通常依賴于性能一致的共享文件存儲(chǔ)。Amazon FSx for Windows File Server可為這些應(yīng)用程序和工作負(fù)載提供高吞吐、低延遲共享文件系統(tǒng)。

·Web服務(wù)和內(nèi)容管理

企業(yè)內(nèi)容管理和Web服務(wù)應(yīng)用程序如Microsoft Internet Information Services(IIS)和WordPress等需要存儲(chǔ)和處理文件，多個(gè)Web或內(nèi)容服務(wù)器通常需要訪問同一文件，都需要使用共享文件存儲(chǔ)。Amazon FSx for Windows File Server可為這些工作負(fù)載提供成千上萬個(gè)實(shí)例同時(shí)訪問的共享文件存儲(chǔ)。

·數(shù)據(jù)分析業(yè)務(wù)

數(shù)據(jù)分析應(yīng)用程序使用來自多種數(shù)據(jù)源的大量數(shù)據(jù)，且通常需要成千上萬的計(jì)算實(shí)例訪問和分析數(shù)據(jù)。Amazon FSx for Windows File Server可支持運(yùn)行數(shù)據(jù)密集型分析工作負(fù)載，包括商業(yè)智能和數(shù)據(jù)可視化應(yīng)用程序，為這些工作負(fù)載提供高吞吐、低延遲的可擴(kuò)展文件系統(tǒng)。

快速上手Amazon FSx for

Windows File Server

·網(wǎng)絡(luò)環(huán)境準(zhǔn)備

VPC CIDR:10.100.0.0/16

Subnet1:10.100.0.0/24

Subnet2:10.100.1.0/24

配置安全組以允許Windows實(shí)例通過SMB協(xié)議訪問文件系統(tǒng)；

·目錄服務(wù)

當(dāng)用戶創(chuàng)建文件系統(tǒng)時(shí)，您可以將Amazon FSx for Windows File Server加入到Microsoft Active Directory域以提供用戶身份驗(yàn)證以及實(shí)現(xiàn)文件和文件夾級(jí)別的訪問控制。Amazon FSx for Windows File Server支持兩種類型的Active Directory:Directory Service中的AWS Managed Microsoft AD或者用戶自建的AD。在這里我們使用托管的AWS Managed Microsoft AD作為目錄類型，我們預(yù)先在Directory Service中創(chuàng)建好Managed Microsoft AD，關(guān)于目錄的創(chuàng)建步驟可以參考下方文檔。

·創(chuàng)建文件系統(tǒng)

1.登陸AWS控制臺(tái)并切換到FSx服務(wù)，點(diǎn)擊創(chuàng)建文件系統(tǒng)并選擇Amazon FSx for Windows File Server，點(diǎn)擊Next。

2.在文件系統(tǒng)詳細(xì)配置頁面，輸入文件系統(tǒng)名稱、可用區(qū)部署模式、存儲(chǔ)類型、存儲(chǔ)容量和吞吐能力，在此次測(cè)試中我們選擇多單可用區(qū)部署模式，200G SSD類型存儲(chǔ)并使用默認(rèn)吞吐量。

3.在網(wǎng)絡(luò)與安全配置選項(xiàng)中我們選擇之前創(chuàng)建的VPC，安全組和文件系統(tǒng)所在的子網(wǎng)。

4.在Windows Authentication配置選項(xiàng)中我們選擇之前創(chuàng)建的AWS Managed AD，用戶也可以根據(jù)自己的實(shí)際情況選擇用戶自己管理的AD。加密選項(xiàng)中我們選擇默認(rèn)的KMS密鑰來對(duì)文件系統(tǒng)進(jìn)行加密。

5.點(diǎn)擊下一步會(huì)出現(xiàn)Summary頁面，繼續(xù)點(diǎn)擊頁面右下角創(chuàng)建文件系統(tǒng)進(jìn)行文件系統(tǒng)的創(chuàng)建。

6.切換到Amazon FSx服務(wù)頁面我們可以看到系統(tǒng)系統(tǒng)正在創(chuàng)建，等待幾分鐘待文件系統(tǒng)創(chuàng)建完畢后我們可以點(diǎn)擊文件系統(tǒng)名稱查看文件系統(tǒng)的相關(guān)信息，如下圖所示，記錄文件系統(tǒng)的DNS名稱，后續(xù)連接文件系統(tǒng)中會(huì)用到此地址。

·準(zhǔn)備Windows實(shí)例并連接Amazon FSx for Windows File Server文件系統(tǒng)

1.創(chuàng)建一臺(tái)Windows實(shí)例，并加入我們之前創(chuàng)建的AD域，關(guān)于加域的方式可以使用手動(dòng)或者無縫加域的方式來完成。

2.通過RDP的方式遠(yuǎn)程連接到此Windows實(shí)例，打開File Explorer，右鍵點(diǎn)擊This PC，在彈出的菜單中選擇Map network drive…

3.在配置窗口中我們輸入之前創(chuàng)建的文件系統(tǒng)的DNS名稱，格式如下圖所示，點(diǎn)擊Finish即可完成文件系統(tǒng)的映射，掛載成功后用戶即可以創(chuàng)建文件。

通過以上簡單的步驟我們即可以創(chuàng)建一個(gè)完全托管的，高度可靠且可擴(kuò)展的文件系統(tǒng)，如果您想體驗(yàn)更多高級(jí)的功能，快登錄AWS管理控制臺(tái)吧