相關(guān)文章

• 基于文件存儲(chǔ)UFS的Pytorch訓(xùn)練IO優(yōu)化實(shí)踐

  摘要：我們?cè)趨f(xié)助某客戶排查一個(gè)文件存儲(chǔ)的性能時(shí)發(fā)現(xiàn)，其使用的訓(xùn)練性能和硬件的能力有很大的差距后面內(nèi)容有具體性能對(duì)比數(shù)據(jù)。但直接緩存數(shù)據(jù)在集群規(guī)模上升之后肯定是不現(xiàn)實(shí)的，我們初步只緩存各個(gè)訓(xùn)練文件的句柄信息，以降低元數(shù)據(jù)訪問(wèn)開銷。我們?cè)趨f(xié)助某AI客戶排查一個(gè)UFS文件存儲(chǔ)的性能case時(shí)發(fā)現(xiàn)，其使用的Pytorch訓(xùn)練IO性能和硬件的IO能力有很大的差距（后面內(nèi)容有具體性能對(duì)比數(shù)據(jù)）。讓我們感到困惑...

  Tecode 2022-06-28 18:59 評(píng)論0 收藏0
• 

  創(chuàng)建文件系統(tǒng) 文件存儲(chǔ) UFS

  摘要：若后續(xù)希望跨項(xiàng)目組的主機(jī)訪問(wèn)文件系統(tǒng)，可以通過(guò)在控制臺(tái)上打通主機(jī)和文件系統(tǒng)掛載點(diǎn)所在的來(lái)實(shí)現(xiàn)。 創(chuàng)建文件系統(tǒng)步驟一、進(jìn)入文件存儲(chǔ) UFS 產(chǎn)品步驟二、在控制臺(tái)頁(yè)面選擇創(chuàng)建文件存儲(chǔ)的目標(biāo)地域和項(xiàng)目組目前文件存儲(chǔ)在各地域的支持詳情請(qǐng)參見產(chǎn)品限制章節(jié)或咨詢技術(shù)支持。由于文件系統(tǒng)的訪問(wèn)是基于 VPC 的，并且目前在控制臺(tái)上只允許選擇和文件系統(tǒng)實(shí)例同一個(gè)項(xiàng)目組下的 VPC 進(jìn)行訪問(wèn)，請(qǐng)您確定需要訪問(wèn)文...

  ernest.wang 2022-07-12 17:45 評(píng)論0 收藏1611

• 基于NVMe SSD的分布式文件存儲(chǔ)UFS性能提升技術(shù)解析

  摘要：宋體是一款自主研發(fā)的分布式文件存儲(chǔ)產(chǎn)品，此前已推出容量型版本。宋體性能的提升不僅僅是因?yàn)榇鎯?chǔ)介質(zhì)的升級(jí)，更有架構(gòu)層面的改進(jìn)，本文將從協(xié)議索引存儲(chǔ)設(shè)計(jì)等幾方面來(lái)詳細(xì)介紹性能型升級(jí)改造的技術(shù)細(xì)節(jié)。UFS (UCloud File System) 是一款 UCloud 自主研發(fā)的分布式文件存儲(chǔ)產(chǎn)品，此前已推出容量型 UFS 版本。UFS 以其彈性在線擴(kuò)容、穩(wěn)定可靠的特點(diǎn)，為眾多公有云、物理云、托管...

  Cheng_Gang 2019-12-27 12:22 評(píng)論0 收藏0
• 

  應(yīng)用場(chǎng)景 文件存儲(chǔ) UFS

  摘要：應(yīng)用場(chǎng)景應(yīng)用場(chǎng)景應(yīng)用場(chǎng)景文件系統(tǒng)產(chǎn)品適用于文件存儲(chǔ)由于其多節(jié)點(diǎn)可掛載和極大的彈性數(shù)據(jù)空間，為數(shù)據(jù)共享等場(chǎng)景提供了強(qiáng)有力的支持。根據(jù)各業(yè)務(wù)場(chǎng)景對(duì)性能要求的不同可以選擇不同類型的文件存儲(chǔ)產(chǎn)品，下面是一個(gè)推薦的場(chǎng)景分類。 應(yīng)用場(chǎng)景文件系統(tǒng)（UFS）產(chǎn)品適用于：文件存儲(chǔ)由于其多節(jié)點(diǎn)可掛載和極大的彈性數(shù)據(jù)空間，為數(shù)據(jù)共享等場(chǎng)景提供了強(qiáng)有力的支持。根據(jù)各業(yè)務(wù)場(chǎng)景對(duì)性能要求的不同可以選擇不同類型的文件存儲(chǔ)...

  ernest.wang 2022-07-12 17:37 評(píng)論0 收藏987
• 

  概覽 文件存儲(chǔ) UFS

  摘要：概覽概覽產(chǎn)品簡(jiǎn)介產(chǎn)品概述產(chǎn)品優(yōu)勢(shì)應(yīng)用場(chǎng)景主要概念產(chǎn)品限制操作指南創(chuàng)建文件系統(tǒng)掛載點(diǎn)管理掛載文件系統(tǒng)其他功能產(chǎn)品價(jià)格產(chǎn)品性能 概覽產(chǎn)品簡(jiǎn)介產(chǎn)品概述產(chǎn)品優(yōu)勢(shì)應(yīng)用場(chǎng)景主要概念產(chǎn)品限制操作指南創(chuàng)建文件系統(tǒng)掛載點(diǎn)管理掛載文件系統(tǒng)(Linux)其他功能產(chǎn)品價(jià)格產(chǎn)品性能FAQ

  ernest.wang 2022-07-12 16:30 評(píng)論0 收藏1398

• 【容器實(shí)例Cube】在Cube中使用UFS：需要在UFS產(chǎn)品頁(yè)面購(gòu)買UFS實(shí)例并設(shè)置好掛載點(diǎn)

  摘要：在中使用前置條件需要在產(chǎn)品頁(yè)面購(gòu)買實(shí)例并設(shè)置好掛載點(diǎn)，如沒(méi)有創(chuàng)建在使用中請(qǐng)根據(jù)提示進(jìn)行創(chuàng)建。操作后在頁(yè)面點(diǎn)擊刷新即可。掛載卷點(diǎn)擊容器的高階設(shè)置。查看掛載是否成功我們使用概覽頁(yè)面的登錄按鈕進(jìn)入容器。在Cube中使用UFS前置條件需要在UFS產(chǎn)品頁(yè)面購(gòu)買UFS實(shí)例并設(shè)置好掛載點(diǎn)，如沒(méi)有創(chuàng)建UFS在使用中請(qǐng)根據(jù)提示進(jìn)行創(chuàng)建。操作后在Cube頁(yè)面點(diǎn)擊刷新即可。添加卷已經(jīng)創(chuàng)建好UFS實(shí)例和掛載點(diǎn)后，根...

  Tecode 2022-06-28 19:00 評(píng)論0 收藏0